
大数据、分布式计算
Eider1998
这个作者很懒,什么都没留下…
展开
-
hadoop查看hdfs目录大小,以MB为单位
hadoop查看hdfs目录大小,以MB为单位/bin/hadoop fs -du `hdfs目录名` | awk -F ' ' '{printf "%.2fMB\t\t%s\n", $1/1024/1024,$2}' | sort -n原创 2021-01-11 20:14:08 · 3148 阅读 · 0 评论 -
分布式系统
1.分布式系统简介 分布式系统能够利用更多的机器,处理更多的数据。解决了单个普通的机器无法独自完成计算、存储任务的瓶颈。分布式系统是由一组通过网络进行通信、为了完成共同的任务而协调工作发计算机节点组成的系统。 **注意:** 分布式系统要解决的问题本身就是和单机系统一样的,而由于分布式系统的多节点、通过网络通信的拓扑结构,会引起很多单机系统没有的其他问题,为了能够解决这些问题,可以引入其他的机制、协议。 计算和存储是相辅相成的,计算需要数据,要么来自实时数据(流数据)、要么来自原创 2020-12-20 20:47:02 · 310 阅读 · 1 评论 -
RMI课本例子
1. HelloImpl.javapackage Server;import java.rmi.*;import java.rmi.server.*;public class HelloImpl extends UnicastRemoteObject implements HelloInterface{ public HelloImpl() throws RemoteException { super(); } public String sayHe..原创 2020-10-13 10:32:35 · 246 阅读 · 0 评论