
分布式
文章平均质量分 65
nisxiya
Still a graduate student in ss of Peking UniversityGood at python, Java, C, Linux VimLearning Algorithms
展开
-
【Hadoop】编写和运行WordCount.java
1,在Hadoop文件夹下,比如在Linux系统下,Hadoopjieya原创 2014-06-20 18:00:35 · 1102 阅读 · 0 评论 -
【安装Hadoop 2.3 集群】Installing Hadoop 2.3.0 multi-node cluster on Ubuntu 13.10
Installing Hadoop 2.3.0 multi-node cluster on Ubuntu 13.10【】Make sure you have Oracle JDK 7 installed.Next, let's create hadoop group and hduser.sudo addgroup hadoop sudo adduser --ing转载 2014-09-02 21:42:55 · 972 阅读 · 1 评论 -
Hadoop 2.2.0 Eclipse插件使用
在windows下进行开发的时候,原创 2014-11-02 22:26:10 · 1046 阅读 · 0 评论 -
Hadoop 1.X & Hadoop 2.X 默认端口对比
1,Hadoop 2.X 默认端口组件节点默认端口配置用途说明HDFSDataNode50010dfs.datanode.addressdatanode服务端口,用于数据传输HDFSDataNode50075dfs.datanode.http.addresshttp服务的端口HDFSData转载 2014-11-02 22:29:39 · 2104 阅读 · 0 评论 -
使用Hadoop URL读取数据
1,编写代码import java.io.*;import java.net.URL;import org.apache.hadoop.fs.FsUrlStreamHandlerFactory;import org.apache.hadoop.io.IOUtils;public class URLCat { static { URL.setURLStreamHandlerFa原创 2014-11-05 16:59:29 · 1144 阅读 · 0 评论 -
Java搭建分布式网络服务
原地址:http://blog.youkuaiyun.com/jesseshen/article/details/6659543这是一个全国性的通信平台,对性能,海量数据,容错性以及扩展性有非常高的要求,所以在系统的架构上就不能简单的采用集中式.简单的总结一下就是: 1.数据分布式存储 2.请求分布式调度 3.多结点分布式部署转载 2014-12-15 09:37:13 · 874 阅读 · 0 评论 -
MongoDB Cluster Setting up [replSet + Sharding]
step 1 [on each server]sudo mkdir -p /data/mongodbwsdc/mongos/logsudo mkdir -p /data/mongodbwsdc/config/datasudo mkdir -p /data/mongodbwsdc/config/logsudo mkdir -p /data/mongodbwsdc/mongos/logsudo原创 2015-12-16 18:15:41 · 821 阅读 · 0 评论