<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[chujian630的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/chujian630</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; chujian630]]></copyright><item><title><![CDATA[大数据-zookeeper]]></title><link>https://blog.youkuaiyun.com/chujian630/article/details/107008470</link><guid>https://blog.youkuaiyun.com/chujian630/article/details/107008470</guid><author>chujian630</author><pubDate>Tue, 07 Jul 2020 23:28:39 +0800</pubDate><description><![CDATA[安装zookeeper

  （1）.解压安装包，修改zookeeper-3.4.10/conf 将zoo_sample.cfg修改为zoo.cfg

    vim zoo.cfg修改dataDir路径dataDir=/opt/module/zookeeper-3.4.10/zkData（数据文件目录+数据持久化路径，保存          Zookeeper中的数据）

    新增server.0=hadoop100:2888:...]]></description><category></category></item><item><title><![CDATA[hadoop-MapReduce]]></title><link>https://blog.youkuaiyun.com/chujian630/article/details/106562363</link><guid>https://blog.youkuaiyun.com/chujian630/article/details/106562363</guid><author>chujian630</author><pubDate>Sun, 14 Jun 2020 13:07:31 +0800</pubDate><description><![CDATA[1.MapRedce 是一个分布式运行框架

  优点：简单的实现一些接口就可以完成分布式程序

       高容错性：一天机器挂掉，会迁移到另一台机器。处理数据量大

缺点:慢 不擅长实时计算 不擅长流式计算（spark解决了） ，不擅长DAG（有向图）计算

2.MapReduce核心编程思想


...]]></description><category></category></item><item><title><![CDATA[java实现http/https请求]]></title><link>https://blog.youkuaiyun.com/chujian630/article/details/106562462</link><guid>https://blog.youkuaiyun.com/chujian630/article/details/106562462</guid><author>chujian630</author><pubDate>Fri, 05 Jun 2020 07:41:07 +0800</pubDate><description><![CDATA[最近有个功能是用java爬去大量url信息。网上找了个code了一段代码，拿来直接可以用，但是打包到jdk1.7上报407没有权限，于是手动添加了 


          String headerkey = "Proxy-Authorization";  
          String headerValue = "Basic "+Base64.encodeToString("*****:*****".getBytes(), false); //帐号密码用:隔开，base64加密方式  
  ...]]></description><category></category></item><item><title><![CDATA[hadoop-HDFS]]></title><link>https://blog.youkuaiyun.com/chujian630/article/details/106452331</link><guid>https://blog.youkuaiyun.com/chujian630/article/details/106452331</guid><author>chujian630</author><pubDate>Tue, 02 Jun 2020 21:05:45 +0800</pubDate><description><![CDATA[a
]]></description><category></category></item><item><title><![CDATA[大数据学习-搭建集群]]></title><link>https://blog.youkuaiyun.com/chujian630/article/details/106414801</link><guid>https://blog.youkuaiyun.com/chujian630/article/details/106414801</guid><author>chujian630</author><pubDate>Thu, 28 May 2020 23:33:55 +0800</pubDate><description><![CDATA[16年毕业到现在为止干了四年多的Java。盲目的跳槽，并没有对自己的职业精心规划。自己感觉是把两年的工作经验用了四年。近期工作一直用到大数据方面的东西。想转大数据。网上找了套视频自己学习学习。

搭建集群

1.安装VMTools 安装Centoss

2.关闭防火墙

  sudo service iptables stop
  sudo chkconfig iptables off

3.设置静态IPvim /etc/sysconfig/network-scripts/ifcfg-et...]]></description><category></category></item></channel></rss>