qq_35828475的博客

背景windows10 和windows 10 下的WSL(windows10 sub Linux)linux在wsl中安装了 zookeeper(单节点模式) kafka 单节点模式 kafka的config/server.properties文件如下 # see kafka.server.KafkaConfig for additional details and defaults​############################# Server B

背景：在windows10 subsystem Ubuntu上启动hadoop出现Permission Denied原因：未生成公私钥对，设置免密登录解决办法在家目录生成公私钥对：ssh-keygen -t rsa拷贝.ssh目录下的id_rsa.pub内容到authorized_keys文件中但是，此目录下没有authorized_keys文件，那我们就新建一个文件，命名为authroized_keys但是，还是不行，我们需要修改authorized_keys的权限为可执行文件 c

MapReduce整体分为Map阶段，shuffle阶段和reduce阶段 map阶段 对输入的文件进行分片InpuSplit，每个分片由一个Mapper进程进行处理 对输入的分片内容按照一定的规则解析成键值对。默认是每行偏移量为key，每行的内容为value 进入map方法进行用户的业务处理，然后输出到环形缓冲区，减少对磁盘的访问次数 ...