Keep Learning!!!

有时候我们的bolt处理统计逻辑时，需要阶段统计一下，再把统计结果emit到后面的汇总统计bolt处理，因此需要在本地作一个定时阶段的统计，时间满后再后端的bolt emit数据。阶段统计的bolt实现方法如下： public void execute(Tuple tuple, BasicOutputCollector collector) { if (Tup

Spring cloud server 多机集群配置多机集群的配置就没有那么多要注意的地方了，同样是部署两套server实例来组成服务注册中心的集群。 部署完成后，访问这两个服务注册中心的页面地址看是否注册的服务列表是否一样。 http://10.3.3.130:8761/ http://10.3.3.143:8761/server1的application.pro...

Spring cloud server 单机集群配置以下按部署两套server为例进行配置； 首先要在本机上修改/etc/hosts文件，添加两个hostname配置； 如 10.3.3.132 server1 10.3.3.132 server2下面会用到这两个配置server1的application.properties配置请注意以下两处的配置...

SpringCloud客户端的基本配置### for client ########################################################spring.application.name=test-api-gatewayserver.port=8899server.context-path=/eureka.instance.prefer-i

SpringCloud注册服务器基本配置### for server #########################################################配置安全验证，用户名及密码spring.application.name=test-cloud-server-01server.port=8761server.address=0.0.0.0ser

今天在用storm写应用的时候无意发现一个bug，主要信息如下： - storm版本：1.0.3 - 组件：storm-core - 方法：org.apache.storm.utils.Utils#getGlobalStreamId有问题的代码： public static GlobalStreamId getGlobalStreamId(String streamId, Str

Kafka 的kafka-server-stop.sh脚本在 centos7系统失效，执行后并不能停止 kafka 进程。研究一下内容，可以用如下的命令来停止：kill -s TERM $(jps -l | grep 'kafka\.Kafka' | awk '{print $1}')

通过启动脚本：cd $HIVE_HOME./bin/hive  --hiveconf hive.root.logger=DEBUG,console启动报如下错误：16/08/25 19:06:18 [main]: DEBUG bonecp.BoneCPDataSource: JDBC URL =         jdbc:mysql://slave1:330

众所周知，在国内使用maven，下载速度实在无法忍受，严重影响开发效率。后来oschina架了个镜像，但是现在也用不了，关闭了。 好在现在aliyun也架了一个，可以使用，而且速度相当赞。在.m2/目录下新建一个settings.xml文件，内容如下：<?xml version="1.0" encoding="UTF-8"?><settings xmlns="http://maven.apach

难怪我后来又没有找到4.8.3.2版本的下载链接了，原来是有bug，还好我只是在测试环境使用，接下来线上环境是不能用这个版本了，目前只能用4.8.3.1。以下是原文：There is an issue with the functionality of a product you are following on Pivotal Network.A moderate v

编译 hadoop 版本的命令如下，可以直接使用 make-distribution.sh 脚本来编译，命令如下：./make-distribution-noclean.sh --tgz -Pyarn -Phive -Phadoop-2.4 -Dhadoop.version=2.4.0然后就在当前目前会生成一个 tgz 的文件。如果是编译 cdh 版本的话，参考命令如下：./mak

刚新装了python-3.4.1，使用secureCRT连接上去，但是我在进入后，输入回格键时，屏幕显示的是^H，这个让人受不了。终于在网上找到了解决办法，只要修改一下secureCRT的配置即可。如下图：选项---》会话选项---》把下面两个打个钩就行了。

在配置hadoop集群时，以下问题一定要注意，否则会出现各种莫名其妙的问题：同步各个hadoop服务器的系统时间，否则在执行mapreduce任务时，会一直不执行或系统提示其它服务器的系统资源不足等问题。其它问题待我遇到再补充。

启动报错如下：2018-06-15 15:28:55.050 [TaskBatchingWorker-target_10.3.3.143-2] ERROR c.netflix.eureka.cluster.ReplicationTaskProcessor - Batch update failure with HTTP status code 401; discarding 3 repli...