- 博客(8)
- 收藏
- 关注
RSS订阅原创 Shell
#!/bin/bash source /etc/profile source ~/.bashrc export basepath=$(cd `dirname $0`; pwd) source ${basepath}/cfg/css.cfg #username="root" #password="root" #jdbcUrl="jdbc:mysql://192.
2016-08-24 22:04:45
421
原创 kafka_2.9.1-0.8.1.1 集群的安装
kafka是一种高吞吐量的分布式发布订阅消息系统，她有如下特性： 通过O(1)的磁盘数据结构提供消息的持久化，这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。 高吞吐量：即使是非常普通的硬件kafka也可以支持每秒数十万的消息。 支持通过kafka服务器和消费机集群来分区消息。 支持Hadoop并行数据加载。 kafka的目的是提供一个发布订阅解决方案，它可
2014-07-25 11:08:42
1021
原创 Storm-9.1.0 WordCount jar 实例
提交Topologies 命令格式：storm jar 【jar路径】 【拓扑包名.拓扑类名】 【拓扑名称】 样例：storm jar /storm-starter.jar storm.starter.WordCountTopology wordcountTop
2014-05-23 11:42:46
3001
原创 利用shell 生成 hadoop 实验大数据 以及如何获取时间戳
脚本命令如下，将原文件zeng #!/bin/bash for (( i=1; i do cat tests.log.old >> testdata.log done
2014-05-09 16:35:12
1059
原创 hadoop 集群环境Sqoop 将数据导入mysql问题 many connection errors; unblock with 'mysqladmin flush-hosts'
hadoop 集群环境下面， 使用 sqoop 将hive 统计wan
2014-05-04 14:56:35
1093
原创 Flume 1.4.0 NG 分布式集群搭建
最近使用Flume1.4 做日志收集，分享一下具体的集群环境配置搭建。 其中使用到了3台机器， hadoop 192.168.80.100 hadoop1 192.168.80.101 hadoop2 192.168.80.102 , 将 hadoop 和 hadoop2 机器上面指定的flume 监控到的文件夹中产生的日志文件通过 agent 汇集到 hadoop1 机器
2014-04-18 18:13:40
2421
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人