大数据
sun_com1984
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
客户知识
以客户为主视角:偏好、财富等基础标签:学历、职业、性别、年龄、身份、婚姻、宗教、经济、区域电信标签:使用年限、业务套餐、语言业务、积分、流量、数据业务、渠道偏好、终端类型、满意度生活标签:服装、美食、居住、旅游出行、沟通、理财、学习教育、育儿、休闲娱乐原创 2015-06-24 17:10:32 · 477 阅读 · 0 评论 -
开源Storm安装5
storm.messaging.netty.server_worker_threads: 1storm.security.authentication: kerberossupervisor.slots.ports:- 29100- 29101- 29102- 29103storm.zookeeper.connection.timeout: 15000nimbus.原创 2015-06-29 18:43:42 · 433 阅读 · 0 评论 -
开源Storm安装5
(2)Supervisor配置参考: storm.messaging.netty.min_wait_ms: 100supervisor.monitor.frequency.secs: 3storm.nimbus.retry.times: 1transactional.zookeeper.port: 2181storm.zookeeper.port: 2181st原创 2015-06-29 18:43:09 · 326 阅读 · 0 评论 -
开源Storm安装4
topology.message.timeout.secs: 30topology.error.throttle.interval.secs: 10nimbus.childopts: -Xms1G -Xmx1G -XX:NewSize=64M -XX:MaxNewSize=128M -XX:PermSize=128M -XX:MaxPermSize=128M -XX:CMSFullGCsB原创 2015-06-29 18:42:22 · 427 阅读 · 0 评论 -
开源Storm安装3
七、高级配置(性能优化时才需要): (1)Nimbus配置参考:NIMBIS_GC_OPTS: -Xms1G -Xmx1G -XX:NewSize=64M -XX:MaxNewSize=128M -XX:PermSize=128M -XX:MaxPermSize=128M - XX:CMSFullGCsBeforeCompaction=1 -XX:MaxDirectMemorySi原创 2015-06-29 18:41:39 · 398 阅读 · 0 评论 -
开源Storm安装2
五、运行Topology ./storm jar filter.jar com.huawei.hadoop.storm.filter.MyTopology linux66 azonedata 1 linux66 azonedata 1 这三个是main函数参数,只是个参考。六、停止Topology ./storm kill MyTopology原创 2015-06-29 18:40:01 · 368 阅读 · 0 评论 -
开源Storm安装1
安装步骤:一、下载版本 下载地址:http://storm.apache.org/downloads.html 选择:apache-storm-0.9.2-incubating.tar.gz二、安装 解压到指定目录:tar -xzvf apache-storm-0.9.2-incubating.tar.gz三、修改配置 修改conf目录下的sto原创 2015-06-29 18:39:30 · 343 阅读 · 0 评论 -
开源Redis安装4
三、持久化设计 对于我们应该选择RDB还是AOF,官方的建议是两个同时使用。这样可以提供更可靠的持久化方案。 RDB设置: save 900 1 #900秒内如果超过1个key被修改,则发起快照保存 save 300 10 #300秒内容如超过10个key被修改,则发起快照保存 save 60 10000 AOF设置: app原创 2015-06-29 18:37:42 · 322 阅读 · 0 评论 -
开源Redis安装3
5. 启动 1).为了方便起见,我们将src下的可执行命令全部移动(或拷贝)到/opt/stream/redis-3.0.2/bin/目录下,执行该命令:mv mkreleasehdr.sh redis-benchmark redis-check-aof redis-check-dump redis-cli redis-sentinel redis-server /opt/strea原创 2015-06-29 18:37:00 · 463 阅读 · 0 评论 -
开源Redis安装2
二、安装Redis 下载redis-3.0.2.tar.gz使用ftp上传到linux系统的/opt/stream目录下。1. 解压tar -zxvf redis-3.0.2.tar.gz2. 安装完gcc之后,依次执行如下命令即可完成Redis的安装: 进入Redis目录下的src目录下,执行make命令来编译Redis。 make原创 2015-06-29 18:36:32 · 375 阅读 · 0 评论 -
开源Redis安装1
先安装gcc,再安装Redis安装:进入Redis目录下的src目录下,执行make命令来编译Redis。当楼主执行编译命令的时候,编译失败了,报了“/bin/sh: cc: command not found”的错误。原来是楼主的linux系统木有装gcc,而Redis是C实现的,所以需要gcc来进行编译。安装gcc时用到的rpm包必须和当前操作系统中的版本一致。为保持gcc rpm包和原创 2015-06-29 18:34:59 · 422 阅读 · 0 评论 -
容灾及克隆的区别
容灾:没有集群中增加节点的概念,具体业务及数据需要通过容灾软件(例如:GDR软件)实现;同克隆相反;安装OS->安装oracle->安装容灾软件GDR->安装平台软件A->安装平台软件B->安装业务A克隆:是在集群的基础上增加节点为目的,即是克隆原创 2015-06-25 16:43:05 · 523 阅读 · 0 评论 -
数据挖掘
数据挖掘是指从大量的历史数据中提取隐含的、过去未知的、有价值的潜在信息或模式,介于数据仓库和运营分析之间。数据挖掘引擎提供可视化操作,帮助用户进行数据准备、建模、评估和部署,其包含如下丰富的数据挖掘模型。原创 2015-06-24 15:27:18 · 331 阅读 · 0 评论 -
Internet Analytics互联网分析
Internet Analytics互联网分析互联网分析通过对手机用户的上网记录进行分析,从而获知用户的上网行为,上网偏好,App偏好,消费偏好等多维度信息,最终形成一个完整的互联网用户画像爬虫:内容爬虫、主题爬虫业界主流挖掘算法,满足个性化推荐、用户行为分析、精准营销等各种典型场景的数据挖掘场景原创 2015-06-25 16:11:38 · 740 阅读 · 0 评论 -
FusionInsight 安装依赖 rpm 包神器,现网SUSE11 SP1/SP3都验证过
整理了一个rpm包集合,只有11M,刷包后安装非常顺利,在现网SUSE11 SP1/SP3都验证过。 解压并上传/root/python-2.6.8到目录下,使用root用户执行如下命令强制刷包命令: ls |grep rpm|xargs rpm -ihv --force --nodeps/root/python-2.6.8目录下的rpm包如下libldap-2_4-2-2原创 2015-07-06 09:30:30 · 848 阅读 · 0 评论
分享