
大数据
有思想的lazy码农
这个作者很懒,什么都没留下…
展开
-
Vmware测试环境下搭建CDHv5.4(Coudera Hadoop大数据平台搭建)
这已经是第五次搭建了,每次搭都怨自己没有整理步骤,都是从网上搜,每次搜的资料又都不一样,搭起来很浪费时间。这次整理一下,防止第六次搭建。1.前置准备...原创 2020-04-28 01:46:18 · 474 阅读 · 0 评论 -
大数据Hadoop/Spark生态圈技术在公司中的运用
1.1 分布式集群存储、分布式集群运算、安全高效稳定灵活(技术部门需要)一句话概括:一台电脑存不过来的数据多台一块来存,一台电脑算得慢的数据多台同时来算,存储安全、计算高效、运行稳定、开发灵活。(针对海量数据存储与分析的需求)1.2 日志点击流系统(可研发产品)通过搜集公司现有系统中的用户行为日志(包括搜索日志、浏览日志、交易日志)及用户信息(IP、手机型号、屏幕尺寸等),作为网站...原创 2020-04-19 02:10:41 · 312 阅读 · 0 评论