怎么学习大数据?

  1. java基础:需要学习java(java SE)基础课程,这个大部分在工作中处理问题以及学习中可以获取到基本技能。
  2. 学习一些基本的测试工具:比如JMeter,POSTman等。
  3. 重点学习Hadoop
  • Hadoop解决什么样的问题?(FB级别的数据怎么存?怎么在这么大量的数据里获取想要的信息,也就是怎么计算?)
  • 熟悉Hadoop的体系结构,原理,以及编程的API
  • 学会并且熟练Linux上安装java运行环境jdk,输了搭建Hadoop本地模式和伪分布模式。
  • 熟悉分布式文件系统HDFS,MapReduce以及HBASE(很多非关系型数据库:mongodb,redis,noSQL)
  • 数据分析引擎:HIV,FLUME统计分析(建议复习一下大学数据统计知识)
  • 数据采集引擎:可以参考网友:https://blog.youkuaiyun.com/weixin_37243717/article/details/79059488
  • 熟悉工作流引擎:OoZIE
  • 熟悉ZOOKEEPER
  • 使用ZOOKEEPER实现Hadoop热备(HA)

  4. Spark深入学习

  • Spark Core基于内存计算
  • Spark Stream 进行实时流计算
  • Storm:基于apache事实计算

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值