weixin_43650171的博客

Latex 常用公式

Spark Shell 基本操作进入spark shell案例：求TOP值进入spark shell先jps判断hadoop和spark是否都启动。jpsspark-shell --master spark://master:7077案例：求TOP值任务描述：字段为：orderid,userid,payment,productid数据目录：/usr/sort/file1.txt/usr/sort/file2.txt代码目录：/usr/code/topfive.scala数据：fi

数据科学求职转载：https://mp.weixin.qq.com/s/9LWHrAqmTNRGrtPvOW3HQw以Facebook为例，Data Scientist分为两类，一种是core data science研究机器学习模型和实现对应的机器学习库，这类职位要求PhD学位；第二种偏产品，本科生和Master也可以，工作内容上有做dash board和可视化的，有做大数据pipeline的，有做机器学习应用的。做机器学习应用，更细致点说是收集和清洗数据做特征工程应用模型，针对生产环境作优化，但不需