weixin_45653328的博客111

sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统；导出数据：从Hadoop的HDFS、HIVE中导出数据到关系数据库mysql等。

回忆: 在YARN中 有一个历史服务器, 功能: 将YARN运行的程序的历史日志记录下来, 通过历史服务器方便用户查看程序运行的历史信息.Spark的历史服务器, 功能: 将Spark运行的程序的历史日志记录下来, 通过历史服务器方便用户查看程序运行的历史信息.的 Python解释器环境, 在这里面可以写普通python代码, 以及spark代码。不同的是, 这个解释器环境 运行的不是python代码, 而是scala程序代码。这个文件的修改不是必须的, 为什么修改为WARN. 因为Spark是个话痨。