
spark
ice泉
这个作者很懒,什么都没留下…
展开
-
Spark Standalone Mode 在 Win10 下搭建开发调试环境
系统环境变量配置Java Env略, 确保在cmd终端可以运行javaC:\windows\system32>java -version java version "1.8.0_131" Java(TM) SE Runtime Environment (build 1.8.0_131-b11) Java HotSpot(TM) 64-Bit Server VM (build 25.131-b11,原创 2017-11-17 13:20:14 · 956 阅读 · 0 评论 -
Spark 读取CSV 解析单元格多行数值问题
CSV 样例数据[hadoop@ip-10-0-52-52 ~]$ cat test.csv id,name,address 1,zhang san,china shanghai 2,li si,"china beijing" 3,tom,china shanghaiSpark 2.2 以下版本读取 CSV 会存在读取异常问题 scala> val df1 = spark.read.optio原创 2017-11-14 18:06:57 · 3634 阅读 · 2 评论