oufuji的博客

spark-sql测试总结 最近倒腾spark-sql，原来测试都是很小的数据，由于自己的是6个虚拟机资源有限，也不能太大，于是在找了帖子。 http://colobu.com/2014/12/11/spark-sql-quick-start/ Spark SQL 初探： 使用大数据分析2000万数据 ############## 不要问我数据怎么下载的，自己搜索，我用完就删了

所有涉及数据源显示都涉及原始数据的字符集编码和客户端语言环境的设置。 那么在spark-sql环境，只要正确的字符集编码和正确的客户端语言环境设置，显示，使用中文，完全不是困难。 #上传的文本文件编码，确认是utf8 [root@slave2 test]# cat city_test.txt 浙江,杭州,300 浙江,宁波,150 浙江,温州,200 浙江,嘉兴,100 江苏,南京