
大数据
langzitianya422
这个作者很懒,什么都没留下…
展开
-
ubuntu14.04+hadoop 2.7.1环境搭建
Ubuntu 14.04 + Hadoop 2.6.0环境搭建问题汇总 Ubuntu sudo apt-get update无法获得锁无法对目录加锁问题解决方法 问题: 更新资源sudo apt-get update时遇到 E: 无法获得锁 /var/lib/apt/lists/lock - open (11: 资源暂时不可用) E: 无法对目录 /var/lib/apt/lists/ 加锁 解决...原创 2019-03-03 14:12:28 · 946 阅读 · 0 评论 -
利用Eclipse+Maven创建第一个Java版的Spark开发程序
1、在Eclipse中创建一个Maven工程: File->New->Project->Maven Project。 接下来参考https://blog.youkuaiyun.com/farawayzheng_necas/article/details/54574279 链接中“新建项目”以下的内容。其中“填写Maven project的相关信息”下面对话框中的Name可空着不填。 关于Ma...原创 2019-05-02 13:41:21 · 629 阅读 · 0 评论 -
Spark开发 Java程序运行时提示异常:System memory 107374182 must be at least 471859200
原因:系统内存过小(spark1.5或者1.6以上有该问题) 解决方法如下: 源程序: public static void main(String[] args) { try(final SparkSession spark = SparkSession .builder() .master("local") .appName("JavaLocalWordCount") .getOrCreat...原创 2019-05-01 11:17:55 · 1115 阅读 · 0 评论