
Hadoop
文章平均质量分 97
一朝风月S
内有激情,从容不迫
展开
-
问题org.apache.hadoop.io.nativeio.NativeIO$Windows.createDirectoryWithMode0(Ljava/lang/String;I)V的解决方案
编号001(这一行为我自己为了方便起的标识,你们可以忽略……)最近编写了一个mapreduce程序,在eclipse中执行发现出现这个问题,百度各种方案都不行,花了好久才解决,现在把最近看过和亲测过的方案整理如下,希望能让别人早日出坑。前提条件:Hadoop集群(hadoop2.7.3)Java编译环境(jdk1.8)操作系统:win7IDE:eclipsehadoop插件下载...原创 2018-10-23 10:02:59 · 9458 阅读 · 8 评论 -
Hadoop集群搭建与经验总结
最近要研发一款数据传输服务的产品需要用到Hadoop集群,之前搭建过后来长时间不用就给忘记了,这次搭好来记录一下搭建方法与经验总结欢迎使用Markdown编辑器你好! 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章,了解一下Markdown的基本语法知识。新的改变我们对Markdown编辑器进行了一些功能拓展与语...原创 2018-11-03 17:14:12 · 6459 阅读 · 3 评论 -
Hadoop RPC机制的使用
一、基础概念概念:RPC(Remote Procedure Call)–远程过程调用,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,RPC跨越了传输层和应用层。RPC使得开发包括网络分布式多程序在内的应用程序更加容易。它允许一台计算机程序远程调用另外一台计算机...原创 2018-11-17 15:18:44 · 187 阅读 · 0 评论 -
Hive环境搭建
1. MySQL安装 步骤1:下载mysq安装包步骤2:安装MySQL源步骤3:检查mysql源是否安装成功步骤4:安装5.6版本注:比如要安装5.6版本,将5.7源的enabled=1改成enabled=0。然后再将5.6源的enabled=0改成enabled=1即可,上图为修改完毕的截图步骤5:安装MySQL步骤6:启动MySQL...原创 2018-12-17 18:52:41 · 1100 阅读 · 0 评论