- 博客(24)
- 收藏
- 关注
原创 Failed on local exception: org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data len
遇到这个错误是创建语句中创建hdfs的路径报错,代码中路径写成了 " hdfs://92.168.41.11:9870 ",应该要和[root@node1 hadoop]# vim core-site.xml 这里面的配置一样才行。查看 core-site.xml 配置文件,发现是node1,所以将代码中的ip写成node1即可运行。
2024-01-09 12:50:21
3624
原创 远程计算机或设备将不接受连接
电脑连上无线网,但是打开浏览器显示网络很慢或者未连接到互联网,点击运行Windows网络诊断后检测到“远程计算机或设备将不受连接” 。
2023-07-09 16:19:43
7334
2
原创 解决使用Spoon(Kettle)连接Hive数据库的卡顿问题
在使用软件Spoon进行本地MySQL数据传输到Hive的时候,连接本地MySQL和Hive后,创建MySQL表输入进行操作的时候不卡顿,但是创建Hive表输出进行操作的时候,出现点一下卡一下的严重卡顿情况
2023-06-02 11:34:24
990
原创 运行hive语句时有很多info怎么消掉
每次启动hive和执行hive sql命令时都打印了很多没用的INFO日志,看起来很繁琐,那么该怎么消除掉这些没用的日志消息
2023-06-02 10:53:33
3040
7
原创 Sqoop安装及基本用法
export HBASE_HOME=/home/hadoop/hbase-2.1.0(当前服务器未安装HBase,所以不设置)下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/sqoop/1.4.7/将mysql的jar包上传至/opt/sqoop-1.4.7.bin__hadoop-2.6.0/lib,mysql需要mysql-connector-java-5.1.32.jar以上版本支持。5: 配置:sqoop-env.sh 文件。
2023-05-09 20:15:00
617
原创 Error: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in fetcher#1
Error: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in fetcher#1
2023-05-07 22:26:33
1690
原创 Permission denied: user=dr.who, access=READ_EXECUTE, inode=“/tmp“:root:supergroup:drwxrwx---
解决hdfs权限问题导致的 ” hadoop jar “ 运行失败
2023-05-07 22:05:46
2682
原创 ctrl+z关闭hiveserver2后再次启动报错
问题:ctrl+z关闭hiveserver2后再次启动报错:报错原因:hiveserver2不能直接ctrl+z关闭服务。
2023-05-06 10:39:06
286
原创 hive报错FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException:java.lang.RuntimeEx
解决hive集群连接不上mysql的问题
2022-12-27 22:33:49
8801
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人