- 博客(9)
- 收藏
- 关注
RSS订阅原创 hive报错FAILED: HiveException java.lang.RuntimeException
hive> show databases;报错FAILED: HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient首先初始化MySQL数据库schematool -dbType mysql -initSchema，报错发现MySQL之前有创建过hive数据库，将它删了，在初始化MySQL数据库后因为hi
2022-02-22 19:14:36
5537
原创 Hive中运行任务报错：Error during job, obtaining debugging information...
hive使用聚合函数和insert语句报错，namenode内存空间不够解决：在hive中输入：set hive.exec.mode.local.auto=true;
2022-02-18 21:04:13
754
原创 Command ‘netstat‘ not found：解决办法
sudo apt install net-toolsyum install net-tools 这个不行
2022-02-11 17:57:01
1071
原创 python爬虫框架
爬取豆瓣top250的电影数据，保存至excel中from bs4 import BeautifulSoup # 网页解析，获取数据import re # 正则import urllib.request, urllib.error # 制定url，获取网页import xlwt # 进行excel操作import sqlite3 # sqline数据库# b1.影片链接规则（ 正则表达式对象，表示规则）findLink = re.compile(r'<a href="(.*
2021-07-28 11:46:21
210
原创 在完全分布式Hadoop上搭建spark集群
完全分布式Hadoop搭建可参考一下网址https://blog.youkuaiyun.com/weixin_44168245/article/details/118941000搭建spark集群先创建一个sparkCluster文件夹将spark包解压至sparkCluster中将解压后的文件名重命名为spark，同时把spark文件夹的权限赋给hadoop用户和hadoop组，最后配置环境变量配置slaves文件和spark-env.sh文件（slaves文件设置Worker节点）将 slav
2021-07-22 17:57:21
315
原创 VMware中从零开始用Ubuntu16.4搭建完全分布式Hadoop集群
在VMware中安装Ubuntu刚搭建Ubuntu使用su root会报错解决方法是重新修改root密码安装vim编辑器使用vim编辑比vi对用户交互更友好sudo apt-get updatesudo apt-get install vim安装jdk在opt中创建java文件夹用来放jdk，将jdk包解压至java文件夹中修改环境变量创建Hadoop用户给Hadoop用户加权限进入root用户/etc目录,编辑sudoershadoop ALL=(ALL:ALL) AL
2021-07-21 14:16:01
706
1
原创 MySQL连表子查询
事情是这样的，作为一个大学咸鱼，太久没用过mysql，还一直对MySQL的使用自以为很熟练，导致面试时连两题简简单单的子查询语句都写不出来
2021-07-18 17:48:57
92
原创 MySQL插入中文报错
在Navicat上创建MySQL表当插入中文时报错原因是表的编码格式是Latin，需要改为Utf-8才可以存储中文到数据库使用show create table student 查看解决方法在命令行使用两个命令即可解决 alter table student default character set utf8;alter table student change name name varchar(25) character set utf8;如图然后就可以插入中文啦.
2021-07-18 11:06:50
507
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人