- 博客(10)
- 收藏
- 关注
原创 sqoop 从 hive 导入到mysql ,mysql表数据错位问题
加上--columns "first_lv_inst,second_lv_inst,first_lv_page,second_lv_page,date_str" 解决了错位问题。一开始scoop的命令是。
2023-11-12 09:52:05
404
1
原创 Mac 使用homebrew 启动某个服务的时候,出现问题:Error: uninitialized constant Homebrew::Service::System的解决方案
4, 重新启动brew services start redis。
2023-10-27 15:31:10
2895
3
原创 ubantu 下怎么简单安装mysql
下载完成之后只需要输入mysql 就能够进入到 mysql的命令行,因为这个时候mysql默认使用root账号,而且root账号是没有密码的。3, 修改root账号的密码,以便mysql能够安全的。这样下载的mysql 一般是 5.7版本。2,进入到mysql得命令行。1,通过命令下载mysql。
2023-10-20 10:29:28
77
1
原创 最近写代码的感想和总结
场景是,有很多机构的虚拟机环境出于对安全考虑不会连接互联网,那么就会出现某些命令不能够使用的情况,当时一直在纠结互联网的问题,后来才清楚可以去另外的一台连了互联网的linux虚拟机环境下载一个rpm安装包,之后上传到此虚拟机,直接通过yum安装就行。2,客户提供的是一个json文档数据集,json中有很多的array数据集,当这些array数据通过spark读入dataframe时,要怎么对这些数据进行延展平铺?所以想把这些困难做个总结。问题四现在还没完全解决,我只做了一维的散点图,没有做多维的散点图。
2023-05-28 19:15:43
83
1
原创 datagrip 连接 hive 出现错误总结
这个错误 其实是表面的错误。实际错误需要到 hive 的 日志文件 ./hive/log/hive.log中查看真实的错误。这个错误是我用了老的端口,我门只需要在 hive-site.xml 中的hiveserver2的端口从10000 改为10001就可以了。这个错误需要查看你的 hiveserver2 和 mestore 的服务是否起来了。2,通过beeline 测试连接jdbc连接的时候出现如下错误。红色的字体的字符zhang需要修改为本机的 机器名称。如果这2个服务没有起来就会报这个错误。
2023-05-24 16:54:42
1586
1
原创 Hbase 怎么在windows 单机安装部署
背景:自己搜了很多网上部署的资料,发现很多的资料其实已经过时了,所以导致我在windows部署中出现了很多错误的步骤,浪费了很多时间,也希望这个也能帮到你。将 E:\hbase-2.2.3\lib\client-facing-thirdparty下的jar包拷至lib目录下。这个问题可以不需要管,因为如果我门只是在windows上安装单机,数据就存储在磁盘就可以了。这将启动HBase的Master节点和RegionServer节点。替换为你想要存储HBase数据和ZooKeeper数据的目录路径。
2023-05-24 10:28:47
668
5
原创 概念建模(CDM)-------数据建模(一)
在网上也看了很多有关概念建模的理解和表述,但是都很难理解,非常的空洞,所以我决定写这个博客。谈谈我对概念建模的理解,希望大家能够提一些意见,大家一起进步。概念 概念数据模型(CDM)中包含概念以及定义,还包括了概念之间地相互关系,概念的维度 在概念模型中概念是什么意思呢?既关键,又简单,用户经常被提及的概念。 关键是如果没有这一个概念,业务会被极大地改变,甚至不存在。简...
2018-08-04 12:29:31
6310
1
原创 使用connect by遍历字符串
遍历字符串 这里我就不去讲其他的传统的遍历方法了,connect by 树形查询的一个关键词 1,首先我们可以先创建一个非常简单的view--首先声明一点这个view的记录条数必须是一条,为什么一条大家可以深入研究connect by的用法,大家可以去研究研究 CREATE OR REPLACE VIEW V AS SELECT '天天向上' AS chinese,'TTXS' ...
2018-07-29 13:03:15
265
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人