大数据
wangzhpwang
<--Wechat
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
maxwell sparkstream to hbase cdc
maxwell 读取binlog发送消息到kafka 源表要求有id主键 sqoop导入后,启动stream对update delete insert进行cdc到hbase sqoop import -D sqoop.hbase.add.row.key=true --connect "jdbc:sqlserver://192.168.10.1xx:1433;database=tupdw" --username usertest--password **** --table t_mkt_item...原创 2020-06-02 10:58:35 · 359 阅读 · 0 评论 -
sqoop 1.4.7 导入hive
sqoop import --driver com.microsoft.sqlserver.jdbc.SQLServerDriver --connect "jdbc:sqlserver://192.168.10.128:1433;database=kylin" \ --username user01 --password #### --table=sqoop_test ...原创 2018-09-05 11:14:44 · 642 阅读 · 0 评论 -
superset连接kylin2.4 坑!pykylin与kylinpy
解决办法 只安装官方介绍的kylinpy 不要自行安装pykylin superset连接kylin2.4 uri 成功: kylin://ADMIN:XXXXXXXXXX@192.168.10.200:7070/learn_kylin?prefix=/kylin/api&version=v1 失败 kylin://ADMIN:XXXXXXXXXX@192.168.10.20...原创 2018-09-06 11:53:51 · 2089 阅读 · 1 评论 -
大数据笔记-01、hdp2.6整合kylin2.4.1注意
在hdp hive的config中添加下列项,否则kylin无法启动 hive.security.authorization.sqlstd.confwhitelist.append=dfs.replication|hive.input.format..*|tez.queue.name| mapreduce..*|mapreduce.job.split.metainfo.maxsize|hive...原创 2018-09-18 09:20:54 · 1149 阅读 · 1 评论 -
k8s centos7新增节点
swapoff -a sed -i 's/.*swap.*/#&/' /etc/fstab cat <<EOF > /etc/sysctl.d/k8s.conf net.bridge.bridge-nf-call-ip6tables = 1 net.bridge.bridge-nf-call-iptables = 1 EOF sysctl --system yum ...原创 2018-09-19 10:12:02 · 762 阅读 · 0 评论 -
HDP 2.6.4 kettle 7.1 spark-submit配置
Kettle 提交spark sql 作业到 spark2! Kettle 7.1 HDP 2.6.4 kettle 7.1自带hdp2.5插件,测试spark-submit到hdp2.6.4正常运行 参考官方资料 https://help.pentaho.com/Documentation/8.0/Products/Data_Integration/Job_Entry_Referen...原创 2019-04-22 16:08:26 · 1532 阅读 · 0 评论
分享