- 博客(6)
- 收藏
- 关注
原创 spark 提交jar包运行
./spark-submit --class RunIdMapping --name oot-xgboost-model –master=yarn --queue root.xy_etl --driver-memory 40g --num-executors 200 --executor-cores 2 --executor-memory 6g --conf spark.yarn.am.me...
2020-04-22 17:36:39
583
原创 打通ID连通的
select distinct case when sum=1 then set ELSE new_set END as id_set from ( select key ,merge_distinct(concat_ws('-',collect_set(set)),'','-') as set ,merge_distinct(concat_ws('-',col...
2020-04-21 10:35:46
210
原创 neo4j批量并行删除或者更新图里数据
**call apoc.periodic.iterate('match ()-[r]->() return r,[toString(round(rand()*1000))] as p ','WITH {r} as t,{p} as p SET t.haha =p', {batchSize:1000, parallel:true,retries:2});**该功能是给关系r,设置一个数组属...
2020-04-21 10:24:15
581
原创 Linux配置gitlab免密clone
下载安装git。配置用户名,邮箱 git config --global user.name “”,git config --global user.email “”生成密钥对。 ssh-keygen -t rsa -b 4096 -C “你的备注”由于我的linux有多个密钥对。故需要配置你的git使用的密钥对。Host xxx HostName XXX Port 2...
2020-04-15 15:54:14
1469
原创 docker中使用neo4j
运行命令docker run \ --name neo4j \ -p7474:7474 -p7687:7687 \ -d \ -v /etc/localtime:/etc/localtime \ -v /data/neo4j/data:/var/lib/neo4j/data \ -v /data/neo4j/logs:/var/lib/neo4j/...
2020-04-07 19:53:40
627
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人