面向对象及工程环境构建,220729,

工作中每一层可能会有数据校验,,

 

 

 

 

 

map预聚合跟排序有关,2 次,

 

 

 

 

 

 

 

 

 

1-连接服务端:SparkSQLThriftServer

2-提供交互界面:写SQL,看结果

3-提交SQL给服务端运行,获取返回的结果

 

 

 

 

Python:游标:cursor

Java:语句:Statement

 

 

 

 分桶和分区的区别??????????

 

 

 

 

直接等同于stored as avro 

 

 

 

spark3支持简写,,

 

 

 

 concat是sql中语法,,

concat_ws

 

 

cx_Oracle/pyhive

 

tablenames.txt:所有表的表名 

 config.txt:Oracle、SparkSQL连接的配置信息

工作中这些代码,都需要自己写吗?还是可以调用吗? 

要么给java写,要么百度或其他途径直接抄模板,,github,,

isinstance

list嵌套

 

实例化对象

 

 

游标执行sql语句,,,

公司不自动化,那咋搞?

 手动建表,项目周期一般6个月,,

建模工具可自动化建表,,

 可以不用,不能不会是吧,简历亮点,,

实操,,,

 

 

 

 

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值