- 博客(5)
- 问答 (1)
- 收藏
- 关注
原创 收方配置性能优化demo important!
4.ads_crm.ads_crm_waybill_cm_sf_self_service_inquiry_cnt_level1_del修改前缀索引receiver_district_id。根据监控发现此接口超时较多,根据分析后定位是不输入任何查询条件倒序运单数的场景,因为没有任何条件所以计算量特别大导致超时。5.ads_crm.ads_crm_waybill_cm_sf_self_service_inquiry_cnt_level1_del表添加快捷查询过滤。问题1:为啥要使用广播?梳理接口中各表的用途。
2024-09-30 10:42:08
637
原创 语法和碎片
20240611:sr中concat_ws和spark中用法一样spark中:concat_ws 的优化用法with test_4 as ( – 上面已经限制有意义才取了,再把已经发散打开的,再聚合回来selectsr中的分组时 用 group_concat 时,null会自动去除,同时用逗号隔开如果需要去重的话,用:例:开窗位移 lead是上 lag是下移和 concat_ws。
2024-09-26 21:10:25
1221
原创 接口接口接口
存的底表字段里的数据是 多个拼接的,入参也是多个拼接时看任意一个 有没存在:例:array_length( array_intersect(split(a.exception_type_id,‘,’) ,split(‘20,70,130,150’,‘,’) ) )select array_length( array_intersect(split(‘20,700’,‘,’) ,split(‘20,70,130,150’,‘,’) ) )例:bigdata.crm.customer.business.s
2024-09-26 17:16:55
1092
原创 炸裂函数demo
- 一个字段里存了多个json时,把里面乱七八糟的符号去掉后,把每个json间的逗号换成里面不会出现的特殊符号再来炸。-- 节点: insert_tmp_crm_usage_customer_individuation。-- 节点 job_insert_ads_crm_quotation_down_oa_detail。,concat_ws(',',collect_list(t1.status)) -- 不去重。,concat_ws(',',collect_set(t1.status)) -- 去重。
2024-09-26 16:29:16
478
原创 近日刷算法分享
最近刷算法的一些想法,借此分享,如果有大佬看到,希望多多指教!1.时间分配1.1 碎片时间因为上班时间比较忙,且通勤时间比较长(一天约3小时)所以大部分题都是在通勤路上刷的。1.2 不死磕感觉刚拿到一道题,看个5-10分钟之后,确保看懂了,要是还没有思路就直接看题解,题解要是还看不懂的就上b站看视频,要是还看不懂就先放一下,等下一次通勤的时候再看,尽量不死磕,感觉效率太低了。2.实践2.1 打断点方便理解。
2023-07-12 23:08:48
200
1
空空如也
mysql中不同环境下如果复制表
2022-01-24
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅