自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(12)
  • 收藏
  • 关注

原创 企业级智能开发新范式:CodeWave如何让AI真正提效

网易CodeWave是一款企业级智能开发平台,旨在为企业提供“可视化智能协同开发”能力。它强调AI在企业环境中的可控性,确保AI产出物(如代码、设计、文档)符合企业的规范、架构标准和安全要求。平台的核心功能包括智能D2C(设计稿转页面)、智能生成应用、智能组件生成与资产接入,以及自助智能体等。CodeWave通过自然语言描述、自动化生成代码和组件,大幅提升开发效率,降低技术门槛,同时支持灵活迭代和个性化需求,帮助企业实现从0到1的快速应用创建。+ **总结成效:** 搭建初步测试框架耗时对比。

2025-11-23 14:07:14 1049

原创 【PGSQL】对字段仅保留数字

某表存在一个税率字段,格式为x%票据类型。但是在数分场景,仅需要根据税率完成税前税后价格计算。因此,对于该字段,只需要保留税率x,并转换为数字。这种方法不保留小数点、负数。但是对于大量数据来说效率更高。这种方法可以保留小数点。

2025-09-23 09:20:19 238

原创 【PGSQL】恢复过程中,不存在的表报错relation already exists

SQL 错误 [42P07]: ERROR: relation “table” already exists (seg0 127.0.0.1:60000 pid=12345678)问题原因,该表存在关联关系没有清楚。解决,手动执行代码删除关联关系。但是数据库中无法查询到该表。

2025-08-04 11:27:29 482

原创 【python】python编译器选择有误导致调包报错

但是,不使用自定义函数调包,在get_chat_result下使用main执行,可以正常执行。看报错,streamlit调自python12,但使用的是python10。切换为python12,ollama报红,完成下载后执行成功。

2025-07-25 23:12:03 294

原创 【matplotlib】python使用matplotlib绘图报错记录

如果不加block=True的话,程序将继续执行,而不等待绘图窗口关闭。plt.show(block=True)命令用于显示绘图窗口并阻止程序执行,直到绘图窗口关闭。但会出先卡顿情况2。

2025-07-21 21:37:00 358

原创 【DolphinScheduler】任务卡死在准备停止的解决

* 任务实例状态,可以从t_ds_task_instance查询。需要连接调度器的数据库。是否有查询与更新权限。

2025-07-21 09:18:37 421

原创 【PGSQL】明细表优化:分区、分布、索引

PG分区表语法跟其他SQL语法不太一样,因此刚接触做数据库的时候并没做分区,导致查询数据、BI消费数据,存在加载慢的情况。分区原理、分区方式有大量文章介绍,本文着重记录真实环境的运用和效果。根据下单日期按年分区,根据自增长id、下单日期完成节点分布,并以下单日期作为索引。整体效果:BI报表查询,打开报表时间由300s+缩短至7s。

2025-05-16 16:06:07 573

原创 【great-expectation】py数据质量组件版本报错记录

但是由于 SQLAlchemy 的 select() 函数期望传入的是列对象或表达式,但传入了整数 1 和一个 table 对象,导致内部迭代失败。python数据质量组件great-expectation,版本1.3.5及1.4.4。也没有进行升级和调整。这段代码用于验证数据库表是否可访问。但是下载了新的插件,可能存在冲突?升级后仍然存在该报错。重新执行,完成修复。

2025-05-15 12:35:17 243

原创 【PGSQL】MS数据通过DataX写入PG报错:/u0000脏数据

业务数据写入MS,使用DolphinScheduelr的DataX组件写入PG进行数据分析。其他需要collate转换的也要调整成为Chinese_PRC_BIN,否则会报错。执行报错,发现脏数据,查看日志,脏数据为备注字段中的“\u0000”。

2025-03-05 14:43:04 533

原创 【great-expectations】筛选日期条件执行无效(使用自定义SQL解决)

检验规则:比较表A中两个字段的值,若不匹配,则不通过。个性化需求:仅检验当天的,字段为B的数据。

2025-02-26 13:57:29 382

原创 【PGSQL】16进制转10进制int

某一字段数据格式如下:X1-xxxxx-xx-000,X2-xxxxx-xx-000。其中X1,X2可为空。取X后的数字作为某动作的执行次数,报错无法将text转换为int。

2025-02-20 11:59:48 380

原创 【great-expectation】py数据质量组件使用案例

最近准备启动数据质量相关的工作,选择了great-expectation这个python的插件。支持pd、spark、sql。之前还考虑过DolphinScheduler自带的DataQuality。测试之后发现需要安装spark才能用。TBC。

2025-02-07 11:38:16 1936

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除