- 博客(28)
- 收藏
- 关注
转载 Pandas 向前与居中滚动计算
我们首先构造一个简单的测试数据,并对它进行向前(也就是向下)或者居中(也就是同时向上和向下)获取滚动窗口,再求滚动窗口内的数据之和。默认是向后(也就是向上)获取滚动窗口,如果需要向前(也就是向下)或者居中(也就是同时向上和向下)获取滚动窗口,则可以分别使用。实现向前或者居中获取滚动窗口,并对比了这种方法与上述方法所得结果的差异。本质上是先做常规的向后(也就是向上)滚动计算,再将所得结果向上移动。本质上是先做常规的向后(也就是向上)滚动计算,再将所得结果向上移动。对于尾部的数据也能进行计算,而。
2025-08-22 17:50:38
84
原创 dataspell中调试多个jupyternotebook的单元(cell)
主要是因为不会在多个cell之间断点调试。如果直接断点在函数里,但是不调试运行函数所在cell,那么调试其他调用这个函数的cell时就不会进入函数内部的断点。之前很少在jupyter里面调试函数,这次继承了别人的巨型notebook,debug到头大。解决办法:先调试运行一下被断点的函数所在cell(虽然不会有啥反应)
2025-07-08 10:31:17
199
原创 sqlite3从命令行创建数据库
我想从命令行创建新的sqlite数据库,按理说直接“ sqlite3 xxxx.db”命令就可以了。然后才输入建库命令,于是显示...> 提示我继续输入,我愣住。反复好几次才意识到,建库命令不需要启动sqlite3。但是我先输入了“sqlite3”启动了服务。记录一个很尴尬的bug。
2025-06-09 00:19:21
109
原创 海康MVS初学者使用
能看到图像就可以了。同时要保证trigger模式是off的,就是右边栏里trigger--> IO Input -->trigger mode 要是off。得到了一个海康的工业相机mv-cs016-10uc。目的是cv2库连接做图像识别。首先下载安装最新版的海康官方软件MVS,测试一下相机能不能用。再点击左上角的开始采集。在mvs左边栏找到相机双击,
2024-05-11 15:25:35
4824
原创 SPARK SQL ERROR: Detected cartesian product for INNER join between logical plans报错的另一种可能
我写过的最蠢的代码我写过的最蠢的代码我写过的最蠢的代码我写过的最蠢的代码我写过的最蠢的代码
2023-11-28 14:56:41
660
转载 STM32 SysTick中断使用方法
k中断属于核内外设中断器,中断号为-1。想要使用SysTick中断,只需在SysTick查询定时上进行稍微的修改。需要添加开启中断,直接用中断函数对计数标志位进行清零,不再使用查询方式判断计数是否结束去清零。中断函数接口SysTick_Handler在。中断函数定义好后,直接初始化中断时间,主函数中不需要对中断进行其他处理,这样就能实现SysTick中断让LED灯闪烁了。文件就是start-upxxxxx_md.s那个。文件中已经给出定义,直接到文件中查找即可。配置的方法,直接在操作。
2023-11-08 23:39:13
2635
2
转载 Python 正则如何匹配括号
上面的代码中,使用括号来表示要匹配的内容,并使用 .*?来表示匹配任意字符,直到遇到右括号。使用 re.findall() 函数查找所有匹配的结果。上面的代码中,使用 \(\|\) 来匹配左右括号,并使用 re.findall() 函数查找所有匹配的结果。此外,还可以使用反斜杠来转义字符,在正则表达式中表示括号。例如,\[ 表示左中括号,\] 表示右中括号。
2023-09-26 03:03:50
3489
1
转载 为什么sparksession.sql(“set hive.support.quoted.identifiers=none”)不起作用?
你能试着启用正则表达式吗?默认情况下,此行为是禁用的,因此在运行带有regex列的查询之前,需要将下面的属性设置为true。
2022-10-26 12:03:11
431
转载 带UDF的withColumn产生AttributeError:‘NoneType‘对象没有属性‘_jvm‘
您非常接近,这是在抱怨,因为您无法lit在udf内使用udf :) lit用于列级,而不是行级。
2022-10-26 11:53:26
227
转载 spark生成大宽表的parquet性能优化
将最终的存储结果定义为了将七百个左右的标签属性展平存储为parquet文件,这样每个标签属性对于用户而言只有存在和不存在两种情况。
2022-10-26 11:47:13
375
转载 linux如何将一个正在运行的进程转入到后台执行且中断shh连接不被kill掉
linux如何将一个正在运行的进程转入到后台执行且中断shh连接不被kill掉
2022-09-19 14:49:54
561
原创 matplotlib画垂直水平线
https://matplotlib.org/stable/gallery/subplots_axes_and_figures/axhspan_demo.html#sphx-glr-gallery-subplots-axes-and-figures-axhspan-demo-py
2022-09-08 14:12:39
166
原创 Conda卸载指定环境没用的包(卸载失败解决方案)
https://www.pythonheidong.com/blog/article/1187178/6c683d775b2f17ba3d9a/
2022-09-03 21:05:12
952
原创 SPARK SQL ERROR: Detected cartesian product for INNER join between logical plans报错的另一种可能
join条件忘写on了
2022-08-25 16:06:06
963
原创 target table has x column(s) but the inserted data has y column(s), including z partition column(s
hive表想使用动态分区的方法,insert overwrite 的时候,必须把动态分区字段放在select 的字段最后面
2022-08-10 00:28:53
1774
原创 (1,0) EOF in multi-line string 踩坑记
(1,0) EOF in multi-line string 的原因竟然是!
2022-07-26 17:01:58
528
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅