ETL.-优快云博客

原创 pymongo 实战练习

第一次写这么多代码.中间考虑了很多可能发生的事项,尽可能的完善了。

2024-06-17 10:21:10 149

原创按照EXCEL列和内容批量生成sql插入语句

无论什么excel表格,都可以批量生成,再也不用挨个指定列了

2024-04-17 10:43:40 516

原创合并不同表格的数据,保留重复对应格的数据

【代码】合并不同表格的数据,保留重复对应格的数据。

2024-02-06 18:04:52 941 1

原创创建sql表实例(自用)

crawling_content VARCHAR(500) NOT NULL, /* 爬取内容:一般为官网+DGK+立创+应用等同类型组合 */crawlable VARCHAR(500) NOT NULL, /* 是否可爬:是/否 */Crawler VARCHAR(500), /* 负责人 */url_exp VARCHAR(1000), /* 建议网站 */

2023-11-08 17:50:39 95 1

原创 Python:将Excel表的内容导入MySQL

确保MySQL中对应的表已存在,此程序只导入新增内容

2023-11-01 11:21:10 421

原创 pandas 知识点总结(part1)

两个数据结构: Series 和 DataFrameobj.values 获取值obj.index 获取索引获取一个值 obj[[索引1,索引2,索引3...]] 获取多个值做运算时会保留索引值如果数据被存放到一个字典里,dict1Sdict = pd.Series(dict1) key会是索引,value是值:obj2 = pd.Series(Sdict ,index=[一个其他索引列表])

2023-10-27 10:33:30 129 1

pd.read_table('路径',sep='正则表达式') 这样可以去掉表格中的换行符。如果想做层次化索引 index_col=['列名1','列名2'...]pd.read_csv('路径',header=None)表示读取这个文件的时候没有标题。还有一种办法,是读取很多行,但是返回的是个迭代,不是具体的数,具体看书。index_col='列名' 表示以哪一轴做索引。data.to_csv('路径') 如果sep。将数据写出到文本格式。

2023-10-27 10:33:10 43 1

原创 python基础

加油加油加油。

2023-10-27 10:32:54 50 1

原创 Numpy 知识点总结

基础包NumPy。

2023-10-27 10:32:33 80 1

原创漫画:SQL数据库学习(基础入门)

DBMS(Data Base Management System,数据库管理系统)

2023-10-27 10:31:50 500 1

原创 2023年9月25日学习

自己看

2023-09-25 23:11:41 56 1

猪猪的猪猪的博客