
python
小白咸菜
从入门到放弃
展开
-
大数据迁移——Python+MySQL
大数据迁移——Python+MySQL引言方法一:数据库复制 ——最糟糕方法二:数据库转存——最蜗牛方法三:数据库备份——最尬速方法四:内存操作Python+MySQL——最火箭引言最近,因为课题组更换服务器,有一批数据需要做数据迁移,数据量大约150G-200G,一部分数据存储在原来服务器的MySQL上,另外一部分数据以txt文件存储在硬盘上。现在,我需要将这些数据全部迁移存储在新服务器的MySQL上,方便后期课题的分析处理以及大量的查询需求。这个看似简单的任务,却给我带来了很多困扰,转存效率极其低原创 2020-11-30 23:26:07 · 1411 阅读 · 0 评论 -
python从文件读数据
最近在做一个课题,需要将拿到的数据先存入数据库,刚好自己在学习python,就想拿python解决这个问题。拿到数据解压后发现是一个近6G的txt文件,文件太大,无法打开,尝试用python读取几行数据,看看数据的结构。1、python读文件python使用open()函数来打开文件,语法如下:open(name[, mode[, buffering]])open函数使用一原创 2016-04-14 16:07:09 · 1580 阅读 · 0 评论 -
Python 正则表达式——快速入门
Python 正则表达式——快速入门Python 正则表达式快速入门简介正则表达式语法常用操作符正则表达式语法实例经典正则表达式实例re库的基本使用re库主要功能函数常用的控制标记re库的等价用法re库的match对象re库的贪婪匹配和最小匹配总结简介正则表达式,又称正规表示式、规则表达式等(英语:Regular Expression,常简写为regex、regexp或RE)原创 2017-04-27 00:12:24 · 895 阅读 · 0 评论