- 博客(6)
- 收藏
- 关注
RSS订阅原创 导入CSV文件到MySQL数据库
最近有需求将文件导入数据库。接上篇《Macbook 搭建MySQL + Sequel Pro练习平台》，现在把CSV文件导入数据库。现在手上有一个df_completed.csv文件，文件结构如下：id,order_request_id,driver_id,completed_day_id,completed_time1,0,266,1.0,01:11:14.6330002,1,423,1.0,01:24:24.2270003,2,3070,1.0,01:13:31.6540004,3,4074
2021-08-12 11:12:06
292
原创 Macbook 搭建MySQL + Sequel Pro练习平台
日前面试需要把大学时学过的SQL捡回来，我想要找一个SQL平台来练习。找了很多在线平台，但是用着都不顺利，且不方便存储SQL脚本。于是萌生了在自己电脑上安装MySQL的想法。由于安装过程遇到有坑，于是写这篇文章来纪录一下。方便下次重装的时候用到。系统：MacOS 11.5.1MySQL: 8.0.23Sequel Pro: Build 5466(97c1b857)步骤：下载MySQL,从官网下载后安装。具体安装步骤不再详述。成功安装MySQL后，从Macbook的System Prefer
2021-08-11 23:14:11
272
原创 (1) MacBook上 txt 编码格式转换 UTF-16LE 转成 UTF-8
问题描述：Python 打开txt文件时提示，.txt must be utf-8解决方案：查看当前txt文件编码方式，然后在Terminal中用命令转换编码格式。查看源txt文件 编码file -I file_path我的文件显示 text/plain; charset=utf-16le说明我的txt文件编码是 UTF-16LE 格式的转换编码格式在命令中需要替换以下内容：UTF-16LE 源文件格式UTF-8 目标文件格式original_file_path 源文件地址
2021-02-02 12:33:24
4552
原创 Python处理数据常见问题解决方案（2）Dataframe使用 append()添加大量数据时效率变低，处理时间过长，无法接受。
问题描述：在用python给dataframe添加数据的过程中，我们经常使用append()方法往dataframe中一行一行的添加数据。但是当数据过多时，append()方法效率变得地下。近期笔者需要处理350,000行的数据，需要对其中的每一行做处理，组装成新的一行，再使用append()把新组装的一行添加至新的dataframe。在MacBook上用Pycharm运行了8个小时，只append()了约110,000行，这个速度是无法接受的。所以需要找到一种更快的组装dataframe的方法。解决
2021-01-28 17:56:36
3874
原创 用R语言连接到数据库或者数据库文件，以MacBook中用R连接MS Access数据库的mdb文件为例
R语言中一般使用csv或者xls文件中的数据，但是也有用户会使用到Mysql,Oracle甚至MS Access中的数据。由于MS Access在网上教程较少，且未发现一个完整的教程可以在macbook中成功的连接MS Access 数据库文件，特写一个教程用于记录。1.首先准备一个mdb文件2.下载 Actual ODBC pack下载链接： http://www.actualtech.com/download.php选择支持mdb的安装包 67.4M下载后安装在磁盘中，安装正常会如下图所
2020-11-11 20:34:21
1598
2
原创 Python处理数据常见问题解决方案（1）如何把DataFrame(Excel表格或CSV表格)中的某一列中的数字提取出来，生成新的一列。（正则表达式/Replace）
欢迎使用Markdown编辑器你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。新的改变我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客：全新的界面设计 ，将会带来全新的写作体验；在创作中心设置你喜爱的代码高亮样式，Markdown 将代码片显示选择的高亮样式 进行展示；增加了 图片
2020-06-19 17:23:30
5269
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人