Python操作数据库

python从0快速上手(十四)数据库操作 你可以定义模型类来映射数据库表。 阅读详情

前几天数据库课程的一个小project,需要接入MySQL数据库,导入数据,写了个脚本,做简单的CRUD操作,用Python实现,简单地记录一下,原文见Python操作数据库。

依赖

可以用MySQL-python来连MySQL,安装很简单,pip install MySQL-python,然后在脚本里引入import MySQLdb即可。有不止一个库实现类似的功能,API大同小异。

连接

首先要做的是链接数据库,当然要确保你MySQL Server是安装运行的,用homebrew安装的话brew install mysql。

链接数据库之后,会返回一个cursor,主要通过这个cursor执行SQL语句,操作数据库。比如有一个数据库叫MusicDB,链接的函数如下。

import MySQLdb
def connect_db():
    """Connect database and return db and cursor"""
    db = MySQLdb.connect(host="localhost",user='root',
                     	 passwd='PASSWD'',db="MusicDB")
    cursor = db.cursor()
    return db, cursor

当然如果想确认下有没有链接成功的话,可以用如下代码。

db, cursor = connect_db()
cursor.execute("SELECT VERSION()")
data = cursor.fetchone()
print "Database version : %s " % data
db.close()

运行脚本,如果看到类似这样的输出Database version : 5.0.45,表明就ok了。

检查表的存在

有时候可能需要不知一次修改数据库的表,不想直接在terminal里写sql,想直接修改脚本,重新跑一下,直接删除表,需要看下表是否存在。MySQL里有个表information_schema.tables包含数据库表的信息。

def table_exists(table_name):
    """Check table existence base on table name"""
    db, cursor = connect_db()
    cursor.execute("SELECT * FROM information_schema.tables \
                   WHERE table_name = '%s'" % table_name)
    nrows = int(cursor.rowcount); db.close()
    return False if nrows == 0 else True
创建表

链接数据库,定义个CREATE TABLE语句,执行即可,具体table里有哪些字段,当然是根据实际情况喽。这里的例子是歌手信息,比如有名字,他的网址,以及播放次数。

def create_table_artist():
	 # Connect database
    db, cursor = connect_db()
    sql = """CREATE TABLE artist(
             name CHAR(50) NOT NULL,
             url CHAR(80),
             playcount INT)"""
    if not table_exists('artist'):
        cursor.execute(sql)
    # remember to disconnect from server
    db.close()
删除表

当然了,删除表不是一个常见的操作,不过偶然可能用到。

def drop_table(table_name):
    db, cursor = connect_db()
    if table_exists(table_name):
        sql = """DROP TABLE %s""" % table_name
        cursor.execute(sql)
    db.close()
插入INSERT

我们从外部读入数据之后,可以把这些数据插入到数据库中,具体的toy数据开心用啥就用啥喽。插入数据的时候,如果数据不符合创建表时候的定义,就会抛出错误,我们需要简单地处理下。如果try成功了,那就db.commit()将改变写入到数据库,如果try失败,那就db.rollback()回来。记得要**db.commit()**哦,要不然那个表总是一行数据都没有。

def insert_into_artist():
    artists = load_json('artists.json')       
    db, cursor = connect_db()
    sql = """INSERT INTO artist(name, url, playcount)
           VALUES ('%s',  '%s', '%d')"""
    for a in artists:
        try:
        	  # remember to convert playcount to integer
            tp = (a['name'], a['url'], int(a['playcount']))
            cursor.execute(sql % tp)
            db.commit()
        except:
            db.rollback()
    db.close()
删除DELETE

删除操作也很类似,定义sql语句,execute即可,如果失败就rollback回来。如果表里一个字段是其他表的Foreign Key的话,直接删除这条记录就会抛出错误,所以需要考虑下这种异常情况。

def delete_artist(artist):
	db, cursor = connect_db()
	sql = "DELETE FROM artist WHERE name='%s'" % artist
	try:
		cursor.execute(sql)
   		db.commit()
   	except:
   		db.rollback()
   	db.close()	
更新UPDATE

比如每次有人播放一首歌,我们想把这个歌手的播放次数加一,可以用UPDATE语句实现。

def update_artist(artist):
	db, cursor = connect_db()
	sql = "UPDATE artist SET playcount = playcount + 1 WHERE name='%s'" % artist
	try:
		cursor.execute(sql)
   		db.commit()
   	except:
   		db.rollback()
   	db.close()	
查找SELECT

这个稍微复杂点,主要的API有fetchone(),fetchall()和rowcount。比如想找出播放次数大于十万的所有歌手,可以这样实现。

def top_artists():
	db, cursor = connect_db()
	sql = "SELECT * FROM artist WHERE playcount > '%d' " % 100000
	try:
		cursor.execute(sql)
		return cursor.fetchall()
	execept:
		print("Error in fetching data")
	db.close()

results = top_artists()
for row in results:
	name = row[0]
	print(name)	
Python量化数据仓库搭建系列1:数据库安装与操作 Python量化数据仓库搭建系列1:数据库安装与操作 本系列教程为量化开发者,提供本地量化金融数据仓库的搭建教程与全套源代码。我们以恒有数(UDATA)金融数据社区为数据源,将金融基础数据落到本地数据库。教程提供全套源代码,包括历史数据下载与增量数据更新,数据更新任务部署与日常监控等操作。 一、数据仓库 数据仓库(Data Warehouse)简称DW或DWH,数据仓库顾名思义,是一个很大的数据存储集合。是数据库的一种概念上的升级,输入方是各种各样的数据源,最终的输出用于数据分析、量化分析、数据挖掘、数据报 阅读详情

相关推荐

23、Python DB API:数据库操作的利器

本文介绍了Python DB API,这是一个用于Python与数据库系统交互的标准接口。博文详细讲解了DB API规范v2.0的核心内容,包括模块接口、连接对象、游标对象、类型对象、异常层次结构以及实现建议。文章还列出了支持Python DB API的数据库模块,并提供了代码示例和最佳实践,帮助开发者高效、规范地进行数据库操作。

zero1的博客 126

Python 之数据库操作(Python Database Operations)

MySQL 采用标准的 SQL 语言(结构化查询语言),SQL 是一种数据库查 询和程序设计语言,用于存取数据以及查询、更新和管理关系数据库系统。 虽然 Python 可以支持数据的本地存储,但前提是先从数据库获取才能保存下来,同 时还无法存储过多的数据,因为数据释放和使用会占用较大的内存,数据库负责把磁盘数据 组织好放回内存, Python 负责在内存中操作数据。本章详细介绍Python数据库操作。

Linux运维老纪的博客 2063

【数据挖掘】心跳信号分类预测 之 特征工程 —— 学习笔记(三)

三、特征工程 3.1 看书 常言道,“巧妇难为无米之炊”。在 ML 中,数据和特征将作“米”,模型和算法则为“妇”。若无数量充足的数据、良好表示的特征,再强大的模型也难以得到满意的结果 (garbage in,garbage out)。对于 ML 问题,数据和特征往往决定了结果的上限,而模型、算法的选择及优化则是在逐步接近该上限。 特征工程,顾名思义,是对原始数据进行一系列工程处理,将其提炼为特征,作为输入供算法和模型使用。在本质上,特征工程是一个表示和展现数据的过程。在实际中,特征工程旨在去除...

闻韶 3360

五、使用Python操作数据库

使用Python操作内置数据库SQLite以及MySQL数据库。

ungoing的博客 2万+

普罗米修斯监控达梦数据库集群

-----------------------------------新增文件---------------------------------------注:图上即为启动成功,如果没有问题,则使用nohup后台启动程序。官网地址:https://github.com/gy297879328/dameng_exporter。注:prometheus的对数据库的指标采集如果高于60s一次,请手动修改提供表盘中的计算值。修改dameng_exporter.config配置文件,修改账号密码的部分。

weixin_49985403的博客 1685

数字摄影与摄像中的图像信号处理器(ISP):流程与经典算法详解

图像信号处理器(Image Signal Processor, ISP)是现代数字成像系统(如智能手机、数码相机、网络摄像头等)中的核心组件,扮演着将图像传感器(如CMOS或CCD)捕获的原始光电信号转换为高质量、可供观看或进一步处理的数字图像的关键角色。在数字摄影和摄像的整个链路中,光线首先通过镜头(Lens)聚焦到图像传感器上,传感器将光信号转换为模拟电信号,随后经过模数转换(A/D转换)变为原始的数字图像信号。

qq_44682523的博客 3735

一文详解python中的数据库操作

python中的数据库操作一、数据库编程接口1. 连接对象二、使用内置的SQLite1.创建数据库文件2.操作SQLite三、MySql数据库的使用3.1 安装MySql3.2 设置环境变量3.3 启动MySql3.4 使用navicat for mysql 管理软件3.5 安装PyMysql模块3.6 连接数据库四、创建数据表4.1 创建books 图书表4.2 操作MySql数据表 最近做毕设,需要添加个数据库,记录一下。 一、数据库编程接口 重点介绍数据库API接口中的连接对象和游标对象 1. 连接对

qq_44653420的博客 2万+

从URDF到Gazebo:一个完整的ROS2机械臂仿真与运动控制实战指南

本文提供了一个完整的ROS2机械臂仿真与运动控制实战指南。详细讲解了从URDF建模、ROS2 Control配置到Gazebo物理仿真的全流程,重点介绍了如何利用MoveIt2快速搭建高级运动规划系统,并解决实际部署中的常见问题,帮助开发者高效、安全地进行机器人算法验证与开发。

red88的博客 575

Python学习笔记-操作数据库

记述python中关于数据库的基本操作。

向往的是:佛祖堂前的鱼,静静听禅。 3077

Linux安装部署PostgreSQL详细步骤

Linux安装部署PostgreSQL详细步骤

2301_77356579的博客 9325

DSSAD自动驾驶行车记录系统体系结构和应用

通过对其感知、决策、控制等模块的详细研究,以及对商业化和消费市场发展趋势的分析,为该领域的研究和实践提供有价值的参考。通过克服技术、安全与隐私、法规与政策等方面的挑战,并紧跟人工智能、云端服务、用户体验等发展趋势,DSSAD系统将更好地适应自动驾驶行业的发展,提供更安全、智能、便捷的驾驶辅助服务。DSSAD体系结构通过数据收集模块、加密链接和数据存储模块和数据读取模块等关键模块的协同作用,构建了一个强大而灵活的自动驾驶数据记录系统,为未来智能出行提供了坚实的技术基础。

一只老虎的专栏 2209

Python 使用Python操作数据库

由于SQLite本身是C写的,而且体积很小,所以,经常被集成到各种应用程序中。上述代码中,使用sqlite3.connect()方法连接SQLite数据库文件mrsoft.db,由于mrsoft.db文件并不存在,所以会在本实例Python代码同级目录下创建mrsoft.db文件,该文件包含了user表的相关信息。使用fetchall()方法返回的result3为一个列表,列表中包含所有user表中数据组成的元组,运行结果如下:[(1,'MRSOFT'),(2,'Andy'),(3,'明日科技小助手')]

m0_59745705的博客 4437

麒麟操作系统提示“默认密钥环已上锁”的解决办法

麒麟操作系统提示“默认密钥环已上锁”的解决办法

太极淘的博客 1万+

python database ioerror_python 操作DB

//兼容2、3,使用Mysql,sqlite,gadflyimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.pngimage.png//py2版本!/usr/bin/env pythonimport osfrom random import randrange as randCOLSIZ = 10FIELDS = ('login...

weixin_35045970的博客 239

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料,已经经过了本人的筛选和整理,希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助!

Python 操作DB数据库

#!/usr/bin/env python # coding=utf-8 import ibm_db # 执行DB2 SQL语句 try: conn = ibm_db.connect("DATABASE=testdb;HOSTNAME=10.20.10.9;PORT=50000;PROTOCOL=TCPIP;UID=db2inst1;PWD=123456;", "", "") #...

Through Da Storm 1077

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

mysql打开db_Python 操作 MySQL 数据库

Python 标准数据库接口为 Python DB-API,Python DB-API为开发人员提供了数据库应用编程接口。Python 数据库接口支持非常多的数据库,你可以选择适合你项目的数据库:GadFlymSQLMySQLPostgreSQLMicrosoft SQL Server 2000InformixInterbaseOracleSybase你可以访问Python数据库接口及API查看详...

weixin_29323551的博客 243

RU DOS版、EFI版32bit/64bit BIOS常用工具

DOS版、EFI版的RU工具,可用来查看IO、MEM、PCI、SMBIOS等资源。亲测在EFI SHELL下可用。

python berkeley DB操作——打开btree索引文件中的database

打开BDB中某个索引中的数据库代码: from bsddb3 import db import bsddb3 as bsddb print db.DB_VERSION_STRING mydb = db.DB() mydb.open('your_btree_db_filename', 'databsename', dbtype=db.DB_BTREE) rec =...

djph26741的博客 274

python db-api的使用流程_Python基于DB-API操作MySQL数据库过程解析

Python提供了一个标准数据库API,称为DB-API,用于处理基于SQL的数据库。与任何底层数据库的交互都可以使用DB-API,因为DB-API在代码与驱动程序之间提供了一个抽象层,可以根据需要替换底层数据库,而无需丢弃现有的代码。DB-API与底层数据库交互示例:①代码 ⇆ ②使用DB-API ⇆ ③数据库驱动程序 ⇆ ④底层数据库(如MySQL等)使用DB-API操作MySQL数据库例子1...

weixin_35520863的博客 237

Python3-ibm_db模块-数据库操作之DB2

官方文档   https://www.ibm.com/support/knowledgecenter/SSEPGG_9.5.0/kc_gen/developing-gen1.html 模块安装   Windows     使用PyCharm安装:File -> Settings -> Project: xxx -> Project Interpreter      ...

weixin_30237719的博客 2378

Python使用DB-API操作MySQL数据库

Python提供了一个标准数据库API,称为DB-API,用于处理基于SQL的数据库。与任何底层数据库的交互都可以使用DB-API,因为DB-API在代码与驱动程序之间提供了一个抽象层,可以根据需要替换底层数据库,而无需丢弃现有的代码。 DB-API与底层数据库交互示例:①代码 ⇆ ②使用DB-API ⇆ ③数据库驱动程序 ⇆ ④底层数据库(如MySQL等) 使用DB-API操作MySQL数据...

weixin_30662539的博客 131

python db-api的使用流程_Python使用DB-API操作MySQL数据库

Python提供了一个标准数据库API,称为DB-API,用于处理基于SQL的数据库。与任何底层数据库的交互都可以使用DB-API,因为DB-API在代码与驱动程序之间提供了一个抽象层,可以根据需要替换底层数据库,而无需丢弃现有的代码。DB-API与底层数据库交互示例:①代码 ⇆ ②使用DB-API ⇆ ③数据库驱动程序 ⇆ ④底层数据库(如MySQL等)使用DB-API操作MySQL数据库例子1...

weixin_30811273的博客 360

python db api下载_Python使用DB-API操作MySQL数据库

Python提供了一个标准数据库API,称为DB-API,用于处理基于SQL的数据库。与任何底层数据库的交互都可以使用DB-API,因为DB-API在代码与驱动程序之间提供了一个抽象层,可以根据需要替换底层数据库,而无需丢弃现有的代码。DB-API与底层数据库交互示例:①代码 ⇆ ②使用DB-API ⇆ ③数据库驱动程序 ⇆ ④底层数据库(如MySQL等)使用DB-API操作MySQL数据库例子1...

weixin_39729784的博客 198

python database_python 数据库操作

importpymysql.cursorsclassDBUtil():def __init__(self):self.connect=Noneself.cursor=Nonedefget_con(self):try:self.connect=pymysql.Connect(host='localhost',port=3306,user='root',passwd='123456',db='test...

weixin_39665302的博客 1000
上一篇: Python itertools模块详解
「已注销」
博客等级 码龄10年 4粉丝 18原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值