python-批量插入数据

是不是在工作中经常会遇到各种数据需要我们处理然后将所需要的数据最终写入数据库这种事情呢?如果我们手工来完成重复性的工作会很耽误时间,下面我们看看程序如何简化帮助我们完成这些工作:

实例需求:如果已有人员权限表(已提供excel表),想查看这些人是否存在于数据库表user用户表中,如果存在则跳过,否则将这个用户插入到表中。(批量查询写入操作)

【已提供的数据源文件格式如下】:

【程序实现】:

一、连接mysql数据库

# 与数据库创建连接
conn=pymysql.connect(user='***',password='***',host='***',database='***',port=***)

# 使用cursor()方法获取操作游标
c = conn.cursor()

二、读取数据源

FilePath = r'C:\Users\111yao\Desktop\权限限.xls'  # 用例路径

# 1.打开excel文件
wkb = xlrd.open_workbook(FilePath)
# 2.获取sheet
sheet = wkb.sheet_by_index(0)  # 获取第一个sheet表数据
# 3.获取总行数
rows_number = sheet.nrows
# 4.遍历sheet表中所有行的数据,并保存至一个空列表cap[]
cap = []
for i in range(rows_number):
    x = sheet.row_values(i)  # 获取第i行的值(从0开始算起)
    cap.append(x)

三、将已获取的数据源数据写入表中

for Stu in cap:
    user_id = str(Stu[0])
    user_name = str(Stu[1])
    status = Stu[2]
    a = user_id[:8]
    # 使用f-string格式化字符串,对sql进行赋值
    c.execute(f"SELECT user_id FROM 用户表 WHERE user_id={a}")
    result = c.fetchone()
    if result is None:
        # 如果表中不存在该用户则直接插入到数据库
        c.execute(f"INSERT INTO 用户表(user_id, user_name, status) value ('{a}','{user_name}','{status}')")
        conn.commit()
    else:
        # 如果表中存在该用户,但用户状态为0或姓名为空则将数据更新替换
        c.execute(f"update 用户表 set status=1,user_name='{user_name}'  where user_id={a}")
        conn.commit()

conn.close()
print("插入数据完成!")

这样就完成批量数据的写入了,是不是很简单?还不快来试试

Python中,可以使用`cx_Oracle`库来进行Oracle数据库的操作,包括批量插入数据。`cx_Oracle`是一个Python绑定到Oracle数据库的模块,它允许你像操作本地文件一样处理Oracle数据库批量插入数据的一般步骤如下: 1. **安装依赖**:首先需要安装`cx_Oracle`库,如果你还没有安装,可以使用pip命令:`pip install cx_Oracle` 2. **连接数据库**:通过`connect()`函数创建一个数据库连接,需要提供数据库地址、用户名、密码等信息。 ```python import cx_Oracle connection = cx_Oracle.connect( user='your_username', password='your_password', dsn='//host:port/service_name' ) ``` 3. **创建游标**:游标用于执行SQL命令。 ```python cursor = connection.cursor() ``` 4. **准备插入语句**:通常会使用动态SQL,特别是当你不确定有多少条数据需要插入,或者数据是从其他地方获取的。 5. **构建插入列表**:将要插入数据组织成适合批量插入的形式,比如一个元组列表。 6. **执行批量插入**:使用`executemany()`方法执行批量插入,该方法适用于存储过程和非存储过程,支持多种类型的参数。 ```python insert_sql = "INSERT INTO your_table (column1, column2, ...) VALUES (:1, :2, ...)" data_list = [(value1, value2, ...) for row in your_data] # 替换为实际数据 cursor.executemany(insert_sql, data_list) ``` 7. **提交事务**:如果有多条插入操作,记得最后使用`connection.commit()`来提交事务,防止数据丢失。 8. **关闭资源**:完成后关闭游标和连接。 ```python cursor.close() connection.close() ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值