通过Python读取sqlserver数据写成json文件

最新推荐文章于 2023-12-06 16:56:30 发布

转载最新推荐文章于 2023-12-06 16:56:30 发布 · 389 阅读

2 ·

CC 4.0 BY-SA版权

原文链接：https://www.cnblogs.com/gxgd/p/11844891.html

文章标签：

#python #sqlserver

数据库专栏收录该内容

3 篇文章

订阅专栏

本文介绍了一种使用Python从SQLServer数据库中读取数据，并将其转换为JSON格式的方法。具体步骤包括：利用map函数将每条记录转换为list，再组合成字典形式，最后使用json.dumps进行序列化并写入文件。对于大约40万条数据，整个过程大约耗时10分钟。

通过Python读取sqlserver数据写成json文件

最终的解决方案是通过map的形式将数据转成一个list，然后做成字典的形式，然后转化为json，然后写入到文件当中这样的速度还可以，40万的数据差不多10分钟不到。

for i in rs:
           list_ = list(map(lambda x: str(x).replace('\t', '').replace('\n', '').replace('\r', ''), i))
           ss = json.dumps(dict(zip(columnNames, list_)))
           f.write(ss+'\n')
           print(count)
           count+=1

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

喵言喵语喵常在

关注关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

气象数据之积温数据的获取与处理

一个RS农民工

11-15

9376

数据获取数据从中国气象共享网站获取注册之后记得经常登陆签到，就当自己充了个vip一样要不你刚开始能下载的数据量就是2.0M. 到筛选那输入3.0点筛选出现了2个3.0然鹅只能选择第2种，因为第一种需要科研用户才能下载，科研用户需要省级以上的项目才能成为科研用户。所以只能选第二种，只有166个站点的数据，像我要处理的山东省的站点的数据只有6个。然后点进去之后选择时间，间隔只能为2个月，比如...

一个把json数据批量插入SQL SERVER 的Python脚本

xpresslink的专栏

08-24

2254

把json数据批量插入SQL SERVER 的Python脚本

参与评论您还未登录，请先登录后发表或查看评论

Python连接SQL Server获取数据转JSON

weixin_30532837的博客

12-21

1049

# -*- coding: utf-8 -*- ''' 不同的SQL server版本对应的DRIVER字段不同。对应关系如下 {SQL Server} - released with SQL Server 2000 {SQL Native Client} - released with SQL Server 2005 (also known as version 9.0) {SQL...

Python SQL查询并生成json文件操作示例

09-20

主要介绍了Python SQL查询并生成json文件操作,涉及Python基于mssqlhelper模块进行mysql数据库查询与json格式文件生成相关操作技巧,需要的朋友可以参考下

python抓取数据库数据封装成json_用Python将mysql数据导出成json的方法

weixin_39717704的博客

11-29

336

python生成json_Python SQL查询并生成json文件操作示例

weixin_39848007的博客

11-25

335

本文实例讲述了Python SQL查询并生成json文件操作。分享给大家供大家参考，具体如下：1. 数据准备SQL数据点击此处本站下载。2. python代码import datetimeimport osimport mssqlhelperms = mssqlhelper.MSSQL(host="192.168.0.108", user="sa", pwd="sa", db="ComPrject...

fp.rar_python_python 数据库_python读取数据_文件_读取文件

09-21

不过，如果它包含的是Python脚本或数据文件，我们可以使用前面提到的方法来读取和处理它们。Python脚本可以通过`exec(open(filename).read())`运行，数据文件则根据其格式进行解析。在实际应用中，Python的这些...

基于Python37和PyQt5的Modbus-TCP通讯协议与SQL Server2005数据读取设计源码

最新发布

10-10

在本项目中，所有通过Modbus-TCP通讯协议从设备读取的数据都将被组织并存储在SQL Server 2005数据库中，供进一步的分析和处理。项目的开发和部署过程中，涉及到的配置文件如config.json，许可证文件LICENSE，以及...

Python 读取文本文件到sql server

weixin_45432202的博客

11-22

1152

import json import pymysql import sqlite3 import re import pyodbc import os #加载所需模块 sqlconn=pyodbc.connect(DRIVER='{SQL Server}', SERVER='服务器名称', DATA...

python解析json文件写入数据库_MySQL数据库之python json及mysql读取json文件存sql等问题...

weixin_39875832的博客

12-09

870

本文主要向大家介绍了MySQL数据库之python json及mysql读取json文件存sql等问题，通过具体的内容向大家展现，希望对大家学习MySQL数据库有所帮助。preface:近期帮师兄处理json文件，须要读到数据库里面，以备其兴许从数据库读取数据。数据是关于yelp站点里面的:https://github.com/Yelp/dataset-examples，http://www...

SQL Server中将查询结果转换为Json格式脚本分享

09-10

主要介绍了SQL Server中将查询结果转换为Json格式脚本分享,本文直接给出实现代码,需要的朋友可以参考下

python的json.dumps()与json.loads()在sqlServer中应用

程序员象漂亮的博客

03-18

392

背景：在sqlServer表中新建了一个varchar类型，我想往里面存储python列表（list）。我此前是将数组转为字符串进行存储，现在我期望能否不再采用这种方式？思路： 1：首先数据库varchar类型不允许直接存储python的列表，这需要我做一个转换来存储。（我之前是将["1","2"]转为字符串进行存储，但是我觉得获取数据库数据之后还要进行切割，转成列表太麻烦，我想达到不用切割就能获取列表的效果。） 2：应该和序列化，反序列化相关。 3：具体到，序列化=json.dump

mysql数据库生成json_Python3实现将MySQL数据库中的记录生成JSON数据

weixin_42314846的博客

02-08

343

思路:首先连接MYSQL数据库，将查询到的数据存放到字典中,然年将每个组装好的字典放到List中调用json.dumps(jsonData, ensure_ascii=False)方法,生成JSON数据并返回。MySQLData2Json.py在手机上的效果： import json, MySQLdbimport ioimport sysimport urllib.requestsys.stdou...

Python SQL查询结果转换为json示例

allway2的博客

11-21

3255

import sqlite3 import json import collections from sqlite3 import Error try: conn = sqlite3.connect(':memory:') except Error: print(Error) cursor = conn.cursor() cursor.execute(""" CREATE TABLE students_test ( id integer, first_name .

SQL SERVER查询到的数据转为Json格式

weixin_30533797的博客

07-20

2720

数据表如下： Area 平台表： Province 省份表： District 区域表： Area下级为：Province，Province下级为District 查询出的效果如下：功能实现如下：（使用for xml来实现功能）第一步： --合并区域列,将合并的数据保存到临时表#temp_Province select ProvinceID,P...

将SQL Server结果转换为JSON

culuo4781的博客

07-27

4336

table, th, td { border: 1px solid black; padding-left:10px !important; } table th{ font-size:18px !important; } table, th, td { border: 1px solid black; padding-left...

SQL Server 中的 JSON 数据

weixin_30797027的博客

06-26

1231

下面是 JSON 文本的示例 [{ "name": "John", "skills": ["SQL", "C#", "Azure"]}, { "name": "Jane", "surname": "Doe"}] 通过使用 SQL Server 内置函数和运算符，你可以对 JSON 文本执行以下操作：分析 JSON 文本和读取或修改值。将 JSON 对象数组转...

SQL Server 中处理 JSON 数据

圈儿圈儿

12-06

1322

最近在项目中需要在 SQL Server 中处理 JSON 数据，于是学习了解了一下，在这里记录下：）

sqlsever Json转表

xiao1491944538的博客

05-27

1197

json转table

SQL Server原生数据：XML转JSON实例与步骤

3. 将生成的XML文档进一步转换为JSON，可能需要使用系统扩展`OPENJSON`，或者使用外部库如`xp_json转化`，或者通过编程语言（如C#或Python）与SQL Server进行交互。 4. 最后，通过`EXEC sp_xml_removedocument`清理...