导入Excel遇到数字字母混合列，字母导入为空值发生数据丢失时，用以下方法解决！...

最新推荐文章于 2020-09-09 17:41:05 发布
最新推荐文章于 2020-09-09 17:41:05 发布 · 499 阅读 · 0
文章标签：

#c#

本文探讨了使用Microsoft.Jet.OLEDB.4.0读取Excel时出现的混合数据丢失问题，分析了问题产生的根源，并提出了几种解决方案，包括设置IMEX参数、调整注册表值TypeGuessRows以及直接将单元格格式设置为文本。

使用Microsoft.Jet.OLEDB.4.0读取数据会出现当某一字段内分别含有文本和数字的混合数据时，某一类型的数据会产生丢失。

产生这种问题的根源与Excel ISAM[3]（Indexed Sequential Access Method，即索引顺序存取方法）驱动程序的限制有关，Excel ISAM 驱动程序通过检查前几行中实际值确定一个 Excel 列的类型，然后选择能够代表其样本中大部分值的数据类型[4]。也即Excel ISAM查找某列前几行（默认情况下是8行），把占多的类型作为其处理类型。例如如果数字占多，那么其它含有字母等文本的数据项就会置空；相反如果文本居多，纯数字的数据项就会被置空。
　　现具体分析在第1节程序代码Extended Properties项中的HDR和IMEX所代表的含义。HDR用来设置是否将Excel表中第一行作为字段名，“YES”代表是，“NO”代表不是即也为数据内容；IMEX是用来告诉驱动程序使用Excel文件的模式，其值有0、1、2三种，分别代表导出、导入、混合模式。

当我们设置IMEX＝1时将强制混合数据转换为文本，但仅仅这种设置并不可靠，IMEX＝1只确保在某列前8行数据至少有一个是文本项的时候才起作用，它只是把查找前8行数据中数据类型占优选择的行为作了略微的改变。例如某列前8行数据全为纯数字，那么它仍然以数字类型作为该列的数据类型，随后行里的含有文本的数据仍然变空。
　　另一个改进的措施是IMEX＝1与注册表值TypeGuessRows配合使用，TypeGuessRows 值决定了ISAM 驱动程序从前几条数据采样确定数据类型，默认为“8”。可以通过修改“HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Jet\4.0\Engines\Excel”下的该注册表值来更改采样行数。但是这种改进还是没有根本上解决问题，即使我们把IMEX设为“1”， TypeGuessRows设得再大，例如1000，假设数据表有1001行，某列前1000行全为纯数字，该列的第1001行又是一个文本，ISAM驱动的这种机制还是让这列的数据变成空。

如果还是不行，选取全文"设置单元格格式"为文本格式，这样就行了，亲测成功。
iteye_20659
关注
导入Excel遇到数字字母混合列，字母导入为空值发生数据丢失
Haibing的博客
03-28 4139
错误重现： ----------------------------------------------------------------------- 在导入Excel读取数据时,其中的一个字段保存的值有如下格式："2011072014","20110Aad10","25124Adfa","例子asdfadf"  这样的 混合了 "字母/数字/中文"数据，在Excel表格中的前 8条 或
使用Microsoft.Jet.OLEDB.4.0读取数据会出现当某一字段内分别含有文本和数字的混合数据时，某一类型的数据会产生丢失。
ranshouxu的专栏
09-16 2180
<br />使用Microsoft.Jet.OLEDB.4.0读取数据会出现当某一字段内分别含有文本和数字的混合数据时，某一类型的数据会产生丢失。<br />产生这种问题的根源与Excel ISAM[3]（Indexed Sequential Access Method，即索引顺序存取方法）驱动程序的限制有关，Excel ISAM 驱动程序通过检查前几行中实际值确定一个 Excel 列的类型，然后选择能够代表其样本中大部分值的数据类型[4]。也即Excel ISAM查找某列前几行（默认情况下是8行），把占多
解决ADO读取Excel，数据丢失、数据错误、数据乱码问题
mmdev
11-21 430
在进行自动化测试的脚本开发或者框架开发的过程中，经常会使用到excel操作技术，对excel的操作，主要有两个方法：1）通过CreateObject("Excel.Application")的方式 2）通过ADO访问excel数据源，这篇文章主要是描述一个ADO操作excel时，遇到数据丢失，数据错误或数据乱码的一个问题。 一个简单的使用ADO函数： ' ******************...
Ado方式导入excel混用数据类型引起数据缺失问题解决方法
weixin_34148456的博客
09-26 321
1.设置HDR=NO; IMEX=1  参数HDR的值： HDR=Yes，这代表第一行是标题，不做为数据使用 ，如果用HDR=NO，则表示第一行不是标题，做为数据来使用。系统默认的是YES参数 IMEX IMEX ( IMport EXport mode )设置当 IMEX=0 时为“汇出模式”，这个模式开启的 Excel 档案只能用来做“写入”用途。当 IMEX=1 时为“汇入模式”，这个模...
老生常谈JS数组去重
进无止进
09-09 722
数组去重，历史悠久的话题了，不过今天只记录个人比较喜欢的方法 1、数组去重需求 项目需要对类似这种数组去重： let lists = [{ id: 1, name: '法外狂徒', age: 20 }, { id: 3, name: '张三', age: 20 }, { id: 1, name: '法外狂徒', age: 20 }, { id: 4, name: '李四', age: 20 }] 该数据以id作为唯一标识，去重时只需去除重复id的那一项即.
【Excel表格数据导入DB块】：STEP 7变量处理的完全攻略（专业教程）
![【Excel表格数据导入DB块】：STEP 7变量处理的完全攻略...接着，深入解析了Excel数据预处理技术，涵盖数据清洗、映射与转换以及数据导入的路径规划。本文还详细阐述了在STEP 7中进行变量地址分配、数据操作以及错误
python 删除EXCEL中A列为无的数据
04-02
好的，我现在需要帮助用户解决如何用Python删除Excel中A列为“无”的数据。首先，我要确认用户的需求，他们希望处理一个Excel文件，删除A列中值为“无”的行。 首先，我应该考虑使用Python中常用的库来处理Excel...
再加一个功能：1.创建一个按钮显示“完成首拼”，再新创建的excel文件里，会自动生成首拼，用python代码实现import sys import pandas as pd from 连接池到实验 import * from PyQt5.QtWidgets import ( QApplication, QWidget, QLabel, QLineEdit, QPushButton, QFileDialog, QMessageBox, QVBoxLayout, QComboBox, QHBoxLayout ) import numpy as np import os import tempfile import win32com.client as win32 # 用于操作Excel # 主窗口类 class ExcelImporter(QWidget): def __init__(self): super().__init__() self.setWindowTitle("Excel 导入 MySQL 工具") self.resize(600, 400) # 增加窗口高度以容纳新控件 self.last_created_excel = None # 记录最后创建的Excel文件路径 self.templates = { "客户信息": [ "姓名","首拼"], "产品信息": [ "产品名称", "首拼"], "订单记录": ["客户名","首拼"] } self.init_ui() def init_ui(self): layout = QVBoxLayout() # 模板选择区域 layout.addWidget(QLabel("选择模板：")) template_layout = QHBoxLayout() self.template_combo = QComboBox() self.template_combo.addItems(self.templates.keys()) template_layout.addWidget(self.template_combo) self.create_button = QPushButton("创建Excel") self.create_button.clicked.connect(self.create_excel_template) template_layout.addWidget(self.create_button) self.complete_button = QPushButton("我已编辑完成") self.complete_button.clicked.connect(self.on_complete_clicked) self.complete_button.setEnabled(False) # 初始禁用 template_layout.addWidget(self.complete_button) layout.addLayout(template_layout) # 文件路径输入框 layout.addWidget(QLabel("选择 Excel 文件：")) self.file_path_edit = QLineEdit() self.browse_button = QPushButton("浏览") self.browse_button.clicked.connect(self.select_file) file_layout = QHBoxLayout() file_layout.addWidget(self.file_path_edit) file_layout.addWidget(self.browse_button) layout.addLayout(file_layout) # 表名输入框 layout.addWidget(QLabel("目标数据库表名：")) self.table_name_edit = QLineEdit() layout.addWidget(self.table_name_edit) # 导入按钮 self.import_button = QPushButton("导入数据库") self.import_button.clicked.connect(self.import_to_database) layout.addWidget(self.import_button) self.setLayout(layout) def create_excel_template(self): """创建Excel模板并打开""" try: # 获取选中的模板名称 template_name = self.template_combo.currentText() # 创建临时Excel文件 with tempfile.NamedTemporaryFile(suffix='.xlsx', delete=False) as tmp: file_path = tmp.name self.last_created_excel = file_path # 创建DataFrame并写入列标题 headers = self.templates[template_name] df = pd.DataFrame(columns=headers) df.to_excel(self.last_created_excel, index=False) # 使用Excel 2013打开文件 excel = win32.gencache.EnsureDispatch('Excel.Application') excel.Visible = True workbook = excel.Workbooks.Open(os.path.abspath(self.last_created_excel)) # 启用"我已编辑完成"按钮 self.complete_button.setEnabled(True) QMessageBox.information(self, "成功", f"Excel模板已创建，请编辑后点击'我已编辑完成'") except Exception as e: QMessageBox.critical(self, "错误", f"创建Excel失败: {str(e)}") def on_complete_clicked(self): """处理编辑完成按钮点击事件""" if self.last_created_excel and os.path.exists(self.last_created_excel): self.file_path_edit.setText(self.last_created_excel) self.table_name_edit.setText(self.template_combo.currentText()) self.complete_button.setEnabled(False) # 重置按钮状态 else: QMessageBox.warning(self, "警告", "未找到创建的Excel文件") def select_file(self): file_path, _ = QFileDialog.getOpenFileName(self, "选择 Excel 文件", "", "Excel 文件 (*.xlsx *.xls)") if file_path: self.file_path_edit.setText(file_path) def import_to_database(self): file_path = self.file_path_edit.text() table_name = self.table_name_edit.text() if not file_path: QMessageBox.critical(self, "错误", "请选择一个 Excel 文件") return if not table_name: QMessageBox.critical(self, "错误", "请输入目标数据库表名") return try: with POOL.connection() as conn: with conn.cursor() as cursor: df = pd.read_excel(file_path) if df.empty: QMessageBox.critical(self, "错误", "Excel 文件为空") return # 替换所有 NaN、inf、-inf 为 None df.replace([np.nan, np.inf, -np.inf], None, inplace=True) # 构建插入语句 if not table_name.isidentifier(): raise ValueError("表名包含非法字符") columns = ', '.join(df.columns.tolist()) placeholders = ', '.join(['%s'] * len(df.columns)) insert_sql = f"INSERT INTO `{table_name}` ({columns}) VALUES ({placeholders})" # 转换为元组列表 data = [tuple(row) for _, row in df.iterrows()] # 批量插入 cursor.executemany(insert_sql, data) conn.commit() QMessageBox.information(self, "成功", f"{cursor.rowcount} 条记录已成功导入到表 '{table_name}'") except Exception as e: try: conn.rollback() except: pass QMessageBox.critical(self, "错误", f"导入失败: {str(e)}") # 启动应用 if __name__ == "__main__": app = QApplication(sys.argv) window = ExcelImporter() window.show() sys.exit(app.exec_())
最新发布
07-27
我们有一个需求：在创建Excel模板时，除了已有的列（如“姓名”、“产品名称”等），还需要自动生成“首拼”列，并且这个列的值需要根据前面的列（如“姓名”或“产品名称”）自动生成拼音首字母。 但是注意：在...
Matlab中的数据类型转换：实现Excel数据到Matlab的无缝对接
文中深入阐述了从Excel导入数据到Matlab的多种技术，包括数据类型识别、导入方法和实际案例分析。同时，文章还探讨了Matlab中的数据类型转换技术、高级转换场景以及转换过程中的问题解决策略。此外，本文展示了从...
关于.NET读取Excel文件到DataSet后数据丢失问题
开发人
09-09 1744
<br />关于.NET读取Excel文件到DataSet后数据丢失问题，具体原因如下：<br />使用OLEDB读取Excel文件时，是以Excel文件第一行数据（其实是第二行，第一行列标题名）的类型作为将来的列数据类型，该行以后的数据类型匹配不上时，会丢失。<br /> <br />例如Excel数据：ID　　　名称　　　电话<br />                       1           张三         12345678<br />                       2
OLEDB读取Excel、csv出现字符串截断、丢失原因及其解决方案
08-07
在应用程序的设计中，经常需要读取Excel数据或将Excel数据导入转换到其他数据载体中，例如将Excel数据通过应用程序导入SQL Sever等数据库中以备使用。笔者在开发“汽车产业链ASP协同商务平台”中遇到了类似需求。某汽车整车生产企业需要将其车辆发车信息发布到汽车产业链平台上去，其数据为内部ERP系统生成的Excel数据表，用户首先将该数据表上传至汽车产业链平台，平台将此Excel数据读取导入到平台内部的SQL Sever数据库中，以供其它应用使用。汽车产业链平台的开发使用的开发工具为VS.NET，使用的语言是C#，在开发的过程中发现使用Microsoft.Jet.OLEDB.4.0读取数据会出现当某一字段内分别含有文本和数字的混合数据时，某一类型的数据会产生丢失。本文就对此问题产生的根源进行了分析并给出了相应的解决方法。
java解析excel解决excel类型问题
eff666的博客
11-14 3393
上篇文章java解析excel文件为txt文件介绍了利用poi解析excel文件，本篇文章将在上篇文章的基础上，介绍解析excel时遇到的类型问题如何解决。//解决excel类型问题，获得数值 public String getValue(Cell cell) { String value = ""; if(null==cell){
Excel文件导入到SQL,文本、数字丢失,变成NULL的处理
热门推荐
Warren专栏
07-06 1万+
导入一个Excel到Sql,好方便进行数据的筛选，但是却发现，在导入后，电话字段有很多数据丢失，变成了Null，经过仔细检查，发现丢失的都是包含有字符型的(如区号与号码之间的-)，再查看一下导入后的sql表，电话所在字段类型为float类型~~~难怪会有很多数据丢失了。。 将Excel中的该列单元格格式改为 文本 格式，再导入，已经不行。 搜索一番，发现有一个方法，不过这个方法只针对于完全数字
excel 读入 dataset
weixin_30955617的博客
08-04 141
publicDataSetGetDataSetFromExcel(stringstrFileName){OleDbConnectionobjConn=null;DataSetdata=newDataSet();try{stringst...
easyoi导入excle时部分字段数据无法获取
清风
08-27 1997
原因一:表格字段名与实体类名不一致 导入时采用 在实体类属性上添加@EXCEL(name = “excle表格中对应的字段名”) 注解的名字与表格字段名不一致时则无法获取到数据 原因二:未更新实体类的toString()方法 如果表格中的字段在实体类中没有,属于新增的,新增属性的同时不仅需要提供get和set方法,还需要更新toString方法,否则无法获取到数据 ...
今天java的把数据导入excel表格遇到的坑
优快云新星计划JAVA赛道TOP5、优快云内容合伙人、JAVA领域优质创作者、资深JAVA开发深耕JAVA领域。
11-06 1833
这里显示的错误信息是是属性的问题，就是他属性不一致所导致的！！ 这里面的错误信息有两点，一个是你的属性没有写到符合要求，属性不一致，其实还有一点就是他的值是null的，而他excel表格又不支持null的，所以会有这些错误，所以我们要在excel表格中添加数据的时候判断一下是否为空，当为空的时候我们来赋一个值 这样就可以了，现在就可以下载excel表格...
excel 读出的值为空 解决方案
libinlink的专栏
05-05 3028
明明看到Ecxel中有值，读出来的确是空值 null ，很奇怪吧。1。excel的连接字串中的扩展属性必须包含IMEX=1;2.修改注册表中的HKEY_LOCAL_MACHINE/SOFTWARE/Microsoft/Jet/4.0/Engines/Excel/TypeGuessRows的值为0。TypeGuessRows的系统默认值为8，表示系统从文件中的前8行数据中采样取得数据类型。如果前
Excel导入时数字文本无法识别的解决方案
weixin_30550081的博客
10-15 1009
在导入Excel时，会有一个非常有趣的现象，就是数字的识别问题，当Excel中的某一列同时存在纯文本列与纯数字列时，非常有可能出现文本能导入而数字无法导入或者数字能导入而文本无法导入，本人经过多次试验发现，主要在于Excel驱动的问题。 常规情况下，我们以如下方式操作Excel: string conn = " Provider = Microsoft.Jet.OLEDB.4.0 ;...
sqlserver2000中，excel表格中电话号码导入为null值的解决方案！
oraclemch的专栏
12-13 6256
【转载】在工作中，而且还是项目上线割接中碰到，结果电话号码数据全乱套了，后果很严重，幸好，在网上找到了这篇文章，有了解决的指望，希望下周一客户能允许我在生产库解决掉这个问题。   在Excel中，我们时常会碰到这样的字段(最常见的就是电话号码)，即有纯数字的(如没有带区号的电话号码)，又有数字和其它字符混合 (如“区号-电话号码”)的数据，在导入SQLSer
使用Python将Excel数据导入数据库的完整指南
例如，可以通过`xl.readxl()`函数加载一个Excel文件，然后使用`.ws()`方法访问特定的工作表，再通过`.col()`或`.row()`获取某一列或某一行的数据，从而实现对原始数据的结构化解析。 另一方面，`mysql.connector`是...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值