如何处理CSV中肉眼不可见的制表符

原创

已于 2022-03-24 18:50:28 修改 · 2.4k 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#python

于 2022-03-24 18:49:25 首次发布

博客介绍了处理CSV文件中肉眼不可见的制表符问题，提供了三种解决方案：1) 在Excel中通过分列和Clean函数；2) 使用PowerQuery进行数据清洗；3) 利用Python读取和处理文件。内容包括具体步骤和操作指南。

问题讲解：

处理web端下载csv文件时，经常会遇到肉眼不可见的制表符。导致G1+H1=#VALUE！，或者无法使用vlookup的情况。下面列举几种常用解决方法（涉及到Excel、PowerQuery、Python）。

Excel

1.使用分列

在对应列拆入一列，然后使用分列功能，再删除空白列。

2.使用clean函数

a.使用clean函数，按照数据量填充

b.复制clean函数的数据范围，粘贴为值

PowerQuery

把表格数据导入到PowerQuery

具体参考：在PowerQuery中实现列的拆分-百度经验 (baidu.com)

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Kenneth_lau01

关注关注

0
点赞
踩
4

收藏

觉得还不错? 一键收藏
2
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

C语言读取写入CSV文件 [二]进阶篇——写入CSV文件

永远是萌新的阿岩

02-06

2456

本系列介绍了如何利用C语言读取写入CSV文件，本篇是系列的第二篇，介绍了利用C语言写入CSV文件的进阶内容，包括包裹的概念、特殊符号的处理、如何处理开头和结尾处的空格、分隔符可能存在的问题以及最后介绍了可以使用软件进行配置

【Pandas】批量处理去除 CSV 的千分位符

十二翼堕落天使

02-18

1332

问题 CSV 文件中的金额格式加了千分位符号（如 1,000.00），表字段类型为数字格式，DataX 无法正常导入数据库。其中 CSV 文件为流水数据，所以需要保证导入的时序性，文件格式如下： csv-old/ |-- abc2021-11-18.csv |-- abc2021-11-19.csv |-- abc2021-11-30.csv # ... |-- abc2022-02-17.csv 其中 CSV 第 8、9、10 列为金额，需要移除千分位符。解决 import os import re

2 条评论您还未登录，请先登录后发表或查看评论

分隔符的使用

LiuRuiaby35646的博客

06-22

1660

制表符分隔值 (TSV) 文件格式表示用纯文本格式的制表符分隔的数据。该文件格式类似于 CSV，用于以结构化方式组织数据，以便在不同应用程序之间导入和导出。该格式主要用于电子表格应用程序和数据库中的数据导入/导出和交换。TSV 文件中的每条记录都包含在单行文本文件中，其中每个字段值由制表符分隔。TSV 文件格式的媒体类型是文本/制表符分隔值。

Python实现csv文件中特定字符串的删除

热门推荐

chang_rj的博客

12-18

1万+

file1 = open('labels.csv', 'r').readlines() fileout = open('labels1.csv', 'w') for line in file1: fileout.write(line.replace('"trafficLight"', '')) fileout.close() 由labels.csv生成labels1.csv，扩展类别...

csv文件包含不可读字节

chongqunmo9462的博客

08-13

337

今天遇到一个奇怪的问题，将一个window下的csv文件拷贝到Ubuntu下面，采用Java FileReader读取该文件，发现第一行始终包含空白字符。经过搜索，发现这个是由于csv采用的是window系统默认的utf8-bom格式，而非通用的utf8格式。在notepad++里面将...

【编程学习】每天进步一点点，编程学习之路：一款表格数据处理软件 - CSV表格数据处理器v1.0.1

caviar126的博客

03-13

640

【编程学习】每天进步一点点，编程学习之路：一款表格数据处理软件 - CSV表格数据处理器v1.0.1 写在前面1：软件编写缘由在读研实习期间，因为公司时常有处理大量表格数据的需求，加上自己有一些Python编程基础，就开始着手对常用的的一些表格数据处理需求进行了分析，赶在实习结束前，加班加点地写完了该软件。除了留给企业使用之外，软件写完了直到现在一直没有发布到网上能够为他人所使用。花费大量的精力和时间做出来的东西，没有人去使用，其实是一种时间和精力上的浪费。现将软件发在网上，以供他人使用，如果该软件能

CSV 数字转化文本

dz45693的专栏

07-31

1万+

最近遇到一个Bug问题，csv 数值转化为文本的问题。数据如下：运行效果如下：大家看到“01720” 前面的0 没有显示出来。怎样才能显示出来了，这里的csv文件格式也没有什么问题。后来找到解决方法就是加制表符\t. 可是怎么加了？在csv文件直接加\t肯定不行的。于是借助C#来做一个测试运行效果来我们来看看生成的CSV文件内容大家看到逗号前面...

从零掌握PowerShell命令：CSV文件批量导入AD用户全流程实战指南

在现代企业IT环境中，每天可能有数十甚至上百名新员工入职，而传统手动创建AD账户的方式早已无法满足高效、准确的运维需求。想象一下这样的场景：HR刚刚发送了一封包含500名新员工信息的CSV文件，你坐在电脑前，手指...

read.table("GSE263660_All.count.txt", header = TRUE, sep = "\t", : 'row.names'里不能有重复的名称但我检查过后并没有重复的名称

最新发布

07-18

数据文件中存在隐藏的重复行名（例如，空格、制表符等不可见字符导致的行名差异） 2. 文件编码问题导致某些字符读取后看起来相同但实际上不同（如全角/半角字符、不可见字符等） 3. 文件中的空行或注释行被当作...

解决python中出现的不可见字符问题，OSError: [Errno 22] Invalid argument: ‘\u202a**.csv‘

囧疼她的博客

11-26

5853

解决python中出现的不可见字符问题，OSError: [Errno 22] Invalid argument: '\u202a**.csv'问题描述不可见控制字符解决方法问题描述今天遇到一个坑，读取文件时，在用到open函数时，始终报OSError: [Errno 22] Invalid argument:的错误，意思说文件路径错误。 pandas读取csv文件时，pandas自带open()运行报错误OSError: [Errno 22] Invalid argument: '\u202a**.c

MySql导入CSV文件或制表符分割的文件

12-16

有时候我们会有这样的需求，需要把一些数据从别的库导入到另外的一个库中，而这些数据是用CSV文件存放的。对于MySql数据库我们有两种方式：一种是用命令来导入，另一种是很多的MySql客户端（如Heidisql、Sequel pro）为我们提供了这样的功能。下面我们来分别介绍着两种导入方式。 MySql命令导入准备工作：先建一个表：建表语句如下： CREATE TABLE `city_china` ( `id` INT(11) NOT NULL AUTO_INCREMENT COMMENT '主键', `ename` VARCHAR(12) NULL DEFAULT NULL CO

excel转csv或者txt（以制表符分隔）

01-25

1、为java编写，已绑定jre，所以包体相对比较大，亦无须额外安装java运行环境。 2、此安装文件为exe4j打包，不包含任何病毒或木马脚本。 3、安装成功后首次打开程序将生成mylogs/log.log文件，在其中找到 preference.properties 文件路径，修改它可做一些基本的偏好设置，下次重新打开程序生效。比如修改readExcelStartLine此值表示从excel中的第几行开始转换，从0开始，默认为1。 4、本程序基于poi用户模式编写，故不可转换大型文件，否则有内存溢出的问题。 5、本程序一般适合游戏策划excel数值表转换。 6、有任何疑问可添加微信：zkpursuit 咨询。

使用csvreader写csv文件添加制表符

hero_hope的博客

10-08

1543

问题使用csvreader写csv文件时,会使用writeRecord(String[] strArr)方法,但是字符串加制表符:"\t",却始终写不出来制表符,长数字会导致科学计数法解决办法使用writeRecord(String[] strArr, Boolean boolean)方法,布尔值为true ...

可以解决csv行中有空字符不能读取reader的问题

aimimi2015的博客

06-11

3039

可以解决csv行中有空字符不能读取reader的问题  csvfile = open('test.csv', 'rb')     data = csvfile.read()      csvfile.close()        fo = open('test2.csv', 'wb')         fo.write(data.replace('\x00', ''))           f

Python爬虫数据清洗：去除CSV中的【‘‘】

ytpas68453的博客

04-26

1733

CSV，即逗号分隔值（Comma-Separated Values），是一种简单的文件格式，用于存储表格数据，如电子表格或数据库。当Python爬虫从网站上抓取数据并保存到CSV文件中时，有时会出现一些不需要的字符，如【''】。在爬虫抓取数据并保存到CSV文件的过程中，有时会因为网页源代码中的某些特定格式或编码问题，导致CSV文件中出现【''】这样的字符。通过上述方法，我们可以有效地去除CSV文件中的【''】字符，得到干净、整洁的数据，为后续的数据分析和可视化工作打下基础。在读取CSV文件时，可以使用。

python csv文件数据根据逗号分隔_使用Python解析CSV /制表符分隔的txt文件

weixin_39568133的博客

11-30

458

I currently have a CSV file which, when opened in Excel, has a total of 5 columns. Only columns A and C are of any significance to me and the data in the remaining columns is irrelevant.Starting on li...

超大csv文件快速替换特定字符

smilealvin的博客

04-15

1574

处理超大CSV文件时，文件中有空字符NULL如\x00这样的，导致读取失败。这时候使用命令 sed -i 's/\x00//g' <你的csv文件名> 或者 sed 's/\x00//g' <<你的csv文件名>> > 新文件名就能除去其中的\x00，sed是流编辑器，效率高，不占内存，如果此时你用其他代码去处理文件，如果文件高达20GB，那么电...

CSV文件格式详解

喻师傅的学习笔记

05-26

5976

CSV文件格式详解

python读取csv文件去除制表符

10-09

在Python中，你可以使用pandas库方便地处理CSV文件，包括移除其中的制表符。Pandas提供了一个`read_csv()`函数用于读取CSV文件，并且可以指定分隔符，例如将制表符替换为空格或其他字符。下面是一个示例，展示如何读取并去除非标准分隔符（如制表符）： ```python import pandas as pd # 使用pandas读取CSV文件 data = pd.read_csv('your_file.csv', sep='\t', engine='python') # 制表符'\t'作为分隔符 # 如果需要，可以在读取后立即移除制表符 data['column_name'] = data['column_name'].str.replace('\t', '') # 替换特定列中的制表符 # 或者在整个数据框中全局替换 data = data.apply(lambda x: x.str.replace('\t', '') if isinstance(x, str) else x) # 将处理后的数据保存回CSV data.to_csv('processed_file.csv', sep=',', index=False)