windows 记事本utf8编码BOM头问题

最新推荐文章于 2025-03-19 20:06:41 发布

chjex02262

最新推荐文章于 2025-03-19 20:06:41 发布

阅读量1.3k

点赞数 1

原文链接：https://my.oschina.net/u/257448/blog/1550394

版权

windows记事本另存为utf-8编码会在文件开头加上EF BB BF三个字节.即BOM

我在linux下从文本文件读取utf8转为GBK时,发现第一行转换永远错误,从第二行开始则全部成功.

所以希望如果不确定文本文件是否为windows记事本编辑,需要在程序中加上判断文件头三个字节的逻辑,避免bug.

如果需要编辑utf8编码的文件,建议使用其他软件.

转载于:https://my.oschina.net/u/257448/blog/1550394

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

chjex02262

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

关于utf-8的BOM问题

ChasingdreamLY的博客

07-13

2202

1. 什么是BOM头在utf-8编码文件中BOM在文件头部，占用三个字节，用来标识该文件属于utf-8编码，现在已经有很多软件识别BOM头，但还是有些不能识别BOM头，比如PHP就不能识别BOM头，这也就是用记事本编辑utf-8编码的PHP文件后，就会报错的原因。 2. 包含BOM头文件的产生在windows环境下，用记事本打开任何一个文本文件，另存为utf-8格式后，这样文件就自...

Windows中notepad以UTF-8编码保存文件时实际上用的是UTF-8+BOM编码方式

henter的专栏

03-20

1万+

通过实验发现Windows中notepad以UTF-8编码保存文件时实际上用的是UTF-8+BOM编码方式。

参与评论您还未登录，请先登录后发表或查看评论

Windows记事本UTF-8编码异常

http://lioil.win

08-09

5120

简书：优快云博客: GitHub博客: http://lioil.win/2016/04/10/Windows-Notepad.html Coding博客: http://c.lioil.win/2016/04/10/Windows-Notepad.html2016/04/10 今天真是气煞我也，这个Windows10的破记事本编辑器浪费我太多时间，亏我还是Win10脑残粉……原本只想快

ANSI、UTF-8带BOM及UTF-8无BOM的三种不同编码格式

最新发布

BabyFish13

03-19

1493

默认为 ANSI，记事本程序另存为处，可以设置其他编码格式；：默认为 UTF-8ANSI 编码表示英文字符时用一个字节，表示中文用两个或四个字节 —— 这带来了存储空间的减少，但却带来的格式的不统一和混乱。ANSI是一种字符代码，为使计算机支持更多语言，通常使用 0x00~0x79 范围的 1 个字节来表示 1 个英文字符。超出此范围的使用 0x80~0xFFFF来编码，即扩展的 ASCII 编码。为使计算机支持更多语言，通常使用 0x80~0xFFFF范围的 2 个字节来表示 1 个字符。

记事本编辑产生的BOM头

Mamba

03-24

2589

用记事本编辑了一个插件的php文件，结果微信公众平台里面token验证失败一直报错，折腾一晚上，到最后才知道由于用记事本打开编辑，文件袋BOM，导致token验证失败。从此坚决再也不碰记事本！！ Windows下自带的记事本致命缺陷：千万不要使用Windows自带的记事本编辑任何文本文件。原因是Microsoft开发记事本的团队使用了一个非常弱智的行为来保存UTF-8编码的文件，他们自作聪明

前端面试之Bom

mai0824的博客

03-21

573

什么是BOM？ 1.什么是BOM？ BOM是用来判断文本文件是哪一种Unicode编码的标记，其本身是一个Unicode字符（"\uFEFF"），位于文本文件头部。在不同的Unicode编码中，对应的bom的二进制字节如下： Bytes Encoding FE FF UTF16BE FF FE UTF16LE EF BB BF UTF8 所以我们可以根据文件头部的几个字节和上面的表格对应来判断该文件是哪种编码形式。 2. 如何查看你文件的BOM字符？ BOM头在记事本中是看不到的以UTF8为例，新建

被微软的UTF-8 BOM编码坑了

不骄不躁，磨砥刻厉

03-28

4356

一、问题描述今天用git拉去代码时发现有的文件会出现乱码，但同事拉取下来却没有出现问题。二、错误原因分析在这件事上，我和同事的唯一区别就是所用的操作系统不同，我用的是mac，他用的是window。同一个文件在不同操作系统的表现不同，很有可能是采用了window支持但mac不支持的编码格式。紧接着，我查看了出问题的文件的编码格式，果不其然，它并不是我们平常使用的UTF-8，而...

Python处理Windows记事本utf8编码文件要注意的坑

Python小屋

04-02

1162

封面图片：《Python程序设计基础（第2版）》，ISBN：9787302490562，董付国，清华大学出版社图书详情：配套资源：用书教师可以免费获取教学大纲、教案、课件、源码、习题答...

什么是UTF-8 BOM头

qq_39488878的博客

11-26

949

BOM是什么 Unicode的学名是"Universal Multiple-Octet Coded Character Set"，简称为UCS。UCS可以看作是"Unicode Character Set"的缩写。在UCS 编码中有一个叫做 "Zero Width No-Break Space"，中文译名作“零宽无间断间隔”的字符，它的编码是 FEFF。而 FFFE 在 UCS 中是不存在的字符，所以不应该出现在实际传输中。UCS 规范建议我们在传输字节流前，先传输字符 "Zero Width No-Br

解决IDEA不支持带BOM的UTF-8编码文件，使支持

05-08

压缩包内包含 ecj-4.6.2.jar 和 Util.class两个文件使用说明： 1. 如果你的IDEA是2017.2.2版本，那么直接把ecj-4.6.2.jar放到你的IDEA安装目录下lib文件夹中替换原文件即可 2. 如果你是其他版本的IDEA，那么用压缩...

php使用fopen创建utf8编码文件的方法

10-25

UTF-8编码的文本通常不包含BOM，但在某些环境中，特别是Windows系统的文本编辑器中，有时会添加BOM作为编码标记。因此，在使用fopen创建文件时，建议不要添加BOM，或者在写入文件之前明确排除BOM。举例来说，可以...

windows文本文件 utf-8 无bom格式编码引发的惨案(maven resource 替换失败)...mark

njitluoluo的专栏

12-10

1369

windows文本文件 utf-8 编码格式分为2种。utf-8 和 utf-8 bom 。今天java 项目中，maven resource 无论如何 config.properties文件某个属性值替换不掉。。。试了N遍发现有个curse ，总是处于第一行的配置项替换不了。。。 So。。开始怀疑是文件编码了，于是，新建了文本文件 (windows自带notepad)，

记事本等微软的文本编辑工具自动加BOM导致HTML异常

u012737225的专栏

05-27

609

直接影响： HTML解析不正确，无法正常解析解决办法：使用everedit去掉BOM

windows文本文件的BOM标记，编码

huangbinvip的专栏

11-01

1479

如果没有这个标记，就会使用默认的系统环境编码（本地码）来解释这个文本文件，所以使用no bom（没有这个字节序标记）方式的文件，在不同的电脑（比如中文版和德文版，或者韩文版等）打开后的显示内容可能是不一样的。这就是BOM（字节序标记），他会告诉打开该文本文件的编辑器，这是一个UTF-16（unicode）编码的文件，你需要使用该编码来解释后面的内容。所以，你的乱码就是因为你保存的文本文件的编码和打开的时候没有使用同一种方式去解释编码的原因导致的。文本文件有不同的编码格式,如何识别保存的文本文件的格式呢？

经验之谈(1)-----【utf-8的bom头】

qq_28374415的博客

03-10

361

问题：cocos creater2.4.3升级2.4.4时遇到，无法将json挂载到属性面板上原因：后来查到是该json含有bom 解决：找个其他软件转换一下，去掉bom(比如sublime)

Windows 文本格式BOM头问题

非余

11-03

335

windows环境下遇见的文本BUG

UTF-8与UTF-8 BOM

LegendaryHsl的博客

12-13

1万+

在我们通常使用的windows系统中，我发现了一个有趣的现象。我新建一个空的文本文档，点击文件-另存为-编码选择UTF-8，然后保存。此时这个文件明明是空的，却占了3字节大小。原因在于：此时保存的编码方式自动会变为UTF-8 BOM 一、一个汉字在不同的编码方式中占多少字节？ 1.在UTF-8中，一个汉字占3个字节（一个字符占一个字节） 2.在ASCII码中，一个汉字占2个字节（一个字符占一

【转】刨根究底字符编码之十六——Windows记事本的诡异怪事：微软为什么跟联通有仇？

sinolover的专栏

11-18

444

1. 当用一个软件(比如Windows记事本或Notepad++)打开一个文本文件时，它要做的第一件事是确定这个文本文件究竟是使用哪种编码方式保存的，以便于该软件对其正确解码，否则将显示为乱码。一般软件确定文本文件编码方式的方法有如下三种：检测文件头标识；提示用户手动选择；根据一定的规则自行推断。 2. 文件头标识一般指的是字节顺序标记BOM(Byte Order Mark)，位于文件的最开始。当打开一个文本文件时，就BOM而言，有如下几种情形： BOM为：EF BB BF ——表示编

详解windows记事本的4种编码方式