C++读取UNICODE,UTF-8，ANSI，及char wchar相互转换

最新推荐文章于 2024-08-16 07:05:01 发布

转载最新推荐文章于 2024-08-16 07:05:01 发布 · 4.3k 阅读

文章标签：

#c++ #css #null #string #测试

C++ 同时被 2 个专栏收录

47 篇文章

订阅专栏

MFC

34 篇文章

订阅专栏

本文详细介绍了Windows环境下不同文本编码的处理方法，特别是针对Unicode（包括UTF-8和UTF-16LE）编码的处理技巧。文章还提供了示例代码，展示了如何在C/C++中进行字符集之间的转换。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

根据msdn描述，如果参数为ccs=UNICODE，则 (注：这里的UNICODE指UTF-8和UTF-16LE等的统称)
如果文件没有BOM头，则编码为ANSI，相当于没有写css=
如果文件BOM为UTF-8，则编码为UTF-8，相当于写了css=UTF-8
如果文件BOM为UTF-16LE，则编码为UTF-16LE，相当于写了css=UTF-16LE

Windows自带的Notepad(记事本)程序，可以保存的编码格式有
ANSI
Unicode (注：这里的Unicode不是统称，而是特指Unicode little endian，即第一段中的UTF-16LE)
Unicode big endian (注：此编码在第一段中没有对应的ccs)
UTF-8

根据实际测试
代码中必须使用_wfopen/fgetws，如果使用fopen则fgets时报错
如果文件编码为ANSI，则需要使用setlocale( LC_CTYPE, "Chinese-simplified" )，如果是UNICODE(UTF-8、UTF-16LE)则不需要。（注：locale问题和本文无关，只是顺便提一下，免得写代码时不小心遗漏了）

总结：
1. 如果文件编码为UNICODE(UTF-8、UTF-16LE)，不使用ccs=UNICODE则取出来的格式不正确。（当然，可以以二进制方式"rb"打开，自己转化）
2. 如果文件编码为UNICODE(UTF-8、UTF-16LE)，但没有BOM头，则需要用css=UTF-8、css=UTF-16LE来指明编码，不可直接用ccs=UNICODE，否则就当成了ANSI编码。
3. 记事本中如果保存编码格式为Unicode big endian，则无法使用 ccs=UNICODE 这个功能
4. 如果用了ccs=UNICODE，则必须使用宽字符格式的相应函数，即便文件本身编码是ANSI格式
5. 如果文件本身编码是ANSI格式，别忘了setlocale

#include <windows.h>
#include <stdio.h>

//function: charTowchar
//purpose:char to WCHAR 、wchar_t、LPWSTR etc
void charTowchar(const char *chr, wchar_t *wchar, int size)
{   
	MultiByteToWideChar( CP_ACP, 0, chr,
        strlen(chr)+1, wchar, size/sizeof(wchar[0]) );
}

//function: wcharTochar
//purpose:WCHAR 、wchar_t、LPWSTR to char
void wcharTochar(const wchar_t *wchar, char *chr, int length)
{
    WideCharToMultiByte( CP_ACP, 0, wchar, -1,
        chr, length, NULL, NULL );
}

int main (void)
{
	char     chr[128];
	wchar_t  *wchar = L"陈鸿钦";
	

	//wchar_t to char
	wcharTochar(wchar, chr, sizeof(chr));
	printf("char is %s\n", chr);

	//char to wchar_t
	wchar = (wchar_t *)malloc(sizeof(wchar_t) * 64);
	charTowchar(chr, wchar, sizeof(wchar_t) * 64);
	
	wprintf_s(L"%s\n", wchar);//
	getchar();

	return 0;
}

另外、实现string与CString转换的还有

http://blog.youkuaiyun.com/yysdsyl/article/details/2463662