C++ 读取UNICODE编码格式文本文件

何叶

于 2018-05-16 23:23:47 发布

阅读量4.9k

点赞数

CC 4.0 BY-SA版权

分类专栏： C++

本文链接：https://blog.youkuaiyun.com/hxfhq1314/article/details/80344669

C++ 专栏收录该内容

4 篇文章

订阅专栏

本文介绍了一个从宽字符（wchar_t）转换到窄字符（char）的实用函数ws2s，并展示了如何使用该函数处理二进制文件中的宽字符数据。通过设置系统本地环境为中文环境，确保了宽字符到多字节字符的正确转换。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

 std::string ws2s(const std::wstring& ws)
 {
     std::string curLocale = setlocale(LC_ALL, NULL); // curLocale = "C";
     setlocale(LC_ALL, "chs");
     const wchar_t* _Source = ws.c_str();
     size_t _Dsize = 2 * ws.size() + 1;
     char *_Dest = new char[_Dsize];
     memset(_Dest, 0, _Dsize);
     wcstombs(_Dest, _Source, _Dsize);
     std::string result = _Dest;
     delete[]_Dest;
     setlocale(LC_ALL, curLocale.c_str());
     return result;
 }

bool read(const char* fileName)
{

    ifstream fin;
    fin.open(fileName, ios::binary);
    if(!fin.is_open())
    {
        cout << "open data file failed." << endl; 
        return false;
    }

    size_t index = 2;
    wstring wstrLine;
    int lineIndex = 0;
    while (!fin.eof())
    {
        fin.seekg(index, ios::beg);
        wchar_t wch;
        fin.read((char *)(&wch), 2);
        if (wch == 0x000D) // 判断回车
        {
            string strLineAnsi = ws2s(wstrLine);                    
            wstrLine.erase(0, wstrLine.size() + 1);
            lineIndex++;
            index += 4; // 跳过回车符和行开头符
        }
        else
        {
            wstrLine.append(1, wch);
            index += 2;
        }
    }
    return true;
}