Unicode编码

来源:互联网 发布:爱知流量计官网 编辑:程序博客网 时间:2024/06/10 20:30

接下来的一个任务是,使用STL读取ini文件。由于ini文件是Unicode编码,肯定和以前学习的文件流字节流有区别。

所以,首先需要了解Unicode编码的标准。

在windows vista中,每个Unicode都使用UTF-16编码,UTF的全称是Unicode Transformation Format(Unicode转换格式)。UTF-16将每个字符编码为2个字节,或者说16位。

UTF-8用1到6个字节编码Unicode字符, 是一种针对Unicode的可变长度字符编码

微软的C/C++编译器定义了一个内建的数据类型wchar_t, 表示一个16位的Unicode(即UTF-16)字符。

例如:

wchar_t c = L'A';    wchar_t szBuffer[100] = L"A String";

由于Unicode是双字节编码,如果我们按照二进制流,每次读2个字节,存储进一个宽字符中,就可以得到这个字符啦!:

#include "stdafx.h"#include<iostream>#include<fstream>#include<windows.h>#include<string>using namespace std;int _tmain(int argc, _TCHAR* argv[]){std::wstring  str = TEXT("附图牛牛");wcout.imbue(locale("", LC_CTYPE));wcout << str << std::endl;ifstream fin;fin.open(TEXT("C:\\Users\\admin\\Desktop\\Test.ini"), ios::binary);// 跳过unicode文本开头有两个字节0xFFFE(称作BOM,用于标识unicode编码)fin.seekg(2, ios::beg);while (!fin.eof()){wchar_t wch, wch2 = TEXT('=');fin.read((char *)(&wch), 2);//if (wch != wch2)//{wcout << wch;//}}return 0;}

发现,我可以顺利的读取到文件了。但是发生了一个问题:

copyright符号       ©         被认为到了EOF!!————这是为什么呢?

那就得先知道Unicode文本文件是如何判断EOF的了:  

查看定义:

bool __CLR_OR_THIS_CALL eof() const{// test if eofbit is set in stream statereturn ((int)rdstate() & (int)eofbit);}

查询https://www.cnblogs.com/baochuan/p/4040480.html:

发现    ©    的 Unicode编码是    \u00a9


后来发现并不是到达了EOF,而是读取到了©之后,wcout就再也无法往控制台输出东西了!

通过以下设置可以改变:

wcout.imbue(locale("", LC_ALL));wcout << wch;wcout.imbue(locale("", LC_CTYPE));
不过 © 仍然无法输出

原创粉丝点击