这篇文章给大家分享的是“UTF-8和UTF-16分别是什么意思，各有什么优缺点”，对大家学习和理解有一定的参考价值和帮助，有这方面学习需要的朋友，接下来就跟随小编一起学习一下吧。

概念

先说一说基本的概念，这包括什么是Unicode，什么是UTF-8，什么是UTF-16。

Unicode，UTF-8，UTF-16完整的说明请参考Wiki（Unicode，UTF-8，UTF-16）。用比较简单的话来说就是，Unicode定义了所有可以用来表示字符的数值集合（称之为Code Point）。UTF-8和UTF-16等UTF标准定义了这些数值和字符的映射关系。

UTF-8

优势

UTF-8最大的优势是，没有字节序的概念。所以特别适合用于字符串的网络数据传输，不用考虑大小端问题。对于非英文网页（对于我们而言，简单说东亚文字网页），能够避免各种乱码问题。

劣势

本地字符串处理过程中，如果使用UTF-8，对于英文字符的处理没有太大的问题。一个char变量表示一个英文字符。但是对于中文等远东字符集来说，就比较坑爹了。char str[]; str[0]并不能完整表示一个汉字。UTF-8编码格式下，一个汉字需要至少3个char才能表示。这对于通过下标来操作字符串的操作来说是非常痛苦的一件事情。

另外，一个汉字需要至少3个char来表示，也让汉字在网络传输上存在劣势，占用太多流量（但是如果启用了压缩，实际上差别并不大。并且现在很多中文网站都默认将编码从GBK改成了UTF-8）。

UTF-16

优势

UTF-16 LE是windows上默认的Unicode编码方式，使用wchar_t表示。所有wchar_t *类型的字符串(包括硬编码在.h/.cpp里的字符串字面值)，VC都自动采用UTF-16的编码(字符串字面值，literal string，存在很多坑。特别是char *类型的字面值，最终内存使用何种编码方式完全取决于当前文件的编码方式。也就是说当前文件如果是GBK编码的，那么文件里char * str = "中午"，str指向的内存字符串二进制是使用GBK编码的。如果文件编码是UTF-8，那么内存是使用UTF-8编码。所以为什么一直要强调字符串应该放在资源文件里，而不是硬编码在.h/.cpp文件里！)。

UTF-16另外一个优势就是常用字符都可以使用两个个字节表示，也就是一个wchar_t(这里指Windows平台)。所以，在Windows平台上，特别适合使用wchar_t来作为字符串的存储基类型。一个wchar_t表示一个字符。操作使用非常方便。

劣势

没有统一的表示UTF-16编码的字符类型。C++98/03里对wchar_t的定义是非常宽泛的。这导致在Windows平台上，wchar_t是2字节的；在Unix-like系统上是4字节的。代码移植上，可能会遇到挑战(我没移植过，所以不确定会有什么难度，以及难度有多大)。

即使最新的C++11里已经定义除了char16_t表示UTF-16，MS的VS2013还不支持char16_t。所以目前使用char16_t还不具移植性。

据我了解，UTF-16编码和GBK编码相比，还存在一个排序的劣势。也就是说，如果要按照汉语拼音的字母顺序对汉字进行排序，GBK会得到正确的结果，而UTF-16就不行(暂时我还没这种需求，所以我没验证过，不过好像我马上就要与到这种需求了，到时候我再验证下)。

UTF-16编码字符串的网络传输，要考虑大小端的问题。另外网络传输中如果一个字节信息丢失，剩下的字符串都无法正确解析。统统乱码。

另外，UTF-16并不是定长类型。所以还是存在生僻字使用4个字节编码而不是2个字节（但是Windows有例外。在Windows（NT内核）平台，从MSDN的各种表述来看，似乎一个wchar_t就是一个字符。更多关于Windows平台字符编码的问题参考知乎回答和相关评论）。

UTF-32

优势

这个优势就明显了，所有字符都是4字节，fix-length。一个wchar_t(Unix-like系统上)表示一个字符。

劣势

对于以英文为主的字符串来说，空间消耗大。

面临和上面UTF-16一样的问题。一致性，排序，网络传输，数据丢失后无法恢复。char32_t VS2013还不支持（甚至VS 14 CPT也没打算支持）。

总结

UTF-8最适合用来作为字符串网络传输的编码格式。UTF-16最适合当作本地字符串编码格式。如果定义好了网络传输协议，那么UTF-16也非常合适当作网络字符串传输的编码格式，特别是中文等远东地区字符集。比起UTF-8来说，节省一点点流量。UTF-32没什么特殊癖好或者需求的话，暂时还用不上。

我个人觉得最佳实践应该是：

Linux上使用char，采用UTF-8编码。

网络传输使用UTF-8编码。

Windows上使用wchar_t / char16_t，采用UTF-16编码。将收到的网络数据统一从UTF-8转码到UTF-16。在Windows上应该铭记没有char / std::string这种类型的字符/字符串，只有wchar_t / char16_t / std::wstring / std::u16string。

“UTF-8和UTF-16分别是什么意思，各有什么优缺点”的内容就介绍到这里了，感谢大家的阅读。如果想了解更多行业技术相关的知识可以关注群英网络网站，小编每天都会为大家更新不同的知识。

免责声明：本站发布的内容（图片、视频和文字）以原创、转载和分享为主，文章观点不代表本网站立场，如果涉及侵权请联系站长邮箱：mmqy2019@163.com进行举报，并提供相关证据，查实之后，将立刻删除涉嫌侵权内容。

猜你喜欢

• Linux进程分类有几种，特点和属性是什么

  linux中的进程一般分为“交互进程”、“批处理进程”、“监控进程”三类。交互进程是由一个Shell启动的进程；交互进程既可以在前台运行，也可以在后台运行。批处理进程和终端没有联系，是一个进程序列。监控进程也称守护进程，是一个在后台运行且不受任何终端控制的特殊进程，用于执行特定的系统任务。

• linux立即关机命令有哪些？区别在哪?

  linux立即关机命令有哪些？在Linux中，想要进行立即关机的操作可以使用shutdown、halt、poweroff 等命令，但是它们在使用上还是有一定的区别的，下面小编就给大家来简单的介绍一下linux中这几种立即关机命令，大家在使用时要注意。

• Linux下运行C程序命令的方法是什么

  linux运行c程序命令的方法：首先打开kali linux的终端，用vim工具打开文件并编写代码；然后输入【gcc test.cgcc】进行编译；最后再运行【test.out】在终端中输入【./test.out】。

• ssh服务常见应用有哪些，怎么实现的

  今天和大家介绍ssh的几个应用，常见的应用有使用ssh连接远程的服务器、使用sftp进行文件的传输、通过ssh进行异地备份等。

• Linux中文件的切分与合并方法是什么，怎么做

  linux下文件分割可以通过split命令来实现，可以将一个大文件拆分成指定大小的多个文件，并且拆分速度非常的快，可以指定按行数分割和安大小