关于字符集和Unicode的相关知识[译]
作者：Joel Spolsky 发布时间：2010-03-13 14:17:00
每个程序员都绝对必须知道的关于字符集和Unicode的那点儿事（别找借口！）
Unicode与字符集
你曾经是否觉得HTML中的"Content-Type"标签充满神秘？虽然你知道这个东西必须出现在HTML中，但对于它到底干吗你可能一无所知。
你是否曾经收到过来自你保加利亚朋友的邮件，到处都是"???? ?????? ??? ????"?
我很失望，因为我发现许多软件开发人员到现在为止都还没有对字符集、编码、Unicode有一个清晰的认识，这是个事实。几年前，在测试FogBUGZ项目时，忽然想看看它能不能接收用日文写的电子邮件。这个世界上会有人用日文写电子邮件？我不知道。测试结果很糟糕。我仔细看了用来解析MIME (Multipurpose Internet Mail Extenisons)格式的邮件所用的ActiveX控件，发现了它在字符集上面做的蠢事。于是我们不得不重新写一段代码，先消除Active控件的错误，然后再完成正确的转换。类似的事情在我研究另一个商业库的时候同样发生了，这个库关于字符编码这部分的实现简直糟透了。我找到它的开发者，把存在问题的包指给他，他却表示对于此无能为力。像很多程序员一样，他只希望这个缺陷会被人们遗忘。
事实并非如他所愿。因为我发现，像PHP这么流行的网页开发工具，竟然在实现上也完全忽略了多种字符编码的存在（译者注：这篇文章写于2003年，现在的 PHP可能已经纠正了这个问题吧），盲目地只使用8个比特来表示字符，于是开发优秀的国际化的Web应用程序变成了一场梦。我想说，受够了。
我申明：在2003年，如果你是一个程序员，但你却对字符、字符集、编码和Unicode一无所知，那么你别让我抓到你。如果落在我手里，我会让你待在潜水艇里剥六个月的洋葱，我发誓。
另外，还有一件事：
在这篇文章里，我所讲的是每一个工作中的程序员都应该知道的知识。所有以为"纯文本 = ASCII码 = 一个字符就是8比特"的人不单单错了，而且错得离谱。如果你仍然坚持使用这种方式编写程序，那么你比一个不相信细菌的存在医生好不到哪里去。所以在你读完这篇文章以前，不要再写半行代码。
在我开始之前，必须说明白，如果你已经了解了国际化，可能你会觉得这篇文章过于简单。没错，我的的确确是想架一座最短的桥，让任何人都可以理解发生了什么事，懂得如何写出可以在非英文语言环境是正常工作的代码。还得指出，字符处理仅仅是软件国际化中的一小部分，但一口吃不成个胖子，今天我们只看什么是字符集。
0
投稿猜你喜欢
- 国外的空间和我们国内的空间使用的语言系统一般不一样，所以在网页程序上时如果处理不当很容易出现乱码，看了让人摸不着头脑。所以我们在编写程序时就
- Inotify地址：访问# -*- coding:utf-8 -*-import osimport pyinotifyfrom functi
前言最近有人在Twisted邮件列表中提出诸如"为任务紧急的人提供一份Twisted介绍"的需求。值得提前透露的是，这个- 1 作用注意此处Tensorflow版本是2.0+。由于本人是Pytorch用户，对Tensorflow不是很熟悉，在读到用tf写的代码时就
- 操作系统：Win7IDE：PyCharm4.5.3Django：1.10.1报错代码：request.session['key
- PyCharm 应该是大多数 python 开发者的首选 IDE，每天我们都在上面敲着熟悉的代码，写出一个又一个奇妙的功能。它是帮助用户在使
- 概述运行python脚本时通过命令行方式传入运行参数通常有以下两种自建方式：sys.argv - 简洁argparse - 丰富，可自定义下
- PHP mysqli_stmt_init() 函数初始化声明并返回 mysqli_stmt_prepare() 使用的对象：<?php
- 本文以实例分析了Python中asyncore模块的原理及用法，分享给大家供大家参考。具体分析如下：asyncore库是python的一个标
- 我们看一个现象：import pandas as pdtitanic = pd.read_csv('titanic_data.csv
- 一、前期准备(windows7+mysql-8.0.18-winx64)1.下载地址：https://dev.mysql.com/downl
- Golang 是一种简洁高效的编程语言，拥有强大的并发支持和丰富的标准库。在 Golang 中，计时器（timer）是一种常见的工具，用于定
- 一个简易的TCP端口扫描器，使用python3实现。需求：扫描目标网站开放哪些端口号，将所有开放的端口号输出。分析：使用socket连接，如
- 本文实例讲述了javascript将数字转换整数金额大写的方法。分享给大家供大家参考。具体实现方法如下：function digit_upp
- 两张表 组织架构表（Organise） 和 工资发放历史记录表 （WagePerMonthHis） 两张表通过 Organise.Item_
- 对想要在可视化的环境下制作复杂网页的专业网页制作者来说，Dreamweaver 已经渐渐在网页编辑工具市场中展露头角，成为专业人士
- 代码如下:<％ '隐藏并修改文件的最后修改时间的aspshell '原理:通过FSO可以修改文件的
- 最近做项目的时候有一个发布新闻的需求，新闻编辑的时候要求能发布带格式的文本内容和能展示支持图片。由于项目是用 Vue 开发的，所以找编辑器的
- 1 写在前面前期一篇文章Python TensorFlow深度学习回归代码：DNNRegressor详细介绍了基于TensorFlow&nb
- 先写一个批处理文件，给个例子。 代码如下:set rq=％date:~0,10％ exp system/system的
