惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

WordPress大学
WordPress大学
Stack Overflow Blog
Stack Overflow Blog
Latest news
Latest news
T
The Blog of Author Tim Ferriss
D
DataBreaches.Net
C
Check Point Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Security Latest
Security Latest
宝玉的分享
宝玉的分享
S
Schneier on Security
Blog — PlanetScale
Blog — PlanetScale
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
Cisco Talos Blog
Cisco Talos Blog
MyScale Blog
MyScale Blog
B
Blog RSS Feed
N
Netflix TechBlog - Medium
P
Privacy & Cybersecurity Law Blog
L
LINUX DO - 热门话题
Apple Machine Learning Research
Apple Machine Learning Research
T
Tenable Blog
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
NISL@THU
NISL@THU
Google DeepMind News
Google DeepMind News
Hacker News: Ask HN
Hacker News: Ask HN
Schneier on Security
Schneier on Security
博客园 - Franky
cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
S
Secure Thoughts
T
Threat Research - Cisco Blogs
D
Docker
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
人人都是产品经理
人人都是产品经理
G
GRAHAM CLULEY
Application and Cybersecurity Blog
Application and Cybersecurity Blog
博客园 - 【当耐特】
PCI Perspectives
PCI Perspectives
GbyAI
GbyAI
酷 壳 – CoolShell
酷 壳 – CoolShell
Cyberwarzone
Cyberwarzone
V
Vulnerabilities – Threatpost
F
Fortinet All Blogs
罗磊的独立博客
Engineering at Meta
Engineering at Meta
Y
Y Combinator Blog
SecWiki News
SecWiki News
A
Arctic Wolf
小众软件
小众软件
T
Troy Hunt's Blog
博客园 - 三生石上(FineUI控件)
Know Your Adversary
Know Your Adversary

少数派

派早报:Google 发布 Fitbit Air 等 - 少数派 「新人报到」確認需求,再開始 - 少数派 从 SOLO 独立开发者社区,我看到了越来越多开发者开始做自己的产品 - 少数派 我怎么管理那些"不常做,但总会忘"的生活事项 - 少数派 人形机器人量产元年,数据才是具身智能的“生死线” - 少数派 BuhoLaunchpad 高度还原 Mac 启动台:开发历程与思考 - 少数派 五年陪伴依然不舍,DIY 换壳后让罗技 MX Master 3 继续服役 - 少数派 新玩意 240|少数派的编辑们最近买了啥? - 少数派 一日一技|为什么你应该关闭 iOS 的键盘声音 - 少数派 我做了个插件和 Skills,一键提取任何网站的设计规范 Design.md - 少数派 住在三四线城市的你,该开始录播客了 - 少数派 甘南秘境,大白高国 - 少数派 AI的审美:谁让把我变成川内倫子 - 少数派 返工怎能不烦恼,打工人片单总有一部是你的「嘴替」 - 少数派 为了让「上厕所」更健康,我做了一个小工具 - 少数派 AI + Skill,能够让生成的文章去除 AI 味吗? - 少数派 新玩意|韶音OpenDots ONE 耳夹式耳机 - 少数派 《美满》| 在每一个春天的晚上相爱(362) - 少数派 新玩意|优篮子 PS01 MagSnap 磁吸支架 - 少数派 自我整合手记 | 我开始早睡了:用稳定规则,为自由托底 - 少数派 用龙虾(OpenClaw)两个多月,我最深的12个体会 - 少数派 听歌时间到,12 张你可能错过的 2025 华语乐坛好专辑 - 少数派 承诺能追吗 - 少数派 macOS 26启动台没了? 我做了个不一样的App启动器 - Keboard - 少数派 《四海为家的人》| INTJ对话INTJ(361) - 少数派 你发过的那些黑历史,是时候一次清干净了 - 少数派 新玩意:安安静静玩,越玩越专注:计客密码机 - 少数派 iPad 用户首次体验 Android 平板:vivo Pad6 Pro - 少数派 数据逻辑强 - 少数派 极北行+ | 一路向北,探访日本至北之地 | 001 - 少数派 万字剖析:千问App深度体验报告(2026) - 少数派 在2026年,如何真正防止别人抄袭你的作品 - 少数派 怎么用 50 块搭个 AI 语音助手?我踩了 3 天坑 - 少数派 YeeroAI:让 AI 对话真正成为知识管理的一部分 - 少数派 爬泰山 - 少数派 「旅图显影」 App 更新:这次,我们补上了一点「手感」 - 少数派 假期出门太折磨?我的 23 条经验帮你规划惬意旅行 - 少数派 工作流会变吗 - 少数派 Claude Opus 4.6 怎么用最省钱?我测了 5 种方案 - 少数派 GPT Image 2 让图文并茂不再稀罕 - 少数派 用户侧出发——什么是AI,我要不要学习? - 少数派 找片、转存、整理、播放一条龙!让你的付费网盘值回票价 - 少数派 欢迎试用!日课一问2.0插件 - 少数派 自己做的MDeditor,原本想购买 Typora 试了两次支付不成功,干脆自己做一个 - 少数派 vibe coding了一个 3MB 的小工具,让 ~/Downloads 彻底告别混乱 - 少数派 因为受不了 Mac 的风扇策略,我做了一个风扇控制工具 - 少数派 别只怪模型 - 少数派 Warp 终端的 AI 功能怎么用?我测了一周的体验 - 少数派 AI 写代码老是出 bug?这 5 个配置我后悔没早知道 - 少数派 「新玩意」苹果出相机可能就这样:Sigma BF + 45mm F2.8 DG Contemporary - 少数派 一个面向2030年的AI操作系统是什么样子的:浅谈cola这款有灵魂的Agent - 少数派 别只看写代码 - 少数派 每天解决10个问题,还是一口气攻坚解决400个? - 少数派 AI 交易机器人怎么搭?我用 Claude 跑了一周实盘 - 少数派 Maptoposter Online:把你爱的城市画成艺术海报 - 少数派 Function Calling 怎么用?我测了 3 个模型发现差距真大 - 少数派 Legend Talk:我做了个 AI 圆桌,让 160 位思想家围着你的问题转 - 少数派 如何找到自己的蓝方?在小县城寻找压力测试 - 少数派 语音输入与软件接口|2026年聊AI时,我们都聊些什么(上) - 少数派 混动已经卖爆,纯电又来补刀——钛7闪充版简直“不讲武德” - 少数派 本月玩什么|朋友收藏、识质存在、沙罗周期 - 少数派 为什么要每天坚持输出? - 少数派 Claude API 挂了好几个小时,你的项目有备用方案吗? - 少数派 Function Calling 没你想的复杂——我用它做了个有点用的工具 - 少数派 登录系统立即播放视频或者图片音乐的软件 - 少数派 我为什么创建 FlipHTML5 下载工具 - 少数派 残局没电?多品牌外设电量统一管理软件EasyBluetooth已支持RTSS游戏内显示以及AIDA64 - 少数派 前往通义路的路 - 少数派 太好看了,媲美Sun的个人导航页,NAS部署星云门户 - 少数派 乌黑嘴唇“一键检测”上线了 - 少数派 派早报:Claude AI 接入多个创意软件生态、FILCO 生产方接手品牌等 - 少数派 【更新】BearCLI、Claude 连接器与 MCP 服务器 - 少数派 记了上千条流水,还是看不懂财务?我做了一个让 AI 读懂账本的工作台 - 少数派 MINI R56 升级原厂 Sport 模式 - 少数派 新玩意 | 一棵柠檬树(仿真版) - 少数派 Momenta的“物理AI”野望,需迈过“含摩量”这道关 - 少数派 网页直接投屏控制手机!NAS一键部署PandaScrcpy,流畅丝滑可远程。 - 少数派 众测|邀你一同探索随身 AI 硬件入口 YoooClaw C·ONE - 少数派 2050大会:分享时间是真诚 参会记 - 少数派 iPad 赋能电影创作:国内首部宣纸手绘长片《燃比娃》的幕后故事 - 少数派 AI的审美:我用 8 个大模型给 100 张旅行照片打分 - 少数派 普通人如何破圈?去参加一个本地协会 - 少数派 把极空间的图标全换了,主题DIY全攻略打造你的专属NAS桌面 - 少数派 电子便签墙,帮你实现便签自由 - 少数派 我如何用三个 CLI 工具取代文档创建需求 - 少数派 原来真的有人可以玩一辈子 - 少数派 社区速递 139 | 派友热议三月买了啥、复古单反尼康 Df 体验 - 少数派 06 作品的赏析与评价 - 少数派 TDS REVIEW|索尼 WF-1000XM6 降噪真无线耳机体验 - 少数派 35.98万起售的第二代腾势D9,我看重的不是堆料,而是不凑合 - 少数派 鼠须管 Squirrel 皮肤配置指北 - 少数派 从watch ultra2换到redmi watch6 - 少数派 派早报:阿里巴巴发布视频生成模型 HappyHorse 1.0 等 - 少数派 别迷信1M - 少数派 家人们天塌了!网盘“大封杀”,多个渠道多条路,NAS部署PanHub - 少数派 AI与人勾心斗角!NAS一键部署AI狼人杀,假日休闲必备。 - 少数派 电商必备!Comfyui工作流批量生图插件,一次生成12张!支持Nano banana pro模型 - 少数派 Comfyui工作流配置Gpt-image-2模型教程,0.03/张 - 少数派 OpenClaw第三方APi怎么配置?可使用Gpt-image-2模型 - 少数派 会员社区话题精选 Ep. 103 - 少数派
UTF-8 从入门到略懂 - 少数派
2018-04-19 · via 少数派

封面是从少数派首页 HTML 的一个截图。UTF-8 已经深入了互联网的各个角落。

无论是冲浪已久的老网民,还是资深老练的程序员,想必都听过了解过 UTF-8 这个名词——这玩意儿事实上是一种 Unicode字符集的编码,当然,如果你没有听说过,完全没有关系,因为这篇小文就是要讲清楚这些的是什么的。

从一开始

学习一个新的东西,首先要搞清楚它的名词概念,我们从上一段稍微做一个提取

  • 编码
  • Unicode
  • UTF-8

但是事实上还是不够的,所以我又加了几个

好了,名词都提取出来了,那我们下一步就是一步步地分析各个名词是什么意思

二进制

这里是百度百科的解释,挺官方的,就直接贴出来。

这里谈一点自己的理解,大家都知道十进制吧,二进制同理,只是「逢十进一」和「逢二进一」区别罢了。

那么为什么要特地弄出一个二进制呢?

是为了方便电路板的逻辑电路表示状态,对于一个逻辑电路来说,一个时刻只会有 3 2 个状态

  • 高电平
  • 低电平
  • 停电

所以说,如果使用二进制的话,对于数据传输来说会带来很大的方便——用 0,1 编码的话只需要高低电平就行了。

字节

同样的,这里分为两个信息源,一个是百度百科,一个是我的理解。

字节这个东西,说白了就是 8 个框,每个框放一个上面所说的二进制,如下图

框 0框 1框 2框 3框 4框 5框 6框 7
10101001

对于每个框,都可以放置 0 或者 1,然后计算一下大小——即 2^8 = 256,这个 256 ,即全部 0,1 组合的可能性。

那「字节」有什么用呢?

这玩意儿是你们常常所说的「内存」的最小单元,我们常常说内存有多少多少 G,事实上是指「多少 G 个字节」,所以这里再列一下单位公式

单位多大
K2^10
M2^20
G2^30
T2^40
P2^50

而在我们一般把字节缩写为 B,所以 KB 就是 1024 个字节,其他以此类推。

ASCII 编码

说了这么多,先接触一下最古老的但是十分有用的编码——ASCII 吧。

直接贴一下百度百科,再讲讲自己的见解。

编码,说白了就是「用数字映射字符」,即 1 代表了什么字符,2 代表了什么字符等等。而 ASCII 码,则是最简单的字符编码,没有之一。这个编码只有 128 个映射,值域覆盖了常用的「控制字符」、「数字」、「字母」和「标点符号」。

可以参考一下下面的

字符串

好了好了,基础的东西要打完了,下面讲一点和主题有点关系的东西。

所谓字符串,就是上面所说的字节的数组,并以 \0 结尾的一个东西。所谓 \0 就是一个字节,这个字节里的所有「框」都是 0,或者说,就是 ASCII 编码的第一个字符 NULL,那么 \0 可以起到什么作用呢?「字符串边界警示」——就是告诉程序「这个字符串已经到头了,别再继续读下去了!」。

举个例子

字节字节字节字节字节字节
ABCDE\0

这是一个 6 个字节的字符串,以 \0 结尾。

编码

之前已经在 ASCII 编码描述过了,即「用数字映射字符」的一个概念。这里就不多累述了。

Unicode

Unicode(中文:万国码、国际码、统一码、单一码)是计算机科学领域里的一项业界标准。它对世界上大部分的文字系统进行了整理、编码,使得电脑可以用更为简单的方式来呈现和处理文字。——摘自 Unicode-Wikipedia

即一个字符集标准,而 UTF-8 则是这个标准的一个实现。

UTF-8

终于进入了主题。下面详细的解释一下 UTF-8 的编码规则。

首先 UTF-8 是变长的,也就是说,它可以是 1 个字节(向下兼容 ASCII,向下兼容十分重要,有多重要?可以参考 Windows 为了兼容性,牺牲了便捷性,带来了庞大体积),也可以是多个字节(反正小于等于 8 个字节),常用的例如汉字,则大部分被编码到了 3 字节范围内,2 字节多是拉丁语,更多则可能是 emoji(4 字节) 等等。

那么既然它是变长的,那应该怎么知道它是几个字节呢?方法如下所述

  • if 单字节: 首位为 0
  • if n 字节: 首位为 1*n+0,其他位的前导为 10

具体看表,更多字节以此类推

字节数第一个字节第二个字节第三个字节第四个字节
10xxxxxxx
2110xxxxx10xxxxxx
31110xxxx10xxxxxx10xxxxxx
411110xxx10xxxxxx10xxxxxx10xxxxxx

验证

编码的问题解决了,那么怎么具体上机验证呢?

所以这里写了一个小程序,编译之后可以直接打印出 1-4 个字节的 UTF-8 编码。如果需要保存到文件,可以用 IO 重定向去实现(这里不多累述了)。

地址在这

喜欢的话可以给个 Star 鼓励一下啦! :-)

最后

祝大家研究愉快!

;-)