惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

N
News and Events Feed by Topic
爱范儿
爱范儿
Apple Machine Learning Research
Apple Machine Learning Research
博客园 - 叶小钗
Last Week in AI
Last Week in AI
博客园 - 三生石上(FineUI控件)
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
月光博客
月光博客
大猫的无限游戏
大猫的无限游戏
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
博客园 - Franky
人人都是产品经理
人人都是产品经理
The Cloudflare Blog
酷 壳 – CoolShell
酷 壳 – CoolShell
博客园 - 司徒正美
罗磊的独立博客
博客园 - 聂微东
T
Troy Hunt's Blog
美团技术团队
IT之家
IT之家
A
Arctic Wolf
腾讯CDC
雷峰网
雷峰网
SecWiki News
SecWiki News
博客园_首页
L
LINUX DO - 最新话题
Cloudbric
Cloudbric
量子位
N
News and Events Feed by Topic
小众软件
小众软件
C
CXSECURITY Database RSS Feed - CXSecurity.com
Cyberwarzone
Cyberwarzone
J
Java Code Geeks
V
V2EX
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
Latest news
Latest news
Webroot Blog
Webroot Blog
F
Fortinet All Blogs
P
Privacy International News Feed
NISL@THU
NISL@THU
Google Online Security Blog
Google Online Security Blog
WordPress大学
WordPress大学
PCI Perspectives
PCI Perspectives
GbyAI
GbyAI
宝玉的分享
宝玉的分享
阮一峰的网络日志
阮一峰的网络日志
S
Secure Thoughts
Simon Willison's Weblog
Simon Willison's Weblog
P
Palo Alto Networks Blog
V
Visual Studio Blog

暗无天日

读:AI Agent 安全日志——从可见性与隐私的两难说起 - 暗无天日 AI写作的语言指纹——如何让文字不那么像机器 - 暗无天日 读:50 条 Claude Code 技巧——一个工程经理的六个月使用心得 读:AI 辅助开发为什么让 E2E 测试更有价值 - 暗无天日 读:在Emacs中使用Claude Code(Spacemacs适配版) - 暗无天日 Claude Code 背后的工程哲学——读 Agent Harness Engineering 读:Agent Harness Engineering——AI 智能体不只是模型,还有套件 - 暗无天日 browser-harness:让 AI 直接接管你的浏览器 - 暗无天日 读:Security-First CI/CD —— DevSecOps 自动化实践指南 TIL: 数字小键盘的小数点陷阱与行内算术求值 - 暗无天日 读:Immutability 不是万能药,它是一种权衡 - 暗无天日 Conducty:给 Claude Code 加上项目记忆和并行执行能力 - 暗无天日 读 — GitHub Trending 里的 Claude Code 技能包 读 — Prompt Caching 省钱指南 TIL: Emacs 中那些跟鼠标配合的冷门快捷键 - 暗无天日 读:Anvil——把 Emacs 变成 AI 的工具服务器 读:Emacs 代码折叠终极指南 - 暗无天日 读:Clojure 搭车客指南 - 暗无天日 git推送失败后恢复仓库损坏的完整记录 - 暗无天日 多智能体系统的两个有效模式——以及对 Claude Code 用户的启示 - 暗无天日 用 Org Babel 写 Literate 博文:扩展执行 + 定制导出 proced:Emacs 内置的进程查看器 - 暗无天日 从 proced 定制中学到的 Elisp 模式 读:让 Emacs proced 在 macOS 上显示 CPU 和内存 异步编程的函数着色税 - 暗无天日 链式调用的代价:JavaScript 和 Clojure 的共同教训 - 暗无天日 hyperfine:命令行基准测试工具 - 暗无天日 管道中的变量去哪了?——子 shell 作用域陷阱 - 暗无天日 开源包装器的信任陷阱:四个危险信号 - 暗无天日 程序员愿意为 AI 写文档,却不愿为同事写 - 暗无天日 mktemp: Shell 脚本中临时文件的安全陷阱与最佳实践 - 暗无天日 WSL9x —— 在 Windows 9x 里跑 Linux 内核 6.19 用 ox.el 做你想做的事 —— org-export 高级编程指南 读:Hot-wiring the Lisp Machine —— 用纯 Elisp 构建零依赖的 Org 静态站点生成器 Elisp 性能优化的六个实战教训 - 暗无天日 fcitx5 下 Emacs 无法切换输入法的排查 - 暗无天日 ERT 测试交互命令的三种方式 - 暗无天日 SEM Assistant: 当 Elisp 守护进程遇上 LLM 用 dmsg 给 Elisp 加上结构化调试日志 用 org-habit 追踪非每日习惯 - 暗无天日 Clojure X-Men:当编程语言特性变成超能力 - 暗无天日 TIL: 用 diff-hl 在 fringe 中显示 git 变更 读:llm-test —— 用 LLM agent 驱动 Emacs 测试 TIL: AI 时代的橡皮鸭调试 - 暗无天日 fcitx 启动后键盘输入卡顿的排查 - 暗无天日 TIL: 早期网页的图片热区导航 - 暗无天日 读 Seeing the Whole System 用 Emacs 自动生成每周链接推荐 - 暗无天日 读:ASCII control characters in my terminal 读 What to learn - 暗无天日 Lisp 的括号之痛——一个愚人节玩笑揭开的老伤疤 - 暗无天日 一本书该"线性读"还是"并行读" - 暗无天日 读 How to Monetize a Blog:一篇伪装成变现指南的讽刺文 Python Mock 第三方依赖的四种策略 - 暗无天日 Emacs Lisp 热重载实用指南 - 暗无天日 Prot 的 Emacs 配置哲学 - 暗无天日 TIL: 从直播对谈中学到的三个 Emacs 技巧 - 暗无天日 TIL: 自动使用项目虚拟环境的 Python - 暗无天日 TIL: 让 Help buffer 自动获得焦点 一条命令让本地开发用上 HTTPS —— slim 工具介绍 用 fsck 检查和修复 Linux 文件系统 排查Linux进程"卡死"实战:从strace到gdb全流程 - 暗无天日 PostgreSQL 索引:从基础到你可能不知道的高级用法 - 暗无天日 用 .pdbrc 自定义 Python 调试器 ANSI 转义码的标准化现状 - 暗无天日 终端程序的潜规则 - 暗无天日 PARA Org-mode 测试配置 - 暗无天日 AI越强越辣鸡?控制论说这是必然的 - 暗无天日 AI 越强越需要你盯着——反馈循环实操指南 - 暗无天日 你的AI代理正在偷你的密钥——四种你没想到的泄露通道 - 暗无天日 LLM 在 DevOps 中的三种角色 - 暗无天日 写作风格的反建议 - 暗无天日 反驳本质复杂性——Dan Luu 论为什么《没有银弹》错了 - 暗无天日 文件充满了危险——Dan Luu 谈文件系统的可靠性陷阱 - 暗无天日 AI 时代的 PARA 方法:用 Org-mode 和 AI 打造个人知识管理系统 Linux 数据去重学习笔记 - 暗无天日 创建跨平台 ZIP 文件的隐藏陷阱:Extra Field - 暗无天日 X11 Forwarding 排障指南 - 暗无天日 IP欺骗端口扫描:当别人冒充你去扫描别人 - 暗无天日 Linux 输入栈全景解析:从硬件按键到屏幕响应 - 暗无天日 Unix 系统中那些被埋没的配置开关——以 FontConfig 为例 - 暗无天日 在Linux上限制儿童使用电脑 - 暗无天日 GIF不仅仅是一种图片格式——用GIF流做些奇怪的事 - 暗无天日 Leiningen 学习笔记:Clojure 项目构建与管理从入门到实战配置 - 暗无天日 Google SRE Book 读书笔记 - 暗无天日 yes 管道 head 发生了什么 - 暗无天日 为什么 nohup 在 crontab 中不起作用 Bash中的Indirection与Nameref - 暗无天日 Linux PAM 简介 - 暗无天日 从Linux ISO文件启动计算机 - 暗无天日 用 Bash 打造一个Screen Locker 用GitHub Actions自动构建EGO博客 - 暗无天日 blocking I/O 的作用 - 暗无天日 mobileog 手机端同步提示Error:2 No such file 的解决方法 回收 WSL2 VHDX 文件占用空间 使用 org-mode columnview 生成任务列表 - 暗无天日 Emacs 作为 MPD 客户端 - 暗无天日 移动文件路径却不破坏org file link的方法 - 暗无天日 如何合理的导出help link 成HTML - 暗无天日 笑话理解之Biology - 暗无天日
读:Python Opaque Types——用 NewType 实现 Opaque Type 模式
lujun9972,Claude Code · 2026-05-31 · via 暗无天日

问题:Python 库的 API 兼容性困境

写 Python 库最头疼的事之一,就是你得跟自己的 API 较劲。一个配置对象今天只有三个速度等级,下个月要多加承运商选项,再下个月还要签收确认。你当然想自由调整内部结构,可用户的代码已经绑死在你的 constructor 和属性上了,怎么办呢。

opaque type(不透明数据类型/抽象数据类型,计算机科学里的经典概念)说的就是这种情况的对策,只暴露接口、隐藏内部结构的类型。用 FILEpthread_t 举例最直观——你用它传参但从没见过它里面有什么字段。这篇博文要讲的是怎么在 Python 里实现这种模式。

你可能会想,class 不是自带封装吗?把属性私有化不就行了。但 class 的封装藏的是值——你只是不让外界直接改 _speed=,外界仍然知道对象有个属性叫 =speed=。这层知识本身就是耦合。哪天你把 =speed 拆成 carrierconveyance=,所有写了 =ShippingOptions(speed"fast")= 的调用者全部崩。opaque type 要切断的是这层耦合——调用者不是不能访问内部字段,而是根本不知道内部有哪些字段。

拿一个 dataclass 举例子

from dataclasses import dataclass

@dataclass
class ShippingOptions:
    speed: str  

但这个类的 constructor 是公开的,所有属性也是公开的。用户代码可以直接构造、直接访问内部属性:

opts = ShippingOptions(speed="fast")
if opts.speed == "fast":
    ...

一旦用户这么写了,你就被绑死了。一旦对属性进行修改就会让用户代码崩。

这就是 Python 的尴尬之处,一个类一旦公开,它的 constructor 和属性就等于签了份隐式契约。你没法在不破坏用户代码的前提下自由演化内部实现。

方案:NewType + 私有类 + 公开构造函数

typing.NewType 给了我们一种在 Python 里模拟 opaque type 的手段。核心思路由三部分组成

  • 私有 dataclass 存放实际数据,属性和类本身都以下划线开头,对外不可见
  • NewType 别名 创建一个公开的类型名称,类型检查时视为独立类型
  • 公开构造函数 只暴露有限的、受控的构造方式
from dataclasses import dataclass
from typing import Literal, NewType

@dataclass
class _RealShipOpts:
    _speed: Literal["fast", "normal", "slow"]

ShippingOptions = NewType("ShippingOptions", _RealShipOpts)

def shipFast() -> ShippingOptions:
    return ShippingOptions(_RealShipOpts("fast"))

def shipNormal() -> ShippingOptions:
    return ShippingOptions(_RealShipOpts("normal"))

def shipSlow() -> ShippingOptions:
    return ShippingOptions(_RealShipOpts("slow"))

这个模式的关键在于, ShippingOptions 是一个 NewType,它不像普通类那样有 constructor。用户代码想创建实例只有三条路, shipFast()shipNormal()shipSlow() ,没别的入口。

聊聊 NewType 到底做了什么。 typing.NewType("ShippingOptions", _RealShipOpts) 在运行时创建了一个函数,这个函数接受一个参数,原封不动地把它返回。没有包装、没有复制、没有类型转换。所以 ShippingOptions(_RealShipOpts("fast")) 返回的就是你传进去的那个 _RealShipOpts("fast") 对象本身。它在类型检查器眼里是独立类型,在运行时就是个恒等函数。

你也可能觉得 shipFast() 这些函数跟 factory 模式差不多。区别在于,factory 模式解决的是"创建哪个具体子类"的问题——返回 FastShipping 还是 NormalShipping。这里没有子类,shipFast() 返回的始终是同一个类型( _RealShipOpts ),只不过这个类型对外不可见。ShippingOptions 本身也不是类,是个 NewType。整个模式的目标只有一个:**让类型检查器认为 ShippingOptions_RealShipOpts 是两种不同的类型,同时运行时又不产生任何包装开销。**

所以用户代码写出来就是这样的

opts = shipFast()

status = await shipPackage(how=opts, where=address)

作为库作者,你在库内部仍然可以直接访问私有属性:

if opts._speed == "fast":
    ...

但外部用户无法通过 opts.speed 访问,因为 _speed 是私有属性(以下划线开头),类型检查器和 IDE 都会提示错误。

实际运行效果验证:

callable(ShippingOptions) = True
type(ShippingOptions) = <class 'typing.NewType'>
type(shipFast()) = <class '__main__._RealShipOpts'>
isinstance(shipFast(), _RealShipOpts) = True
ShippingOptions(raw) is raw: True

实例演化:ShippingOptions 的前世今生

上面那段代码看起来做了很多工作却没带来什么好处。直接暴露 _RealShipOpts 好像也没啥区别。但这个模式真正的价值,是给 未来的变化 留了空间。

假设需求变了,用户不再满足于「快、普通、慢」三个选项,而是需要指定具体的承运商(FedEx、UPS、USPS)和运输方式(空运、陆运、铁路)。内部结构需要彻底重写。

因为有 NewType 的保护,你可以这么改

from dataclasses import dataclass
from enum import Enum, auto
from typing import NewType

class Carrier(Enum):
    FedEx = auto()
    USPS = auto()
    DHL = auto()
    UPS = auto()

class Conveyance(Enum):
    air = auto()
    truck = auto()
    train = auto()

@dataclass
class _RealShipOpts:
    _carrier: Carrier
    _freight: Conveyance

ShippingOptions = NewType("ShippingOptions", _RealShipOpts)

def shipFast() -> ShippingOptions:
    return ShippingOptions(_RealShipOpts(Carrier.FedEx, Conveyance.air))

def shipNormal() -> ShippingOptions:
    return ShippingOptions(_RealShipOpts(Carrier.UPS, Conveyance.truck))

def shipSlow() -> ShippingOptions:
    return ShippingOptions(_RealShipOpts(Carrier.USPS, Conveyance.train))

def shippingDetailed(
    carrier: Carrier, conveyance: Conveyance
) -> ShippingOptions:
    return ShippingOptions(_RealShipOpts(carrier, conveyance))

看看外面发生了什么变化:

  • shipFast()shipNormal()shipSlow() 的签名和返回值完全不变
  • 新增的 shippingDetailed() 是可选的扩展,不影响已有调用者
  • 用户代码一行都不用改

老的私有属性 _speed 已经不存在了,取而代之的是 _carrier_freight 。但这对用户完全透明,他们本来就没有直接访问过这些属性,当然也不会被破坏。

这就是 opaque type 的核心价值, 把 API 的兼容表面收缩到最小 ,让内部实现获得最大的演化自由度。

实际运行效果验证:

shipFast() = _RealShipOpts(_carrier=<Carrier.FedEx: 1>, _freight=<Conveyance.air: 1>)
shippingDetailed(UPS, truck) = _RealShipOpts(_carrier=<Carrier.UPS: 4>, _freight=<Conveyance.truck: 2>)

原理与注意事项

NewType 的运行时行为

typing.NewType 在类型检查时被视为一个独立的新类型。 ShippingOptions_RealShipOpts 是两个不同的类型。但在运行时, ShippingOptions 只是一个把参数原样返回的可调用对象, ShippingOptions(x) 返回的值和 x 是同一个对象,没有包装或复制。

这个调用开销极小,原文作者说在高频执行的热点代码(hot loop)中可以跳过 ShippingOptions() 直接返回底层值,然后用 # type: ignore[return-value] 抑制类型检查器的报错。对绝大多数场景,这个开销可以忽略不计。

适用场景

这个模式最适合的场景是,你的库有一个 核心配置/状态对象 。它会被多个 API 函数作为参数传递,而且你预计它的内部结构会随着需求变化而演进。

局限性

外部代码仍然可以绕过你的限制,Python 没有真正的私有机制,但类型检查器会给出警告,这足以阻止大多数误用。另一个代价是样板代码,每个属性都要配一个公开构造函数。如果配置对象永远不会变化,直接用普通 dataclass 更省事。

总结

NewType 加私有类再加公开构造函数,让 Python 库作者也能搞出 opaque type。它在 API 稳定性和内部演化自由度之间画了一条清晰的线,用户只看得到受控的公开接口,你作为库作者则可以随便改动内部实现。

说到底,它在解决一个根本矛盾。 你发布的是一个 API ,但 Python 的类会把 constructor 和所有属性都变成公开的隐式契约。opaque type 模式就是主动把契约收回来,只给你想给的。

当然这也不是免费的。每次调用 ShippingOptions(...) 都是一次函数调用,而不是编译器层面的零成本抽象。好在 Python 里大部分场景的瓶颈不在函数调用上,所以通常不用在意。如果真在 hot loop(代码中的高频热点路径)里跑,可以跳过包装直接返回底层值,用 # type: ignore[return-value] 让类型检查器闭嘴。