惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

C
Check Point Blog
AI
AI
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
U
Unit 42
Vercel News
Vercel News
Stack Overflow Blog
Stack Overflow Blog
P
Proofpoint News Feed
Microsoft Security Blog
Microsoft Security Blog
The GitHub Blog
The GitHub Blog
WordPress大学
WordPress大学
Martin Fowler
Martin Fowler
博客园 - 【当耐特】
B
Blog
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
Apple Machine Learning Research
Apple Machine Learning Research
博客园_首页
F
Full Disclosure
Google DeepMind News
Google DeepMind News
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
H
Help Net Security
Recorded Future
Recorded Future
N
News and Events Feed by Topic
雷峰网
雷峰网
V
Vulnerabilities – Threatpost
Schneier on Security
Schneier on Security
aimingoo的专栏
aimingoo的专栏
S
Schneier on Security
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
O
OpenAI News
Project Zero
Project Zero
罗磊的独立博客
G
GRAHAM CLULEY
腾讯CDC
P
Privacy International News Feed
V
V2EX
Application and Cybersecurity Blog
Application and Cybersecurity Blog
Hugging Face - Blog
Hugging Face - Blog
爱范儿
爱范儿
H
Heimdal Security Blog
L
LINUX DO - 热门话题
Forbes - Security
Forbes - Security
美团技术团队
MongoDB | Blog
MongoDB | Blog
Security Latest
Security Latest
M
MIT News - Artificial intelligence
T
Tor Project blog
Cisco Talos Blog
Cisco Talos Blog
宝玉的分享
宝玉的分享
T
Threat Research - Cisco Blogs
TaoSecurity Blog
TaoSecurity Blog

文章列表 on polarisxu

通过一个例子让你彻底掌握 Go 工作区模式 这道题正确率竟然只有 22% Go 开源项目推荐:一个简单的 Go 练手项目 go test 如何禁用缓存? Go1.18 快讯:constraints 包被移除标准库 跟着 Go 作者学泛型 「2022 版」轻松搞定 Go 开发环境 鹅厂小哥用行动反对加班:程序员加班能被终结吗? Go 为什么选择 Gopher 作为吉祥物? 本地如何配置多个 GitHub/Gitee 账号? 为 Java 开发者准备的 Go 教程 02:Java 有而 Go 无 GitHub 发现了 studygolang 项目依赖的漏洞 Typora 宣布收费后,这款开源 Markdown 编辑器火了 为 Java 开发者准备的 Go 教程 01:漫游了 我的 2021 年终总结 泛型版 singleflight:Go 中如何防止缓存击穿? 2021 年你写了多少代码?这个 Go 工具帮你统计 Go1.18 新特性:TryLock Go 泛型入门教程 程序员瑞士军刀:各种结构的转换工具 终于有 Go 版的 Elasticsearch 了 Go泛型系列:maps 包讲解 Go 1.18 中的 any 是什么? Go1.18 快讯:新的 IP 包 Go编程模式:详解函数式选项模式 Go泛型系列:slices 包讲解 Nginx 竟然也有 playground — Go 语言构建的 Go泛型系列:Go1.18 类型约束那些事 Go1.18 快讯:Module 工作区模式 Go1.18 快讯:新增的 Cut 函数太方便了 Go1.18 快讯:废弃了这个 API Go1.18 快讯:新增字符串 Clone API Go:如何获得项目根目录? Go 如何获取和设置环境变量 重磅变动:更快找到微信公众号里的Go文章 Go 这样设置版本号:我们的项目也可以 假期结束,推荐 2 本 manning 出的 Go 图书 Go Fiber 框架系列教程 04:测试应用 Go Fiber 框架系列教程 03:中间件 Go泛型系列:提前掌握Go泛型的基本使用 推荐一个 Go GUI 实战项目 Go Fiber 框架系列教程 02:详解相关 API 的使用 Go Fiber 框架系列教程 01: 和 Express 对比学习 Go Module:私有不合规库怎么解决引用问题 Go1.17 新特性:go get 变了 Go1.17 新特性:testing 包的相关变化 StackOverflow 上关于 Go select 死锁的问题 新书推荐:用 Gin 框架构建分布式应用 Go 官网要变天。。。 Gin 这是要成为 Go 官方框架? 扬眉吐气:刚刚,Go 已经默认支持泛型了 Go 1.17 新特性:Module 有哪些变化? Go 第三方库推荐:类型转换如此简单 担心密码提交到 GitHub?建议使用这个 Go 开源工具 Go 的时间格式化为什么是 2006-01-02 15:04:05? GitHub 为 Go 社区带来安全支持 Go开源项目推荐:500行代码确认请求时间花在哪 一道关于 len 函数的诡异 Go 面试题解析 厉害了我的 Go:推荐系统都有开源实现 Go1.17 新特性:新版构建约束 这个工具真好:看看你的Go项目依赖有无漏洞 网友很强大,发现了Go并发下载的Bug Rust 劝退系列 09:函数 Go项目实战:一步步构建一个并发文件下载器 这本 Go 新书挺期待的:100 个常见错误 Go 启用新的官方问答社区 这是要干嘛?!微软招 Go 编译器全职开发人员 Go1.17 快报之标准库越来越注重易用性 Go1.17 新特性之切片变数组 回顾 Go 官网的演变史 站长8年前的Go代码竟然进入大厂的项目里了 Go图书翻译:一个好消息,一个坏消息 不怕烂尾!决定组织翻译这本 Go 图书 Rust 劝退系列 08:模式匹配 一本花了2.5年写成的Go免费在线图书 被黑惨了:一句话,说明自己会 Go,咋整? Go1.16 中的新函数 signal.NotifyContext 怎么用? Go 1.17 新特性提前学之测试执行随机化 Rust 劝退系列 07:流程控制 官方的 Go 多版本管理:使用和原理 Rust新书:给你一个劝退的理由 周刊题解:常量表达式这个规则应该了解下 盘点那些使用 Go 语言的国外公司 编写了50万行Go代码是一种什么体验 Rust 劝退系列 06:常量 Uber 使用 Go 的规模这么大?!都自己定制的 Go 编译器了 Go Team Leader — rsc 大神新开源了一个库,增强模板功能 再一次看到了 Go 的节制:int128 类型要不要支持? Rust 劝退系列 05:复合数据类型 「卷」有理论依据:海勒姆定律—Go又是怎么卷的 Go 真的也可以进行 GUI 开发:还有这样的图书呢 Rust 劝退系列 04:基本数据类型 我的 Go 语言书单 Rust 劝退系列 03:变量 我又来推荐免费 Go 新书了:一本用 Go 讲架构的书 注释竟然还有特殊用途?一文解惑 //go:linkname 指令 这个功能,公众号、微信群会不会被玩坏? 一道 Go 闭包题,面试官说原来自己答错了:面别人也涨知识 Rust 劝退系列 02:第一个 Rust 程序 Rust 劝退系列 01:打造开发环境
Go 标准错误 API — CockroachDB errors 库(第1篇)
2020-10-23 · via 文章列表 on polarisxu

这篇文章是关于 “CockroachDB errors 库” 的系列文章的第 1 篇,“CockroachDB errors 库”实际上是 Go 的标准 errors 包的通用、开放源码的替代品。

那本篇文章主要谈论什么呢?

基本的 Go 错误:error 是值

Go 生态有一些非常流行、也非常基本的学习资源(文档):

我们可以从这些文章中学到什么?

  • Go 提供了一个预定义的接口类型 error,定义如下:

    // an "error" is an object with an `Error()` method
    // which describes the situation that occurred.
    type error interface {
         Error() string
    }
    
  • 编写 Go 函数/方法的惯用方法是让它们在常规返回值之外,再返回一个 error 类型值,并在每个调用点上进行测试

    func div(x, y int) (int, error) {
        if y == 0 {
           return 0, fmt.Errorf("boo")
        }
        return x / y, nil
    }
      
    func main() {
        r, err := div(3, 2)
        if err != nil {
           fmt.Printf("woops: %v", err)
           return
        }
        fmt.Println("result:", r)
    }
    
  • 如上面的示例所示,fmt.Printf 会知道如何调用 error 的 Error() 方法来显示错误文本。如果错误是通过%s、%q、%x/%X 打印的,它也会这样做。

error 也是链表

如果你还不知道 Dave Cheney 是谁,现在是时候去了解下这位及其高产的 Go 大师程序员。

2015 年,Dave 创建了 pkg/errors 包(源代码文档 ),随后在 2016 年东京举行的 GoCon 春季会议上展示了它。下面这篇文章用散文的形式解释了这个故事:

Dave Cheney:优雅的处理错误,而不仅仅只是检查错误

以下是 Dave 提到的主要创新:

  • Go error 对象像链表一样构建,而且是不可变的。
  • err 在任何时候都会指向列表的头部。
  • 在首次发生错误时,将构造一个原子或"叶"错误对象,该对象将在列表的尾部。
  • 当错误通过调用堆栈和软件组件返回时,通过向错误添加更多"层"、在现有错误列表的头部 push 更多列表元素或"包装器"来增加错误。

这在实践中给我们什么启发呢?主要用途是向错误对象添加消息前缀,以给出有关"错误发生在哪"的更多上下文。例如:

import (
   "fmt"
   "github.com/pkg/errors"
)

func foo() error {
     return fmt.Errorf("boo")
}

func bar() error {
     return errors.Wrap(foo(), "bar")
}

func baz() error {
     return errors.Wrap(foo(), "baz")
}

func main() {
     r := rollDice()
     var err error
     if (r < 4) {
        err = bar()
     } else {
        err = baz()
     }
     fmt.Println(err)
}

使用 errors.Wrap(),添加一个前缀到错误消息,main 函数能报告:bar: boobaz:boo 这样人类可读错误消息,方便知晓哪个函数被调用。如果没有 errors.Wrap(),哪个调用路径导致错误将不容易知晓。

在实践中,这是如何工作的,看起来有点像这样:

// errorString represents a leaf error. This
// is what gets constructed by e.g. fmt.Errorf().
type errorString struct {
     msg string
}

// Error implements the error interface.
func (e *errorString) Error() string { return e.msg }

// msgWrap represents a wrapper which adds a prefix
// to an error. This is what gets constructed
// by e.g. pkg/errors.Wrap().
type msgWrap struct {
     cause error
     msg string
}

// instances of msgWrap are also instances of the error
// interface, by implementing the Error() method.
func (e *msgWrap) Error() string {
     return fmt.Sprintf("%s: %v", e.msg, e.cause)
}

错误消息、包装注释和 cause 发现

Dave Cheney 的基础逻辑是:

The Error method on the error interface exists for humans, not code.

换句话说,程序代码不应检查或比较 Error() 方法的结果。

Dave 继续谴责两种 Go 编程模式,他认为令人厌恶,现在仍然不赞成:

  • “哨兵错误(sentinel errors)“的概念,这是在代码中通过 error 实例进行比较。例如,if err == ErrNotExists。这种方式的主要问题是,如果错误是链表,也许是在列表的尾部找到哨兵,而头部有其他内容(例如,消息前缀)。Sentinel 的另一个更实际的问题是,为了能够执行比较,发生比较的包必须导入定义 sentinel 所在的包。这将导致依赖项。这种类型的硬依赖性使软件组合更加困难。
  • 引用 “error types”(或错误包装类型)的概念,进行错误类型断言,例如,if e, ok := err.(SomeType); ok。此处的问题与上述问题相同:如果错误是链表,则它可能不起作用,并且还导致了包依赖。

Dave 建议应该采用这两种方式:

  • 为调用者感兴趣的错误对象的属性定义接口。例如,错误是否可恢复可以通过 IsRecoverable() 方法来定义。然后,在任何包都可以断言此接口的实现,没有依赖关系:在 Go 中,接口断言基于结构相等,而不是命名相等。
  • 注意错误链接列表结构,并在检查错误对象时正确遍及链表层级。

为了实现后一点,Dave Cheney 在 pkg/errors 中引入了 causer 接口,从而有了以下可重用的代码模式:

// NB: causer is not exported by pkg/errors; instead
// any package can re-defined it as needed
type causer interface { Cause() error }

...
if err != nil {
   for {
       if _, ok := err.(SomeInterfaceWithProperty); ok {
          // ... do something ...
       }

       // Peel one layer, if wrapped.
       if c, ok = c.(causer); ok {
          err = c.Cause()
          continue
       }
       break
   }
}

此模式会将错误展开,根据错误链访问,直到叶子节点或链表尾部。

包 pkg/errors 的一个被低估的特性是,每次构造错误或包装错误时,它都会自动保留堆栈跟踪的副本。

这一点很重要,因为它使得在排除问题时能够分析”错误发生在哪里”:通常情况下,该错误仅对开发人员可见,或在实例化后很长一段时间,在调用者中的某个地方出现问题。各种 Go 并发模式使这种困难更加复杂,其中错误对象通过通道将错误对象从一个 goroutine 传输到下一个 goroutine。因此,仅仅查看源代码中的"一行"来查找错误的来源是不够的。

为此,pkg/error 使用极其轻量级且相当聪明的机制来在每个错误构造时保留调用堆栈的副本。

此堆栈跟踪不出现在 Error() 方法的结果中;相反,当通过 Printf 中的 %+v 谓词(这是最常见的情况,例如在调试期间)或通过检查错误链接列表某些层(例如与 Sentry.io 集成)上是否存在 StackTrace() 方法时,将显示错误对象。

这种机制特别巧妙的是,堆栈跟踪的所有详细信息(包括函数/包名称)不会直接存储在错误对象中,而是在打印堆栈跟踪时检索它们。通常情况下,错误发生,但可能是无害的,这样可以节省时间和内存。

Go 1.13 中的提升和 API 分裂

很难说 pkg/errors 包多么基础和重要。但目前直接依赖它的公开 Go 项目超过 5 万个,还有无法统计的私有 Go 存储库。

Go 语言的设计者认识到了这一点,并在 2019 年将其语义集成到 Go 标准库 中,从 Go 1.13 开始:

  • Go 1.13 的错误也是链表。
  • Go 1.13 没有提供 errors.Wrap(),但是为 fmt.Errorf 做了扩充:使用格式化动词 %w,构造一个包装错误,并保持原来的错误对象放在链表尾部供检测;
    • pkg/errors: errors.Wrapf(err, "hello %s", "world")
    • 在 Go 1.13: fmt.Errorf("hello %s: %w", "world", err)
  • Go 1.13 简化了在错误链表的每个中间级别上测试属性的任务,使用以下 api:
    • errors.Is(err1, err2) 检查 err1 中的任何层是否等于 err2(会递归地测试哨兵)。这可以用来识别许多标准库的哨兵,例如 errors.Is(err, os.ErrNotExist) 检查是否由于找不到某个文件/目录而导致错误。
    • errors.As(err1, <type>) 检查 err1 中的任何层是否可以被转换为 <type>(接口或具体类型),并返回转换的结果。这可以用来断言错误属性,就 Dave Cheney 在 2015 年建议的那样。

然而存在一些争议,因为 Go 1.13 在社区中引发了 API 的分裂:

  • error 对象上的展开方法称为 Unwrap(),而不是 Cause()。我个人很讨厌 Go 团队选择一个单独的方法名,因为这直接破坏了与所有基于 pkg/errors 构建的包的兼容性,而且没有很好这么做的原因。
  • Go 1.13 没有提供像 pkg/errors 中的 error.Cause() 那样的 “unwrap 一切”的函数。
  • 另外,遗憾的是,因为 Go 1.13 没有定义 Cause() 方法,所以不可能使用 pkg/errors 中的 error.Cause() 来解包装来自 Go 1.13 项目和为 pkg/errors API 设计的项目的混合错误对象。
  • 非常遗憾的是,Go 1.13 没有像 pkg/errors 那样提供捕获堆栈跟踪的工具。由于上述 API 的不兼容性,不可能将 pkg/errors 与特定于 Go 1.13 的代码混合匹配来获得这种行为。

总结为如下表格:

Feature Go’s <1.13 errors github.com/pkg/errors Go 1.13 errors
leaf error constructors (New, Errorf etc)
abstraction: errors are linked lists
error causes via Cause()
error causes via Unwrap()
best practice: test interfaces, not values/types (partial)
errors.As(), errors.Is()
errors.Wrap()
automatic error wrap when format ends with : %w
standard wrappers with efficient stack trace capture

这种分裂是真实而悲哀的。发生这种情况的原因(也许令人惊讶)是 Go 团队无法确定一种好的方法来标准化打印错误。我们将在本系列的后续文章中了解其中的原因。

然而,pkg/error 社区的用户不能简单地加入到 Go 1.13 的潮流中去。这里有一个缺口,需要一些交叉兼容的库来弥补这个缺口。

这就是为什么 CockroachDB 错误库 能够做到这一点。您可以使用它作为 pkg/errors 和 Go 1.13 自己的 errors 包的临时替代。

原文链接:https://dr-knz.net/cockroachdb-errors-std-api.html

本文作者:Raphael ‘kena’ Poss

译者:polarisxu