通过这个 Runtime 统计信息可视化库学到了什么？

文章列表 on polarisxu

2020-11-17 · via 文章列表 on polarisxu

大家好，我是站长 polarisxu。

掌握系统运行状态，知道系统哪些地方可能存在问题，方便进行优化，这是一个实际系统必备的。裸奔，对系统一无所知，迟早是要出大事的。

在 Go 语言中，官方标准库提供了方法，让我们能够获得内存分配、GC 和 Goroutine 等情况。比如内存、GC 等情况，可以通过 runtime.MemStats 获取：https://docs.studygolang.com/pkg/runtime/#MemStats，Goroutine 数量可以通过 runtime.NumGoroutine() 函数获得。

一般我们我们需要自己解析 MemStats 信息、做展示，也可以做图表。

之前推荐过一个在浏览器中实时查看 Go 应用程序运行时统计信息（GC，MemStats 等）的库：statsviz 。今天给大家推荐另外一个库：https://github.com/go-echarts/statsview，这是这两天刚出来的。

看长什么样：

我们可以运行下面这段代码得到类似上面的图：

package main

import (
    "github.com/go-echarts/statsview"
    "time"
    "math/rand"
    "strconv"
)

func main() {
    go work()
    mgr := statsview.New()

    // Start() runs a HTTP server at `localhost:18066` by default.
    mgr.Start()

    // Stop() will shutdown the http server gracefully
    // mgr.Stop()
}

func work() {
    // Generate some allocations
    m := map[string][]byte{}

    for {
        b := make([]byte, 512+rand.Intn(16*1024))
        m[strconv.Itoa(len(m)%(10*100))] = b

        if len(m)%(10*100) == 0 {
            m = make(map[string][]byte)
        }

        time.Sleep(10 * time.Millisecond)
    }
}

01 如何使用

都 Go1.15.x 了，请使用 go module。

statsview 的使用较简单。

import “github.com/go-echarts/statsview”
mgr := statsview.New()
mgr.Start()
打开浏览器访问：http://localhost:18066/debug/statsview
尽情享受吧~

此外，可以通过 viewer.SetConfiguration(opts …Option)改变一些行为，包括：

// WithInterval sets the interval(in millisecond) of collecting and pulling metrics
// default -> 1500
WithInterval(interval int) Option

// WithMaxPoints sets the maximum points of each chart series
// default -> 40
WithMaxPoints(n int) Option

// WithTemplate sets the rendered template which fetching stats from the server and
// handling the metrics data
WithTemplate(t string) Option

// WithAddr sets the listen address
// default -> "localhost:18066"
WithAddr(addr string) Option

// WithTimeFormat sets the time format for the line-chart Y-axis label
// default -> "15:04:05"
WithTimeFormat(s string) Option

// WithTheme sets the theme of the charts
// default -> Macarons
//
// Optional:
// * ThemeWesteros
// * ThemeMacarons
WithTheme(theme Theme) Option

例如修改默认端口：

viewer.SetConfiguration(view.WithAddr("localhost:8087")

不像之前介绍的 statsviz，statsview 固定使用 net/http，所以集成到项目中只需要让它在单独的一个 goroutine 中运行，单独的端口即可。

go func() {
	mgr := statsview.New()
	mgr.Start()
}()

其实这也是在介绍 statsviz 时的最佳实践。毕竟 runtime 信息属于系统内部信息，不适合暴露给公网用户。

02 学习相关实现

和 statsviz 不同，该库没有使用 WebSocket 协议，直接通过轮询的方式不断获取数据。另外，因为 statsview 是 go-echarts 出的，因此画图也使用的是 go-echarts 库。

多参数控制

关于 statsview，有一个知识点想跟大家讲一下，那就是多参数控制。

上文提到库可以通过 viewer.SetConfiguration(opts …Option) 函数定制一些行为，其中 Option 是一个函数类型：

type Option func(c *config)

其中 config 的定义如下：

type config struct {
	Interval   int
	MaxPoints  int
	Template   string
	Addr       string
	TimeFormat string
	Theme      Theme
}

该类型的字段用于控制该库的一些行为。它有一个默认的实例：

var defaultCfg = &config{
	Interval:   DefaultInterval,
	MaxPoints:  DefaultMaxPoints,
	Template:   DefaultTemplate,
	Addr:       DefaultAddr,
	TimeFormat: DefaultTimeFormat,
	Theme:      DefaultTheme,
}

面对这样的需求，通常的解决方案是：

将 config 默认实例导出，使用方直接修改对应字段的值；
通过提供一系列函数实现修改，比如 SetInterval(int)

方案一封装性不好，暴露太多细节；而方案二的问题在于，config 的字段类型不一致，通常方案不够优雅。该库的实现方式是定义一个 Option 类型，然后提供一系列具有相似签名的函数来控制这些配置，即上文列出来的 WithXXX 类函数，看其中的一个实现：

// WithAddr sets the listening address
func WithAddr(addr string) Option {
	return func(c *config) {
		c.Addr = addr
	}
}

这样通过 WithXXX 函数得到一系列 Option 实例，而 viewer.SetConfiguration 接收一系列 Option 实例，所以使用是就这样了：

viewer.SetConfiguration(viewer.WithTheme(viewer.ThemeWalden), view.WithAddr("localhost:8087"))

还有其他案例吗？

colly 中的案例

Colly 是一个 Go 语言实现的，快速的、优雅的 Scraper 和 Crawler 框架。它的实例化函数比较“独特”：

func NewCollector(options ...func(*Collector)) *Collector

实例化一个类型，一般有以下几种方式：

new(T)
T{} 或 &T{}
自定义的工厂函数

对于类型中的成员，我们可以在实例化时传递，如第 2、3 种方式；也可以在生成实例后，通过 t.Field 的形式赋值（前提是导出的成员）。

一般地，我们在定义工厂函数时，要为类型成员初始化，会给工厂函数定义相应的参数。而 Collector 类型的工厂函数参数，却是一个或多个函数。这样设计有以下方面的原因：

Collector 类型的成员较多；
成员的类型多样；
不要求所有的成员必须指定值；

针对这些问题，Collector 工厂类 NewCollector() 巧妙的使用不定参数，而且类型是 func(*Collector)，这样可以有选择的配置一个或多个选项，很好地解决了上面的三个问题。它的源码如下：

func NewCollector(options ...func(*Collector)) *Collector {
    c := &Collector{}
    c.Init()

    for _, f := range options {
        f(c)
    }

    c.parseSettingsFromEnv()

    return c
}

同时，通过函数的方式来配置选项，就好比很多面向对象语言中的 Set 方法，可以在里面有其他的一些逻辑判断，而不仅仅是设置一个值。比如以下配置函数：

func Debugger(d debug.Debugger) func(*Collector)

BigCache 中的案例

BigCache 是一个高性能缓存库。获得它的一个实例是这样的形式：

bigcache.NewBigCache(bigcache.DefaultConfig(10 * time.Minute))

即它的构造函数（New 函数）接收一个 Config 对象，这也是要控制多个配置。

因为 Go 不是完全的面向对象语言。当类型中有较多成员，且可以通过外部控制时，根据封装的原则，一般不建议将这些字段导出（公开），但这样一来构造函数就需要能接收很多参数。在 Go 中有两种较常见的设计方法。

1）通过另外一个结构体来控制

比如 bigcache 包中的 Config 结构体。这么做有什么好处？

一方面控制了 BigCache 类型的行为，避免实例化后可以随意更改，起到了封装的作用。另一方面，让构造函数更简洁，只需要接收一个 Config 即可（注意最好使用 Config 值类型，而不是指针）。而且可以通过提供一些 Config 的默认值来做到更易用，比如 bigcache.DefaultConfig() 函数就是这样的例子。

2）通过一个函数类型来控制

比如我们通过这种方式替换 bigcache 包的 Config 结构体。

type BigCacheOption func(*BigCache)

func ShardsNum(shards int) BigCacheOption {
	return func(c *BigCache) {
		c.shards = shards
	}
}

func LifeWindow(eviction time.Duration) BigCacheOption {
	return func(c *BigCache) {
		c.lifeWindow = uint64(eviction.Seconds())
	}
}

// 提供更多的配置选项函数
...

通过定义一个函数类型 BigCacheOption 来控制。对 BigCache 类型中非导出的字段，提供相应的函数，该函数返回 BigCacheOption 类型。

针对这种方式，BigCache 的构造函数需要改为如下的形式：

func NewBigCache(options ...BigCacheOption) (*BigCache, error) {
	c := &BigCache{}
	// 省略其他，主要处理 options 部分
	for _, f := range options {
		f(c)
	}

	return c, nil
}

03 总结

如果你需要实时图表的方式查看系统运行时的一些数据，可能之前介绍的 statsviz 更合适。

该文介绍的通过参数灵活控制系统的方法，希望你能够掌握。

此内容由惯性聚合(RSS阅读器)自动聚合整理，仅供阅读参考。原文来自 — 版权归原作者所有。

推荐订阅源

文章列表 on polarisxu

01 如何使用

02 学习相关实现

多参数控制

colly 中的案例

BigCache 中的案例

03 总结