惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

K
KPMG report finds enterprise disconnect between AI and its ROI | CIO
W
WeLiveSecurity
L
LINUX DO - 最新话题
IT之家
IT之家
S
SegmentFault 最新的问题
T
The Blog of Author Tim Ferriss
博客园 - 聂微东
Google Online Security Blog
Google Online Security Blog
Forbes - Security
Forbes - Security
N
News | PayPal Newsroom
T
Troy Hunt's Blog
Last Week in AI
Last Week in AI
月光博客
月光博客
博客园 - 三生石上(FineUI控件)
S
Security Affairs
N
News and Events Feed by Topic
S
Securelist
美团技术团队
有赞技术团队
有赞技术团队
T
Tailwind CSS Blog
TaoSecurity Blog
TaoSecurity Blog
C
Cybersecurity and Infrastructure Security Agency CISA
J
Java Code Geeks
A
Arctic Wolf
Blog — PlanetScale
Blog — PlanetScale
量子位
D
Darknet – Hacking Tools, Hacker News & Cyber Security
The GitHub Blog
The GitHub Blog
Webroot Blog
Webroot Blog
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
F
Full Disclosure
云风的 BLOG
云风的 BLOG
Apple Machine Learning Research
Apple Machine Learning Research
K
Kaspersky official blog
Google DeepMind News
Google DeepMind News
Know Your Adversary
Know Your Adversary
S
Schneier on Security
Application and Cybersecurity Blog
Application and Cybersecurity Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Microsoft Security Blog
Microsoft Security Blog
D
DataBreaches.Net
Cisco Talos Blog
Cisco Talos Blog
L
LangChain Blog
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
U
Unit 42
cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
宝玉的分享
宝玉的分享
Hacker News - Newest:
Hacker News - Newest: "LLM"
MongoDB | Blog
MongoDB | Blog
S
Security @ Cisco Blogs

陈少文的网站

巨变与机遇的未来十年 Kubernetes 平台管理软件压力测试方案 使用镜像部署 Hexo 静态页面 终于等到你 - GitHub 镜像仓库服务(ghcr.io) 一起来学 Go --(6)Interface 一起来学 Go --(5)Goroutine 和 Channel 什么是函数式编程 如何在 Kubernetes 集群集成 Kata 柯里化与偏函数 使用 PyGithub 自动创建 Label 软件产品是团队能力的输出 Helm 2 、Helm 3 比较 IoT 变现 Kubernetes 中的 DNS 服务 国内的 Helm 镜像源 Harbor 使用自签证书支持 Https 访问 DevOps 工具链之 Prow 如何使用 kfctl 安装 Kubeflow VS Code 无法下载 Go 插件的工具包 工程师更应具有服务精神 你不知道的 Docker 使用技巧 使用 Docker 运行 Tensorflow 论中国 什么是左移 如何清空 Git 仓库全部历史记录 一禅小和尚 有风吹过厨房 时间的玫瑰 如何在 CentOS 安装 GPU 驱动 开发 Tips(19) 使用 Velero 备份 Kubernetes 集群 Kubernetes Cheat Sheet 开发 Tips(18) 如何构建一个 Java 工程 开发 Tips(17) KubeSpray 安装 Kubernetes 报错 ip in ansible_all_ipv4_addresses 基于 Kubernetes 和 Jenkins 搭建自动化测试系统 在 Kubernetes 上动态创建 Jenkins Slave 使用 Jenkins 进行服务拨测 开发 Tips(16) Kubernetes 签发 Ingress 证书及日常故障运维 Kubernetes 中 Deployment 的基本操作 Kubernetes 中的证书 如何使用 KubeBuilder 开发一个 Operator Kubernetes 1.6.0 安装问题汇总 镜像管理工具 -- Harbor 开发 Tips(15) Docker 如何拉取镜像 开发 Tips(14) 使用 Helm 安装 harbor 开发 Tips(13) 使用 S2I 构建云原生应用 在 Kubernetes 中使用 emptyDir、hostPath、localVolume 开发 Tips(12) 开发 Tips(11) 代码质量分析工具 SonarQube 使用 Kubeadm 安装 Kubernetes 集群 一起来学 Go --(4)常用函数 Kubernetes 中的 Ceph Kubernetes 之 Volumes Kubernetes 之 Labels、Selectors 开发 Tips(10) 开源正在重构商业模式 Kubernetes 之网络 Kubernetes 之 API 使用 Helm 和 Operator 快速部署 Prometheus Kubernetes 复杂有状态应用管理框架 -- Operator Kubernetes 的包管理器 -- Helm 一起来学 Go --(3)Go Modules 如何一步一步地优化博客方案 kubectl 实用指南 Kubernetes 中的基本概念 搭建远程 Kubernetes 开发环境 大公司和小公司的 ToB 思路 开发 Tips(9) Go 入门指南 一起来学 Go --(2)数据与逻辑结构 如何预防 Web 富文本中的 XSS 攻击 django-xss-cleaner 云工作时代 一起来学 Go --(1)背景与特点 SaaS 开发团队的不同阶段 你不知道的 Git 使用技巧 输出既服务 微服务设计 继续奔跑 开发 Tips(8) 从账户安全到二次验证 Django 性能之数据库查询优化 Django 性能之分库分表 敏捷开发之研发流程 打造一致性的团队 开发 Tips(7) Pytest 进阶学习之 Mock PaaS 部署之 buildpack Go 开发配置 领域输出才是 PaaS 的核心竞争力 Pytest 入门学习 开发 Tips(6) 如何使用 Jenkins、Docker、GitLab 搭建 Django 自动化部署流程
一些程序构建的优化技巧
微信公众号 · 2023-09-28 · via 陈少文的网站

Please enable Javascript to view the contents

一些程序构建的优化技巧

持续更新中…

1. Golang

  • 使用 trimpath 移除编译路径,避免暴露编译路径信息
1
go build -gcflags="all=-trimpath=${PWD}" -asmflags="all=-trimpath=${PWD}" -o ./bin/opscli ./cmd/cli/main.go

添加之前异常输出路径 /Users/shaowenchen/Code/Github/ops/main.go,添加之后异常输出路径 main.go

  • -ldflags “-w -s” 移除调试信息,减小二进制文件大小
1
go build -ldflags "-w -s" -o ./bin/opscli ./cmd/cli/main.go

添加之前 55 MB,添加之后 44 MB。

2. Python

  • 提前编译生成 pyc 文件
1
2
3
python -m compileall -b ./
find ./ -name "*.py"|egrep -v 'settings.py|wsgi.py|gunicorn_config.py'|xargs rm -rf
find ./ -name "__pycache__" |xargs rm -rf

虽然 pyc 可以被反编译,但这么做可以增加一点难度。通常启动配置文件被编译之后,不会移除源码,这是为了部署时调试。

3. Node

  • 提交 yarn.lock 文件,生产时使用 --frozen-lockfile 锁定依赖
1
yarn install --frozen-lockfile

package.json 用于指定版本范围,而 yarn.lock 锁定精确版本。

使用 yarn install, 如果 package.json 依赖版本与 yarn.lock 冲突,会更新 yarn.lock 文件。

--frozen-lockfile 锁定依赖版本,不会更新 yarn.lock 文件,也大大节省了安装时间,避免卡在 Building fresh packages。但需要注意检查一下 yarn.lock 中的文件链接是否符合预期,比如是否使用的内网等。

  • 安装依赖包时 ESOCKETTIMEDOUT
1
yarn config set network-timeout 300000

或者

1
yarn install --network-timeout 300000

将超时时间从默认的 30s 改为 300s。

另一种说法是,磁盘慢了,导致安装依赖包超时,可以尝试升级试试。

4. Makefile

  • -j 开启多线程构建

-j 默认使用与 CPU 核心数相同的线程数,可以使用 -j 4 指定线程数。

虽然并行构建的效率高,如果有依赖关系可能导致构建失败,同时排查问题也会更复杂。

5. 平台侧

  • Docker 无法拉取 v1 镜像格式
1
Error response from daemon: mediaType in manifest list should be 'application/vnd.docker.distribution.manifest.list.v2+json' not 'application/vnd.oci.image.index.v1+json'

如果你使用的 Docker 版本小于 19.03,可以在 /etc/docker/daemon.json 中设置 "disable-legacy-registry":true,重启 Docker 即可。或者在 Docker Client 命令中添加 --disable-legacy-registry 参数拉取。

原因在于 v1 镜像格式已经被弃用,Docker 新版本已经不再支持 v1 镜像格式。

  • 使用 buildx

使用 buildx 能更好使用缓存。但 Docker 默认不安装 buildx,需要手动安装。

对于 linux 系统,先去 buildx release 页面下载对应的二进制文件 https://github.com/docker/buildx/releases ,然后将二进制文件重命名为 docker-buildx,放到 $HOME/.docker/cli-plugins 目录下即可。


微信公众号