惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

爱范儿
爱范儿
Know Your Adversary
Know Your Adversary
Google DeepMind News
Google DeepMind News
A
Arctic Wolf
P
Privacy & Cybersecurity Law Blog
云风的 BLOG
云风的 BLOG
Stack Overflow Blog
Stack Overflow Blog
V
Visual Studio Blog
Project Zero
Project Zero
L
LangChain Blog
N
News and Events Feed by Topic
博客园 - Franky
Last Week in AI
Last Week in AI
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
T
The Blog of Author Tim Ferriss
宝玉的分享
宝玉的分享
Scott Helme
Scott Helme
T
The Exploit Database - CXSecurity.com
P
Proofpoint News Feed
Blog — PlanetScale
Blog — PlanetScale
www.infosecurity-magazine.com
www.infosecurity-magazine.com
W
WeLiveSecurity
月光博客
月光博客
博客园_首页
美团技术团队
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
腾讯CDC
Latest news
Latest news
WordPress大学
WordPress大学
cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
Spread Privacy
Spread Privacy
Attack and Defense Labs
Attack and Defense Labs
量子位
L
LINUX DO - 热门话题
C
CERT Recently Published Vulnerability Notes
Webroot Blog
Webroot Blog
L
Lohrmann on Cybersecurity
aimingoo的专栏
aimingoo的专栏
T
Troy Hunt's Blog
Security Latest
Security Latest
小众软件
小众软件
Cloudbric
Cloudbric
Hacker News: Ask HN
Hacker News: Ask HN
S
Secure Thoughts
雷峰网
雷峰网
T
Threat Research - Cisco Blogs
H
Hacker News: Front Page
IT之家
IT之家
Simon Willison's Weblog
Simon Willison's Weblog

陈少文的网站

巨变与机遇的未来十年 Kubernetes 平台管理软件压力测试方案 使用镜像部署 Hexo 静态页面 终于等到你 - GitHub 镜像仓库服务(ghcr.io) 一起来学 Go --(6)Interface 一起来学 Go --(5)Goroutine 和 Channel 什么是函数式编程 如何在 Kubernetes 集群集成 Kata 柯里化与偏函数 使用 PyGithub 自动创建 Label 软件产品是团队能力的输出 Helm 2 、Helm 3 比较 IoT 变现 Kubernetes 中的 DNS 服务 国内的 Helm 镜像源 Harbor 使用自签证书支持 Https 访问 DevOps 工具链之 Prow 如何使用 kfctl 安装 Kubeflow VS Code 无法下载 Go 插件的工具包 工程师更应具有服务精神 你不知道的 Docker 使用技巧 使用 Docker 运行 Tensorflow 论中国 什么是左移 如何清空 Git 仓库全部历史记录 一禅小和尚 有风吹过厨房 时间的玫瑰 如何在 CentOS 安装 GPU 驱动 开发 Tips(19) 使用 Velero 备份 Kubernetes 集群 Kubernetes Cheat Sheet 开发 Tips(18) 如何构建一个 Java 工程 开发 Tips(17) KubeSpray 安装 Kubernetes 报错 ip in ansible_all_ipv4_addresses 基于 Kubernetes 和 Jenkins 搭建自动化测试系统 在 Kubernetes 上动态创建 Jenkins Slave 使用 Jenkins 进行服务拨测 开发 Tips(16) Kubernetes 签发 Ingress 证书及日常故障运维 Kubernetes 中 Deployment 的基本操作 Kubernetes 中的证书 如何使用 KubeBuilder 开发一个 Operator Kubernetes 1.6.0 安装问题汇总 镜像管理工具 -- Harbor 开发 Tips(15) Docker 如何拉取镜像 开发 Tips(14) 使用 Helm 安装 harbor 开发 Tips(13) 使用 S2I 构建云原生应用 在 Kubernetes 中使用 emptyDir、hostPath、localVolume 开发 Tips(12) 开发 Tips(11) 代码质量分析工具 SonarQube 使用 Kubeadm 安装 Kubernetes 集群 一起来学 Go --(4)常用函数 Kubernetes 中的 Ceph Kubernetes 之 Volumes Kubernetes 之 Labels、Selectors 开发 Tips(10) 开源正在重构商业模式 Kubernetes 之网络 Kubernetes 之 API 使用 Helm 和 Operator 快速部署 Prometheus Kubernetes 复杂有状态应用管理框架 -- Operator Kubernetes 的包管理器 -- Helm 一起来学 Go --(3)Go Modules 如何一步一步地优化博客方案 kubectl 实用指南 Kubernetes 中的基本概念 搭建远程 Kubernetes 开发环境 大公司和小公司的 ToB 思路 开发 Tips(9) Go 入门指南 一起来学 Go --(2)数据与逻辑结构 如何预防 Web 富文本中的 XSS 攻击 django-xss-cleaner 云工作时代 一起来学 Go --(1)背景与特点 SaaS 开发团队的不同阶段 你不知道的 Git 使用技巧 输出既服务 微服务设计 继续奔跑 开发 Tips(8) 从账户安全到二次验证 Django 性能之数据库查询优化 Django 性能之分库分表 敏捷开发之研发流程 打造一致性的团队 开发 Tips(7) Pytest 进阶学习之 Mock PaaS 部署之 buildpack Go 开发配置 领域输出才是 PaaS 的核心竞争力 Pytest 入门学习 开发 Tips(6) 如何使用 Jenkins、Docker、GitLab 搭建 Django 自动化部署流程
Jenkins 中 Git 操作 not a tree 分析
微信公众号 · 2020-05-17 · via 陈少文的网站

Please enable Javascript to view the contents

1. 问题描述

配置 Webhook 自动触发执行 Jenkins 流水线时,报错:

1
2
3
hudson.plugins.git.GitException: Command "git checkout -f 23b446ea" returned status code 128:
stdout:
stderr: fatal: reference is not a tree: 23b446ea

2. Git 如何管理版本

Git 是一个内容寻址文件系统。Git 维护着一棵 sha tree ,通过 sha 值可以回溯到任何一个历史节点。先看看提交记录:

执行命令:

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
git log

commit e5562ec75fedf0bd66fe752e686db108cf20cf9b (HEAD -> fix_create_pipeline, origin/fix_create_pipeline)
Date:   Thu May 14 15:31:50 2020 +0800

    fix create pipeline error

commit 1bd660c370aca1113ae0b4fa2e814e9ea337e4d7
Date:   Thu May 14 13:22:30 2020 +0800

    fix proxy bug (#2070)

commit 1464ca197d161b2ed693c7e9a053fcc97e0fdbaa (origin/master, origin/HEAD, fix_apiserver_devops)
Merge: 1d48ca34 250dd4b0
Date:   Wed May 13 17:24:31 2020 +0800

    Merge pull request #2057 from

    fix bug of pvc api

可以发现,每次提交 git 都会生成一个 commitId ,也就是一个 sha 。commitId 后面紧跟的括号,说明了 commit 内容所属分支发生的变化。

那么这些 (origin/master, origin/HEAD, fix_apiserver_devops) 又是什么含义呢?

.git/refs/ 中,Git 存储着指向数据(分支)的提交对象的指针。

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
tree .git/refs/

.git/refs/
├── heads
│   ├── feature_add_pipeline_api
│   ├── fix_apiserver_devops
│   ├── fix_create_devops
│   ├── fix_create_pipeline
│   ├── master
│   └── release-2.1
├── remotes
│   ├── origin
│   │   ├── HEAD
│   │   ├── feature_add_pipeline_api
│   │   ├── fix_create_devops
│   │   ├── fix_create_pipeline
│   │   ├── fix_devops
│   │   └── master
│   └── upstream
│       ├── master
│       └── release-2.1
└── tags
1
2
3
cat .git/refs/heads/feature_add_pipeline_api

f0749ac442ef683a2de6ed3fdc8e3e3b44b71076

分支、标签在 Git 看来,就是指向 sha tree 某一个 sha 的指针。

3. 原因分析

Jenkins 或相关 Git 插件出错的概率较小,当然也可以检查一下 Git 的版本。控制变量法,首先在 Jenkins 外部执行发生错误的命令。

1
git checkout -f 23b446ea

在了解 Git 的工作原理之后,大概就能分析出原因:人使用的是 branchName、tagName ,而 Git 使用的是 sha 。reference not a tree 意味着,触发和执行两个阶段 sha tree 发生了变化。触发时,branchName 对应的 sha,在执行阶段不存在。下面是结合其他人遇到的情景进行的一些可能分析:

  • 分支名和标签名相同

分支和标签的差别在于,分支可以继续提交,而标签不能继续更改。两者同名时,会有一些怪异的行为,比如 branchName 消失等。

  • rebase 导致

rebase 通常用于合并 upstream 的代码,也会用于将多个线性 commit 合并为一个。比如,下面的命令,将前 3 个版本的提交合并为 1 个:

这样会导致 commit 丢失,而丢失的 commit 可能正好触发了 Jenkins 的某个动作。

  • PR 合并后,分支被删除

基于 特征开发,主干集成,分支发布 的思想,在持续集成的过程中,最佳实践的方式是当代码合并之后,随即删掉分支,Github 上打通了这个流程。

特征分支触发 Jenkins 流水线之后,分支被删除,当执行到拉取代码时,也会报错。

  • Subumodule

子仓库的 commit 记录发生了变化,在执行 git update 之类的操作时,也可能报错。

  • 非最新代码

使用了缓存的代码,在旧代码上找不到最新的 commit 。

由于在 Jenkins 实践的过程中,使用方式和场景存在差异,除非是必现的错误,排查问题需要围绕问题的关键,控制变量一步一步筛查。

4. 参考


微信公众号