惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

H
Help Net Security
F
Fortinet All Blogs
Engineering at Meta
Engineering at Meta
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
T
The Exploit Database - CXSecurity.com
H
Hackread – Cybersecurity News, Data Breaches, AI and More
I
Intezer
P
Privacy & Cybersecurity Law Blog
M
MIT News - Artificial intelligence
MyScale Blog
MyScale Blog
P
Privacy International News Feed
MongoDB | Blog
MongoDB | Blog
Project Zero
Project Zero
C
Cyber Attacks, Cyber Crime and Cyber Security
T
Tenable Blog
Security Latest
Security Latest
Stack Overflow Blog
Stack Overflow Blog
L
Lohrmann on Cybersecurity
V
Vulnerabilities – Threatpost
Microsoft Azure Blog
Microsoft Azure Blog
NISL@THU
NISL@THU
T
Threat Research - Cisco Blogs
L
LangChain Blog
Simon Willison's Weblog
Simon Willison's Weblog
WordPress大学
WordPress大学
SecWiki News
SecWiki News
博客园 - 三生石上(FineUI控件)
Forbes - Security
Forbes - Security
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
G
GRAHAM CLULEY
K
Kaspersky official blog
W
WeLiveSecurity
A
Arctic Wolf
TaoSecurity Blog
TaoSecurity Blog
Recorded Future
Recorded Future
AI
AI
T
The Blog of Author Tim Ferriss
宝玉的分享
宝玉的分享
K
KPMG report finds enterprise disconnect between AI and its ROI | CIO
Last Week in AI
Last Week in AI
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
雷峰网
雷峰网
GbyAI
GbyAI
S
SegmentFault 最新的问题
N
News and Events Feed by Topic
C
CXSECURITY Database RSS Feed - CXSecurity.com
Google Online Security Blog
Google Online Security Blog
博客园 - Franky
罗磊的独立博客

博客园 - 大汪的数据之路

星环大数据使用体验 vibe coding使用体验 基于SQL实现分组的文字排序聚合 数据码农马年大吉 字符串分割并展开成表格的SQL实现方法 BI报表及可视化分析类工具使用经验总结(下) BI报表及可视化分析类工具使用经验总结(上) 基于Python实现自动化微信通知和预警 Chat2DB测试体验 常用数据管理工具与平台汇总 OneID系统建设实践总结 网易有数BI使用总结 网易NDH大数据平台使用经验 程序自动化vs人工手动处理 SQL开发总结 数据平台使用经验 数据团队运维值班任务简介 Python环境安装、管理与部署 windows获取kerberos认证 SQL动态长度行列转置 ODI Scenario 场景 Oracle KEEP 分析函数
版本管理总结
大汪的数据之路 · 2025-09-04 · via 博客园 - 大汪的数据之路

作为数据从业者,在日常工作中,无论是ETL开发,还是数仓SQL开发,或者工作进展汇报,都可能会涉及到版本管理。这些场景都有什么特点?是否具有共同点呢?以下是一个简单的总结。

1、通用版本管理工具

这类工具可将各类脚本(如SQL、存储过程、python、shell等)进行版本管理。通常要有这些功能:记录修改时间、修改人、版本号,进行版本回退、合并、冲突处理。在实践中主要是这两类工具:

a、SVN

  SVN搭建方便,无费用,概念简单:Checkout → Update → Commit,GUI 客户端工具多,常见的有tortoiseSVN,使用便捷。在各种规模的团队中都有使用。

b、Git

  Git 是一个开源的版本控制系统(VCS)。概念多(工作区、暂存区、本地仓库、远程仓库),学习曲线略陡。如果不想背 Git 命令,又想完整用 Git 功能,可以使用免费的图形化客户端软件sourcetree。结合github,可以与全球开发者共同参与开发知名开源项目,并为其贡献代码。

SVN除了管理脚本外,还可以管理文档,如word、Excel等,在团队规模很小时,还可被当做网盘使用,做为团队内部的资料分享工具。如以下的案例:

 image

2、工具自带版本管理功能

除了通用工具外,数据开发中使用到一些工具软件往往会自带版本功能,比如以下两种典型案例:

a、网易大数据开发套件

  网易大数据套件基于开源hadoop生态研发出的大数据全家桶,包含离线开发等功能。其离线开发模块中可配置SQL脚本。该模块支持上线发布,历史版本查看以及回滚,这样就直接在工具中实现了版本管理功能。

image

image

image

b、Informatica ETL工具

  Informatica为商业版的ETL软件,功能强大,性能稳定,Informatica 自带 Repository(存储库)版本管理机制,所有映射(Mapping)、会话(Session)、工作流(Workflow)等对象都存储在中央存储库数据库中,支持对象的 Check-in / Check-out。可以直接在工具内查看历史版本、恢复旧版本、比较差异。

3、文档版本管理

以上两种情形主要是处理代码与流程,而在文档处理方面,在线处理工具可以方便的进行文档版本管理,既可以多人同时编辑,也可查看历史编辑记录,还可以还原到历史的某个版本。在小团队内统计工时、周报任务等场景中非常实用。

image

 4、总结

有了版本管理工具,在团队中,可以使得多个成员并行处理同一份内容;作为个人,可以基于同一份内容并行满足多个需求。提高任务处理的并行度,满足一个人同时处理多个任务,一个任务同时被多个人处理,应该就是版本管理工具的意义和价值。