惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Hacker News: Ask HN
Hacker News: Ask HN
C
Cisco Blogs
The Hacker News
The Hacker News
T
Tor Project blog
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
The GitHub Blog
The GitHub Blog
A
Arctic Wolf
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
The Register - Security
The Register - Security
云风的 BLOG
云风的 BLOG
Simon Willison's Weblog
Simon Willison's Weblog
P
Palo Alto Networks Blog
Vercel News
Vercel News
C
CERT Recently Published Vulnerability Notes
I
InfoQ
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
M
MIT News - Artificial intelligence
I
Intezer
aimingoo的专栏
aimingoo的专栏
U
Unit 42
C
Cyber Attacks, Cyber Crime and Cyber Security
L
LINUX DO - 热门话题
Microsoft Security Blog
Microsoft Security Blog
酷 壳 – CoolShell
酷 壳 – CoolShell
Cyberwarzone
Cyberwarzone
P
Proofpoint News Feed
P
Proofpoint News Feed
B
Blog
T
Threat Research - Cisco Blogs
博客园 - 叶小钗
Recorded Future
Recorded Future
Last Week in AI
Last Week in AI
N
News and Events Feed by Topic
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
Know Your Adversary
Know Your Adversary
Engineering at Meta
Engineering at Meta
G
Google Developers Blog
PCI Perspectives
PCI Perspectives
Google DeepMind News
Google DeepMind News
WordPress大学
WordPress大学
Application and Cybersecurity Blog
Application and Cybersecurity Blog
MyScale Blog
MyScale Blog
Security Archives - TechRepublic
Security Archives - TechRepublic
Schneier on Security
Schneier on Security
N
News | PayPal Newsroom
C
Cybersecurity and Infrastructure Security Agency CISA
H
Help Net Security
博客园 - 聂微东
H
Hackread – Cybersecurity News, Data Breaches, AI and More
G
GRAHAM CLULEY

博客园 - iTech

AI Agent 写完代码谁来测?这个开源沙箱把 CI/CD 和多 Agent 协作全包了 7万星的AI交易框架:让大模型模拟投行多空辩论,自动做交易决策 71000颗星的AI交易团队:让大模型模拟投行分工,自动做交易决策 13400颗星的开源项目:输入一句话,AI全自动帮你做短视频 102颗星的沙盒:当AI学会自己写代码、跑测试、做部署 AI 技术日报 - 2026-05-08 29k 星的 PageIndex:不用向量数据库,靠推理就能做 RAG 每天花两小时刷信息?这个开源项目帮你全自动搞定 读源码像读小说?试了 DeepWiki 和 Zread,我再也不想裸读 GitHub 了 Matt Pocock 开源的这套 .claude 技能,为什么让工程师集体上头? Cursor Team Kit:Cursor 官方团队在用的 17 个 AI 工作流 AI 技术日报 - 2026-05-07 AI 技术日报 - 2026-05-06 AI 技术日报 - 2026-05-05 Anthropic CEO 说 12 个月内程序员要失业,我扒完他的底牌,发现事情没那么简单 把工程师的肌肉记忆装进 Claude Code,这个 4300 Star 的项目我后悔没早用 AI 技术日报 - 2026-05-04 AI 技术日报 - 2026-05-03 AI 技术日报 - 2026-05-02 六大 Agent 框架横评:谁支持 Skills?谁能自动创建 Agent?MCP 呢? Wechatsync:一个 Chrome 插件,一键把文章同步到 31 个平台 LangChain 开源了 Open SWE:Stripe、Ramp、Coinbase 内部都在造的编程 Agent Cockpit:把 Claude Code 从终端里搬出来,装进浏览器 Cursor 把自家的 AI Agent 开放了:写几行 TypeScript 就能调 Cursor 干活 AI 技术日报 - 2026-05-01 AI 写代码每次结果都不一样?Archon 用 YAML 工作流把 AI 编程变成流水线 AI 写代码比你快了,但你还是得学编程——只不过学法得换 腾讯的龙虾特工队:4 个 AI Agent 同日更新,全家桶正式成型 Agno 不做更聪明的 Agent,它要把所有 Agent 框架包进同一个操作系统 Hermes Agent 终于有了像样的 Web 界面,而且还支持远程访问 Datawhale 出了一套 29 学科知识地图,把 AI 的底牌全掀了 Hermes Agent 在聊天框里就能用的 20 种高级功能 一份 AGENTS.md 能顶一次模型升级?Augment Code 用数据说了算 NVIDIA 开源了一个「AI 沙箱」,20K Star,让 Agent 跑代码不再裸奔 60ms 冷启动、5MB 内存:腾讯开源的这个沙箱让 Docker 安全隔离像笑话 AI 技术日报 - 2026-04-30 AI 技术日报 - 2026-04-29 AI 技术日报 - 2026-04-28 Goose:Linux 基金会亲儿子,能撼动 Claude Code 和 OpenCode 吗? AI 技术日报 - 2026-04-27 AI 技术日报 - 2026-04-26 Google 把价值20美元/月的东西免费了,102K人已经抢到了 OpenClaw 和 Claude Code 网络搜索配置指南 AI 技术日报 - 2026-04-25 Anthropic 为什么遥遥领先:从 Cat Wu 专访看AI霸主的底层逻辑 Mac 本地跑大模型完全指南:你的苹果电脑就是 AI 工作站 同样 70B 参数,为什么 MoE 只激活 13B 就能打平 Dense? DeepSeek-V4 技术报告里藏着一条线:华为昇腾 NPU 已完成推理验证 DeepSeek-V4 深夜炸场:1M 上下文、384K 输出、双模型,API 定价直接卷到底 MacBook Air 跑大模型实测:Ollama、llama.cpp、LM Studio 谁才是本地推理之王? AI 技术日报 - 2026-04-24 OpenCode:Claude Code 的最佳平替 2026 开源大模型五国杀:Qwen 3.6 vs Gemma 4 vs Llama 4 vs GLM-5.1 vs DeepSeek V4 MCP 与 Skills 的你死我活:Anthropic 的 Agent 生态野心与开发者的站队困境 给 AI Agent 配搜索,国内能用的搜索 API 实测对比 AI 技术日报 - 2026-04-23 CC Switch:49K Star 的 Claude Code 登录绕过神器,还能管 Codex 和 Gemini CLI NVIDIA 开出 32 万美元年薪招 AI Agent 工程师,JD 里藏着这些信号 fast-mirror-skill 技术拆解:一个小而完整的 Claude Skill 是怎么设计的 Cursor 值 600 亿美元?马斯克这次赌的不是技术,是入口 AI 技术日报 - 2026-04-22 别再问 AI 能不能赚钱了:3 个上班族亲测有效的副业方法(2026 最新版) 10 分钟从零搞定 Hermes Agent:飞书微信双通道丝滑上线 AI 技术日报 - 2026-04-21 Anthropic 实战总结:AI Agent 的 3 种工作流模式,选错代价很大 安装 openclaw,hermes 慢的想发疯,fast-mirror-skill 来救了 Claude Routines:你下班睡觉了,Agent 还在为你干活 微信飞书里敲一个斜杠就能干活:Hermes Quick Command 到底多省事 AI 正在疯狂吃电:算力尽头是电力,谁能解这道题? AI 技术日报 - 2026-04-20 3K 行代码造一个越用越聪明的 AI Agent:GenericAgent 登顶 GitHub Trending 高德途途封神机器人半马,背后的 ABot-Claw 到底是什么 人们希望 AI 能干啥?Anthropic 调查:第一名不是赚钱,是变强 AI 时代人们在担心什么?Anthropic 的 13 条焦虑排行榜 OpenAI 官方 Agent SDK 来了:22k Star,支持 100+ 模型,Python 10 行代码上手 AI 技术日报 - 2026-04-19 OpenAgents Workspace:让 Claude Code 和 Codex 在同一个群里干活 Claude 是要干掉整个软件行业吗? Claude 官方推荐多 Agents 设计模式 多 Agent 系统的 5 种协调模式:选错了模式,再强的 Agent 也白搭 AI 技术日报 - 2026-04-18 AI 技术日报 - 2026-04-17 Better-Harness:让AI Agent自己优化自己的革命性框架 OpenClaw Workspace 完全指南:我的AI编程工作流 DeepSeek内蒙草原高薪招聘:AI时代的数字牧民梦,还是营销噱头? 2 核 2G 的阿里云 ECS 能跑 OpenClaw 吗?能,但有点折腾 AI 技术日报 - 2026-04-16 从零到精通:OpenClaw CLI 命令完全指南 AI 技术日报 - 2026-04-15 AI Agent 如何自我进化?Hermes Agent Self-Evolution 深度解析 AI 技术日报 - 2026-04-14 为什么你的飞书 Bot 总是连不上?OpenClaw Gateway 架构深度解析 OpenClaw 连接飞书的原理:Gateway、Channel 与消息流转 国内安装 Hermes Agent 踩坑全记录:从 GitHub 超时到正常跑起来的每一步 35 万 Star 的 OpenClaw:5 分钟部署你的私人 AI 助手,直连飞书 AI 技术日报 - 2026-04-13 公司用 AI 筛简历,这个开源项目让候选人用 AI 反选公司 为什么 Google ADK 可能是你下一个 Agent 框架——7 个改变游戏规则的特性 Microsoft Agent Framework 深度解析:架构设计与实战落地 AI 技术日报 - 2026-04-11
OpenCLI:一个命令行搞定 16+ 内容平台的神器
iTech · 2026-04-15 · via 博客园 - iTech

OpenCLI:一个命令行搞定 16+ 内容平台的神器

第一次用 OpenCLI 抓取 B站视频信息时,我惊呆了——只需要一条命令,就能获取视频标题、UP主、播放量、弹幕数,甚至还能下载字幕。不用申请 API Key,不用处理复杂的认证,也不用写爬虫代码。

OpenCLI 的核心思想很简单:复用你浏览器的登录状态。你已经在浏览器里登录了 B 站、知乎、Twitter,为什么还要单独申请 API Key?OpenCLI 直接读取你的浏览器 Cookie,用命令行完成你在浏览器里能做的所有事情。

本文提纲

  1. OpenCLI 是什么
  2. 核心特性:为什么选择 OpenCLI
  3. 安装和配置
  4. 支持的 16+ 平台
  5. 实战案例:从入门到高级
  6. 与 AI Agent 集成
  7. 常见问题解答

OpenCLI 是什么

OpenCLI 是一个命令行工具,用于与社交和内容网站交互。它的设计理念是:Make Any Website & Tool Your CLI —— 让任何网站和工具都成为你的命令行工具。

与传统的爬虫工具不同,OpenCLI 不是通过解析 HTML 或调用 API 来获取数据,而是通过模拟浏览器操作,复用你的登录状态。这意味着:

  • 无需 API Key:直接使用你的浏览器登录
  • 支持所有功能:你在浏览器里能做的,命令行也能做
  • 反爬虫免疫:使用真实浏览器行为,不容易被封
  • 跨平台支持:Windows、macOS、Linux 都能用

核心特性:为什么选择 OpenCLI

1. 零配置,开箱即用

传统爬虫需要处理:
- 反爬虫机制(User-Agent、IP 代理、验证码)
- 登录认证(Cookie、Token、Session)
- 数据解析(HTML 结构变化、接口加密)

OpenCLI 只需要:
- 用浏览器登录一次
- 运行命令

2. 极速性能

Rust 版本的 OpenCLI-rs 宣称是 "Blazing fast, memory-safe":
- 单线程并发请求
- 零拷贝内存管理
- 原生编译,无运行时开销

3. 智能容错

  • 自动重试失败的请求
  • 智能处理网络波动
  • 优雅的错误提示

4. AI 原生集成

OpenCLI 深度集成了 AI 能力:
- 自动视频转写(YouTube/Bilibili)
- 智能内容打标
- AI 驱动的长视频精彩时刻提取

安装和配置

安装

OpenCLI 有多个版本,根据你的需求选择:

Rust 版本(推荐,性能最佳)

# 通过 Cargo 安装
cargo install opencli-rs

# 或下载预编译二进制文件
# 访问 GitHub Releases 页面

Node.js 版本

npm install -g opencli

Python 版本

pip install opencli

配置浏览器

OpenCLI 需要读取浏览器的登录状态,支持以下浏览器:

  • Chrome/Chromium
  • Edge
  • Firefox
  • Brave

配置步骤

  1. 在浏览器中登录你想要访问的平台(B站、知乎等)
  2. 运行以下命令让 OpenCLI 找到浏览器配置:
opencli config init
  1. 选择你的浏览器和配置文件路径

  2. 验证配置:

opencli doctor

这个命令会检查:
- 浏览器配置是否正确
- Cookie 是否有效
- 网络连接是否正常

支持的 16+ 平台

OpenCLI 支持的平台列表(持续更新中):

视频平台

  • Bilibili(B站):视频信息、弹幕、评论、UP主信息
  • YouTube:视频元数据、字幕、转写、评论
  • 抖音/TikTok:视频信息、热门趋势

社交媒体

  • Twitter/X:推文、用户信息、趋势话题
  • 微博:微博内容、热搜榜、用户动态
  • Reddit:帖子、评论、子版块信息
  • V2EX:主题、节点、用户信息

知识社区

  • 知乎:回答、文章、问题、用户信息
  • HackerNews:新闻条目、评论、排名
  • 雪球:股票讨论、用户动态

其他平台

  • 小红书:笔记内容、用户信息、热门话题
  • GitHub:仓库信息、Issue、PR、用户信息
  • Stack Overflow:问答、标签、用户信息

实战案例:从入门到高级

案例 1:获取 B站视频信息

获取视频基本信息:

opencli bilibili video --url "https://www.bilibili.com/video/BV1xx411c7mD"

输出示例:

{
  "title": "【原神】3.6版本前瞻特别节目",
  "uploader": "原神",
  "uploader_id": "401742377",
  "view": 2847391,
  "danmaku": 84732,
  "reply": 15623,
  "favorite": 45621,
  "coin": 98234,
  "share": 3452,
  "like": 234567,
  "duration": "36:45",
  "pubdate": "2026-04-12"
}

获取视频弹幕:

opencli bilibili danmaku --url "https://www.bilibili.com/video/BV1xx411c7mD" > danmaku.txt

下载视频字幕:

opencli bilibili subtitle --url "https://www.bilibili.com/video/BV1xx411c7mD"

案例 2:知乎问答抓取

获取问题下的所有回答:

opencli zhihu question --id "12345678" --answers

获取用户的所有文章:

opencli zhihu user --id "username" --articles

搜索关键词:

opencli zhihu search --query "人工智能" --limit 20

案例 3:Twitter 数据采集

获取用户推文:

opencli twitter user --screenname "elonmusk" --tweets --count 50

获取趋势话题:

opencli twitter trending --location "worldwide"

搜索推文:

opencli twitter search --query "#AI" --count 100

案例 4:Reddit 数据分析

获取子版块热门帖子:

opencli reddit hot --subreddit "programming" --limit 25

获取帖子评论:

opencli reddit comments --url "https://reddit.com/r/programming/comments/..."

获取用户信息:

opencli reddit user --username "username"

案例 5:批量操作和自动化

批量下载 B站 UP主的所有视频信息:

# 获取 UP主的所有视频 ID
opencli bilibili user --uid "401742377" --videos --json | \
  jq -r '.videos[].bvid' | \
  while read bvid; do
    opencli bilibili video --bvid "$bvid" --json >> videos.json
  done

监控知乎问题的新回答:

# 每 5 分钟检查一次新回答
while true; do
  opencli zhihu question --id "12345678" --new-answers
  sleep 300
done

案例 6:视频转写

自动转写视频内容(集成 Whisper):

# 优先使用字幕,没有字幕则使用 Whisper large-v3
opencli transcribe --url "https://www.youtube.com/watch?v=..." \
  --output transcript.txt

这个功能特别适合:
- 视频内容分析
- 自动生成字幕
- 内容索引和搜索

与 AI Agent 集成

OpenCLI 的真正威力在于与 AI Agent 的深度集成。它有专门的 OpenClaw Skill,让你可以在 Claude Code 中用自然语言控制所有平台。

在 Claude Code 中使用

  1. 安装 OpenClaw Skill:
openclaw skills install opencli
  1. 在 Claude Code 中使用自然语言:
帮我搜索 B站关于"人工智能"的热门视频,获取前 10 个视频的标题和播放量

Claude Code 会自动:
- 解析你的意图
- 调用 OpenCLI 命令
- 整理返回结果
- 生成可视化报告

实际应用场景

场景 1:舆情监测

监控微博上关于"OpenAI"的关键词,每 10 分钟汇总一次并发送通知

场景 2:内容研究

分析知乎上"机器学习"话题下高赞回答的共同特征

场景 3:竞品分析

抓取竞争对手在 B站发布的所有视频,分析发布时间、标题、互动数据

场景 4:自动化运营

当 Reddit r/programming 出现热门帖子时,自动生成摘要并发送到 Discord

常见问题解答

Q1:OpenCLI 会泄露我的账号信息吗?

A:OpenCLI 只读取浏览器存储的 Cookie,不会上传任何信息。所有数据都保存在本地。你可以查看源代码,确认安全性。

Q2:为什么有些平台无法访问?

A:可能的原因:
- 浏览器登录状态过期
- 浏览器配置文件路径不正确
- 网络问题
- 平台检测到自动化行为

运行 opencli doctor 诊断问题。

Q3:如何处理反爬虫限制?

A:OpenCLI 通过以下方式规避反爬虫:
- 使用真实浏览器 Cookie
- 模拟真实用户行为
- 智能延迟和重试

如果仍然被封,可以:
- 降低请求频率
- 使用不同的浏览器配置
- 等待一段时间后重试

Q4:OpenCLI 和爬虫框架(如 Scrapy)有什么区别?

A
- OpenCLI:快速、简单、无需处理认证,适合个人使用和快速原型
- Scrapy:强大、灵活、可扩展,适合大规模、生产环境的数据采集

Q5:如何贡献代码?

A:OpenCLI 是开源项目,欢迎贡献:
1. Fork GitHub 仓库
2. 创建特性分支
3. 提交 Pull Request
4. 参与讨论和代码审查

进阶技巧

技巧 1:自定义输出格式

OpenCLI 支持多种输出格式:

# JSON 格式(默认)
opencli bilibili video --url "..." --json

# CSV 格式
opencli bilibili video --url "..." --csv

# Markdown 表格
opencli bilibili video --url "..." --markdown

# 自定义模板
opencli bilibili video --url "..." --template "标题: {{title}}, 播放量: {{view}}"

技巧 2:管道和过滤器

将输出传递给其他工具:

# 获取 B站视频并排序
opencli bilibili user --uid "..." --videos --json | \
  jq '.videos | sort_by(-.view) | .[:10]'

# 筛选特定条件
opencli zhihu search --query "AI" --json | \
  jq '.results[] | select(.voteup > 1000)'

技巧 3:并发请求

批量操作时使用并发加速:

# 使用 xargs 并行处理
cat video_urls.txt | xargs -P 5 -I {} opencli bilibili video --url "{}"

# 使用 GNU parallel
parallel -j 10 opencli bilibili video --url {} ::: $(cat video_urls.txt)

技巧 4:定时任务

使用 cron 定期运行:

# 每天早上 9 点抓取 B站热门视频
0 9 * * * /usr/local/bin/opencli bilibili trending --json > /data/bilibili/trending_$(date +\%Y\%m\%d).json

技巧 5:数据可视化

将 OpenCLI 输出用于数据可视化:

# 生成 CSV 后用 Python 分析
opencli twitter trending --location "worldwide" --csv > trends.csv

# 使用 pandas 分析
python -c "
import pandas as pd
df = pd.read_csv('trends.csv')
print(df.head(10))
"

实战项目:构建个人知识库

结合 OpenCLI 和 AI,构建一个自动化知识库系统:

#!/bin/bash

# 配置
PLATFORMS=("bilibili" "zhihu" "hackernews")
KEYWORDS=("人工智能" "机器学习" "深度学习")
OUTPUT_DIR="/data/knowledge-base"

# 创建输出目录
mkdir -p "$OUTPUT_DIR"

# 遍历平台和关键词
for platform in "${PLATFORMS[@]}"; do
  for keyword in "${KEYWORDS[@]}"; do
    # 搜索内容
    opencli "$platform" search --query "$keyword" --json > \
      "$OUTPUT_DIR/${platform}_${keyword}_$(date +%Y%m%d).json"

    # 用 AI 生成摘要
    openclaw agent spawn "分析这个文件,提取关键信息:$OUTPUT_DIR/${platform}_${keyword}_$(date +%Y%m%d).json" > \
      "$OUTPUT_DIR/${platform}_${keyword}_$(date +%Y%m%d)_summary.md"
  done
done

echo "知识库更新完成:$(date)"

保存为 update-knowledge-base.sh,添加到 crontab:

0 */6 * * * /path/to/update-knowledge-base.sh

每 6 小时自动更新一次你的个人知识库。

OpenCLI 的设计哲学是"简单但强大"。它不试图成为一个全能的数据采集框架,而是专注于解决一个具体的问题:让你用命令行访问任何网站,就像在浏览器里一样简单

当你把 OpenCLI 与 AI Agent 结合时,真正的魔法就发生了——你可以用自然语言描述需求,AI 会自动调用 OpenCLI 完成复杂的操作。这就是未来的工作方式。


作者: itech
来源: 公众号:AI 人工智能时代

本文首发于 AI 人工智能时代,转载请注明出处。