惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

V
Visual Studio Blog
D
DataBreaches.Net
博客园 - 三生石上(FineUI控件)
博客园_首页
T
Tailwind CSS Blog
美团技术团队
Hugging Face - Blog
Hugging Face - Blog
博客园 - 叶小钗
大猫的无限游戏
大猫的无限游戏
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
云风的 BLOG
云风的 BLOG
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
博客园 - 聂微东
S
SegmentFault 最新的问题
小众软件
小众软件
酷 壳 – CoolShell
酷 壳 – CoolShell
N
Netflix TechBlog - Medium
Jina AI
Jina AI
WordPress大学
WordPress大学
U
Unit 42
J
Java Code Geeks
Blog — PlanetScale
Blog — PlanetScale
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
The Cloudflare Blog

少数派

派早报:Google 发布 Fitbit Air 等 - 少数派 「新人报到」確認需求,再開始 - 少数派 从 SOLO 独立开发者社区,我看到了越来越多开发者开始做自己的产品 - 少数派 我怎么管理那些"不常做,但总会忘"的生活事项 - 少数派 人形机器人量产元年,数据才是具身智能的“生死线” - 少数派 BuhoLaunchpad 高度还原 Mac 启动台:开发历程与思考 - 少数派 五年陪伴依然不舍,DIY 换壳后让罗技 MX Master 3 继续服役 - 少数派 新玩意 240|少数派的编辑们最近买了啥? - 少数派 一日一技|为什么你应该关闭 iOS 的键盘声音 - 少数派 我做了个插件和 Skills,一键提取任何网站的设计规范 Design.md - 少数派 住在三四线城市的你,该开始录播客了 - 少数派 甘南秘境,大白高国 - 少数派 AI的审美:谁让把我变成川内倫子 - 少数派 返工怎能不烦恼,打工人片单总有一部是你的「嘴替」 - 少数派 为了让「上厕所」更健康,我做了一个小工具 - 少数派 AI + Skill,能够让生成的文章去除 AI 味吗? - 少数派 新玩意|韶音OpenDots ONE 耳夹式耳机 - 少数派 《美满》| 在每一个春天的晚上相爱(362) - 少数派 新玩意|优篮子 PS01 MagSnap 磁吸支架 - 少数派 自我整合手记 | 我开始早睡了:用稳定规则,为自由托底 - 少数派 用龙虾(OpenClaw)两个多月,我最深的12个体会 - 少数派 听歌时间到,12 张你可能错过的 2025 华语乐坛好专辑 - 少数派 承诺能追吗 - 少数派 macOS 26启动台没了? 我做了个不一样的App启动器 - Keboard - 少数派 《四海为家的人》| INTJ对话INTJ(361) - 少数派 你发过的那些黑历史,是时候一次清干净了 - 少数派 新玩意:安安静静玩,越玩越专注:计客密码机 - 少数派 iPad 用户首次体验 Android 平板:vivo Pad6 Pro - 少数派 数据逻辑强 - 少数派 极北行+ | 一路向北,探访日本至北之地 | 001 - 少数派
2024 批量下载公众号,导出html和pdf,excel数据包含阅读数/...
2024-03-30 · via 少数派

之前分享过批量下载公众号文章导出html2023 更新版:苏生不惑开发过的那些原创工具和脚本,然后用pyppeteer转换html为pdf ,最近pip install -U pyppeteer 升级版本后发现不能用了,这里分享下解决方案,提示Starting Chromium download,要重新下载对应chromium:

[INFO] Starting Chromium download.
Traceback (most recent call last):
  File 
"htmltopdf.py"
, line 
95
, 
in
 <
module
>
    asyncio.get_event_loop().run_until_complete(main())
  File 
"E:\anaconda\lib\asyncio\base_events.py"
, line 
642
, 
in
 run_until_complete
    
return
 future.result()
  File 
"htmltopdf.py"
, line 
16
, 
in
 main
    browser = 
await
 launch()
  File 
"E:\anaconda\lib\site-packages\pyppeteer\launcher.py"
, line 
307
, 
in
 launch
    
return
 
await
 Launcher(options, **kwargs).launch()
  File 
"E:\anaconda\lib\site-packages\pyppeteer\launcher.py"
, line 
120
, 
in
 __init__
    download_chromium()
  File 
"E:\anaconda\lib\site-packages\pyppeteer\chromium_downloader.py"
, line 
138
, 
in
 download_chromium
    extract_zip(download_zip(get_url()), DOWNLOADS_FOLDER / REVISION)
  File 
"E:\anaconda\lib\site-packages\pyppeteer\chromium_downloader.py"
, line 
82
, 
in
 download_zip
    raise OSError(f
'Chromium downloadable not found at {url}: '
 f
'Received {r.data.decode()}.\n'
)
OSError
: Chromium downloadable not found at https:
//storage.googleapis.com/chromium-browser-snapshots/Win_x64/1181205/chs not exist.</Message><Details>No such object: chromium-browser-snapshots/Win_x64/1181205/chrome-win.zip</Details></Error>.

下载哪个版本的chromium可以使用如下代码:

import
 pyppeteer.chromium_downloader
PYPPETEER_CHROMIUM_REVISION = 
'1263111'
print(
'版本:{}'
.format(pyppeteer.__chromium_revision__))
print(
'文件路径:{}'
.format(pyppeteer.chromium_downloader.chromiumExecutable.get(
'win64'
)))
print(
'下载链接:{}'
.format(pyppeteer.chromium_downloader.downloadURLs.get(
'win64'
)))
版本:
1181205
文件路径:C:\Users\xxx\AppData\Local\pyppeteer\pyppeteer\local-chromium\
1181205
\chrome-win\chrome.exe
下载链接:https:
//storage.googleapis.com/chromium-browser-snapshots/Win_x64/1181205/chrome-win.zip  https://pan.quark.cn/s/330b0d5d2d10

可是https://storage.googleapis.com/chromium-browser-snapshots/Win_x64/1181205/chrome-win.zip 这个文件被删了,搜了下https://stackoverflow.com/questions/78023508/pyton-request-html-is-not-downloading-chromium, 用1263111版本就行 https://storage.googleapis.com/chromium-browser-snapshots/Win_x64/1263111/chrome-win.zip ,下载后解压到C:\Users\xxx\AppData\Local\pyppeteer\pyppeteer\local-chromium新建的目录1181205 ,mac版本在这里找https://commondatastorage.googleapis.com/chromium-browser-snapshots/index.html 。

图片

然后就可以用了,转换pdf效果:

图片

以莫言的公众号文章为例研究了下莫言的公众号,2023年发布文章166篇,阅读数10万+的文章有120篇,粉丝数过百万 ,网盘地址https://pan.quark.cn/s/afa15a7b027b

图片
图片
图片

还有导出的文章数据excel文件,数据包含文章日期,文章标题,文章链接,文章简介,文章作者,文章封面图,是否原创,文章类型,是否删除,IP归属地,阅读数,在看数,点赞数,粉丝数,留言数等,莫言2024年1月3日的粉丝数 1126443:

图片