惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Hugging Face - Blog
Hugging Face - Blog
腾讯CDC
阮一峰的网络日志
阮一峰的网络日志
博客园_首页
Last Week in AI
Last Week in AI
月光博客
月光博客
D
DataBreaches.Net
WordPress大学
WordPress大学
雷峰网
雷峰网
酷 壳 – CoolShell
酷 壳 – CoolShell
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
博客园 - 叶小钗
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
U
Unit 42
Recent Announcements
Recent Announcements
宝玉的分享
宝玉的分享
MyScale Blog
MyScale Blog
C
Check Point Blog
F
Fortinet All Blogs
B
Blog
小众软件
小众软件
Vercel News
Vercel News
罗磊的独立博客
有赞技术团队
有赞技术团队

少数派

派早报:Google 发布 Fitbit Air 等 - 少数派 「新人报到」確認需求,再開始 - 少数派 从 SOLO 独立开发者社区,我看到了越来越多开发者开始做自己的产品 - 少数派 我怎么管理那些"不常做,但总会忘"的生活事项 - 少数派 人形机器人量产元年,数据才是具身智能的“生死线” - 少数派 BuhoLaunchpad 高度还原 Mac 启动台:开发历程与思考 - 少数派 五年陪伴依然不舍,DIY 换壳后让罗技 MX Master 3 继续服役 - 少数派 新玩意 240|少数派的编辑们最近买了啥? - 少数派 一日一技|为什么你应该关闭 iOS 的键盘声音 - 少数派 我做了个插件和 Skills,一键提取任何网站的设计规范 Design.md - 少数派 住在三四线城市的你,该开始录播客了 - 少数派 甘南秘境,大白高国 - 少数派 AI的审美:谁让把我变成川内倫子 - 少数派 返工怎能不烦恼,打工人片单总有一部是你的「嘴替」 - 少数派 为了让「上厕所」更健康,我做了一个小工具 - 少数派 AI + Skill,能够让生成的文章去除 AI 味吗? - 少数派 新玩意|韶音OpenDots ONE 耳夹式耳机 - 少数派 《美满》| 在每一个春天的晚上相爱(362) - 少数派 新玩意|优篮子 PS01 MagSnap 磁吸支架 - 少数派 自我整合手记 | 我开始早睡了:用稳定规则,为自由托底 - 少数派 用龙虾(OpenClaw)两个多月,我最深的12个体会 - 少数派 听歌时间到,12 张你可能错过的 2025 华语乐坛好专辑 - 少数派 承诺能追吗 - 少数派 macOS 26启动台没了? 我做了个不一样的App启动器 - Keboard - 少数派 《四海为家的人》| INTJ对话INTJ(361) - 少数派 你发过的那些黑历史,是时候一次清干净了 - 少数派 新玩意:安安静静玩,越玩越专注:计客密码机 - 少数派 iPad 用户首次体验 Android 平板:vivo Pad6 Pro - 少数派 数据逻辑强 - 少数派 极北行+ | 一路向北,探访日本至北之地 | 001 - 少数派
2024 批量下载微博内容/图片/视频/评论/转发,导出excel和pdf...
2024-03-30 · via 少数派

之前分享过我写的几个工具2023 更新版:苏生不惑开发过的那些原创工具和脚本 ,今天再更新下微博下载。

还是以这个号为例https://weibo.com/n/歌手李健,共抓取727条微博,导出的excel微博数据包含微博链接,微博正文,原始图片链接,被转发微博原始图片链接,是否为原创微博,微博视频链接,发布位置,发布时间,发布工具,点赞数,转发数,评论数,话题等。

图片

第一条微博发布于2010年5月31  https://www.weibo.com/1744395855/OyJMj

图片

再根据微博点赞转发评论数之和做个降序排列,这样就能找出受欢迎的前10微博了。

import
 pandas 
as
 pd
df=pd.read_csv(
'weibo/歌手李健/1744395855.csv'
)
df[
'sort'
]=df[
'点赞数'
]+df[
'转发数'
]+df[
'评论数'
]
df.sort_values(by=[
'sort'
],ascending=False, inplace=True)
df.head(
10
).to_csv(
'歌手李健.csv'
,encoding=
'utf_8_sig'
,index=False)
https
:
//www.weibo.com/1744395855/LgnjmrmvF
https:
//www.weibo.com/1744395855/Cc3T09sqM
https:
//www.weibo.com/1744395855/C9UW2BmNd
https:
//www.weibo.com/1744395855/ChaNZmx6A 
https:
//www.weibo.com/1744395855/Jfpw2xihv
https:
//www.weibo.com/1744395855/CfNZzoAMV
https:
//www.weibo.com/1744395855/Ckrkv2A0b
https:
//www.weibo.com/1744395855/Fn3bhwNWv
https:
//www.weibo.com/1744395855/Gt5of2OCo
https:
//www.weibo.com/1744395855/Gt5of2OCo

再分析下微博发布工具比例图:

图片

微博内容词云图:

图片

原创微博与转发数据分布图:

图片

转发评论点赞数据分布图:

图片

导出pdf,大小 40MB。 

图片

所有微博图片:

图片

然后是批量下载微博评论

苏生不惑

这个账号已经持续5年每周更新原创文章,分享些有趣实用的软件/网站和黑科技教程,来跟我一起高效地玩转互联网。

490篇原创内容

打开工具输入微博链接和网页版微博cookie就行,比如 https://weibo.com/1744395855/O0haQaIfE,https://m.weibo.cn/detail/5000660202553386

图片

不过下载的评论比实际评论数少很多,可能被微博过滤了,点击加载更多没反应。

图片

导出的excel数据包含微博昵称,微博uid,评论时间,评论内容,评论地区,回复数,点赞数等。

图片

对excel文件分析评论IP地址分布图:

图片

对excel文件分析评论内容生成的词云图:

图片

还有批量下载微博转发内容,导出的excel数据包含微博昵称,微博uid,转发时间,转发内容,转发地区,转发来源,转发数,评论数,点赞数,比如https://m.weibo.cn/status/5000660202553386这条微博有5000多条转发微博:

图片

对excel文件分析微博转发ip地址分布图:

图片

对excel文件分析微博转发内容词云图:

图片

最后分享个查看微博无水印图片小技巧,有水印图https://lz.sinaimg.cn/mw690/001U3j31ly1gnynq1xvcqj634022oqv502.jpg替换为oslarge就是无水印图https://lz.sinaimg.cn/oslarge/001U3j31ly1gnynq1xvcqj634022oqv502.jpg,效果对比:

图片
图片

最新原创文章:

正式介绍下我的知识星球

2023 更新版:苏生不惑开发过的那些原创工具和脚本

再次更新:2023批量下载公众号文章内容/话题/图片/封面/视频/音频,导出文章pdf,文章数据含阅读数/点赞数/在看数/留言数

一次性搞定微博,苏生不惑又写了个脚本,一键下载微博内容导出pdf,批量抓取微博评论转发数据导出excel

苏生不惑出品:2024 批量下载知乎回答,文章和想法,导出 excel 和 pdf ,文章数据包括标题,链接,赞同数

下载视频不求人,免费下载全网视频

全网电子书都在这了:ZLibrary 官方通道来了,不再担心找不到最新地址,配合这个脚本简直完美

2024 最新阿里云盘/百度网盘/夸克网盘资源搜索神器

研究了下莫言的公众号,发现。。。