惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

阮一峰的网络日志
阮一峰的网络日志
IT之家
IT之家
H
Heimdal Security Blog
Jina AI
Jina AI
宝玉的分享
宝玉的分享
博客园 - 【当耐特】
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
爱范儿
爱范儿
T
Tailwind CSS Blog
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
Apple Machine Learning Research
Apple Machine Learning Research
有赞技术团队
有赞技术团队
酷 壳 – CoolShell
酷 壳 – CoolShell
WordPress大学
WordPress大学
AWS News Blog
AWS News Blog
C
Cisco Blogs
Cisco Talos Blog
Cisco Talos Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
D
Darknet – Hacking Tools, Hacker News & Cyber Security
The Hacker News
The Hacker News
The Cloudflare Blog
Hugging Face - Blog
Hugging Face - Blog
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
T
Threatpost
S
Securelist
P
Privacy International News Feed
C
CXSECURITY Database RSS Feed - CXSecurity.com
博客园 - 聂微东
博客园 - 叶小钗
J
Java Code Geeks
V
V2EX
博客园 - Franky
Spread Privacy
Spread Privacy
K
Kaspersky official blog
C
Cyber Attacks, Cyber Crime and Cyber Security
Simon Willison's Weblog
Simon Willison's Weblog
Project Zero
Project Zero
大猫的无限游戏
大猫的无限游戏
S
SegmentFault 最新的问题
C
Cybersecurity and Infrastructure Security Agency CISA
C
CERT Recently Published Vulnerability Notes
Latest news
Latest news
NISL@THU
NISL@THU
罗磊的独立博客
W
WeLiveSecurity
Google DeepMind News
Google DeepMind News
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
博客园_首页
V
Visual Studio Blog

高金的博客

人机协作逆向:用 AI + Frida 打通微信 4.1.8 macOS 数据库密钥提取 情绪价值与求真:如何平衡与应对? friend_tech 第一笔交易只能买 1 个key? friend_tech 套利到底有多卷 无公网ip,无服务器实现内网穿透 植物挖矿 浏览器环境检测 加密、编码相关知识汇总 使用tensorflow识别验证码 POW与反爬虫 appium 安卓无法点击搜索框解决办法 知乎直播弹幕抓取与解析 知乎直播套利分析 1000刀+的羊毛在等你 如何创建一个完全匿名的EOS、ETH账号 如何通过技术手段证明"我"没有去过武汉 XUNTA 季度报告 玩游戏不如CX,JUSTGAME邀请分析(内附元数据) 如何在conflux上部署合约 EOS 1.8 bidname的漏洞分析
程序员找对象聚合平台-xunta.today
Gao JIn · 2019-11-30 · via 高金的博客

背景

程序员相亲的公众号最近也挺多的,但是因为微信平台的原因

导致无法搜索,不能更快的寻找需要的信息…

所以做了一个聚合N个相亲公众号信息的网站 https://xunta.today

网站名字叫 XUNTA

信息来源

目前只汇总以下公众号的文章

  • CQ脱单联萌
  • 程序员脱单实验室
  • 村姑的个人农场
  • 单身青年自救平台
  • 脱单吖

如果还有新的公众号也提供相亲信息的话 欢迎邮件告诉我

上面那几个还是发朋友圈问来的

原理

通过爬虫定期去爬取以上公众号的文章,下载网页源代码就好了

然后把源代码丢到pelican 里面

再放到github上面

源代码在:https://github.com/xunta-today/website

爬虫的没有公开,主要怕公开了微信限制接口,后面增加工作量,有需要可以邮件我.

碰到的问题

  1. 微信图片有防盗链

使用nginx转发一下就可以了,当然需要先把图片域名改成你的

如下

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
location /mmbiz{
proxy_set_header referer "https://mp.weixin.qq.com";
proxy_set_header origin "https://mp.weixin.qq.com";
proxy_set_header user-agent "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36";

rewrite /(.+)$ /$1 break;
proxy_pass http://mmbiz.qpic.cn;
}

location /mp{
proxy_set_header referer "https://mp.weixin.qq.com";
proxy_set_header origin "https://mp.weixin.qq.com";
proxy_set_header user-agent "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36";
rewrite /(.+)$ /$1 break;
proxy_pass https://mp.weixin.qq.com;
}

搜索

站内搜索

用的是 tipue_search

显示结果有点辣眼睛

因为源代码里面太多乱七八糟的东西了,所以我直接在创建搜索的时候,只保留了文章中的中文内容,其他全部去掉了…

用Google搜索

直接用 site:xunta.today 加上你要搜索的内容 搜索

后续计划

爬虫会每天更新一次

公众号也会每周汇总一次,有人有兴趣一起参与的话欢迎邮件我,(不限于讨论,排版,等等…)

投诉与建议

如果你觉得某篇文章有冒犯你,请直接邮件我 并且带上链接!

有好的建议也欢迎邮件!

邮件

xunta@igaojin.me

一个彩蛋

删除一些不相关文章的时候发现的。。。


本文作者:高金
本文地址https://igaojin.me/2019/11/30/程序员找对象聚合平台-xunta-today/
版权声明:转载请注明出处!

推荐文章