惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

I
InfoQ
D
DataBreaches.Net
Engineering at Meta
Engineering at Meta
GbyAI
GbyAI
Martin Fowler
Martin Fowler
Security Latest
Security Latest
Cisco Talos Blog
Cisco Talos Blog
MongoDB | Blog
MongoDB | Blog
D
Darknet – Hacking Tools, Hacker News & Cyber Security
IT之家
IT之家
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
S
Security Affairs
www.infosecurity-magazine.com
www.infosecurity-magazine.com
博客园_首页
L
LINUX DO - 最新话题
Know Your Adversary
Know Your Adversary
S
Schneier on Security
The Last Watchdog
The Last Watchdog
Attack and Defense Labs
Attack and Defense Labs
T
Tenable Blog
G
GRAHAM CLULEY
Y
Y Combinator Blog
P
Palo Alto Networks Blog
L
LINUX DO - 热门话题
Hugging Face - Blog
Hugging Face - Blog
W
WeLiveSecurity
C
Cybersecurity and Infrastructure Security Agency CISA
aimingoo的专栏
aimingoo的专栏
博客园 - 司徒正美
The Register - Security
The Register - Security
T
The Exploit Database - CXSecurity.com
MyScale Blog
MyScale Blog
M
MIT News - Artificial intelligence
Cyberwarzone
Cyberwarzone
雷峰网
雷峰网
T
Tailwind CSS Blog
V2EX - 技术
V2EX - 技术
T
Threat Research - Cisco Blogs
S
Secure Thoughts
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
O
OpenAI News
C
Cyber Attacks, Cyber Crime and Cyber Security
The Cloudflare Blog
量子位
Apple Machine Learning Research
Apple Machine Learning Research
T
Threatpost
S
SegmentFault 最新的问题
小众软件
小众软件
Google DeepMind News
Google DeepMind News
Help Net Security
Help Net Security

姓王者的博客

Linux用户Secure Boot自主维护指南 | 姓王者的博客 MAD Bugs 已经开始——关于信息安全的军备竞赛 | 姓王者的博客 解决钉钉Dingtalk无法在Linux新版内核上启动问题-修复可执行栈错误 | 姓王者的博客 突发:GitHub 正遭受大规模 Issue 赌博广告轰炸 | 姓王者的博客 Ubuntu26.04-beta体验:坚毅浣熊! | 姓王者的博客 fakeclaw装作龙虾发贴吧 | 姓王者的博客 找回12年前的QQ记忆 | 姓王者的博客 在Linux上玩Flash网页游戏-洛克王国 | 姓王者的博客 Copilot将使用交互数据来训练 | 姓王者的博客 重要通知-请更新我的GPG公钥 | 姓王者的博客 为了自由Android | 姓王者的博客 GPL"2,3"事 | 姓王者的博客 短文-对VitePlus的一点🤏小贡献 | 姓王者的博客 Bing收录没了?亲测有效的快速恢复指南 | 姓王者的博客 解决桌面设备二维码快速识别的工具-ClipQR | 姓王者的博客 解决 Nautilus 自定义终端插件安装依赖问题 | 姓王者的博客 OpenClaw 该熄火了 | 姓王者的博客 Vite8 - 统一的基建开始 | 姓王者的博客 Astro 6 推出啦 | 姓王者的博客 ubuntu的openvpn异常暂停推送更新 | 姓王者的博客 Ubuntu 24.04 安装 Win10 虚拟机 | 姓王者的博客 ESA-后记:热爱阿里云 | 姓王者的博客 Moonbit 0.8.0 重大发布,我也要改一下我的包 | 姓王者的博客 ESA Pages 边缘开发大赛获奖 | 姓王者的博客 Astro: 优化katex,mermaid和灯箱使用 | 姓王者的博客 从edgeone迁移到esa | 姓王者的博客 出租人类:AI时代的荒诞与真实 | 姓王者的博客 Astro 5.17构建性能优化实践:从18s到13s | 姓王者的博客 Moonbit License Checker 开发使用 | 姓王者的博客 Stalux Astro博客主题自荐 | 姓王者的博客 把Hexo永久链接迁移到Astro | 姓王者的博客 再见👋 LeanCloud | 姓王者的博客 2025年终总结 | 姓王者的博客 许可合规-fancybox | 姓王者的博客 博客主题的软著下来了 | 姓王者的博客 友链图谱 - 汇聚千丝万缕的联系 | 姓王者的博客 chen-er 专为Chen式ER图打造的npm包 | 姓王者的博客 为什么我推荐你使用GPG来加密你的邮件 | 姓王者的博客 2025第三方客户端登录东北大学邮箱 | 姓王者的博客 好久没更新了,过去与未来 | 姓王者的博客 1024 重要的日子 | 姓王者的博客 再也不见Windows10 | 姓王者的博客 偷梁换柱,解决Ubuntu24.04安装Packet Tracer缺失依赖问题 | 姓王者的博客 中秋-来试试Moonbit吧 | 姓王者的博客 Obsidian使用体验 | 姓王者的博客 猪猪侠·一只老猪的逆袭 | 姓王者的博客 国庆日纪念 | 姓王者的博客 GNU 42周年,AI时代的自由精神 | 姓王者的博客 解决Linux上启动游戏总是默认English的情况 | 姓王者的博客 7x24:运维使命 | 姓王者的博客 Tauri2.x实现系统菜单导航Vue路由 | 姓王者的博客 计算机图形学-基本图形生成算法 | 姓王者的博客 数据库原理-关系数据 | 姓王者的博客 数据库原理-设计技巧 | 姓王者的博客 数据库原理E-R模型 | 姓王者的博客 旧忆 - 我曾玩过的游戏 | 姓王者的博客 再谈自由软件 | 姓王者的博客 可能解决Tauri多窗口应用阻塞问题 | 姓王者的博客 Xingwangzhe! Z-Library We miss you and we need your help | 姓王者的博客 计算机组成原理第二章 - 定点数与浮点数 | 姓王者的博客 计算机组成原理第一章 | 姓王者的博客 不小心写死循环窗口弹出了 | 姓王者的博客 美化Grub界面 | 姓王者的博客 计算机图形学-图形的表示与数据结构 | 姓王者的博客 计算机图形学绪论 | 姓王者的博客 为什么说,大学教育与社会脱节 | 姓王者的博客 VSCode Remote 远程连接服务器记录 | 姓王者的博客 解决Tauri2.x拖拽事件问题 | 姓王者的博客 新学期第一课《计算机图形学》报告 | 姓王者的博客 Tauri在GNOME46+上通知无效的临时解决方法 | 姓王者的博客 窃文者:未经授权转载我文章 | 姓王者的博客 GPG公钥分享文化 | 姓王者的博客 解决在ubuntu上,打包vscode插件问题 | 姓王者的博客 伪造squaremap的玩家显示 | 姓王者的博客 爆,沉浸式翻译泄露敏感信息 | 姓王者的博客 读书:《Free as in Freedom》——若为自由故 | 姓王者的博客 首页文章列表懒加载优化 | 姓王者的博客 Ubuntu 24.04 安装 Vivado 2018.3 | 姓王者的博客 腾讯Edgeone免费版体验 | 姓王者的博客 在 Ubuntu 上实现 Thetis FIDO U2F 密钥登录 | 姓王者的博客 Thetis物理密钥,为什么我们应该使用物理密钥 | 姓王者的博客 高考生过来看!教你精准转换录取位次! | 姓王者的博客 ubuntu无法访问windows磁盘问题 | 姓王者的博客 收信有感,防范钓鱼邮件 | 姓王者的博客 自由不止软件-记录一次zlib上传书籍 | 姓王者的博客 时隔两年,通关夺命邮差2 | 姓王者的博客 博客一周年了,竟然坚持了下来 | 姓王者的博客 Minecraft大电影:不建不散! | 姓王者的博客 是时候了解docker了! | 姓王者的博客 编译原理:LL(1)文法 | 姓王者的博客 编译原理:文法转换 | 姓王者的博客 离散数学:子群的陪集及拉格朗日定理 | 姓王者的博客 离散数学:半群,独异点 | 姓王者的博客 《人工智能生成合成内容标识办法》与个人博客--我们应该做什么? | 姓王者的博客 通识学习:形式语言与自动机,布尔代数与数进制 | 姓王者的博客 Webmapview:一个我的世界内置网页地图浏览Fabric模组 | 姓王者的博客 海岛机器人农场试玩 | 姓王者的博客 正则表达式学习 | 姓王者的博客 抓取个人博客文章目录到github主页 | 姓王者的博客 制作github贪吃蛇贡献图 | 姓王者的博客
Waline被莫名索引问题解决 | 姓王者的博客
作者:xingwangzhe · 2025-07-04 · via 姓王者的博客

🕒 阅读时间:2 分钟 📝 字数:672 👀 阅读量: Loading...

:::tip

我今天交的两个 PR 解决这个问题:

详情可以直接查看,这样可以省去阅读此文的冗余。

:::

Waline 首页被莫名索引

很多人应该都用过 Waline,Waline 前端需要配置域名,大部分人都是 waline.example.com,但是我搜索我站点时,发现 Waline 首页莫名其妙被索引了。

之前的官方库里有静态文件 robots.txt,但 URL 没找到?

robots.txt在哪

这是测试域名,我已经删除了,不要想搞坏事哟!!!

方案一:现在就更新 Vercel 部署

Waline:vercel一键部署

因为我交过 PR 了,所以现在是正常的,但是环境变量估计得重配?我自己使用的是手动修复。

方案二:手动修复

当你通过 Vercel 部署,你的 GitHub 会存在一个私有仓库,修改其 vercel.json 文件内容,应该这么改,第二个代码块是方便复制粘贴的版本:

{

"name": "comment",

"github": {

"silent": true

},

"builds": [

{

"src": "robots.txt",

"use": "@vercel/static"

},

{

"src": "index.cjs",

"use": "@vercel/node"

}

],

"rewrites": [

{

"source": "/(.*)",

"source": "/((?!robots\\.txt$).*)",

"destination": "index.cjs"

}

]

}

{

"name": "comment",

"github": {

"silent": true

},

"builds": [

{

"src": "robots.txt",

"use": "@vercel/static"

},

{

"src": "index.cjs",

"use": "@vercel/node"

}

],

"rewrites": [

{

"source": "/((?!robots\\.txt$).*)",

"destination": "index.cjs"

}

]

}

注意: 下面是原理解释,如果你对具体原理不感兴趣,完全可以退出了,上面所讲已经解决了你的问题。

Why and Why?

我好像有一种诡异的直觉,似乎理所应当地认为 Vercel 默认会把 robots.txt 当做静态资源,自动路由,自动复制生成,但是问题是,这种直觉建立在我经常使用 SSG 的幻觉上,但显然 Waline 评论系统不是。

路由:由得自己

默认路由使用这个来引用 Waline 在 Vercel 封装的模块,但从后来的 Waline 首页来看,它能和 SEO 关系上的也只有 <head> 标签里面的 meta 元素了,当然实际上也没有在这一层面上禁止索引,所以看看就好,可以跳过这段代码:

const Application = require("@waline/vercel");

module.exports = Application({

plugins: [],

async postSave(comment) {

// do what ever you want after comment saved

},

});

查看更重要的 Vercel 路由配置,重写路由这方面:

...

"rewrites": [

{

"source": "/((?!robots\\.txt$).*)",

"destination": "index.cjs"

}

]

...

正则头疼

  • ^:匹配字符串的开始位置,这里表示要从 URL 路径的开头开始匹配。

  • \/:匹配字符 /,因为 / 在正则表达式中有特殊含义,所以需要用反斜杠 \ 进行转义。
    这里表示要匹配 URL 路径中的第一个 /

  • (:开始一个捕获组,用于将后续匹配的部分作为整体进行处理。

  • (?!robots.txt$):这是一个负向前瞻断言,意思是当前匹配的位置不能是 robots.txt 这个字符串的开头,并且要求 robots.txt 必须完整地出现在 URL 路径的末尾(因为 $ 匹配字符串的结尾)。

    也就是说,如果 URL 路径是 /robots.txt,则整个正则表达式不会匹配这个路径。

  • .*:匹配任意数量(包括零个)的任意字符(除了换行符),这里的 . 表示任意字符,* 表示零次或多次重复前面的 .
    所以这部分会匹配 / 后面的所有字符,只要这些字符不构成一个以 robots.txt 结尾的路径。

  • ):结束捕获组。

所以整体来说,这个正则表达式 /((?!robots.txt$).*) 的意思是匹配以 / 开头,并且后面跟着任意字符(不包括换行符),但不能是以 /robots.txt 结尾的 URL 路径。

在重写规则中,它的作用是将除了 /robots.txt 以外的所有 URL 路径的请求都重写到 index.cjs 文件。

例如: 当访问 /about/contact.html/api/data 等路径时,都会被重写到 index.cjs,而访问 /robots.txt 则不会被重写,而是直接按正常方式处理(比如返回实际的 robots.txt 文件内容,如果存在的话)。

别忘静态生成

我得向vercel声明一下这个是静态资源,不用构建,直接复制粘贴就行:

...

"builds": [

{

"src": "robots.txt",

"use": "@vercel/static"

},

...

],

...

至此,彻底解惑。