跳转到主内容

封尘博客

未来的博客会是什么样子?

这两天我一直在思考,未来的博客会是什么样子的?

样式当然很重要,但我想说的不是样式,是结构。

随着 AI 爬虫越来越多,SEO 的玩法正在改变。

它没有消失,但从“猜关键词”变成了“让机器直接读懂结构”。而后者,恰好和 AI 爬虫的需求是同一件事。

AI 爬虫读页面靠的不是视觉,是 DOM 树和可访问性树。

页面的标签写得对不对、标题层级连不连续,直接决定了它能不能准确理解你写了什么。

于是我重新做了一个主题:语义化 HTML,给机器单独做了一份站点索引(llms.txt),让爬虫不用逐页去猜。

我做了三件事。

第一件,llms.txt。 放在网站根目录的一份索引,用 Markdown 写的,每条链接配一句摘要。相当于给机器看的目录页——告诉它哪些页面值得读、每篇在讲什么。不过这东西现在基本没人读,97% 的 llms.txt 都没有请求。我还是做了,因为成本极低。另外要说明的是,llms.txt 是2024年9月 Jeremy Howard 提出的提案,这是一个很年轻的实验性标准,不是成熟的基础设施。

第二件,JSON-LD。 嵌在页面里的结构化数据,把标题、日期、作者写成机器能直接解析的 BlogPosting。没有它,机器得猜哪段是日期,哪段是作者,有了它,可以保证机器读到的不是一段需要推断的文本。

第三件,MX-Ready。 MX-Ready 简单来说,就是把网页里所有“人一眼能看出来、机器得猜”的东西,都明明白白写进代码里。

通过这些,保证机器来读的时候,读到的是我想让它读到的,而不是它猜出来的。

我觉得这是未来的趋势——不是讨好爬虫,是减少它理解的成本。

还没有评论

写一条新评论

↑