为什么会有这个文件
AI 爬虫抓取网站时,需要花成本去理解整站结构。llms.txt 把这个过程前置了——直接用一段结构化文本说明关键信息,减少模型的理解成本,提高关键信息被准确引用的概率。
应该写什么
- 一段品牌定义:公司全称、所在地、主营业务,2~3 句说清;
- 核心服务与价格区间:有具体数字更好;
- 主要页面清单:带链接与一句话说明;
- 联系方式:官网、邮箱、地址。
注意事项
一是必须能正常访问(返回纯文本,不能是 404 页面);二是内容要与官网一致,不一致会稀释实体信号;三是它不能替代结构化数据与正常内容的建设,属于锦上添花而非核心手段。