llms.txt是2026年由AI搜索行业提出的文件标准,放在网站根目录下。它的作用类似robots.txt,但专门针对AI引擎(ChatGPT、Perplexity、Gemini等)。与robots.txt的“允许/禁止”二元控制不同,llms.txt提供的是“引导式”控制。
llms.txt文件格式简单,使用Markdown语法。以下是配置步骤:
在网站根目录下创廿ms.txt文件(如https://yourstore.com/llms.txt)
描述网站定位、核心品类和目标受众
列出核心产品页URL和简要描述,引导AI引擎优先抓取
指导AI引擎如何引用你的内容
列出不希望AI引擎抓取的URL路径
| 维度 | robots.txt | llms.txt |
|---|---|---|
| 目的 | 控制爬虫抓取权限 | 引导AI引擎引用行为 |
| 格式 | Disallow/Allow指令 | Markdown格式 |
| 强制性 | 强制 | 建议性 |
| 控制粒度 | URL级别 | 内容级别 |
| 电商价值 | 防止抓取敏感页面 | 引导抓取核心产品 |
Configure llms.txt to guide AI engines to properly crawl your product info.
Get Started Free →