核心结论：llms.txt 是 AI 爬虫的「内容地图」

2026 年，主流 AI 搜索引擎（ChatGPT/DeepSeek/Perplexity/Kimi）开始遵循 llmstorg 规范，在索引网站时优先查找 /llms.txt 文件。这个文件相当于 AI 爬虫的「内容地图」，告诉 AI「我的网站有哪些内容、核心内容是什么、如何快速索引」。

昆仑镜社区的 https://aigc.fushtn.com/llms.txt 文件为 AI 爬虫提供了：

  1. 产品事实：昆仑镜是什么、核心功能、目标用户
  2. 社区内容索引：30 篇精选帖子的标题和摘要
  3. 分类导航：社区分类和热门标签

llms.txt 的字段设计

昆仑镜社区的 llms.txt 遵循 llmstorg 规范，结构如下：

# 昆仑镜

> AI 短剧制作与数字员工协作平台。昆仑镜（Kunlun Mirror）是掌柜团队开发的 AI 应用操作系统，
> 核心功能包括 AI 短剧制作、数字员工协作、同声传译、新媒体运营工作台。

## 产品文档

- AI 短剧制作指南: 5 步完成 AI 短剧，从剧本到成片
- 数字员工配置手册: 配置 Alice/Carol/Bob 等 AI 员工
- 同声传译使用指南: 101 种语言实时互译

## 社区内容

- GEO 优化实战: 让 AI 搜索引擎爱上你的内容
- AI 摘要写作法: 50-200 字黄金公式
- 2026 年度大模型总榜: 40 款模型四维评测

## 分类索引

- 教程分享: 使用技巧与教程
- 技术问答: 技术问题求助与解答

llms.txt 与 sitemap.xml 的协同

文件目标读者更新频率作用
llms.txtAI 爬虫1 小时缓存核心内容索引，告诉 AI「什么是重要的」
sitemap.xml传统搜索引擎实时全量 URL 索引，告诉爬虫「有哪些页面」
robots.txt所有爬虫静态爬虫访问规则

昆仑镜社区的 llms.txt 使用 1 小时缓存（s-maxage=3600），平衡了内容新鲜度和服务器负载。sitemap.xml 则使用 Nitro 服务端代理，全量透传后端数据（take:500），确保 100+ 帖子全部收录。

AI 爬虫的索引流程

1. AI 爬虫访问 aigc.fushtn.com
2. 优先查找 /llms.txt → 获取核心内容索引
3. 根据 llms.txt 中的链接，选择性抓取详情页
4. 详情页读取 JSON-LD 结构化数据
5. 综合 llms.txt + JSON-LD + 正文前两段 → 建立索引

为什么 llms.txt 比 sitemap.xml 更适合 AI

  1. 摘要信息：llms.txt 包含每篇内容的摘要，AI 无需打开页面就能判断相关性
  2. 优先级排序：llms.txt 按重要性排序，AI 优先索引前面的内容
  3. 语义化描述：llms.txt 用自然语言描述内容，比 URL 列表更友好
  4. 更新频率可控：通过缓存策略控制 AI 爬虫的抓取频率

如何让 AI 爬虫优先索引你的内容

  1. 内容质量：AI 爬虫会评估内容深度和原创性，低质量内容会被降权
  2. 结构化数据：JSON-LD 完整的帖子会被优先索引
  3. 更新频率：定期更新内容会提升 AI 爬虫的回访频率
  4. 内部链接：在社区帖子中互相链接，提升整体权重

行动建议

  • 了解 llms.txt 的字段规范（llmstorg）
  • 在社区发布高质量原创内容，进入 llms.txt 索引
  • 使用准确的结构化数据（JSON-LD）
  • 关注昆仑镜社区的 GEO 优化实践