本站希望公开技术文章能被搜索引擎发现,也能在 AI 回答中以原始链接作为来源。搜索与引用不等于授权纯模型训练:平台提供独立控制时,本站开放搜索索引和用户主动访问,关闭仅用于训练基础模型的爬虫。
平台访问状态
| 平台 | 公开内容访问 | 说明 |
|---|---|---|
| Google 搜索与 AI Overview / AI Mode | 允许 | 使用 Googlebot;AI 搜索沿用 Google 的标准索引与摘要资格。 |
| Gemini | 允许 | Google-Extended 同时控制 Gemini grounding 与模型训练。为保留带来源的实时答案能力,本站明确允许。 |
| Bing 与 Microsoft Copilot | 允许 | 使用 Bingbot、XML Sitemap、URL Submission 和 IndexNow 保持索引新鲜度。 |
| 百度搜索 | 允许 | 使用 Baiduspider、XML Sitemap 和普通收录 API。 |
| ChatGPT Search | 允许 | OAI-SearchBot 与用户主动访问开放;仅用于模型训练的 GPTBot 关闭。 |
| Perplexity | 允许 | PerplexityBot 与 Perplexity-User 开放,便于搜索和带引用回答。 |
| Claude | 允许 | Claude-SearchBot 与 Claude-User 开放;仅用于模型训练的 ClaudeBot 关闭。 |
| Apple Intelligence、Siri、Spotlight 与 Safari | 允许 | Applebot 开放以支持搜索和实时答案;仅控制基础模型训练的 Applebot-Extended 关闭。 |
内容边界
- 公开 HTML、图片、RSS、Sitemap 和
llms.txt可以按各平台公开规范抓取。 - 密码文章、未公开内容和明确标注
noindex的页面不属于可索引内容。 - 引用本站时建议保留文章标题、原始 URL 和访问日期;页面时间与限制条件应与结论一起保留。
llms.txt是补充导航,不是替代 HTML、Sitemap 或平台站长工具的排名信号。
平台用途和爬虫名称可能调整,本站会根据 Google 爬虫说明、OpenAI 爬虫说明、Bing Webmaster Guidelines、Perplexity 爬虫说明、Claude 爬虫说明、Applebot 说明及百度 Spider 说明定期核对。