分类: 开发工具
Robots Meta 标签生成器
根据索引选项生成 robots meta 标签或 X-Robots-Tag 响应头
切换 index/noindex、follow/nofollow、archive、snippet、图片索引、翻译和最大图片预览等选项，同时得到 <meta name="robots"> 标签和对应的 X-Robots-Tag 响应头。完全在浏览器本地生成。
Meta 标签
<meta name="robots" content="index, follow" />
X-Robots-Tag 响应头
X-Robots-Tag: index, follow
本页的所有处理都在浏览器中完成，不会上传任何内容。
这个工具能做什么
页面的 robots meta 标签或 X-Robots-Tag 响应头可以向搜索引擎传达 robots.txt 无法表达的页面级指令：是否索引该页面、是否追踪其中的链接、是否保留缓存副本、是否在搜索结果中展示文本摘要或图片预览、是否提供翻译。响应头形式适用于没有 <head> 可放置 meta 标签的非 HTML 文件（例如 PDF）。这个工具会用同一组开关同时生成两种形式，确保二者保持一致。
使用方法
- 根据需要切换索引、追踪、缓存、摘要、翻译和图片索引选项。
- 选择一个最大图片预览尺寸。
- 将 meta 标签复制到页面的 <head> 中，或将响应头一行复制到服务器配置中。
隐私说明
本工具完全在你的浏览器中运行。输入的内容不会被上传、保存或分享，关闭标签页即随之消失。
常见问题
- meta 标签还是 X-Robots-Tag——该用哪个？
- 如果是可以编辑 <head> 的 HTML 页面，用 meta 标签；如果是非 HTML 文件（PDF、图片），或你更想通过服务器配置而不是标记来控制索引，就用 X-Robots-Tag 响应头——两者接受相同的指令值。
- 这会覆盖 robots.txt 吗？
- 二者作用不同：robots.txt 控制爬虫是否会抓取某个 URL，而这个标签控制爬虫抓取到页面后如何处理它。被 robots.txt 屏蔽的页面根本不会被抓取到，也就不会看到这个标签。
- 生成过程会把内容发送到服务器吗？
- 不会。标签和响应头都是直接在浏览器中根据你的选项组装出来的。