首页 / 网络工具 / 在线

robots.txt生成

网络工具 · 1 次 · 2026-10-04 · 分享 · 全屏

User-agent（搜索引擎）规则（Allow / Disallow + 路径）

Crawl-delay（秒，可选） Sitemap 地址（可选，每行一个）

robots.txt 输出

粘贴 robots.txt 内容

评分：

(-/5 · 0人评)

📖 使用说明

生成或解析robots.txt蜘蛛协议文件。

操作步骤：

选择搜索引擎并设置允许/禁止目录；
填写sitemap地址后生成内容；
或粘贴现有内容解析校验。

💬 用户评论 (0)

还没有评论，快来抢沙发！