robots.txt 生成

robots.txt 生成 简介

按分组配置 User-agent 与放行路径，生成 robots.txt 并检查常见的写错方向。「robots.txt 生成」来自 NTcp 站长工具的开发助手工具专区，免费在线使用，无需安装客户端、免登录注册。支持全站开放、屏蔽全部、禁止 AI 爬虫、WordPress 等方案一键套用。

相关工具

• JSON 格式化 - JSON 校验、美化、压缩，一键复制
• YAML ⇄ JSON - YAML 与 JSON 双向转换并校验语法，适合配置与 K8s 清单
• Base64 编解码 - 文本 / 数据 Base64 编解码，完整支持 UTF-8 中文
• URL 编解码 - encodeURIComponent / decode 与查询参数解析
• Unicode 转换 - 中文与 \uXXXX 转义序列互转
• 文本 ⇄ 字节编码 - 文本与十六进制 / 二进制 / 八进制 / 十进制字节序列互转，按 UTF-8 处理中文
• 摩尔斯电码 - 英文数字与摩尔斯电码互转，可用浏览器发声播放
• JWT 解析 - 拆解 JWT 的 Header 与 Payload，识别过期时间