rrobots.txt生成robots.txt 文件生成器 User-agent 禁止路径(每行一个,例如 /admin/) # 禁止抓取的路径,每行一条(以 / 开头) /admin/ /cgi-bin/ /*.bak$ ? /zb_users/ 允许路径(可选,每行一个) # 允许抓取的路径,每行一条 / Sitemap URL(可选) 生成 robots.txt 内容 复制