Desarrollo
Robots.txt Generator — Documentación
Build a robots.txt file with user-agent, allow, disallow, crawl-delay, and sitemap rules, then download it locally.
Cómo funciona
Build a robots.txt file with user-agent, allow, disallow, crawl-delay, and sitemap rules, then download it locally.
Esta herramienta realiza la operación solicitada en el navegador cuando es posible.
Cómo usarla
- Introduce el valor que solicita el formulario. Para las comprobaciones de red, usa un dominio, URL o host público que tengas autorización para revisar.
- Esta herramienta realiza la operación solicitada en el navegador cuando es posible.
- El resultado aparece en el área de trabajo. Revisa las advertencias y las limitaciones antes de confiar en él.
Herramientas relacionadas
XML Sitemap GeneratorTurn a pasted list of absolute URLs into XML sitemap entries with optional last-modified dates, change frequency, and priority.SERP PreviewPreview a search result title, description, and URL with desktop and mobile layouts, and measure text pixel widths in your browser.Schema Markup GeneratorGenerate JSON-LD for FAQ, HowTo, Article, LocalBusiness, Product, and Breadcrumb schemas. Structured data stays in your browser.