# Directivas para el bot de Bing para que deje un # delay (especificado en segundos) entre peticiones. # TambiƩn se especifica el intervalo de horas en las # que se le permite hacer el crawl de la web User-agent: Bingbot Crawl-delay: 5 Visit-time: 0900-0945 # Bloqueamos Alexa y archive.org User-agent: ia_archiver Disallow: / User-agent: archive.org_bot Disallow: / User-agent: ia_archiver-web.archive.org Disallow: / User-agent: * Disallow: # Sitemap Sitemap: https://tutorialphp.net/sitemap.xml