El archivo robots.txt es un herramienta esencial para la sitio que busca estar bien indexada por los motores de búsqueda como Bing. Funciona como el directorio para los bots, indicándoles qué https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html