El fichero robots.txt es una elemento esencial para la sitio web que busca estar bien indexada por los rastreadores como Bing. Funciona como una mapa para los bots, indicándoles qué áreas de tu https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html