El archivo robots.txt es una elemento clave para la página web que pretende ser bien vista por los buscadores como Bing. Funciona como un mapa para los crawlers , indicándoles qué áreas de tu sitio pueden están indexadas y cuáles evitar. La óptima configuración de este fichero ayuda a evitar prob