El archivo robots.txt es una recurso esencial para cualquier sitio web que desea ser bien vista por los buscadores como Bing. Funciona como el directorio para los rastreadores , indicándoles qué páginas de tu web pueden están rastreadas y cuáles no . La adecuada configuración de este archivo pued