El fichero robots.txt es una elemento clave para cualquier sitio web que busca ser bien posicionada por los motores de búsqueda como Bing. Opera como el directorio para los bots, indicándoles qué áreas de tu plataforma pueden deben rastreadas y cuáles se deben excluir . La adecuada configuración de este fichero sirve a prevenir problemas de i