El fichero robots.txt Ir a la tienda es una recurso fundamental para toda sitio que pretende ser bien posicionada por los buscadores como Chrome . Sirve como un instructivo para los crawlers , indicándoles qué páginas de tu sitio pueden deben crawleadas y cuáles evitar. La adecuada configuración de este fichero sirve a solucionar problemas de