Un sitio web publica en la ruta raíz un fichero robots.txt conforme el estándar de exclusión de robots con el siguiente contenido: User-agent: * Disallow: / ¿Cuál es el significado de dicha directiva?
- A.Permite que todos los bots que recorran el sitio web recopilen información de todas sus páginas.
- B.Impide de manera segura que todos los bots que recorran el sitio web recopilen información de todas sus páginas.
- C.Indica a todos los bots que recorran el sitio web que no recopilen información de ninguna de sus páginas, aunque dicha instrucción tiene carácter informativo.Respuesta correcta
- D.Indica la adecuación del contenido para cualquier agente de usuario, indistintamente del navegador y plataforma del cliente.
Explicación
Un robots. txt con 'User-agent: * / Disallow: /' indica a todos los bots que no rastreen ninguna pagina, pero esta instruccion tiene caracter informativo y no imperativo (opcion . Los bots pueden ignorar el robots.