Robots.txt
10/9/2024
Creador: Ángel González
El archivo robots.txt es un archivo que indica a los motores de búsqueda qué partes de un sitio web pueden o no ser rastreadas e indexadas, ayudando a controlar el comportamiento de los bots en el sitio.
Información adicional
Sinónimos: archivo robots, directivas de rastreo, archivo de control de bots
Traducción: Robots.txt
Frase de ejemplo: El archivo robots.txt controla qué partes de un sitio web pueden ser rastreadas por los motores de búsqueda.
Dificultad: intermedio
Estado: estable
Idioma: en