Archivo: Robots(dot)txt
Robots(dot)txt.png (458 × 443 píxeles; tamaño de archivo: 10 KB; tipo MIME: image/png)
Descripción: A message about the crawler not being able to do its work due to robots.txt. The screenshot is from the Wayback Machine trying to crawl Facebook.com.
Título: Robots(dot)txt
Créditos: https://archive.org/web/
Autor(a): Internet Archive
Términos de Uso: Dominio Público
Licencia: Dominio Público
¿Se exige la atribución?: No
Usos del archivo
La siguiente página enlaza a este archivo:
Todo el contenido de los artículos de la Enciclopedia Kiddle (incluidas las imágenes) se puede utilizar libremente para fines personales y educativos bajo la licencia Atribución-CompartirIgual a menos que se indique lo contrario.