Google realizó recientemente varias actualizaciones tanto para la documentación de robots.txt, así como para la documentación de datos estructurados. Aquí hay una lista de esos cambios de Google en su web para developers:
- Simplificado el página de introducción para aclarar qué es robots.txt y cuál es su uso previsto.
- Se ampliaron las instrucciones acerca de la creación y actualizacion de archivos robots.txt.
- Se eliminaron secciones redundantes de la documentación sobre cómo maneja Google robots.txt.
- Oraciones simplificadas en toda la documentación de robots.txt en inglés.
- Se eliminó la documentación redundante sobre cómo crear, probar y publicar datos estructurados. Cada función tiene una guía sobre esto, incrustada directamente en cada guía (por ejemplo, el Guía de video de datos estructurados.
- Se mejoraron las secciones de solución de problemas en todas las guías de funciones de datos estructurados. Por ejemplo, la Guía de datos de estructura de producto.
- Se agregó más información para principiantes sobre cómo empezar con datos estructurados.
Aquí hay algo de claridad sobre por qué Google hizo los cambios de Lizzi Harvey y Gary Illyes de Google:
La gente envió 148 comentarios que ambos usaron para revisar los documentos de robots.txt. Lizzi agregó que también terminaron «solucionando problemas en más de 20 documentos de datos estructurados».
Discusión completa en Twitter.