Este artículo es una traducción del material “What are crawl errors?“, publicado originalmente en el blog de Yoast y autorizado para su publicación en el blog de HostGator.

Los errores de rastreo ocurren cuando un motor de búsqueda intenta acceder a una página de tu sitio web, pero no lo logra. A continuación, te explicamos qué son y cómo pueden afectar el rendimiento general de tu sitio.

El rastreo es el proceso mediante el cual un motor de búsqueda intenta visitar todas las páginas de tu sitio utilizando un bot. El bot de búsqueda encuentra un enlace a tu sitio y comienza a buscar todas las páginas públicas disponibles.

Indexa el contenido para su uso en Google y agrega los enlaces de estas páginas a las que aún necesita rastrear. El objetivo principal como propietario de un sitio web es garantizar que el bot del motor de búsqueda pueda acceder a todas las páginas del sitio. Fallar en este proceso resulta en lo que llamamos errores de rastreo.

Tu objetivo es asegurarte de que todos los enlaces en tu sitio lleven a una página real. Esto puede lograrse mediante redireccionamientos 301, pero la página final de este enlace siempre debe devolver una respuesta del servidor 200.

Google divide los errores de rastreo en dos grupos principales:

Errores del sitio: Estos errores significan que todo tu sitio no puede ser rastreado. Pueden ser causados por:

• Errores de DNS: cuando el motor de búsqueda no puede comunicarse con tu servidor.
• Errores de servidor: cuando la solicitud para acceder a tu sitio expira o el servidor devuelve un error debido a problemas en el código o a una sobrecarga por muchos visitantes.
• Fallos en el archivo robots.txt: si el bot no puede acceder a este archivo, el rastreo se pospone hasta que pueda hacerlo.

Errores de URL: Estos errores ocurren cuando el bot intenta rastrear una página específica de tu sitio. Algunos ejemplos incluyen:

• Errores 404 (No encontrado) suaves: debes verificar y corregir estos errores frecuentemente.
• Errores de indexación debido a configuraciones inconsistentes como bloqueos en robots.txt o etiquetas ‘noindex’.

Es fundamental corregir estos errores de rastreo para garantizar que tu sitio sea accesible y correctamente indexado por los motores de búsqueda. Esto debe formar parte de la rutina de mantenimiento de tu sitio para asegurar su funcionamiento óptimo continuo.