El análisis de archivos de registro SEO ayuda a comprender el comportamiento de los rastreadores en el sitio web y a identificar posibles oportunidades de optimización SEO técnica.

El SEO sin analizar el comportamiento de los rastreadores es como volar a ciegas. Puede que haya enviado el sitio web a la consola de búsqueda de Google y lo haya indexado, pero sin estudiar los archivos de registro, no podrá hacerse una idea de si su sitio web está siendo rastreado o leído por los robots de los motores de búsqueda correctamente o no.

Por eso he reunido todo lo que necesita saber para analizar los archivos de registro SEO e identificar problemas y oportunidades SEO a partir de ellos.

¿Qué es el análisis de archivos de registro?

What is Log File Analysis

El análisis SEO de archivos de registro es un proceso para reconocer el patrón de interacción de los robots de los motores de búsqueda con el sitio web. El análisis de archivos de registro forma parte del SEO técnico.

La auditoría de archivos de registro es importante para que los SEO reconozcan y resuelvan los problemas relacionados con el rastreo, la indexación y los códigos de estado.

¿Qué son los archivos de registro?

LogFileExample

Los archivos de registro rastrean quién visita un sitio web y qué contenido ve. Contienen información sobre quién solicitó el acceso al sitio web (también conocido como «el cliente»).

La información percibida puede estar relacionada con robots de motores de búsqueda como Google o Bing o con un visitante del sitio web. Normalmente, los registros de los archivos de registro son recopilados y mantenidos por el servidor web del sitio, y suelen conservarse durante cierto tiempo.

¿Qué contienen los archivos de registro?

LogFileExample

Antes de conocer la importancia de los archivos de registro para la SEO, es esencial saber qué hay dentro de este archivo. El archivo de registro e contiene los siguientes datos:-

  • La URL de la página que solicita el visitante del sitio web
  • El código de estado HTTP de la página
  • Dirección IP del servidor solicitado
  • Fecha y hora del golpe
  • Datos del agente de usuario (bot del motor de búsqueda) que realiza la solicitud
  • Método de solicitud (GET/POST)

Los archivos de registro pueden parecerle complicados si los examina por primera vez. Sin embargo, una vez que conozca el propósito y la importancia de los archivos de registro para el SEO, los utilizará de forma eficaz para generar valiosos conocimientos de SEO.

Propósito del análisis de archivos de registro para SEO

El análisis de archivos de registro ayuda a resolver algunas de las cuestiones técnicas importantes de SEO, lo que le permite crear una estrategia de SEO eficaz para optimizar el sitio web.

He aquí algunas cuestiones de SEO que pueden analizarse utilizando archivos de registro:

#1. Frecuencia con la que Googlebot rastrea el sitio web

Los robots o rastreadores de los motores de búsqueda deben rastrear sus páginas importantes con frecuencia para que el motor de búsqueda conozca las actualizaciones de su sitio web o los nuevos contenidos.

Todas sus páginas importantes de productos o de información deberían aparecer en los registros de Google. Una página de un producto que ya no vende, así como la ausencia de alguna de sus páginas de categorías más importantes, son indicadores de un problema que puede reconocerse utilizando los archivos de registro.

¿Cómo utiliza el presupuesto de rastreo un robot de un motor de búsqueda?

Cada vez que un rastreador de un motor de búsqueda visita su sitio, dispone de un «crawl budget» limitado Google define el crawl budget como la suma de la tasa de rastreo y la demanda de rastreo de un sitio.

El rastreo y la indexación de un sitio pueden verse obstaculizados si tiene muchas URL de poco valor o URL que no están correctamente presentadas en el mapa del sitio. El rastreo y la indexación de páginas clave es más fácil si se optimiza el presupuesto de rastreo.

El análisis del archivo de registro ayuda a optimizar el presupuesto de rastreo, lo que acelera los esfuerzos de SEO.

#2. Problemas y estado de la indexación Mobile-first

La indexación Mobile-first es ahora importante para todos los sitios web y Google la prefiere. El análisis del archivo de registro le indicará la frecuencia con la que Googlebot rastrea su sitio.

Este análisis ayuda a los webmasters a optimizar las páginas web para versiones móviles si éstas no están siendo rastreadas correctamente por Googlebot para smartphones.

#3. Código de estado HTTP devuelto por las páginas web cuando se solicitan

Los últimos códigos de respuesta que devuelven nuestras páginas web se pueden recuperar mediante archivos de registro o utilizando la opción de solicitud de obtención y representación de Google Search Console.

Los analizadores de archivos de registro pueden encontrar las páginas con los códigos 3xx, 4xx y 5xx. Puede resolver estos problemas tomando las medidas adecuadas, por ejemplo, redirigiendo las URL a los destinos correctos o cambiando el código 302 staus a 301.

Google valora la estructura de su sitio en función de la profundidad de rastreo y de los enlaces internos. Las razones de un rastreo inadecuado del sitio web pueden ser una mala estructura de enlaces internos y la profundidad de rastreo.

Si tiene alguna dificultad con la jerarquía o la estructura del sitio web, o con la estructura de enlaces internos, puede utilizar el análisis de archivos de registro para encontrarlas.

El análisis de archivos de registro ayuda a optimizar la arquitectura del sitio web y la estructura de interenlaces.

#4. Descubra las páginas huérfanas

Las páginas huérfanas son las páginas del sitio web que no están enlazadas desde ninguna otra página. Es difícil que estas páginas se indexen o aparezcan en los motores de búsqueda, ya que los robots no las descubren fácilmente.

Las páginas huérfanas pueden ser descubiertas fácilmente por rastreadores como Screaming Frog, y este problema puede resolverse interrelacionando estas páginas con las demás páginas del sitio web.

#5. Audite las páginas para comprobar la velocidad y la experiencia de la página

La experiencia de la página y el núcleo vital de la web son oficialmente los factores de clasificación ahora, y es importante ahora que las páginas web cumplan con las directrices de velocidad de página de Google.

Las páginas lentas o grandes pueden ser descubiertas usando analizadores de archivos de registro, y estas páginas pueden ser optimizadas para la velocidad de la página que ayudará a la clasificación general en el SERP.

El análisis de archivos de registro le ayuda a controlar cómo se rastrea su sitio web y cómo lo tratan los motores de búsqueda

Ahora que ya tenemos claros los conceptos básicos de los archivos de registro y su análisis, veamos el proceso de auditoría de los archivos de registro para SEO

Cómo realizar el análisis de archivos de registro

Ya hemos visto diferentes aspectos de los archivos de registro y su importancia para el SEO. Ahora, es el momento de aprender el proceso de análisis de los archivos y las mejores herramientas para analizar los archivos de registro.

Para acceder al archivo de registro necesitará tener acceso al archivo de registro del servidor del sitio web. Los archivos pueden analizarse de las siguientes maneras:

  • Manualmente utilizando Excel u otras herramientas de visualización de datos
  • Utilizando las herramientas de análisis de archivos de registro

Para acceder manualmente a los archivos de registro hay que seguir varios pasos.

  • Recopilar o exportar los datos de registro del servidor web, y los datos deben filtrarse para los robots o rastreadores de los motores de búsqueda.
  • Convierta el archivo descargado en un formato legible utilizando herramientas de análisis de datos.
  • Analice manualmente los datos utilizando Excel u otras herramientas de visualización para encontrar lagunas y oportunidades de SEO.
  • También puede utilizar programas de filtrado y líneas de comandos para facilitarle el trabajo

Trabajar manualmente con los datos de los archivos no es fácil, ya que requiere conocimientos de Excel e implica al equipo de desarrollo. Aún así, las herramientas para el análisis de archivos de registro facilitan el trabajo a los SEO.

Echemos un vistazo a las principales herramientas para auditar los archivos de registro y comprendamos cómo estas herramientas nos ayudan a analizar los archivos de registro.

Analizador de archivos de registro Screaming Frog

Screaming frog report for log file analysis

Los problemas técnicos de SEO pueden identificarse utilizando los datos de los archivos de registro cargados y los bots de los motores de búsqueda verificados utilizando el analizador de archivos de registro Screaming Frog. También puede hacer lo siguiente:

  • Actividad de bots de motores de búsqueda y datos para la optimización de motores de búsqueda.
  • Descubrir la frecuencia de rastreo del sitio web por los robots de los motores de búsqueda
  • Descubra todos los problemas técnicos de SEO y los enlaces rotos externos e internos
  • Análisis de las URL que se han rastreado menos y más para reducir las pérdidas y aumentar la eficacia.
  • Descubrir las páginas que no están siendo rastreadas por los motores de búsqueda.
  • Cualquier dato puede ser comparado y combinado, eso incluye datos de enlaces externos, directivas y otra información.
  • Ver los datos sobre URL de referencia

Screaming Frog herramienta analizador de archivos de registro es completamente libre de usar para un solo proyecto con un límite de 1000 eventos de registro de línea. Tendrá que actualizar a la versión de pago si desea acceso ilimitado y asistencia técnica.

JetOctopus

JetOctopus Log File Analyzer

Cuando se trata de herramientas asequibles de análisis de registros, JetOctopus es la mejor. Tiene una versión de prueba gratuita de siete días, no requiere tarjeta de crédito y se conecta con dos clics. La frecuencia de rastreo, el presupuesto de rastreo, las páginas más populares y mucho más se pueden identificar con el analizador de registros de JetOctopus, al igual que con las otras herramientas de nuestra lista.

Con esta herramienta, podrá integrar los datos de los archivos de registro con los de Google Search Console, lo que le proporcionará una clara ventaja sobre la competencia. Con este combo, podrá ver cómo interactúa Googlebot con su sitio y dónde puede mejorar.

Analizador de registros de rastreo

oncrawl Log File Analyzer Report showing SEO status

Más de 500 millones de líneas de registro al día son procesadas por Oncrawl Log Analyzer, una herramienta diseñada para sitios web medianos y grandes. Vigila los registros de su servidor web en tiempo real para garantizar que sus páginas se indexan y rastrean correctamente.

Oncrawl Log Analyzer cumple con la GDPR y es altamente seguro. En lugar de direcciones IP, el programa almacena todos los archivos de registro en una nube FTP segura y segregada.

Además de JetOctopus y Screaming Frog Log File Analyzer, Oncrawl tiene algunas características más, tales como:

  • Soporta muchos formatos de registro, como IIS, Apache y Nginx.
  • La herramienta se adapta fácilmente a sus necesidades de procesamiento y almacenamiento a medida que cambian
  • La segmentación dinámica es una potente herramienta para descubrir patrones y conexiones en sus datos agrupando sus URL y enlaces internos en función de diversos criterios.
  • Utilice los puntos de datos de sus archivos de registro sin procesar para crear informes SEO procesables.
  • Los archivos de registro transferidos a su espacio FTP pueden automatizarse con la ayuda de personal técnico.
  • Se pueden monitorizar todos los rastreadores populares, lo que incluye los rastreadores de Google, Bing, Yandex y Baidu.

OnCrawl Log Analyzer dispone de otras dos herramientas importantes:

Oncrawl SEO Crawler: Con Oncrawl SEO Crawler, puede rastrear su sitio web a gran velocidad y con un mínimo de recursos. Mejora la comprensión del usuario sobre cómo afectan los criterios de clasificación a la optimización para motores de búsqueda (SEO).

Datos de Oncrawl: Los datos de Oncrawl analizan todos los factores de SEO combinando los datos del rastreo y los analíticos. Obtiene los datos del rastreo y los archivos de registro para comprender el comportamiento del rastreo y recomienda el presupuesto de rastreo para el contenido prioritario o las páginas de clasificación.

Analizador de archivos de registro de SEMrush

Semrush Log File Analyzer

El analizador de archivos de registro de SEMrush es una opción inteligente para una herramienta de análisis de registros sencilla y basada en navegador. Este analizador no requiere descarga y puede utilizarse en la versión en línea.

SEMrush le presenta dos informes:

Páginas’Hits: Pages’ Hits informa de la interacción de los rastreadores web con el contenido de su sitio web. Le proporciona los datos de las páginas, carpetas y URL con las interacciones máximas y mínimas con los robots.

La actividad del Googlebot: El informe de actividad de Googlebot le proporciona diariamente información relacionada con el sitio, como por ejemplo

  • Los tipos de archivos rastreados
  • El código de estado HTTP general
  • El número de peticiones realizadas a su sitio por varios bots

Loggly de SolarWinds

Loggly de SolarWinds examina los registros de acceso y errores de su servidor web, así como las métricas semanales del sitio. Puede ver sus datos de registro en cualquier momento y dispone de funciones que simplifican la búsqueda en los registros.

Se necesita una herramienta robusta de análisis de archivos de registro como SolarWinds Loggly para minar eficazmente los archivos de registro de su servidor web en busca de información sobre el éxito o el fracaso de las solicitudes de recursos de los clientes.

Loggly puede proporcionar gráficos que muestren las páginas menos vistas y calcular la velocidad media, mínima y máxima de carga de las páginas para ayudarle a optimizar el posicionamiento en buscadores de su sitio web.

Estadísticas de rastreo de Google Search Console

Google Search Console for

Google Search Console ha facilitado las cosas a los usuarios proporcionando una útil visión general de sus prácticas. El funcionamiento de la consola es sencillo. Sus estadísticas de rastreo se dividirán en tres categorías:

  • Kilobytes descargados por día: Indica los kilobytes que descargan los robots de Google mientras visitan el sitio web. Esto indica básicamente dos puntos importantes: Si se muestran promedios altos en el gráfico, significa que el sitio se rastrea con más frecuencia o también puede indicar que el bot está tardando mucho en rastrear un sitio web y no es ligero.
  • Páginas rastreadas por día: Le indica el número de páginas que Googlebot rastrea cada día. También anota el estado de la actividad de rastreo, ya sea bajo, alto o medio. Una tasa de rastreo baja indica que el sitio web no es rastreado correctamente por Googlebot
  • Tiempo de descarga de una página (en milisegundos): Indica el tiempo que tarda Googlebot en realizar peticiones HTTP mientras rastrea el sitio web. Cuanto menor sea el tiempo que Googlebot tenga que dedicar a realizar peticiones, mejor será la descarga de la página, ya que la indexación será más rápida.

Conclusión

Espero que haya sacado mucho provecho de esta guía sobre el análisis de archivos de registro y las herramientas utilizadas para auditar los archivos de registro para SEO. Auditar los archivos de registro puede ser muy eficaz para mejorar los aspectos técnicos de SEO del sitio web.

Google Search Console y SEMrush Log File Analyzer son dos opciones para una herramienta de análisis básica y gratuita. Como alternativa, consulte Screaming Frog Log File Analyzer, JetOctopus u Oncrawl Log Analyzer para comprender mejor cómo interactúan los robots de los motores de búsqueda con su sitio web; puede utilizar herramientas mixtas de análisis de archivos de registro premium y gratuitas para SEO.

También puede consultar algunos rastreadores de sitios web avanzados para mejorar el SEO.