Los principales programas de Crawling SEO del mercado

Guillermo Gascón

Hoy vamos con un tema básico como son los diferentes programas de Crawling que tenemos disponibles para nuestro trabajo SEO.

Lo primero de todo, ¿qué es un crawler? Básicamente, se trata de un robot (araña) que rastrea una web recorriendo los enlaces internos de la misma.

Estas herramientas son súper útiles porque nos informan de cientos de cuestiones que necesitamos, agrupando problemas y detectando zonas donde hay que trabajar técnicamente.

Además de extraer los datos, nos permiten exportarlos en formatos cómodos de revisar y editar. Para cualquier SEO, las herramientas de crawling son algo fundamental en su ordenador de trabajo.

Me imagino que todos los que me escucháis tenéis consciencia de qué tipo de herramientas son estas y para qué sirven, por eso no voy a entrar demasiado en profundidad y vamos a ver cuál es la oferta en cuanto a herramientas y algunas características:

screaming-frog-seo-spider-tool">Screaming Frog SEO Spider Tool

Sin duda la más conocida y yo diría, la más utilizada por toda la comunidad SEO. Yo mismo os puedo decir que la uso constantemente, y una cosa que ocurre es que cuanto más la usas, más utilidades le encuentras, lo que hace que esté todo el día rastrando proyectos en mi ordenador.

Lo que hace Screaming Frog

Vamos con algunas de las principales acciones que te permite esta herramienta:

  • Análisis de enlaces rotos
  • Análisis de meta datos
  • Extracción de contenido mediante XPath
  • Generar XML Sitemaps
  • Audita redirecciones internas
  • Revisa contenido duplicado entre tus URLs
  • Revisa directivas y controla bloqueos de robots.txt
  • Se integra con Analytics, GSC y otras herramientas.

Esto es una muestra, un porcentaje mínimo de lo que se puede hacer con esta herramienta. Lo cierto es que para mi es indispensable en procesos de migración, auditorías SEO y todo tipo de extracciones de datos.

Precio

Encontramos una versión gratuita, muy limitada y con solo 500 urls rastreables, pero la versión de pago no es cara en absoluto. Son 185€ por todo un año de uso. Eso es menos de 15€ al mes, y ya te digo que lo amortizas en la primera semana de uso.

Ventajas

Desde mi punto de vista como usuario, esta herramienta se convierte en una extensión super habitual para tu trabajo y consigues adaptarla como un guante a tu estilo de trabajo. Enseguida encuentras solución a problemas o agilizas procesos gracias a Screaming y eso es algo que le da un valor continuo.

El precio es otro punto fuerte, ya te digo que es de las herramientas más baratas que vamos a ver hoy.

Inconvenientes

A mi parecer, podría mejorar en cuanto a la representación de datos, generar algún gráfico extra... pero poco se le puede pedir más. Es un gran gran producto.

netpeak-spider">Netpeak Spider

Un software de escritorio, muy similar a Screaming Frog. Prácticamente comparten la mayoría de utilidades, pero hay detalles que los diferencian.

Para empezar, la interfaz toma la delantera y encontramos colores que ayudan a identificar lo que está correcto, lo peligroso y lo erróneo. Parece una chorrada, pero ayuda bastante.

Lo que hace Netpeak Spider

  • Revisa más de 50 factores SEO on-page
  • Busca enlaces rotos y redirecciones
  • Calcula el PR interno para mejorar la estructura
  • Permite el crawleo total, parcial o de sitemaps
  • Revisa enlaces salientes y entrantes

Como podéis ver, las opciones son iguales a las de Screaming salvo por un detalle que vamos a ver en las ventajas.

Precio

La herramienta sigue siendo barata, incluso más económica que Screaming. El precio por un año completo son 144 $. Además, nos permite comprar suscripciones mensuales subiendo un poco su precio.

Puedes poner esta licencia en todos tus ordenadores sin límite.

Ventajas

Lo primero, como hemos dicho al principio, en cuanto a diseño es más moderno y utilizando la paleta de colores nos permite reconocer secciones y estados de forma más intuitiva.

Otra cosa importante es el cálculo de PR interno, es una opción que utiliza el cálculo original de distribución de Page Rank de Google y nos evalúa por donde se nos está yendo el link juice. Muy útil para esculpir mediante enlaces internos nuestra autoridad.

Inconvenientes

Al tener menor penetración en el mercado, no encontramos muchos tutoriales o vídeos explicativos de uso. Además, el hecho de ser significativamente diferente a Screaming en cuanto a diseño, hace que a muchos nos cueste pasarnos a esta herramienta.

Cada cuenta solo permite un usuario y un pc donde usarlo, eso le hace perder unos pocos puntos.

sitebulb">Sitebulb

Esta es una de las herramientas que hemos estado probando junto con mis compañeros de curro últimamente.

Sin duda una herramienta más moderna, cambia el enfoque a nivel de gestión de los rastreos, ya que generas una ficha por cada proyecto y en Screaming y Netpeak tienes la sensación de más independencia entre software y proyecto.

Lo que hace Sitebulb

  • Revisa la eficiencia de crawling
  • Encuentra redirecciones y errores internos y problemas con enlaces externos
  • Detecta cuellos de botella y anomalías de crawling
  • Permite rastrear URL bloqueadas. (esto también lo hacen los anteriores)
  • Representan mapas de crawl y estructura
  • Representa mapas de distribución en cuanto a tráfico
  • Extrae informes de problemas en optimización onpage
  • Problemas con directivas y bloqueos
  • Modificaciones y recomendaciones para el front-end:Explicaciones y análisis e los principales elementos como CSS, HTML, JS y muchos más.
  • Conecta las Keywords con la información técnica
  • Realiza test de Accesibilidad
  • Da recomendaciones en cuanto a sitemap.xml

Estos son algunos de los puntos que nos indica el creador de la herramienta, la verdad que es un paso más en cuanto al rastreo de proyectos.

Precio de Sitebulb

Tenemos una única licencia, que es la PRO con un coste de 35€+IVA al mes para un solo usuario. Si queremos añadir más usuarios simplemente sumamos 3€ al mes al coste inicial por cada usuario.

Ventajas

Sin duda amplía el número de datos que disponemos sobre un proyecto y lo consigue mantener todo centralizado. Es una herramienta ideal cuando queremos mantener un histórico visible de rastreos por proyecto, evolución... en fin, tener todo más organizado sin necesidad de estar importando y exportando los rastreos.

El punto que me encanta es la representación de mapas de rastreo. Esto es algo que se agradece muchísimo porque enseguida detectas potenciales problemas o desequilibrios en el enlazado interno.

Desventajas

Lo que nos da por un lado nos lo quita por otro. No es una herramienta tan ágil como lo son las anteriores, piensa que por cada rastreo tienes que crear un proyecto etc... sin embargo, muchas veces queremos rastrear una web de la competencia de forma rápida, un listado de URLs, este tipo de acciones se le hacen un poco bola a esta herramienta.

A nivel de precio podemos decir que es “asequible” dentro de lo que podemos pensar, aún así ya empieza a escocer.

fandangoseo">FandangoSEO

Herramienta hecha en España, seguramente de las que pronto iréis oyendo hablar. Últimamente están saliendo muchas herramientas orientadas al mercado de SEOs y agencias realizadas por emprendedores españoles y eso nos tiene que llenar de orgullo, no solo por compartir nacionalidad, sino porque son auténticas joyas como la que vamos a ver ahora.

Con FandangoSEO ya nos metemos en el universo de rastreo cloud. Hasta ahora, las herramientas que hemos visto trabajan como un ejecutable en nuestro escritorio, pero ahora saltamos a la nube y dejamos que sean los recursos de otra empresa los que rastreen los proyectos.

Veamos que nos ofrece FandangoSEO

Lo que hace FandangoSEO

  • Resolución de errores comunes SEO: enlaces rotos, 404, cadenas de redirecciones, problemas hreflang...
  • Información sobre arquitectura: visualización de mapas, descubrimiento de URLs huérfanas mediante logs...
  • Estudio del enlazado interno: análisis de anchors, perfil y estrategia, listado de enlaces salientes, optimización del crawl Budget...
  • Optimización on-page: metas, headers, schema y datos estructurados...
  • Análisis competitivo: permite comparar nuestro proyecto con antiguos rastreos y sitemaps, con la competencia, el rastreo comparado con el análisis de logs y ver evolución.
  • Análisis SEO móvil
  • Sistema de reporte
  • Análisis de Logs

Seguimos avanzando, esta herramienta como podéis apreciar incluye bastantes mejoras respecto a las anteriores y da un paso más en cuanto a profundizar a nivel de proyectos. No lo he puesto en el anterior listado, pero también tiene una especie de sistema que permite definir los grupos de URL dentro de nuestra web y ver datos segmentados por este tipo de URLS.

Precio

Existen varios niveles de precios, cada uno con unas características en cuanto a numero de páginas rastradas, cantidad de proyectos que puedes crear pero la diferencia importante es la que separa las versiones con análisis de logs y las que no.

El plan S, no incluye análisis de logs y eso hace que su precio sean 59€ al mes, mientras la versión M incluye esta funcionalidad y ya se dispara a los 177€ al mes. Van dirigidas a diferentes públicos, pero la diferencia es muy grande.

Creo que aquí ya hablamos de una herramienta de precio moderado.

Ventajas

Dejamos de utilizar un software de escritorio, podemos acceder a nuestros proyectos analizados desde cualquier navegador. La integración del crawl con los logs del servidor es la bomba, muchas hipótesis se van a confirmar al cruzar esta info.

La gestión de agrupaciones de URLs me parece un acierto. Puedes informar a la herramienta de qué URL son categorías, productos, páginas, entradas... y por supuesto ver cómo afecta la optimización en esos bloques independientemente.

Desventajas

Las pegas son sencillas. Esta herramienta no sirve para análisis rápidos, de pocas URLs o de la competencia. Además, el rastreo lleva su tiempo y depende de una maquina externa.

A nivel de precio ya es complejo el adquirirla si no te ganas la vida gestionando clientes.

Otras herramientas más avanzadas:

Estas tres últimas están orientadas a entornos de grandes proyectos y tienen unos costes que superan los 2500€ al año bastante de largo.

Portada del autor

Soy cofundador de TheCookies Agency, empresa de desarrollo web especializada en proyectos de captación de leads, donde doy servicios de consultoría SEO, optimización Web y optimización para motores de búsqueda, liderando el equipo de este área.

Gestionando clientes desde 2015, me declaro un apasionado del marketing digital y vivo con entusiasmo los proyectos en los que trabajamos.

Autor de uno de los primeros podcast sobre SEO "holaseo" y creador de contenido en diferentes canales como YouTube o Twitter.

¿QUIERES UN CAMBIO?
Contáctanos

Juntos podemos hacer las cosas fáciles.

Nuestras pepitas de chocolate para mejorar tus proyectos