¿Qué es el presupuesto de rastreo o crawl budget y como mejorarlo en WordPress?

Presupuesto de rastreo crawl budget

Hoy voy a hablarte del presupuesto de rastreo o crawl budget de Google y su importancia para tu blog WordPress.

Puede que lo hayas escuchado por algún sitio y no lo tengas claro.

O a lo mejor todavía no entiendes en qué te afecta a ti.

Ya te digo yo de antemano que mucho porque de ahí depende el tráfico que vas a recibir en tu blog.

Así que venga, vamos a ver qué es esto.

¿Qué es el presupuesto de rastreo o crawl budget?

Como bien sabes, los buscadores o bots entran en tu blog cada cierto tiempo a rastrear los contenidos.

Pues que sepas que Google al igual que los otros, asignan a cada página web un presupuesto o tiempo para rastrearla.

Quiere decir que si por ejemplo te han asignado x páginas a rastrear en x tiempo.

Dejará de lado todo lo que no haya podido examinar en ese tiempo.

Por cierto.

Hay muchos plugins de seguridad que miden a tiempo real quien anda por tu blog como por ejemplo Wordfence y puedes ver como la rastrean.

Si se acaba el tiempo y no ha rastreado algunas urls pues tendrás que esperar a que vuelva a pasar otra vez.

Veamos un ejemplo sencillo para que lo entiendas, aunque no es así exactamente.

Supongamos que Google dispone de 20 segundo para rastrear tu blog cada vez que entra.

Si tarda en cargar por artículo un segundo, puedes sacar el cálculo de que podrá rastrear unos 20 artículos.

¿Correcto?

El motivo de porqué Google no rastrea tu blog

Veo muchos usuarios que se quejan de que Google no indexa todos los contenidos.

Es más, yo he tenido casos de haber publicado un artículo y este no se ha indexado en unos cuantos días.

Pues bien, el culpable de que pase esto es el crawl budget.

Pero el responsable de que pase eres tú porque no le has facilitado las cosas.

Son muchos los motivos por los que puede no rastrear tus contenidos.

Para resumirlo te diré que solo debe de rastrear lo que debe y lo más rápido para que no pierda el tiempo.

Por eso es importante que mejoremos nuestro sitio web para que además pase con mucha más frecuencia.

[clickToTweet tweet=”Si quieres que Google indexe tus contenidos, preocúpate por mejorar el presupuesto de rastreo #SEO” quote=”Si quieres que Google indexe tus contenidos, preocúpate por mejorar el presupuesto de rastreo #SEO”]

¿Qué factores afectan al presupuesto de rastreo?

Teniendo claro que debes de mejorar el crawl budget, lo suyo es que sepas qué es lo que está afectando a ello.

Yo te voy a explicar los puntos más importantes que se deberían de mejorar, así que tenlos en cuenta.

La estructura de contenidos

Si hay algo que realmente afecta a todo el SEO de un blog, es la estructura de contenidos.

Piensa una cosa.

Cuanto más sencillo le pongas el acceso a los contenidos a los buscadores, más rápido los rastrean e indexan.

Por eso los blogs con una estructura sencilla son los que mejor se posicionan.

El orden de los contenidos

Además de la estructura, hay otro tema que no debes dejar de lado y es el orden de los contenidos.

WordPress dispone de 2 sistemas de organización muy potentes que son las categorías y etiquetas y ayudan al máximo a que el sitio sea rastreado.

Lamentablemente no se hace un uso adecuado y en vez de ayudar, lo que hace es que los empeora.

La velocidad de la web

Como ya te he dicho antes, los robots disponen de un tiempo específico dedicado a cada sitio web.

Se ha hablado mucho de que la velocidad es un factor de posicionamiento, pero no solo por la experiencia de usuario.

Sino que cuanto más rápido cargue tu blog, más rápido serán rastreados tus contenidos, con lo que da tiempo a que pueda buscar muchos más.

El número de solicitudes

Una solicitud es una llamada que hace tu blog a algo.

Puede ser un script interno, externo o lo que sea.

Por ejemplo cuando tiene que mostrar una caja de redes sociales, una imagen de algo, etc.

Cuanto mayor número de solicitudes tiene un blog más tiempo tarda en rastrear ese contenido.

Así que lo suyo es bajarlo todo lo que podamos.

Los errores de rastreo

Piensa una cosa.

Si no te preocupas por los errores que tiene tu blog como pueden ser contenidos que ya no se encuentren, enlaces que no van a ningún sitio y demás.

Lo que estás haciendo es hacerle perder el poco tiempo que tiene para analizar tu sitio web.

Así que es de vital importancia evitarlos.

¿Cómo saber como se está rastreando nuestro blog?

Desde Search Console podremos tener alguna idea de como está el presupuesto de rastreo de nuestro blog.

O por lo menos cómo está rastreando Google nuestro sitio.

Para ello te vas a rastreoestadísticas de rastreo.

Estadísticas de rastreo Google

Aquí puedes ver 3 datos que deberías de tener en cuenta si quieres mejorar el presupuesto de rastreo de tu blog.

  • Páginas rastreadas al día: indica cuantas páginas visita el robot al día en tu sitio. Si ves que esto aumenta es bueno porque te ha asignado más o está más optimizado. Pero si ves que disminuye es malo porque algo pasa.
  • Kilobytes descargados al día: si las páginas rastreadas aumentan, pues obviamente esto también debería de aumentar. Pero en este caso están aumentando sin motivo alguno, así que algo debe de pasar. Cómo el sitio web es mío sé exactamente qué pasa y es que estoy metiendo más contenido a las páginas.
  • Tiempo de descarga: este es un factor que tendrías que controlar para que en vez de ir a alza, debería de ir a la baja porque lo que queremos es que se rastree más rápido, no más lento.

Yo que tú le echaría un ojo de vez en cuando porque es importante saber como se está rastreando tu blog.

[clickToTweet tweet=”Analiza cómo Google rastrea tus contenidos para poder mejorarlo #SEO #blogs” quote=”Analiza cómo Google rastrea tus contenidos para poder mejorarlo #SEO #blogs”]

¿Cómo mejorar el presupuesto de rastreo en WordPress?

Te voy a dar unas pautas muy sencillas de seguir para que puedas aumentar o más bien, mejorar tu presupuesto de rastreo.

Si las sigues al pie de la letra te aseguro que Google rastreará mucho mejor tu blog y conseguirás más visitas.

Descarga gratis mi checklist SEO On Page y optimiza tus contenidos. ¡Es gratis!

La quiero

No te olvides de controlar esos cambios desde Search Console para ver si te están ayudando.

Acelerar el blog todo lo que puedas

Si me llevas tiempo leyendo saber que soy fan de la velocidad y la optimización de blogs WordPress.

Así que lo primero es que hagas que tu blog cargue en el menor tiempo posible.

Suelo recomendar que este sea inferior a 2 segundos.

Pero si te digo la verdad, cuanto más rápido sea en cargar, mucho mejor.

Limita el número de solicitudes

Como ya te he explicado antes, tener un número muy alto de solicitudes frena a Google, pero no solo eso.

Además ralentiza el blog y hace un mayor consumo de recursos de tu servidor.

Para bajarlas basta con recortar o eliminar cosas que no necesites de tu blog.

Puedes quitar enlaces a redes sociales duplicados, bajar el número de imágenes, limitar el número de bloques de publicidad, el número de artículos relacionados y cosas así.

Te recomiendo que lo bajes todo lo que puedas y los mantengas a menos de 100.

Controla el peso de tu blog

Otro de los motivo que ralentizan a Google es los megas que tenga tu blog.

Ya hable hace tiempo del peso recomendado para una página web y deberías de seguir mi consejo.

Este no debería de ser superior a 1MB y si es menos, mejor.

Pero no solo analices el home de tu blog, debes de analizar tus artículos que son los contenidos principales.

Te voy a poner un ejemplo de uno de los artículos de mi blog.

Verás el tiempo de carga, el número de solicitudes y hasta el peso del mismo.

Ejemplo de velocidad de artículo Ragose

Esto lo puedes controlar perfectamente con GTMetrix.

Controla y evita los errores 404

Además de dar una mala experiencia de usuario, los errores 404 le hacen perder el tiempo a Google.

Porque le harás que analice urls que ya no existen, bien porque las has borrado o lo que sea.

Hace tiempo hice una guía para evitar los erroes 404 en WordPress, así que te recomiendo que la leas y la pongas en práctica.

Verás como así mejorarás mucho.

Evita enlaces rotos

Cuando los robots entran en tu blog lo rastrean todo como por ejemplo los enlaces salientes, así que no se limitan solo a lo que hay en tu sitio.

Por eso debes de controlar qué enlazar y que se encuentre todavía disponible para que tampoco pierda el tiempo.

Hay plugins como por ejemplo Broken Link Checker que te lo revisa todo, pero úsalo con cuidado.

Es de los plugins que solo se debe de activar temporalmente por el alto consumo de recursos.

Broken Link Checker

Evita errores del servidor

Además de los errores anteriores, puede que si no tienes un blog optimizado tengas errores 500 y caídas del mismo.

Estos los puedes ver dentro de Search Console donde están los demás errores de rastreo.

No es bueno que cada vez que Google intenta rastrear tu sitio se encuentre que no está disponible.

Así que preocúpate por ellos y los eliminas hasta que estén a cero.

Errores 500 del servidor

Crea una estructura que sea sencilla

Los humanos tenemos la capacidad de hacer difícil lo fácil y en el mundo de los blogs la cosa no es diferente.

Te recomiendo que tengas una estructura sencilla de seguir y que sea fácil de acceso.

Por ejemplo puedes crear solo 7 u 8 categorías principales y que estas estén siempre visibles en el menú.

Esto facilitará la tarea de entender tu blog tanto a Google como a tus usuarios.

Y obviamente no te olvides de hacer un orden lógico de tus contenidos, ayudándote de las etiquetas y categorías.

Indexa solo lo que debas

El error más común cuando se empieza a tener un blog WordPress es que se indexa de todo, ya sea importante o no.

Pero es que además se suelen indexar contenidos que no están optimizados y eso suele traer errores de contenido duplicado aunque esto es otra historia.

Quédate con esta frase.

Indexa solo lo que creas que es importante para tus usuarios.

El resto nunca.

Aumenta la autoridad de tu blog

El presupuesto de rastreo asignado a cada sitio web también depende de la relevancia del mismo.

¿Nunca has visto como algunos sitios web indexan sus post en segundos?

Pues esto es porque Google los tiene como sitios de autoridad y por eso debes de aumentar la del tuyo.

Para ello escribe contenido de calidad, consigue acciones sociales, enlaces externos y todo lo que haga que tu blog tenga mejor posicionamiento.

Verás como así aumenta ese presupuesto y aceleras todo este proceso.

¿Vas a mejorar tu presupuesto de rastreo ahora?

Ya has visto la importancia de mejorar el crawl budget de tu blog WordPress.

Cuanto más optimizado esté tu blog, más veces pasará por él y más contenidos rastreará.

A modo de resumen:

  • Optimiza tu blog al máximo.
  • Elimina todos los errores.
  • Crea una estructura sencilla de entender.
  • Piensa en indexar solo lo importante.
  • Aumenta la autoridad de tu blog.

Espero que esta guía te haya sudo de utilidad.

Y te espero en los comentarios por si tienes alguna duda o quieres añadir algo.

Foto: https://es.123rf.com/profile_fotogestoeber

¡Valora mi contenido!
[1 votos. Media: 5]
avatar
el más nuevo el más antiguo el más votado
Fede
Invitado

Hola Raúl, importantísimo el tema de cara al posicionamiento web. Aparte de todas las recomendaciones que enumeras en el post, si me permites, incluyo una más: la ofuscación de enlaces para que no sean rastreados. He desarrollado un plugin para WordPress que permite hacerlo de manera sencilla. Si quieres echar un vistazo y darme tu opinión: https://www.fedegomez.es/link-juice-optimizer-plugin-optimizar-crawl-budget/

Saludos!

alan
Invitado
alan

Hice un comentario, y no se publico porque salio una advertencia que era muy largo… Igualmente parecia una respuesta al comentario extenso que estaba escribiendo…

por seguir a google y sus exigencias, solo estamos autolimitandonos…