Qué es el Crawl Budget en posicionamiento Web

¿Tenéis las mentes a punto? Ya iba tocando un poquito de SEO y mejor hablar de conceptos más complicados un martes que ya estamos entrando en faena en la semana.

Si os preguntamos que qué es el Crawl Budget quizás no tengáis ni idea, pues debéis saber que tiene mucho que ver con el posicionamiento en buscadores y con Google. ¿Ni idea no? Vamos a empezar por el principio.

Ya debéis saber que las páginas web no llegan a los buscadores por arte de magia, detrás de todo está lo que se llama un crawler, un robot de Google que se encarga de rastrear todas las páginas para poder meterlas en el servidor del buscador. El rastreador de Google tiene un nombre, Googlebot y existen varios que rastrean diferentes tipos de información; vídeos, noticias, imágenes, etc.

Conceptos previos

Una vez conociendo el funcionamiento básico del buscador y de los rastreadores pasamos a profundizar un poco más sobre el tema y para ello tenemos que definir otros dos conceptos, Crawl Rate Limit y Crawl Demand:

  • Crawl Rate Limit:

El límite de rastreo que lleva a cabo el bot en nuestra web. Ocurre una cosa y es que cuando el bot rastrea nuestro servidor se ve afectado. El Crawl Rate Limit son el número de conexiones paralelas que usa el bot para rastrear y el tiempo que espera entre un rastreo y otro, todo con el fin de que nuestra página siga funcionando correctamente-

  • Crawl Demand

Esto es básicamente lo que Google quiere indexar nuestro contenido y va a depender de dos cosas, de la popularidad de nuestra web y de si las URL’s se están quedando obsoletas.

Qué es el Crawl Budget

El Crawl Budget mezcla estos dos últimos conceptos. Es el tiempo que un bot dedica a rastrear nuestra web, el número de URL’s que quiere y puede rastrear en función de cómo de bien funciona nuestra web o de nuestra popularidad.

¿Y si el bot no rastrea bien nuestra web que ocurre? Pues que nuestro posicionamiento en buscadores puede verse afectado. Como otros factores de SEO, ciertos elementos como el contenido duplicado o el spam pueden perjudicar al Crawl Budget.

Pero todo tiene solución en la vida y es que hay maneras de optimizarlo, pero eso lo dejamos para el próximo capítulo.

.