Desvelando los secretos de SEO: Cómo disociarse de un TLD y las verdades sobre los límites de rastreo

Introducción

El mundo del SEO está lleno de secretos y estrategias ocultas que pueden marcar la diferencia entre un sitio web exitoso y uno que pasa desapercibido. En esta entrega, nos centraremos en dos aspectos clave: cómo disociarse de un TLD completo y los límites de rastreo de los motores de búsqueda. Estos temas, aunque algo técnicos, son vitales para entender cómo funcionan los motores de búsqueda y cómo podemos hacer que trabajen a nuestro favor.

Disociarse de un TLD entero: ¿es posible y cómo hacerlo?

En una reciente revelación, John Mueller de Google confirmó que es posible disociarse de un TLD completo (como .xyz) utilizando el archivo de desautorización de enlaces y la directiva domain:abc. Para lograrlo, simplemente necesitamos agregar domain:xyz en el archivo de desautorización para bloquear todos los enlaces provenientes de ese TLD. Sin embargo, no es posible hacer excepciones para ciertos dominios dentro del TLD disociado.

¿Por qué es útil esta información? Algunos TLDs económicos con términos de uso permisivos son explotados a menudo por spammers. En lugar de desautorizar cientos de dominios uno por uno, esta funcionalidad ahorra tiempo. Aunque esta técnica es poderosa (o como Mueller la llama, "un gran martillo"), no está oficialmente documentada debido a su potencial de eliminación masiva de enlaces, incluso algunos que podrían ser beneficiosos.

Los límites de rastreo de Googlebot: más flexibles de lo que parece

En un episodio reciente de Search Off The Record, Gary Illyes y Martin Splitt discutieron los límites de rastreo de Googlebot, revelando una mayor flexibilidad de lo que se pensaba. La limitación por defecto de 15 MB es una medida de protección para los servidores de Google, pero no es absoluta. Cada equipo interno puede modificarla según sus necesidades. Por ejemplo, Google Search la reduce a 2 MB, mientras que para PDFs puede llegar hasta 64 MB.

Estas limitaciones no son solo sobre el ancho de banda, sino que están diseñadas principalmente para proteger la infraestructura de Google. Procesar un documento demasiado voluminoso puede sobrecargar los sistemas de Google. Martin Splitt señaló que Googlebot no es un sistema fijo y uniforme, sino un servicio configurable. Los parámetros pueden variar según el tipo de contenido (HTML, PDF, imágenes), el proyecto, e incluso la velocidad de indexación deseada.

Conclusión

Comprender los entresijos de los motores de búsqueda y sus límites es esencial para cualquier estrategia de SEO. Ya sea que estemos buscando disociarnos de un TLD entero para evitar el spam, o que estemos explorando los límites de rastreo de Googlebot, estas son tácticas valiosas para optimizar la visibilidad de nuestro sitio web. A medida que continuamos desentrañando los misterios del SEO, estas revelaciones nos acercan un paso más a dominar el arte de la optimización de motores de búsqueda.