C贸mo crear un archivo robots.txt optimizado para Blogger
El archivo robots.txt es una herramienta clave en el SEO t茅cnico. A trav茅s de 茅l, le decimos a los motores de b煤squeda qu茅 partes de nuestro sitio web pueden rastrear e indexar, y cu谩les no. En plataformas como Blogger, es especialmente 煤til para controlar la visibilidad de ciertas URLs que se generan autom谩ticamente.
¿Qu茅 es y para qu茅 sirve el archivo robots.txt?
El archivo robots.txt es un archivo de texto plano ubicado en la ra铆z del sitio, que proporciona directrices a los bots de b煤squeda como Googlebot. Sirve para:
Evitar el rastreo de p谩ginas irrelevantes o duplicadas.
Mejorar la eficiencia del rastreo (crawl budget).
Proteger informaci贸n sensible del sitio.
En Blogger, muchas URLs innecesarias se generan autom谩ticamente, como las versiones m贸viles (?m=1) o las etiquetas mal optimizadas. Gestionarlas con robots.txt es clave.
¿C贸mo personalizar el robots.txt en Blogger?
Para personalizar el robots.txt en Blogger, sigue estos pasos:
Entra a tu panel de Blogger y ve a Configuraci贸n.
Busca la secci贸n Rastreo y visibilidad.
Activa la opci贸n Habilitar contenido personalizado para robots.txt.
Pega tu contenido personalizado y guarda los cambios.
Ejemplo completo de robots.txt optimizado para Blogger
A continuaci贸n te muestro un ejemplo de robots.txt optimizado que puedes usar como plantilla. Bloquea par谩metros duplicados, permite b煤squedas 煤tiles y mejora la eficiencia de rastreo.
# Instrucciones para todos los robots
User-agent: *
# Bloquear archivos AMP y scripts de anal铆tica, publicidad o elementos no necesarios para indexaci贸n
Disallow: /v0/
Disallow: /v0/amp-ad-0.1.js
Disallow: /v0/amp-analytics-0.1.js
Disallow: /v0/amp-form-0.1.js
Disallow: /v0/amp-iframe-0.1.js
Disallow: /v0.js
Disallow: /v0/amp-ad-network-adsense-impl-0.1.js
Disallow: /v0/amp-youtube-0.1.js
Disallow: /ads/
Disallow: /ads/_config.js
Disallow: /src/
Disallow: /src/url.js
Disallow: /src/service-helpers.js
Disallow: /src/chunk.js
Disallow: /src/service/resource.js
Disallow: /src/experiments/index.js
Disallow: /src/core/dom/style.js
Disallow: /src/polyfills/custom-elements.js
Disallow: /src/service/navigation.js
Disallow: /src/iframe-helper.js
Disallow: /src/service/standard-actions-impl.js
Disallow: /src/error-reporting.js
Disallow: /build/
Disallow: /build/ampshared.css.js
# Bloquear par谩metros que generan contenido duplicado
Disallow: /*archive/
Disallow: /*updated-max*
Disallow: /*max-results*
Disallow: /*reverse-paginate*
Disallow: /*?m=1$
Disallow: /*&m=1
Disallow: /*?amp=1$
Disallow: /*&=1
# Permitir b煤squedas 煤tiles con intenci贸n de usuario
Allow: /search?q=*
# Permitir etiquetas (labels)
Allow: /search/label/
# Bloquear b煤squedas internas con paginaci贸n duplicada
Disallow: /search?updated-max*
# Permitir el acceso a todo lo dem谩s
Allow: /
# Instrucciones espec铆ficas para Google AdSense
User-agent: Mediapartners-Google
Disallow:
# Mapas del sitio para indexaci贸n completa
Sitemap: https://www.kolectiva.co/sitemap.xml
Sitemap: https://www.kolectiva.co/sitemap-pages.xml
Sitemap: https://www.kolectiva.co/atom.xml?redirect=false&start-index=1&max-results=500
Sitemap: https://www.kolectiva.co/sitemap.xml?page=1
Sitemap: https://www.kolectiva.co/sitemap.xml?page=2
Sitemap: https://www.kolectiva.co/sitemap.xml?page=3
Sitemap: https://www.kolectiva.co/sitemap.xml?page=4
Sitemap: https://www.kolectiva.co/sitemap.xml?page=5
Consejos adicionales para mejorar tu SEO t茅cnico
Una vez tengas tu robots.txt personalizado, es importante que verifiques su correcto funcionamiento en Google Search Console y te asegures de que no est谩s bloqueando p谩ginas importantes por error.
Adem谩s, te recomiendo complementar esta estrategia con una buena implementaci贸n de etiquetas can贸nicas y una estructura de enlaces interna s贸lida. Puedes seguir esta gu铆a para indexar tu sitio r谩pidamente si est谩s lanzando un nuevo proyecto o contenido.
El SEO no es solo contenido: el rastreo, la arquitectura del sitio y la autoridad tambi茅n cuentan. Y un robots.txt bien hecho es tu punto de partida.
M谩s all谩 del robots.txt: construyendo autoridad de marca
Finalmente, si bien controlar qu茅 se indexa es esencial, tambi茅n lo es construir confianza y relevancia. Un concepto clave que debes conocer es el de Brand Authority. Te invito a leer este art铆culo sobre qu茅 es Brand Authority seg煤n Moz para comprender c贸mo mejorar la percepci贸n de tu marca ante Google y tus usuarios.
Con un buen robots.txt en Blogger y una estrategia de marca s贸lida, estar谩s en camino hacia un sitio m谩s visible, r谩pido y relevante.
