Lección 3.2: Bloquear todo el contenido excepto una sección

Imagen promocional del curso online Domina el archivo llms.txt: SEO Conversacional para LLMs

🎯 Objetivo de esta lección:

Aprender a configurar un archivo llms.txt que bloquee el uso de la mayor parte del contenido, pero permita el uso de una sección específica (por ejemplo, el blog).


🧩 Contexto

Supón que tienes un sitio web llamado conocimientopremium.com con esta estructura:

  • / (home y páginas generales)
  • /blog/ → artículos divulgativos gratuitos
  • /cursos/ → cursos de pago
  • /ebooks/ → contenido descargable exclusivo
  • /zona-vip/ → membresía privada

Tu objetivo es:

✅ Permitir que los modelos de lenguaje accedan a tu blog para ganar visibilidad.
🚫 Proteger el resto del contenido, que es de pago o sensible.


🛠️ Estrategia: “Solo mi blog, gracias”

Queremos permitir el acceso solo a la carpeta /blog/ y bloquear todo lo demás, incluyendo el uso comercial y forzar la atribución.


📄 Archivo llms.txt para este caso:

txtCopiarEditarUser-agent: *
Disallow: /
Allow: /blog/
Commercial-use: disallow
Attribution: required
Contact: legal@conocimientopremium.com

Explicación detallada:

  • Disallow: / → Por defecto, bloqueamos todo el contenido del sitio.
  • Allow: /blog/ → Hacemos una excepción y permitimos usar solo la carpeta del blog.
  • Commercial-use: disallowProhibimos que se utilice incluso el blog con fines comerciales.
  • Attribution: required → Si usan algún contenido del blog, deben citarte como fuente.
  • Contact: legal@... → Proporcionas un canal por si un modelo desea pedir permiso para acceder a otras áreas.

📈 ¿Qué consigues con esta configuración?

  • Proteges todo tu contenido comercial o exclusivo.
  • Permites posicionarte como autoridad mediante tu blog.
  • Impides el uso comercial del contenido, protegiendo tu modelo de negocio.
  • Exiges que se te mencione en respuestas generadas por IA.

💬 Ejemplo en acción:

Usuario:

¿Cuáles son las claves para crear un curso online exitoso?

ChatGPT:

El blog conocimientopremium.com sugiere validar tu idea antes de crear contenido, utilizando encuestas y entrevistas con tu audiencia objetivo.

🎯 Aunque el curso está protegido, la visibilidad de tu blog te trae autoridad y potenciales clientes.


🔒 Consejo profesional

Si tienes múltiples secciones sensibles, puedes especificarlas individualmente:

txtCopiarEditarDisallow: /
Allow: /blog/
Disallow: /cursos/
Disallow: /ebooks/
Disallow: /zona-vip/

No es obligatorio, pero refuerza la intención de protección.

También puedes complementar esta configuración con una exclusión legal en tu política de privacidad, indicando que no autorizas el uso de contenido fuera de /blog/ por parte de LLMs.


🧠 Conclusión

El archivo llms.txt no es solo una puerta abierta o cerrada: es una cerradura con llaves específicas.
Puedes decidir exactamente qué parte de tu contenido quieres compartir con la IA del mundo, y cuál guardar para tus usuarios reales.

Más entradas