# robots.txt de gei.consulting
# Sube este archivo a public_html. Un robots.txt de verdad manda sobre el que
# inventa Yoast, y así desaparece el «Crawl-delay: 10» que hoy le pide a Google
# esperar diez segundos entre página y página — con 50 páginas, eso es tener el
# sitio rastreándose a cuentagotas.

# Content Signals — le dice a la IA qué puede hacer con el contenido.
# search=yes  : que te indexen.  ai-input=yes : que te CITEN al responder.
# ai-train=no : que no te absorban para entrenar el modelo.
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Los buscadores de IA (ChatGPT, Perplexity, Claude, Gemini) entran por aquí.
# Se les deja pasar A PROPÓSITO: que GEI aparezca cuando alguien le pregunta a una
# IA «quién hace un PGRD en Colombia» es justo lo que se está buscando.
User-agent: GPTBot
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-agent: OAI-SearchBot
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-agent: PerplexityBot
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-agent: ClaudeBot
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-agent: Google-Extended
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-agent: Applebot-Extended
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-agent: meta-externalagent
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Common Crawl: es el archivo público del que se alimentan muchos modelos.
# Estar dentro es de las formas más baratas de que una IA sepa que GEI existe.
User-agent: CCBot
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: https://gei.consulting/sitemap_index.xml