# ==========================================================================
# ROBOTS.TXT FOR HTTPS://PRODIAMCO.COM/
# Optimizado para SEO Tradicional, GEO (Generative Engine Optimization) y AEO
# Perspectiva Estratégica Avanzada - Mitad de 2026
# ==========================================================================

# --------------------------------------------------------------------------
# DECLARACIÓN DE MAPAS DE SITIO Y DESCUBRIMIENTO DE IA
# --------------------------------------------------------------------------
# Estándar para Agentes de IA y Ventanas de Contexto (Context Windows).
# Ubicación del archivo de descubrimiento LLM: https://prodiamco.com/llms.txt

Sitemap: https://prodiamco.com/sitemap.xml
Sitemap: https://prodiamco.com/sitemap_index.xml

# --------------------------------------------------------------------------
# 1. MOTORES DE BÚSQUEDA TRADICIONALES Y RESPUESTAS EN TIEMPO REAL (GEO/AEO)
# --------------------------------------------------------------------------
# Googlebot: Controla la búsqueda orgánica y Google AI Overviews
User-agent: Googlebot
Allow: /
Allow: /llms.txt
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /checkout/
Disallow: /cart/
Disallow: /*?*filter=
Disallow: /*?*sort=

# Bingbot & BingPreview: Controla Bing Orgánico y Microsoft Copilot
User-agent: Bingbot
Allow: /
Allow: /llms.txt
Disallow: /wp-admin/

# --------------------------------------------------------------------------
# 2. MOTORES DE RESPUESTA POR IA EN TIEMPO REAL (CITAS EN CHATGPT/PERPLEXITY)
# --------------------------------------------------------------------------
# OpenAI Real-Time Search: El motor detrás de ChatGPT Search
User-agent: OAI-SearchBot
Allow: /
Allow: /llms.txt
Disallow: /wp-admin/

# Perplexity AI Search Engine: Rastreador en tiempo real para respuestas inmediatas
User-agent: PerplexityBot
Allow: /
Allow: /llms.txt
Disallow: /wp-admin/

# Anthropic Claude Web Search: Agente de navegación en tiempo real para Claude
User-agent: Claude-Web
Allow: /
Allow: /llms.txt
Disallow: /wp-admin/

# --------------------------------------------------------------------------
# 3. BOTS DE ENTRENAMIENTO DE LLMS (PROTECCIÓN ASIMÉTRICA DE PROPIEDAD INTELECTUAL)
# --------------------------------------------------------------------------
# Bloqueamos el raspado masivo de código HTML (Ahorro de ancho de banda y CPU),
# pero permitimos el acceso exclusivo a /llms.txt para mantener la relevancia conceptual.

# OpenAI Training Bot (Modelos GPT)
User-agent: GPTBot
Allow: /llms.txt
Disallow: /

# Google Extended (Modelos Gemini)
User-agent: Google-Extended
Allow: /llms.txt
Disallow: /

# Anthropic Training Bot (Modelos Claude de fondo)
User-agent: ClaudeBot
Allow: /llms.txt
Disallow: /

# Apple AI Research Bot
User-agent: Applebot-Extended
Allow: /llms.txt
Disallow: /

# Common Crawl (Bases de datos de código abierto)
User-agent: CCBot
Allow: /llms.txt
Disallow: /

# --------------------------------------------------------------------------
# 4. DIRECTIVA GLOBAL POR DEFECTO
# --------------------------------------------------------------------------
User-agent: *
Allow: /
Allow: /llms.txt
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /xmlrpc.php