# robots.txt — seo4pymes.com
# Politica: sitio 100% publico e indexable. Los crawlers de IA estan
# PERMITIDOS explicitamente (estrategia GEO/AEO: ser legible y citable por LLMs).

User-agent: *
Allow: /

# --- Crawlers de IA: permitidos explicitamente ---

# OpenAI — entrenamiento
User-agent: GPTBot
Allow: /

# OpenAI — indexado para ChatGPT Search
User-agent: OAI-SearchBot
Allow: /

# OpenAI — visitas en vivo desde ChatGPT (user-triggered)
User-agent: ChatGPT-User
Allow: /

# Perplexity — crawler de indice
User-agent: PerplexityBot
Allow: /

# Perplexity — visitas en vivo (user-triggered)
User-agent: Perplexity-User
Allow: /

# Anthropic (Claude)
User-agent: ClaudeBot
Allow: /

# Anthropic (Claude) — user-agent adicional (citas/busqueda)
User-agent: Claude-Web
Allow: /

# Anthropic (Claude) — user-agent adicional (entrenamiento)
User-agent: anthropic-ai
Allow: /

# Google — uso de contenido para Gemini / AI Overviews grounding
User-agent: Google-Extended
Allow: /

Sitemap: https://seo4pymes.com/sitemap.xml