# robots.txt para Original de BBer (Landing Page y PWA)
# Optimizado para buscadores tradicionales y motores de respuesta de IA (AIO)

# Regla global: Permitir rastreo a todos los agentes
User-agent: *
Allow: /

# OpenAI (ChatGPT, GPT-4, GPT Search y agentes autónomos)
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

# Anthropic (Claude, Claude-Web y entrenamiento de modelos)
User-agent: Claude-Web
Allow: /

User-agent: anthropic-ai
Allow: /

# Perplexity AI (Motor de respuestas y búsqueda conversacional)
User-agent: PerplexityBot
Allow: /

# Common Crawl (Indexación web abierta y datasets para LLMs)
User-agent: CCBot
Allow: /

# Google (Buscador tradicional y modelos Gemini)
User-agent: Googlebot
Allow: /

User-agent: Google-Extended
Allow: /

# Ubicación del Sitemap oficial
Sitemap: https://bber.es/sitemap.xml