# ===========================================================
# robots.txt — tasisoluciones.com
# Última actualización: 2026-05-17
# ===========================================================

# Regla general: permitir indexación a todos los bots legítimos
User-agent: *
Allow: /

# Bloquear áreas de administración (si existen)
Disallow: /admin/
Disallow: /ACQ_Bolsa/admin
Disallow: /ACQ_Bolsa/login
Disallow: /ACQ_Bolsa/registro
Disallow: /TASOLNET/admin
Disallow: /TASOLNET/login

# Bloquear parámetros de query duplicados (evita duplicate content)
Disallow: /*?idcategoria=
Disallow: /*?sessionid=
Disallow: /*?utm_*
Disallow: /*?gclid=

# Bloquear archivos técnicos
Disallow: /*.json$
Disallow: /*.xml$
Disallow: /assets/js/
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /backup/

# Permitir explícitamente recursos críticos para renderizado
Allow: /assets/images/
Allow: /assets/css/
Allow: /*.css$
Allow: /*.js$

# Permitir el sitemap (excepción del Disallow de .xml)
Allow: /sitemap.xml

# ===========================================================
# Bots indeseables — ahorro de ancho de banda
# ===========================================================

User-agent: AhrefsBot
Crawl-delay: 10

User-agent: SemrushBot
Crawl-delay: 10

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: PetalBot
Disallow: /

User-agent: BLEXBot
Disallow: /

# Scrapers de IA sin opt-in (decisión opcional — quita estas líneas si quieres aparecer en respuestas de IA)
User-agent: GPTBot
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: ClaudeBot
Allow: /

User-agent: Google-Extended
Allow: /

# ===========================================================
# Declaración del sitemap
# ===========================================================

Sitemap: https://www.tasisoluciones.com/sitemap.xml