# ===================================================================
# robots.txt FINAL, CORREGIDO Y SEGURO para WordPress y WooCommerce
# Dominio: cincoips.com
# Versión: Completa (Incluye bloqueo de bots agresivos)
# ===================================================================

User-agent: *

# --- Áreas de Administración y Archivos Sensibles ---
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Disallow: /wp-login.php
Disallow: /xmlrpc.php
Disallow: /trackback/

# --- Permitir Recursos de Renderizado (CRÍTICO) ---
# Garantiza que los bots puedan ver el sitio correctamente.
Allow: /wp-includes/js/
Allow: /wp-content/themes/*.js
Allow: /wp-content/plugins/*.js
Allow: /wp-content/themes/*.css
Allow: /wp-content/plugins/*.css

# --- Contenido Duplicado o de Bajo Valor SEO ---
Disallow: /?s=
Disallow: /search/
Disallow: /?attachment_id=
Disallow: /*/attachment/
Disallow: /comments/feed/

# -------------------------------------------------------------------
# REGLAS ESPECIALES PARA WOOCOMMERCE (Optimizadas)
# -------------------------------------------------------------------

Disallow: /cart/
Disallow: /checkout/
Disallow: /my-account/

Disallow: /*/add-to-cart/
Disallow: *?add-to-cart=
Disallow: *?orderby=
Disallow: *?filter_*=
Disallow: *?product_count=

# Red de seguridad para páginas duplicadas
Disallow: /cart-2/
Disallow: /checkout-2/
Disallow: /my-account-2/

# -------------------------------------------------------------------
# Control Específico para Bots de IA
# -------------------------------------------------------------------

User-agent: Google-Extended
Disallow:

User-agent: ChatGPT-User
Disallow:

User-agent: PerplexityBot
Disallow:

# User-agent: GPTBot
# Disallow: /

# -------------------------------------------------------------------
# Bloqueo de Bots Agresivos, Scrapers y de Bajo Valor
# -------------------------------------------------------------------
# Esta lista previene que bots conocidos por consumir recursos sin
# aportar valor accedan al sitio.

# El original que detectamos
User-agent: crawl
Disallow: /

# Scrapers y aspiradoras de sitios
User-agent: HTTrack
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: SiteSnagger
Disallow: /
User-agent: libwww-perl
Disallow: /
User-agent: pycurl
Disallow: /

# Bots de buscadores irrelevantes para tu mercado (si aplica)
User-agent: Baiduspider
Disallow: /
User-agent: YandexBot
Disallow: /
User-agent: PetalBot
Disallow: /

# Otros bots conocidos por mal comportamiento
User-agent: MJ12bot
Disallow: /
User-agent: DotBot
Disallow: /
User-agent: ZmEu
Disallow: /

# --- Bots de Herramientas SEO (Cortesía para el servidor) ---
User-agent: AhrefsBot
Crawl-delay: 10
User-agent: SemrushBot
Crawl-delay: 10
User-agent: MJ12bot
Crawl-delay: 10

# --- Sitemap ---
Sitemap: https://cincoips.com/sitemap_index.xml