# DIGITALANDORRA - Robots.txt optimitzat per mitjà digital

# ✅ Permetre recursos CSS i JS per evitar errors d’indexació
User-agent: *
Allow: /wp-content/uploads/
Allow: /*.css$
Allow: /*.js$

# 🚫 Bloquejar accés a rutes internes i contingut no útil
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /comments/
Disallow: /trackback
Disallow: /*trackback*

# 🚫 Bloquejar cerques, rutes tòxiques i dinàmiques
Disallow: /?s=
Disallow: /search
Disallow: /bus/
Disallow: /bus/*%
Disallow: /*utm_*
Disallow: /*gclid*
Disallow: /*fbclid*
Disallow: /*&fbclid*
Disallow: /*&gclid*
Disallow: /*&utm_*

# ✅ Permetre accés a AMP via paràmetre
Allow: /*?amp
Allow: /*&amp

# ⚠️ Bloquejar taxonomies duplicades si no aporten SEO real
Disallow: /tag/
Disallow: /tag/*/feed/
Disallow: /author/
Disallow: /page/
Disallow: /*/attachment/
Disallow: /feed/
Disallow: /*/feed/
Disallow: /comments/feed/

# 🕷️ Ralentització de bots problemàtics
User-agent: msnbot
Crawl-delay: 20
User-agent: Slurp
Crawl-delay: 20
User-agent: noxtrumbot
Crawl-delay: 20

# 🚫 Bloqueig total de bots no útils
User-agent: MJ12bot
Disallow: /
User-agent: AhrefsBot
Disallow: /
User-agent: SemrushBot
Disallow: /
User-agent: DotBot
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Wget
Disallow: /

# 🧭 Sitemap principal
Sitemap: https://digitalandorra.com/sitemap_index.xml