# Bloquear o permitir acceso a contenido adjunto. (Si la instalación está en /public_html).

User-Agent: *   
Allow: /wp-content/uploads/
Allow: /cgi-bin
Allow: /wp-content/plugins/   
Allow: /wp-content/themes/   
Allow: /wp-includes/   
Allow: /wp-admin/

# Desindexar carpetas que empiecen por wp-

Allow: /wp-

# Permitir sitemap pero no las búsquedas.

Sitemap: https://www.myluxepoint.com/sitemap_index.xml
Allow: /?s=   
Allow: /search

# Permitir Feed general para Google Blogsearch.   
# Impedir que /permalink/feed/ sea indexado pues el feed de comentarios suele posicionarse antes de los post.
# Impedir URLs terminadas en /trackback/ que sirven como Trackback URI (contenido duplicado).   

Allow: /feed/$
Allow: /feeds/$
Allow: /feeds/
Allow: /feed   
Allow: /comments/feed   
Allow: /*/feed/$   
Allow: /*/feed/rss/$   
Allow: /*/trackback/$   
Allow: /*/*/feed/$   
Allow: /*/*/feed/rss/$   
Allow: /*/*/trackback/$   
Allow: /*/*/*/feed/$   
Allow: /*/*/*/feed/rss/$   
Allow: /*/*/*/trackback/$

# Evita bloqueos de CSS y JS.

Allow: /*.js$
Allow: /*.css$

# Lista de bots que deberías permitir.

User-agent: Googlebot-Image
Allow: /wp-content/uploads/

User-agent: Adsbot-Google
Allow: /

User-agent: Googlebot-Mobile
Allow: /

# Lista de bots que generan consultas abusivas aunque siguen las pautas del archivo robots.txt

User-agent: MSIECrawler
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: libwww
Disallow: /

Sitemap: https://www.myluxepoint.com/sitemap_index.xml