# laboratoriomartinez.com 18/12/2024

# Permitir a todos los motores de búsqueda rastrear el contenido principal
User-agent: *
Allow: /

# Bloquear áreas no relevantes para los motores de búsqueda
Disallow: /wp-admin/  # Área administrativa de WordPress
Disallow: /wp-includes/  # Archivos internos del sistema
Disallow: /wp-content/plugins/  # Scripts de plugins
Disallow: /wp-content/themes/  # Archivos de temas
Disallow: /cgi-bin/  # Scripts obsoletos
Disallow: /?s=  # Evitar indexar resultados de búsqueda internos

# Permitir el rastreo de archivos importantes dentro de wp-admin
Allow: /wp-admin/admin-ajax.php

# Incluir el sitemap para mejorar la indexación
Sitemap: https://laboratoriomartinez.com/sitemap_index.xml

# Instrucciones adicionales (opcional)
# Limitar la carga en el servidor
Crawl-delay: 10

# Bloquear rastreadores específicos si es necesario
User-agent: BadBot
Disallow: /

# Fin del archivo robots.txt