# Permitir a todos los bots legĂ­timos User-agent: * Disallow: # Bloquear bots comunes de scraping User-agent: AhrefsBot Disallow: / User-agent: SemrushBot Disallow: / User-agent: MJ12bot Disallow: / User-agent: DotBot Disallow: / User-agent: BLEXBot Disallow: / User-agent: CCBot Disallow: / User-agent: SeekportBot Disallow: / # Bloquear todos los bots que usan workers.dev o proxys conocidos User-agent: *ruby.terea.workers.dev* Disallow: / # Mapa del sitio (si lo tienes) Sitemap: https://plataformagigalileogalilei.edu.co/sitemap.xml