# ========================================== # 1. BLOQUEIO DE BOTS DE INTELIGÊNCIA ARTIFICIAL (LLMs) # Evita que o conteúdo do site seja usado para treinar IAs. # ========================================== User-agent: GPTBot User-agent: ChatGPT-User User-agent: Google-Extended User-agent: anthropic-ai User-agent: Claude-Web User-agent: Omgilibot User-agent: Omgili User-agent: FacebookBot User-agent: CCBot User-agent: PerplexityBot Disallow: /wp-admin* Disallow: /config* Disallow: /tmp* Disallow: /admin* Disallow: /login* Disallow: /private* Disallow: /comentarios/* Disallow: /comentarios?* Disallow: /sileg/prop_lista* Disallow: /internet/sileg/prop_lista* Disallow: /sileg/Prop_lista* Disallow: /internet/sileg/Prop_lista* Disallow: /*arvore-de-apensados Disallow: /proposicoesWeb/prop_arvore_tramitacoes Disallow: /sileg/prop_arvore_tramitacoes Disallow: /internet/deputado/Dep_Lista* Disallow: /agenda?* Disallow: /transparencia/recursos-humanos/remuneracao/* Disallow: /transparencia/recursos-humanos/contratos-terceirizacao?* Disallow: /transparencia/recursos-humanos/funcionarios?* Disallow: /transparencia/gastos-parlamentares?* Disallow: /transparencia/resultados-legislativos?* Disallow: /receitas-e-despesas/despesas* Disallow: /receitas-e-despesas/cartao-de-pagamentos?* Disallow: /licitacoes-e-contratos/contratos?* Disallow: /licitacoes-e-contratos/licitacoes?* Disallow: /licitacoes-e-contratos/compras-diretas?* Disallow: /evento-legislativo/*?*a=*&*t=* Disallow: /deputados/*/* Disallow: /*.tiff Disallow: /*.bmp Disallow: /*.gif Disallow: /.lixeira* Disallow: /*crawl=no Disallow: /*.pdf # ========================================== # 2. BLOQUEIO DE FERRAMENTAS DE SEO E MINERAÇÃO DE DADOS # Estes bots consomem muita banda fazendo varreduras pesadas. # ========================================== User-agent: AhrefsBot User-agent: SemrushBot User-agent: MJ12bot User-agent: DotBot User-agent: rogerbot User-agent: Mozlila User-agent: BLEXBot User-agent: megaIndex.ru User-agent: Majestic12 User-agent: serpstatbot Disallow: /* # ========================================== # 3. BLOQUEIO DE MOTORES DE BUSCA REGIONAIS ESPECÍFICOS # Útil se o seu site não tem público na Ásia ou Rússia. # ========================================== User-agent: Baiduspider User-agent: YandexBot User-agent: Sogou Disallow: /* # ========================================== # 4. ESPECIFICIDADES DE CRAWL-DELAY (ATRASO DE RASTREAMENTO) # O Google NÃO respeita o Crawl-delay (é configurado no Search Console). # Bing, Yahoo (Slurp) e Yandex respeitam. # ========================================== User-agent: bingbot User-agent: msnbot User-agent: Slurp Crawl-delay: 10 Disallow: /wp-admin* Disallow: /config* Disallow: /tmp* Disallow: /admin* Disallow: /login* Disallow: /private* Disallow: /comentarios/* Disallow: /comentarios?* Disallow: /sileg/prop_lista* Disallow: /internet/sileg/prop_lista* Disallow: /sileg/Prop_lista* Disallow: /internet/sileg/Prop_lista* Disallow: /*arvore-de-apensados Disallow: /proposicoesWeb/prop_arvore_tramitacoes Disallow: /sileg/prop_arvore_tramitacoes Disallow: /internet/deputado/Dep_Lista* Disallow: /agenda?* Disallow: /transparencia/recursos-humanos/remuneracao/* Disallow: /transparencia/recursos-humanos/contratos-terceirizacao?* Disallow: /transparencia/recursos-humanos/funcionarios?* Disallow: /transparencia/gastos-parlamentares?* Disallow: /transparencia/resultados-legislativos?* Disallow: /receitas-e-despesas/despesas* Disallow: /receitas-e-despesas/cartao-de-pagamentos?* Disallow: /licitacoes-e-contratos/contratos?* Disallow: /licitacoes-e-contratos/licitacoes?* Disallow: /licitacoes-e-contratos/compras-diretas?* Disallow: /evento-legislativo/*?*a=*&*t=* Disallow: /deputados/*/* Disallow: /*.tiff Disallow: /*.bmp Disallow: /*.gif Disallow: /.lixeira* Disallow: /*crawl=no Disallow: /*.pdf # ========================================== # 5. GOOGLEBOT (MOTOR DE BUSCA PRINCIPAL) # Configuração para manter a indexação saudável, mas proteger áreas sensíveis. # ========================================== User-agent: Googlebot Disallow: /wp-admin* Disallow: /config* Disallow: /tmp* Disallow: /admin* Disallow: /login* Disallow: /private* Disallow: /comentarios/* Disallow: /comentarios?* Disallow: /sileg/prop_lista* Disallow: /internet/sileg/prop_lista* Disallow: /sileg/Prop_lista* Disallow: /internet/sileg/Prop_lista* Disallow: /*arvore-de-apensados Disallow: /proposicoesWeb/prop_arvore_tramitacoes Disallow: /sileg/prop_arvore_tramitacoes Disallow: /internet/deputado/Dep_Lista* Disallow: /agenda?* Disallow: /transparencia/recursos-humanos/remuneracao/* Disallow: /transparencia/recursos-humanos/contratos-terceirizacao?* Disallow: /transparencia/recursos-humanos/funcionarios?* Disallow: /transparencia/gastos-parlamentares?* Disallow: /transparencia/resultados-legislativos?* Disallow: /receitas-e-despesas/despesas* Disallow: /receitas-e-despesas/cartao-de-pagamentos?* Disallow: /licitacoes-e-contratos/contratos?* Disallow: /licitacoes-e-contratos/licitacoes?* Disallow: /licitacoes-e-contratos/compras-diretas?* Disallow: /evento-legislativo/*?*a=*&*t=* Disallow: /deputados/*/* Disallow: /*.tiff Disallow: /*.bmp Disallow: /*.gif Disallow: /.lixeira* Disallow: /*crawl=no Disallow: /*.pdf # ========================================== # 6. REGRA GERAL (FALLBACK) # ========================================== User-agent: * Disallow: /wp-admin* Disallow: /config* Disallow: /tmp* Disallow: /admin* Disallow: /login* Disallow: /private* Disallow: /comentarios/* Disallow: /comentarios?* Disallow: /sileg/prop_lista* Disallow: /internet/sileg/prop_lista* Disallow: /sileg/Prop_lista* Disallow: /internet/sileg/Prop_lista* Disallow: /*arvore-de-apensados Disallow: /proposicoesWeb/prop_arvore_tramitacoes Disallow: /sileg/prop_arvore_tramitacoes Disallow: /internet/deputado/Dep_Lista* Disallow: /agenda?* Disallow: /transparencia/recursos-humanos/remuneracao/* Disallow: /transparencia/recursos-humanos/contratos-terceirizacao?* Disallow: /transparencia/recursos-humanos/funcionarios?* Disallow: /transparencia/gastos-parlamentares?* Disallow: /transparencia/resultados-legislativos?* Disallow: /receitas-e-despesas/despesas* Disallow: /receitas-e-despesas/cartao-de-pagamentos?* Disallow: /licitacoes-e-contratos/contratos?* Disallow: /licitacoes-e-contratos/licitacoes?* Disallow: /licitacoes-e-contratos/compras-diretas?* Disallow: /evento-legislativo/*?*a=*&*t=* Disallow: /deputados/*/* Disallow: /*.tiff Disallow: /*.bmp Disallow: /*.gif Disallow: /.lixeira* Disallow: /*crawl=no Disallow: /*.pdf