Petrobras / robots.txt
← back to petrobras.com.br · change detected 2mo ago (2026-08-26T14:01:29Z) · modified +6 −6
What changed
- Added Allow: /documents/d/ for *
- Added Allow: /o/tema-site-externo-petrobras/images/ for *
- Added Disallow: /*/group/ for *
- Removed Allow: /documents/d/nossa-energia/ for *
- Removed Disallow: /c/portal/ for *
- Removed Disallow: /documents/d/* for *
- Removed Disallow: /group/ for *
Diff old (2026-08-24T19:21:08Z) → new (2026-08-26T14:01:29Z)
| @@ -1,13 +1,11 @@ | ||
| 1 | 1 | User-Agent: * |
| 2 | 2 | Crawl-delay: 5 |
| 3 | - | |
| 3 | + | |
| 4 | 4 | # Diretórios e rotas técnicas do Liferay que podem ser excluídos do rastreamento |
| 5 | - Disallow: /c/portal/ | |
| 6 | 5 | Disallow: /*/c/portal/ |
| 7 | - Disallow: /group/ | |
| 6 | + Disallow: /*/group/ | |
| 8 | 7 | Disallow: /o/ |
| 9 | 8 | Disallow: /web/ |
| 10 | - Disallow: /documents/d/* | |
| 11 | 9 | Disallow: /image/journal/ |
| 12 | 10 | Disallow: /html/ |
| 13 | 11 | Disallow: /combo |
| @@ -33,8 +31,10 @@ | ||
| 33 | 31 | # Web Stories (se não forem conteúdo principal e indexável) |
| 34 | 32 | Disallow: /web-stories?* |
| 35 | 33 | |
| 36 | - # Exceções: conteúdo de imagem e documentos que devem permanecer indexáveis | |
| 34 | + # Exceções: documentos institucionais (PDFs) e imagens de conteúdo devem permanecer indexáveis | |
| 35 | + Allow: /documents/d/ | |
| 37 | 36 | Allow: /o/adaptive-media/image/ |
| 38 | - Allow: /documents/d/nossa-energia/ | |
| 37 | + Allow: /o/tema-site-externo-petrobras/images/ | |
| 38 | + | |
| 39 | 39 | |
| 40 | 40 | Sitemap: https://petrobras.com.br/sitemap.xml |