# robots.txt - DivulgadorPro # Permitir acesso geral User-agent: * Allow: / # Bloquear diretórios sensíveis Disallow: /vendor/ Disallow: /logs/ Disallow: /config/ Disallow: /.env Disallow: /contact_logs.txt Disallow: /composer.json Disallow: /composer.lock Disallow: /.htaccess # Bloquear arquivos de desenvolvimento Disallow: /README.md Disallow: /LICENSE Disallow: /.git/ Disallow: /.github/ Disallow: /tests/ Disallow: /phpunit.xml Disallow: /phpstan.neon # Permitir acesso aos recursos essenciais Allow: /favicon.ico Allow: /favicon-*.png Allow: /apple-touch-icon.png Allow: /android-chrome-*.png Allow: /manifest.json Allow: /sitemap.xml # Crawl-delay para ser gentil com o servidor Crawl-delay: 1 # Sitemap Sitemap: https://divulgadorpro.com/sitemap.xml # Diretivas específicas para bots conhecidos User-agent: Googlebot Allow: / Crawl-delay: 1 User-agent: Bingbot Allow: / Crawl-delay: 2 User-agent: facebookexternalhit Allow: / User-agent: Twitterbot Allow: / # Bloquear bots maliciosos conhecidos User-agent: AhrefsBot Disallow: / User-agent: MJ12bot Disallow: / User-agent: DotBot Disallow: / User-agent: SemrushBot Disallow: / # Comentários sobre a estrutura # Este arquivo permite que motores de busca indexem # o conteúdo principal enquanto protege arquivos sensíveis