Ir para o conteudo principal

Ferramentas HTTP

Analise suas páginas web: crawl, peso, headers e segurança dos links

Duas ferramentas para diagnosticar problemas HTTP das suas páginas web. O Page Crawl Checker analisa o peso HTML, os headers, o crawl budget e os sub-recursos. O Phishing URL Checker verifica um link suspeito contra 4 bases de threat intelligence.

Page Crawl Checker

Analise o peso HTML, os headers, o crawl budget, os sub-recursos e os redirecionamentos do lado do cliente. Verifique a conformidade com o limite de 2 MB do Googlebot.

Phishing URL Checker

Verifique se uma URL é sinalizada como phishing ou malware por URLhaus, Google Safe Browsing, PhishTank e VirusTotal. Pontuação de risco e veredito em segundos.

Por que usar ferramentas HTTP?

O protocolo HTTP é a base de toda página web. Um problema HTTP significa conteúdo mal indexado, site lento ou recursos desperdiçados. Sem análise HTTP, você ignora o que o Googlebot realmente vê das suas páginas e se seus visitantes estão clicando em links seguros.

Quatro situações em que essas ferramentas são indispensáveis:

  • Página pesada demais → O Googlebot trunca o HTML além de 2 MB, seus links internos e FAQ desaparecem do índice
  • Headers incorretos → Um Content-Type mal configurado ou um X-Robots-Tag: noindex esquecido pode desindexar uma página inteira
  • Crawl budget desperdiçado → Sub-recursos excessivos e a ausência de compressão reduzem o número de páginas rastreadas pelo Google
  • Link suspeito recebido → Um email ou SMS contém um link duvidoso, e você precisa verificar se está sinalizado como phishing ou malware antes de clicar

Como usar as ferramentas HTTP

Passo 1: Escolher a ferramenta

NecessidadeFerramenta a usar
Analisar o peso, os headers e o crawl de uma páginaPage Crawl Checker
Verificar se um link é phishing ou malwarePhishing URL Checker

Passo 2: Inserir a URL

Digite a URL completa no campo de entrada. As duas ferramentas aceitam qualquer URL pública:

https://www.captaindns.com/pt/blog

Para o Page Crawl Checker, teste primeiro suas páginas mais longas (categorias, páginas de produtos, artigos com muitas imagens). Para o Phishing URL Checker, cole diretamente o link suspeito recebido por email ou SMS.

Passo 3: Analisar os resultados

Cada ferramenta fornece um relatório detalhado:

  • Page Crawl Checker: tamanho HTML, score de crawl budget (0-100), inventário de sub-recursos, verificação robots.txt, headers HTTP, detecção de redirecionamentos do lado do cliente, fingerprint SHA-256
  • Phishing URL Checker: veredito global (limpo, suspeito, malicioso), pontuação de risco (0-100), detalhes por fonte de threat intelligence, diagnósticos de cobertura

Detalhes das ferramentas

Page Crawl Checker

Análise completa do crawl de uma página web do ponto de vista do Googlebot:

FuncionalidadeDescrição
Análise de tamanhoPeso bruto e descomprimido do HTML, proporção em relação ao limite de 2 MB (ou 64 MB para PDFs)
Score de crawl budgetNota de 0 a 100 avaliando a eficiência da página para o crawl, com detalhamento dos fatores
Sub-recursosInventário completo de scripts, CSS, imagens, fontes e iframes com tamanho e status
Verificação robots.txtAcesso do Googlebot autorizado ou bloqueado, crawl-delay, sitemaps declarados
Headers HTTPContent-Type, Content-Encoding, Cache-Control, X-Robots-Tag, HSTS, Server
Redirecionamentos do clienteDetecção de meta refresh e redirecionamentos JavaScript invisíveis para o Googlebot
Comparação mobile/desktopDiferenças de tamanho, headers e conteúdo entre as versões smartphone e desktop
Fingerprint SHA-256Hash do conteúdo para detectar mudanças entre análises
Detecção de WAFIdentificação do firewall de aplicação com fallback multi-User-Agent

Utilidade: Diagnosticar problemas de tamanho e crawl que impactam a indexação do Google, otimizar o crawl budget e detectar redirecionamentos JavaScript que o Googlebot não segue.

Phishing URL Checker

Verificação de uma URL contra 4 bases de threat intelligence:

FuncionalidadeDescrição
4 fontes consultadasURLhaus (malware), Google Safe Browsing (phishing), PhishTank (phishing comunitário), VirusTotal (70+ antivírus)
Pontuação de riscoScore ponderado de 0 a 100 conforme a confiabilidade de cada fonte
Veredito globalLimpo, suspeito, malicioso ou indeterminado
Detalhes por fonteStatus individual, tipos de ameaças detectados e tempo de resposta
Formatos aceitosURL completa, nome de domínio puro ou endereço IP
DiagnósticosInformações sobre fontes indisponíveis, timeouts e cobertura limitada

Utilidade: Verificar um link suspeito antes de clicar, proteger sua organização contra campanhas de phishing e verificar que seu próprio domínio não esteja falsamente sinalizado (falso positivo).

Casos de uso concretos

Caso 1: Página de e-commerce truncada pelo Googlebot

Sintoma: A FAQ e os links de navegação no final da sua página de categoria não aparecem nos resultados do Google.

Diagnóstico: O Page Crawl Checker revela que a página tem 3,2 MB de HTML. O Googlebot trunca em 2 MB e perde os últimos 200 produtos, a FAQ e os links internos do footer.

Ação: Limitar a listagem inicial, usar paginação com carregamento sob demanda e mover a FAQ para o topo da página.

Caso 2: Email de phishing bancário

Sintoma: Você recebe um email urgente do seu "banco" com um link de verificação de conta.

Diagnóstico: O Phishing URL Checker retorna um score de 75 (elevado). Google Safe Browsing e PhishTank sinalizam a URL como phishing de engenharia social.

Ação: Não clicar. Denunciar o email como phishing. Acessar o site do seu banco digitando o endereço diretamente no navegador.

Caso 3: Score de crawl budget baixo

Sintoma: O Google rastreia poucas páginas do seu site apesar de conteúdo atualizado regularmente.

Diagnóstico: O Page Crawl Checker mostra um score de 35/100. A página carrega 85 sub-recursos, sendo 40 scripts de terceiros (analytics, widgets, testes A/B).

Ação: Carregar scripts de terceiros com defer/async, remover scripts não utilizados, ativar compressão gzip/brotli.

Sintoma: Um SMS contém um link bit.ly pedindo para "atualizar seu pacote de entrega".

Diagnóstico: Após expandir o link encurtado, o Phishing URL Checker sinaliza a URL final. O URLhaus a referencia como distribuição de malware.

Ação: Excluir o SMS e bloquear o número. Serviços de entrega legítimos nunca pedem pagamento por SMS.

❓ FAQ - Perguntas frequentes

P: Por que analisar páginas web com ferramentas HTTP?

R: As ferramentas HTTP detectam problemas invisíveis: páginas pesadas demais para o Googlebot (truncagem além de 2 MB), headers mal configurados (X-Robots-Tag: noindex esquecido), redirecionamentos JavaScript que o Googlebot não segue. Esses problemas impactam diretamente seu posicionamento nos buscadores sem aviso no Search Console.

P: Como verificar se um link é phishing?

R: Cole a URL no Phishing URL Checker. A ferramenta consulta 4 bases de threat intelligence em paralelo (URLhaus, Google Safe Browsing, PhishTank, VirusTotal) e retorna um veredito com uma pontuação de risco de 0 a 100.

P: O que é o limite de 2 MB do Googlebot?

R: O Google pode baixar e indexar os primeiros 2.097.152 bytes de HTML de uma página. Além disso, o conteúdo é truncado. O limite se aplica ao HTML descomprimido: a compressão gzip/brotli não contorna esse limite.

P: O que é o crawl budget?

R: O crawl budget é o número de páginas que o Googlebot pode rastrear em um determinado período. Páginas pesadas com muitos sub-recursos consomem mais recursos. O Page Crawl Checker calcula um score de 0 a 100 para avaliar a eficiência de cada página.

P: Qual a diferença entre phishing e malware?

R: O phishing imita um serviço legítimo para roubar credenciais. O malware distribui softwares maliciosos (vírus, ransomware, trojans). Uma URL pode ser sinalizada por ambos. O Phishing URL Checker distingue essas categorias nos resultados.

P: O resultado do Phishing URL Checker é 100% confiável?

R: Nenhuma ferramenta garante detecção de 100%. A vida útil média de uma URL de phishing é inferior a 24 horas. Um resultado "limpo" significa que nenhuma fonte a sinaliza no momento da verificação, não que ela é definitivamente segura.

P: Como reduzir o peso de uma página web?

R: Remova o CSS e JavaScript inline desnecessário, ative a compressão gzip ou brotli, externalize os SVG, minifique o HTML e use lazy loading. O Page Crawl Checker identifica os pontos de melhoria específicos.

Ferramentas complementares

FerramentaUtilidade
Pesquisa DNSVerificar os registros DNS do seu domínio
Auditoria de entregabilidade de emailAnalisar MX, SPF, DKIM e DMARC do seu domínio
Verificador de propagação DNSConfirmar que suas alterações DNS estão propagadas
IP Blacklist CheckerVerificar se um IP está listado nas blacklists de email
Domain Blacklist CheckerVerificar se um domínio está em blacklist por spam ou phishing

Recursos úteis