Como ser avisado de novas publicações de um site sem RSS

A sala de imprensa de um concorrente publica um anúncio de preços numa terça de manhã. Você só descobre na quinta, quando alguém do comercial encaminha o print de um cliente. O site estava nos seus favoritos. Você até pensou em colocá-lo no leitor de feeds, mas o site não tem RSS, então não havia o que adicionar.

É o cenário mais comum. Se você quer ser avisado de novas publicações de um site sem RSS, existem três caminhos reais, e vale tentar nesta ordem: procurar um feed que existe mas está escondido, ler o sitemap e, só então, monitorar a própria página. Este guia mostra os três, incluindo como configurar o último para ver cada post novo nos alertas, e não um aviso toda vez que a barra lateral muda.

Primeiro, confirme que o feed realmente não existe

Muitos sites que parecem não ter feed têm um. Gaste dois minutos nisso antes de escolher qualquer ferramenta.

Abra o código-fonte da página e busque por alternate. Os publicadores anunciam o feed com uma tag link no head da página. O guia de autodiscovery do RSS Advisory Board descreve isso como a forma de navegadores e outros programas encontrarem automaticamente o feed RSS de um site, e a tag fica assim: <link rel="alternate" type="application/rss+xml" href="...">. Se aparecer application/rss+xml ou application/atom+xml, copie o href.
Teste os caminhos mais comuns. O WordPress gera feeds RSS 2.0, RSS 1.0 e Atom por padrão, segundo a documentação para desenvolvedores, em endereços previsíveis como /feed/. Outras plataformas usam /rss, /rss.xml, /atom.xml ou /index.xml. Não existe padrão, então é chute, mas é um chute barato.
Procure um feed de categoria ou tag. O site pode não ter feed geral, mas ter um para uma seção, como "Imprensa" ou "Novidades do produto". Muitas vezes é justamente o que você queria.

Se algum desses funcionar, use-o. Feed é grátis, rápido e preciso. O restante deste guia é para os sites em que nenhum funciona, o que, no B2B, inclui a maioria das salas de imprensa corporativas, changelogs de fornecedores e páginas de órgãos reguladores.

Por que tantos sites não têm feed

O feed perdeu seu maior leitor há muito tempo. O Google anunciou em 13 de março de 2013 que encerraria o Google Reader em 1º de julho de 2013. Desde então, o feed virou algo que o publicador escolhe oferecer, e muitos sites corporativos nunca o ativaram.

Ninguém publica um número confiável de quantos sites ainda oferecem feed, então desconfie de qualquer percentual que você vir, inclusive o nosso. O que dá para contar é a sua própria lista: pegue as dez páginas que importam para você e teste uma por uma.

Opção dois: ler o sitemap

A maioria dos sites publica um sitemap XML em /sitemap.xml (geralmente indicado no robots.txt). Cada URL pode trazer uma data lastmod, o que te dá de graça uma lista de páginas mexidas recentemente.

Dois cuidados. Primeiro, o lastmod é tão honesto quanto o site decide ser. O Google diz que só usa o valor quando ele é "consistente e verificavelmente" correto e que ele deve refletir "a última atualização significativa da página", segundo a documentação de sitemaps. Muitos sites carimbam todas as URLs com a data de hoje, e aí o campo não serve para nada. Segundo, o sitemap lista todas as páginas: uma seção de notícias com 400 posts te entrega 400 linhas para comparar com as de ontem. Para isso você precisa de um script ou de uma ferramenta, e é aí que muita gente desiste.

O sitemap funciona bem quando o site é grande, bem cuidado e você só precisa da URL, sem título nem resumo.

Opção três: monitorar a página de listagem

Quase todo site que publica tem uma página de listagem: /blog, /noticias, /imprensa, /changelog, /novidades. Os posts novos aparecem ali primeiro, em lista. Monitorar essa lista faz o que o feed faria por você.

O problema está no que "monitorar" significa. Um verificador básico de mudanças compara a página com a cópia anterior e avisa que algo mudou. Num site movimentado, isso acontece todo dia: um banner novo, um aviso de cookies, um destaque que gira, o ano no rodapé. Alerta que dispara por tudo vira silêncio em uma semana.

O que você quer é a lista lida como lista: cada post é um item com título, link e, se a página mostrar, data. Assim, uma mudança significa uma de três coisas: um post novo, um post modificado (o título ou a data mudou) ou um post removido. O resto é ruído.

Como configurar para ficar silencioso

Aponte para a listagem, não para a home. A home muda por uma dúzia de motivos. A página /noticias muda quando há notícia.
Escolha uma frequência que combine com o site. Quem publica uma vez por semana não precisa de checagem de hora em hora. Diária basta para a maioria dos blogs corporativos; intervalos menores fazem sentido para um órgão regulador ou uma página de status, onde a rapidez importa.
Escreva o que conta. "Só posts novos sobre preço, pacotes ou lançamentos" é uma instrução melhor do que "me avise das mudanças".
Decida onde o alerta chega. E-mail serve para uma leitura semanal. Um canal compartilhado é melhor quando um time precisa reagir.

Como o Briefpanel faz isso

O Briefpanel trata uma URL como uma fonte e lê as entradas que existem nela. Adicione /noticias e ele acompanha cada post como uma entrada própria, com o histórico de quando foi adicionada, modificada ou removida. Um post novo chega como uma atualização com o título, então você não precisa abrir a página e achar a diferença sozinho.

Frequência por página. A opção mais rápida é a cada 30 minutos; a maioria dos blogs precisa de muito menos.
Instruções. Você dá à fonte um prompt curto, como "me avise sobre anúncios de preço, planos e lançamentos, ignore agenda de eventos", e ajusta a sensibilidade a pequenas edições.
Entrega. E-mail ou push, resumo diário ou semanal, ou Slack e Discord por webhook. Cada atualização também pode ir para os seus sistemas por um webhook assinado ou pela API REST e pelo servidor MCP.
Custo. A cobrança é por créditos, sem assinatura. Cada verificação custa um crédito por página lida: a página da lista, cada página seguinte da lista, se ela continuar, e cada página de post que a fonte seguir, até um teto fixo por verificação. Os preços atuais estão em /pt-br#billing.

Um limite honesto: o Briefpanel foi feito para uso profissional, então não substitui um leitor de feeds se você acompanha cem blogs pessoais. Se existe feed, um leitor de feeds é mais barato e mais rápido. O Briefpanel compensa nas páginas sem feed que alguém na sua empresa precisa acompanhar.

Modelo de instrução para uma sala de imprensa sem feed: "Acompanhe cada artigo como um item próprio. Trate um artigo novo como importante se falar de preços, planos, parcerias, aquisições, lançamentos de produto ou mudanças de liderança. Ignore agenda de eventos, vagas, mudanças de cookies e banners e o rodapé. Informe o título e a data exibida na página."

Configuração em cinco minutos

Abra o site e encontre a página de listagem dos posts. Copie essa URL, não a da home.
Faça a checagem de feed acima uma vez. Se existir feed, use-o e pare aqui.
Adicione a URL ao Briefpanel como fonte.
Cole o modelo de instrução acima e ajuste para o que o seu time precisa acompanhar.
Escolha a frequência (diária é um bom padrão) e para onde vão os alertas.

Depois da primeira verificação, você tem uma linha de base com os posts que já existem. A partir daí, só chegam posts novos, alterados ou removidos.

FAQ

Como ser avisado de novas publicações de um site sem RSS?

Procure primeiro um feed escondido, depois tente o sitemap e, por fim, monitore a página onde os posts são listados. O último funciona em quase qualquer site, desde que a ferramenta leia a lista como itens, e não como um bloco único de texto.

Como descobrir se um site tem feed RSS?

Abra o código-fonte da página e busque por application/rss+xml ou application/atom+xml. Se não houver nada, teste /feed/, /rss, /rss.xml e /atom.xml. Sites em WordPress geram feeds por padrão.

O que substituiu o RSS?

Hoje os publicadores chegam aos leitores por newsletters, redes sociais e notificações push. Muitos sites ainda têm feed, mas um site pode simplesmente não oferecer um, e ninguém repara. Por isso monitorar a página funciona bem: não depende de o publicador oferecer nada.

Dá para mandar posts novos de um site para o Slack sem feed?

Dá. Monitore a página de listagem e envie as atualizações para um canal do Slack por webhook. Posts que aparecem na mesma janela de alertas dividem uma mensagem, que traz as mudanças mais importantes da janela. O app guarda a lista completa.

Sitemap é melhor que feed?

Não para alertas. O sitemap diz quais URLs existem e, se o site for honesto, quando mudaram. Ele não traz títulos nem resumos, e é longo. Use quando o site for grande e você só precisar das URLs.

Não perca posts de sites que não publicam feed

Se as páginas que você precisa acompanhar não têm RSS, você não precisa ficar conferindo à mão. Adicione a página de listagem uma vez, diga o que importa e receba um alerta quando algo novo aparecer.

Veja o Briefpanel para monitorar concorrentes →

Guias relacionados

Fontes

RSS Advisory Board — RSS Autodiscovery
WordPress Developer Resources — WordPress Feeds
Google Search Central — Build and submit a sitemap
TechCrunch — RIP Google Reader