O robô do Mesmo Teto
O Mesmo Teto reúne num só lugar os anúncios de venda e aluguel das imobiliárias de Dourados e região. Quem busca os anúncios é um programa, o MesmoTetoBot, que lê as páginas públicas dos sites das imobiliárias. Se você chegou aqui pelo registro de acessos do seu site, é ele.
Como ele se identifica
Toda requisição leva este User-Agent:
MesmoTetoBot/0.1 (+https://mesmoteto.com.br/robo)Ele não se passa por navegador nem troca de nome.
O que ele lê
- Só as páginas públicas de anúncio: a lista de imóveis e a página de cada imóvel.
- De cada anúncio: tipo, finalidade, preço, condomínio e IPTU, bairro e endereço publicados, quartos, vagas, áreas, descrição, código do imóvel e o endereço das fotos.
- As fotos não são copiadas: o Mesmo Teto mostra cada foto direto do site da imobiliária.
- Ele não faz cadastro nem login, não preenche formulário e não lê dado de cliente.
Como ele se comporta
- Respeita o
robots.txtdo site, conferido antes de cada requisição. - Faz no máximo uma requisição a cada 3 segundos por site, uma imobiliária de cada vez.
- A página de um anúncio só é aberta de novo quando o anúncio muda na lista ou depois de 7 dias.
- Se o site recusar o acesso ou pedir verificação, ele para. Não contorna bloqueio.
O que o Mesmo Teto faz com os anúncios
Cada anúncio aparece com o nome e o CRECI da imobiliária e a data da última atualização. O contato é sempre o da imobiliária: os botões levam ao site e ao WhatsApp dela, e o Mesmo Teto não intermedia a negociação. Anúncio que sai do site da imobiliária sai do Mesmo Teto na coleta seguinte. Hoje há anúncios de 12 imobiliárias.
Como bloquear ou pedir a retirada
Para o robô não ler o seu site, ponha isto no robots.txt:
User-agent: MesmoTetoBot
Disallow: /Também vale bloquear só uma parte do site, com as regras comuns do robots.txt.
O pedido de retirada, de correção ou de inclusão também pode ser feito pelo formulário de Para imobiliárias.
Se preferir, escreva para contato@mesmoteto.com.br: a coleta do seu site é desligada e os anúncios saem do Mesmo Teto. O mesmo endereço serve para avisar de erro num anúncio ou tirar dúvidas.