Combatendo Crawlers Maliciosos com JPEGs Falsos

O autor desenvolveu um pequeno aplicativo web chamado Spigot que gera páginas web falsas para confundir crawlers maliciosos. Recentemente, um crawler chamado ImageSiftBot o atacou agressivamente em busca de imagens, apesar do Spigot não possuí-las. Para contra-atacar, o autor usa de forma inteligente a estrutura dos arquivos JPEG, gerando JPEGs falsos preenchidos com dados aleatórios. Isso consome efetivamente os recursos do crawler, minimizando a carga da CPU no servidor. A abordagem é simples e eficiente, exigindo código mínimo, e as imagens geradas são exibidas corretamente na maioria dos navegadores.