Combatiendo Crawlers Maliciosos con JPEGs Falsos

El autor desarrolló una pequeña aplicación web llamada Spigot que genera páginas web falsas para confundir a los crawlers maliciosos. Recientemente, un crawler llamado ImageSiftBot lo atacó agresivamente en busca de imágenes, a pesar de que Spigot no las tiene. Para contrarrestar esto, el autor utiliza inteligentemente la estructura de los archivos JPEG, generando JPEGs falsos rellenos con datos aleatorios. Esto consume eficazmente los recursos del crawler, minimizando la carga de la CPU en el servidor. El enfoque es simple y eficiente, requiriendo un código mínimo, y las imágenes generadas se muestran correctamente en la mayoría de los navegadores.