How I Stopped Retry Storms from Destroying My Scraping Budget

Este artículo describe cómo un trabajo de scraping distribuido quemó $240 debido a "tormentas de reintentos" en URLs bloqueadas. El problema ocurre porque los límites de reintentos se restablecen en nuevas ejecuciones, lo que lleva a cientos de solicitudes inútiles y un gasto excesivo del presupuesto.