CloudFront

How I tracked which AI bots actually crawl my site

O autor implementou um rastreador para monitorar quais bots de IA acessam seu novo site estático, analisando logs do CloudFront armazenados no S3. Após cinco dias, foram identificados bots como OAI-SearchBot e Bingbot, com a metodologia baseada em user-agents.