Cómo identificar crawlers y bots

Identificar bots no debería depender de un único header. Conviene tratar identidad, señales y clasificación como conceptos distintos.

Y guardar la clasificación permite después observar Googlebot, ChatGPT y otros crawlers como tráfico propio del ecosistema.