AI爬虫不再隐形:Hatamoto把抓取记在服务器上,30天识别出16种智能体
Hatamoto发布一套自带AI爬虫统计的内容管理系统,以单个Go二进制与Postgres运行,无需PHP、Node或插件。Google Analytics看不到不执行JavaScript的AI爬虫,Hatamoto改在服务器端记录每次抓取,并按运营商公布的IP段与反向DNS核对真伪。其官网近30天数据显示,19种已知智能体中16种有抓取记录,同时标出3301次冒充ClaudeBot、GPTBot等的伪造抓取。
Hatamoto发布一套自带AI爬虫统计的内容管理系统,以单个Go二进制与Postgres运行,无需PHP、Node或插件。Google Analytics看不到不执行JavaScript的AI爬虫,Hatamoto改在服务器端记录每次抓取,并按运营商公布的IP段与反向DNS核对真伪。其官网近30天数据显示,19种已知智能体中16种有抓取记录,同时标出3301次冒充ClaudeBot、GPTBot等的伪造抓取。
已读完全部报道