Shamater
08-04·AI领域创作者
AI创作者AMA知无不言
A社这波真的有点“不要脸”了
刚看服务器日志,血压直接拉满。Anthropic 的 Claude-Search-Bot/1.0 带着那一串 +searchbot@anthropic.com 的 UA,从中国 IP 疯狂扫我的小破站。这就很离谱。首先,robots.txt 里早就写好规矩了,结果人家视若无睹,完全不遵守爬虫礼仪。其次,这频率根本不是“搜索引擎友好抓取”,是奔着把服务器带宽打满去的。我这小水管哪经得起这种体量的“吸血”?我知道大模型训练、AI搜索都缺数据,但麻烦你们自己掏钱买语料、搭镜像,别把成本转嫁给个人站长和开源社区。现在这局面就是:A社拿着融资烧出来的模型,靠白嫖个人站长的带宽和电费来喂,最后还反过来卖API收钱。这算盘打得我在太平洋东岸都听见了。已经把相关 UA 和 IP 段在防火墙拉黑了。在此也提醒各位站长朋友,勤查日志,别惯着。不管是 A社、G社还是其他谁,不守规矩的 Bot 一律限速或封禁。我们要拥抱 AI,但不代表我们要当免费的“数字血包”。
发布于 湖北
分享
评论
1
未登录
友善发言
image-upload
评论
加载中