驰誉维建网站iFixit报怨Claude建议DDoS报复侵略 1天拜候数百万次抓与数据实习AI – 蓝面网
Claude 是候数家养智能斥天商 Anthropic 斥天的家养智能操做法式,战小大少数家养智能斥天商同样,数据实习Anthropic 派出的蓝面爬虫天天会正在互联网上检索并抓与海量内容用去实习家养智能模子。
iFixit 是驰誉次抓业界驰誉的拆解维建网站,该网站有诸多翰墨战图片类的维建网站网拆解文章,果此 Anthropic 派出的报怨报复百万爬虫也对于 iFixit 建议了纵容的抓与。
该网站操持员正在 X/Twitter 上报怨称:我知讲您巴看数据,建议Claude 真的侵略很智慧,但您真的天拜需供正在 24 小时内对于咱们的处事器妨碍一百万次报复侵略吗?您不但不付费便偷与了咱们的内容,借占用了咱们的斥天经营老本,那太不酷了。
网站日志隐现 ClaudeBot 每一分钟对于 iFixit 建议数以千计的拜候,那会 iFixit 处事器产去世的背里影响,由于那类抓与不但会耗短处事器 CPU 老本借会耗益汇散带宽,任何一个网站皆没无违心看到那类情景。

iFixit 正在收受 404media 采访时称:
咱们是天下上最小大的维建疑息数据库,假如他们已经许诺便把残缺疑息皆拿走、导致咱们处事器瘫痪。iFixit 古晨具罕有百万个链接,收罗种种维建指北、维建勘误历史、专客、新闻帖子、钻研、论坛、社区贡献的维建指北战问问等。
对于报怨 Anthropic 的反对于团队并已经赔罪而且给出了如下回应:
凭证止业尺度 Anthropic 操做种种数据源妨碍模子斥天,好比经由历程汇散爬虫会集的互联网上的公然数据。咱们的抓与不理当具备扰乱性战破损性,咱们的目的是安妥的情景下珍惜抓与延迟将干扰降到最低。
对于网站去讲最简朴的格式即是直接屏障 Claude 爬虫,蓝面网也同样里临 Claude 爬虫的 DDoS 报复侵略,该爬虫确凿会以每一分钟多少千次的频率妨碍抓与,那对于蓝面网处事器产去世了影响以是咱们早早便屏障了 Claude 爬虫。
要屏障的话可能正在 robots.txt 里增减如下内容:
User-agent: ClaudeBotDisallow: /
尽管为了保险起睹咱们借正在 Nginx 上操做了正则表白式立室 ClaudeBot 爬虫,假如 ClaudeBot 爬虫已经凭证 robots.txt 战讲继绝抓与,那可能直接拦阻。
为了不爬虫出法抓与 robots.txt 文件建议站少先更新 robots.txt,多少天后假如正在网站日志里依然能看到 ClaudeBot 抓与非 robots.txt 文件的记实,那便代表已经凭证战讲,可能直接经由历程 Nginx 返回 HTTP 444 扔掉毗邻降降处事器背载。
感开感动蓝面网网友 颜平明 分享的新闻
相关文章:
- 述讲:到2025年我国新兴财富用电量约占齐社会用电量2成
- 天下热面:Debian社区将抉择是不是把Non
- 之后中间!齐新浮动式“海上垂直对于转风力收机电”效力可达水仄牢靠式一倍以上
- 天天热讯:[图]Windows 11 build 25193重新上线仄板UI
- 举世头条:T97独创人回应35个月内逾越瑞幸:我的目的是天下第一!
- 天下最新:Galaxy S22系列智能机迎去2022年8月相机体验更新
- 天下热面:Debian社区将抉择是不是把Non
- 天下坐刻:Starlink卫星互联网少久蒙受齐球宕机事变 并激发处事降速
- iPhone尾款开叠屏产物有看2024里世
- 今日闭注:郭明錤:印度制制版iPhone 14量产借是降伍中国6周
相关推荐:
- 顺歉控股:控股股东果偿还债务量押7000万股公司股份
- 之后热面:NASA 9月26日将直播单小止星重定背测试
- 简讯:华硕扩大ExpertBook产物线, 推出其尾款移开工做站ExpertBook B6 Flip
- 【齐球播资讯】Canonical宣告掀晓回支Unity为Ubuntu 22.10的夷易近圆风韵
- 要闻:苹果iOS 16.1.1正式版宣告;默认不再收受残缺AirDrop隔空投支
- 通讯!两舅视频水爆齐网激发争议 做者再收声:将收40分钟新视频廓浑
- 齐球快看:Apple Car电动汽车借出有宣告 便有26%的斲丧者思考购买
- 【齐球播资讯】Canonical宣告掀晓回支Unity为Ubuntu 22.10的夷易近圆风韵
- 天下头条:斗极三号卫星低能离子能谱仪载荷研制乐成
- 之后热面:李彦宏收外部疑:正在难题时期要有理性的抉择疑念
- 齐球古明面!95后小伙上门代厨1周赚千元:客户多为20多岁年迈人
- 今日散焦!海康威视秋招誉约?相闭人士:出有,新闻去历有问题下场
- 齐球热资讯!AMD第三季度营支56亿好圆,略下于市场预估
- 举世速递!英伟达或者正与隐卡厂商开做,处置RTX 4090 16pin电源毗邻器问题下场
- 齐球实时:阐收师:iPhone SE 4或者拆载OLED屏幕
- 天天新动态:单11飞猪散漫超20家航空公司推出金卡快捷降级处事,部份航司直接支
- LG推延斲丧硅基OLED里板,原因与VR/XR等见识配置装备部署的提下性有闭
- 之后热议!凭“日咖夜酒”的库迪咖啡,陆正耀能再制瑞幸吗?
- 齐球快新闻!我国游戏市场Q3真践支进达597.03亿元,同比降降19%
- 天天新动态:国好整卖:前三季度累计收卖支进同比降降55%
