维基百科面临AI爬虫带宽压力
维基媒体基金会表示,2024年1月以来,多媒体文件请求带宽增长50%,主要来自AI训练爬虫,而非人类用户。65%的高成本流量由爬虫产生,它们频繁请求冷门内容,增加核心数据中心负载。 对此,维基媒体计划2026年前将爬虫流量减少20%-30%,优先保障人类用户访问。
The Register
📮投稿 ☘️频道 🌸聊天
维基媒体基金会表示,2024年1月以来,多媒体文件请求带宽增长50%,主要来自AI训练爬虫,而非人类用户。65%的高成本流量由爬虫产生,它们频繁请求冷门内容,增加核心数据中心负载。 对此,维基媒体计划2026年前将爬虫流量减少20%-30%,优先保障人类用户访问。
The Register
📮投稿 ☘️频道 🌸聊天
😁 229 👍 49 🤣 27 😇 18 👎 5 😈 5 🎉 3 🥴 3