AI 爬虫围攻全球大学图书馆,公共访问被拖垮
2026.11.06 · 收录日 2026.11.07 · 事件 · 行业动态 · 媒体报道
数据抓取机器人涌入高校图书馆网站,导致站点变慢甚至宕机。
全球高校图书馆正被大量数据抓取机器人冲击,网站变慢甚至宕机,学生、研究者和公众访问受阻。圣何塞州立大学称一天内遭遇超 11,000 次关于芬兰音乐的搜索。AI 公司为训练大模型持续抓取内容,专家称问题自 2024 年底出现并不断恶化。
- AI 与第三方公司的机器人持续抓取图书馆档案,导致整批馆藏被迫下线
- 圣何塞州立大学一天内被超 11,000 次芬兰音乐相关搜索淹没
- 维多利亚大学图书馆称机器人流量严重时会让网站完全宕机一段时间
- 古腾堡计划负责人称这些编程糟糕的机器人正在“摧毁开放访问”
- AI 抓取机器人常无视 robots.txt,有时每秒请求数千份文档并下载所有格式
为什么值得看
开放获取的公共知识资源正被商业 AI 抓取侵蚀。
适合谁关注
图书馆从业者、研究者、AI 政策关注者。
