数据：
AI「数据饥渴症」导致学术网站遭受大量异常访问，90%的知识库面临崩溃风险，影响了科研数据的获取与共享。
线索：
这场由AI爬虫引发的危机正在改变学术界的运营模式，可能会导致小型机构的消失，形成资源分配的不均衡。此外，对于投资者来说，关注解决此问题的科技公司和服务提供商或许会带来机会，同时也需要警惕潜在的监管风险。
正文：
学术网站原本是知识存储的重要资源，但如今却因AI爬虫的频繁访问而陷入瘫痪。Nature近期的研究揭示，如DiscoverLife这样的学术资源自二月份以来，遭遇数百万次异常访问，导致页面加载缓慢甚至无法使用。造成这一状况的主要原因是大量AI爬虫正在不断抓取网站数据。这些爬虫的行为不仅让服务器超负荷运转，更对学术研究和出版造成了严重的干扰。
AI爬虫的流行，特别是在生成式人工智能崛起后更为明显。Based于伦敦的医学期刊出版商BMJ曾发现，他们网站上的爬虫流量已超过正常用户流量，直接导致服务器过载。调查显示，超过90%的开放获取知识库表示遭遇了AI爬虫的抓取，其中三分之二的成员因此经历了服务中断。因此，学术网站需要采取措施以防止爬虫的侵扰，但对于资源有限的小型机构而言，这无疑是一个严峻的挑战。
数据在当今AI时代被视为新石油，学术网站因其优质和权威的内容而成为了爬虫的“金矿”。这迫使网站寻求平衡，以保护用户访问的正常体验，同时防范过量流量影响其运营。然而，技术与社会政策的滞后，使得针对这种状况的解决方案仍待完善。
发布时间：
2025-06-17 10:56:25
评论 ( 0 )