DC娱乐网

知识已经变为私有!真想不到美国的AI如此粗暴,拿古书扫描训练然后直接毁书灭迹!

知识已经变为私有!真想不到美国的AI如此粗暴,拿古书扫描训练然后直接毁书灭迹!

Anthropic公司为训练Claude模型秘密实施“巴拿马计划”,花费数千万美元购买数百万实体书,经破式性扫描后全部销毁!

AI训练需要海量数据,随着互联网上AI生成的垃圾内容泛滥,继续抓取网络数据会导致模型坍塌。
但是,在2022年之前出版的纯人工撰写书籍被视为高质量的干净语料。

这些实体书,经过专业编辑和校对,被视为干净和高质量的训练语料,能提升模型的语言组织与推理能力,有效防止模型因学习低质量数据而导致的模型坍塌,成为新的AI训练获取纯净训练数据来源。

由Anthropic公司实施了一项,代号为“巴拿马的计划”,旨在获得世界上所有的书。

这个公司斥资数千万美元,从二手书店、图书馆及零售渠道批量采购实体书,单次从千本到百万本不等。

书籍经液压切割机切开书脊,逐页送入高速工业扫描仪,制成OCR数字副本后,纸质原件被直接粉碎回收。
首批销毁约50万册,累计涉及近200万册实体书。

这么做,有什么害处?显而易见:

扫描后的数字文件被锁入AI公司的私有数据库,公众无法再访问这些原始文本,知识从公共资产变成了私有黑箱。

大量绝版书、冷门学术著作、地方文献乃至孤本古籍被不可逆地物理销毁,人类知识的实体载体永久消失。

难绷的是,根据美国法院却判定,只要买下实体书后,将其一对一地转换为数字副本并销毁原件,这种纯粹的格式转换可以被视为“合理使用”,从而规避部分版权的风险。