Amazon скуповує рідкісні книги та обрізає корінці для навчання ШІ

Скупка рідкісних книг компанією Amazon

Як повідомляє НВ — Техно: 18 серпня, о 12:30, стало відомо, що компанія Amazon активно скуповує рідкісні книги, обрізає їм корінці та сканує сторінки для збору даних, які використовуються для навчання систем штучного інтелекту. Про це повідомило видання 404 Media, журналісти якого простежили шлях однієї рідкісної книги за допомогою трекера. Це видання було доставлено на об'єкт Amazon у Лас-Вегасі, відомий як VGT3, де на території центру зображений динозавр, який тримає книгу в кігтях.

Amazon закуповує великі обсяги рідкісних видань, зокрема книг, які більше не друкують або складно знайти в інтернеті. Після скуповування книги можуть розбирати для сканування їхнього вмісту. У своїй заяві для 404 Media Amazon підтвердив, що купує книги через комерційні канали, зазначивши, що це робиться для вдосконалення продуктів і сервісів, якими користуються клієнти.

Важливість рідкісних книг для штучного інтелекту

Рідкісні книги становлять значний інтерес для розробників великих мовних моделей, оскільки їм потрібні величезні масиви текстів для навчання. Значна частина доступного в інтернеті контенту вже була використана для навчання штучного інтелекту, тому особливо цінними є видання, яких немає в цифровому доступі. Тексти, опубліковані до появи сучасних генеративних моделей, з більшою ймовірністю були написані людьми. Це важливо, оскільки існує ризик колапсу моделі, якщо ШІ навчається на текстах, створених іншим ШІ, що може погіршити якість відповідей. Таким чином, старі та рідкісні книги стають для технологічних компаній джерелом оригінальних текстових даних.

Ця практика Amazon підкреслює зростаючий інтерес технологічних компаній до рідкісних і незаслужено забутих текстів, які можуть забезпечити нові можливості для розвитку штучного інтелекту.

404 Media

В умовах, коли більшість доступної інформації в інтернеті вже використана, рідкісні видання можуть стати важливим ресурсом для покращення якості навчання моделей ШІ. Така стратегія також піднімає питання щодо збереження культурної спадщини і прав на інтелектуальну власність, оскільки бібліотеки і архіви можуть опинитися під загрозою у зв'язку з комерційним інтересом до цих матеріалів.