Метод «VGT3»: от покупки до уничтожения
Журналисты 404 Media провели расследование, поместив трекер в редкую книгу. Отслеживание показало, что издание попало в логистический центр Amazon VGT3 в Лас-Вегасе. Этот объект, известный своим логотипом — динозавр, держащий книгу в когтях, — занимается не просто сортировкой, а подготовкой данных. Amazon подтвердил, что покупает книги через коммерческие каналы для улучшения своих сервисов, но суть процесса заключается в физическом разрушении экземпляров: у книг вырезают корешки, чтобы обеспечить плоское сканирование страниц.
Почему редкие книги стали сырьем для ИИ
Крупнейшие языковые модели (LLM) уже исчерпали доступные в открытом интернете тексты. Теперь они обращаются к «темным данным» — редким, вышедшим из печати или физически недоступным в цифровом виде изданиям. Это критически важно для предотвращения «коллапса модели» (model collapse). Если ИИ обучается на текстах, сгенерированных другими ИИ, качество его выводов деградирует. Тексты, опубликованные до 2022 года, гарантированно написаны людьми, что делает их идеальным «чистым» датасетом для обучения.
Сравнение источников данных для LLM
| Источник данных | Доступность | Риск коллапса модели | Статус использования Amazon |
|---|---|---|---|
| Открытый интернет | Высокая | Средняя (присутствует AI-генерация) | Исчерпан |
| Пиратские книги | Средняя | Высокая (юридические риски, шум) | Избегается (в отличие от Anthropic) |
| Редкие физические книги | Низкая (уникальные экземпляры) | Нулевая (текст 100% человеческий) | Активно закупается и сканируется |
Этические и культурные последствия
Практика Amazon вызывает серьезную обеспокоенность у библиофилов и исследователей. Уничтожение физических носителей информации ради извлечения цифровых данных воспринимается как парадоксальный акт: компания, начавшая свой путь с продажи книг, теперь превращает их в топливо для алгоритмов. Это создает прецедент, при котором культурное наследие может быть утрачено в пользу оптимизации коммерческих продуктов, таких как поисковые системы или голосовые помощники Alexa.
Источник: TechCrunch ↗