Quem está comprando livros antigos no Japão para treinar IA?

Mídias japonesas relatam uma aquisição em massa de livros antigos, suspeitando-se que o objetivo seja a digitalização para treinamento de modelos de inteligência artificial.
A mídia japonesa descobriu que indivíduos não identificados estão comprando em massa livros antigos em japonês e enviando-os para o exterior. O esquema de compra parece incomum: os compradores não se limitam a um único tópico, adquirindo desde história e filosofia até direito e estudos locais.
Algumas livrarias antiquárias vendem mais de 100 livros por dia. Desde agosto, mais de 50 toneladas de livros japoneses foram enviados para os EUA, o equivalente a aproximadamente 100.000 exemplares.
Apesar da falta de evidências diretas, a indústria suspeita que o objetivo é digitalizar textos raros para o treinamento de IA. Isso já aconteceu antes: anteriormente, a Anthropic comprou em massa livros impressos, cortou as lombadas e digitalizou as páginas para criar conjuntos de dados.
À medida que os dados publicamente disponíveis na internet se tornam insuficientes, edições antigas e não digitalizadas estão se tornando um novo recurso valioso para a IA generativa.
Por que isso importa
AnáliseIsso demonstra que os desenvolvedores de IA estão recorrendo a dados raros offline devido à exaustão dos recursos públicos da internet, o que pode impactar a qualidade e a singularidade dos futuros modelos.
Debater na comunidade
Compartilhe suas dúvidas e insights com desenvolvedores