インド言語AI、2.8兆語を学習

Scaling Indic Pretraining: 2.8 Trillion Tokens and an Open Data Generation Pipeline

インドの多様な言語を理解するAIが、2.8兆語という膨大なデータで学習し、誰でも使えるデータ作成方法も公開。これにより、インドの人々がAIをより便利に使えるようになります。