Hugging Face Blog精选73

扩展印度语言预训练规模:2.8 万亿词元与开放数据生成流水线

Scaling Indic Pretraining: 2.8 Trillion Tokens and an Open Data Generation Pipeline

· 1小时前

精选理由

介绍构建 2.8 万亿词元印地语预训练数据的开放流程,为多语言模型训练提供规模化数据参考。

查看原文(Hugging Face Blog)