／arXiv:2406.11794

第二款DCLM-1B模型参数量为14亿。苹果宣称，在Alpaca bench测试中，性能优于Hugging Face上周公布的小模型SmolLM。

苹果最后将DCLM模型框架、高品质训练数据集DCLM-BASELINE以及预训练方法，都开源公布在https://datacomp.ai/dclm项目网站。