资讯
近日消息，哔哩哔哩（B站）在人工智能领域迈出新步伐，宣布开源一套专为高效计算设计的Index-1.9B模型系列。此次发布的模型家族引人注目，它不仅涵盖了核心的基础模型，还特意加入了对比实验模型、面向互动的对话模型以及富有趣味性的角色模拟模型等多个维度的变体。
附官方简介：
Index-1.9B base ： 基座模型，具有 19 亿非词嵌入参数量，在 2.8T 中英文为主的语料上预训练，多个评测基准上与同级别模型比处于领先。
Index-1.9B pure ： 基座模型的对照组，与 base 具有相同的参数和训练策略，不同之处在于严格过滤了该版本语料中所有指令相关的数据，以此来验证指令对 benchmark 的影响。
Index-1.9B chat ：基于 index-1.9B base 通过 SFT 和 DPO 对齐后的对话模型，由于预训练中引入了较多互联网社区语料，聊天的趣味性明显更强。
Index-1.9B character ：在 SFT 和 DPO 的基础上引入了 RAG 来实现 fewshots 角色扮演定制。
据介绍，该模型在预训练阶段使用了 2.8T 规模的数据，中英比例为 4:5，代码占比 6%。目前，角色扮演模型内置了角色“三三”，用户也可以按需创建自己的角色。
文明上网，理性发言，共同做网络文明传播者