文心大模型
文心大模型是一种知识增强的自然语言处理(NLP)模型,由百度开发。它在技术开放日上首次亮相,展示了其在AI领域的最新技术突破和产业应用实践。
KwaiYii是由快手AI团队独立自主研发的一系列大规模语言模型(Large Language ModelLLM)当前包含了多种参数规模的模型并覆盖了预训练模型(KwaiYii-Base)、对话模型(KwaiYii-Chat)。
13B规模的系列模型KwaiYii-13B的主要特点包括:
– KwaiYii-13B-Base预训练模型具备优异的通用技术底座能力在绝大部分权威的中/英文Benchmark上取得了同等模型尺寸下的State-Of-The-Art效果。
– KwaiYii-13B-Chat对话模型具备出色的语言理解和生成能力支持内容创作、信息咨询、数学逻辑、代码编写、多轮对话等广泛任务人工评估结果表明KwaiYii-13B-Chat超过主流的开源模型并在内容创作、信息咨询和数学解题上接近ChatGPT(3.5)同等水平。
KwaiYii-13B-Base及KwaiYii-13B-Chat模型在各榜单中均处于领先水平 。在MMLU、CMMLU、C-Eval等体现综合学科类的Benchmark上领先说明KwiiYii-13B-Base预训练模型在中英文双语学科和行业领域的知识能力突出。在GSM8K数学评测集上及HumanEval编程测评集上的优异表现则体现了模型较好的数理逻辑及代码能力。