https://www.communeify.com/cn/tag/mistral/Communeify - Your Community PlatformHugohttps://www.communeify.com/cn/blog/mistral-large-2/https://www.communeify.com/cn/blog/mistral-large-2/Thu, 25 Jul 2024 23:29:46 +1000Mistral Large 2 是一款新一代的大型语言模型，具有卓越的成本效益、速度和性能。它支持多种语言和编程语言，并在多个基准测试中展现出优异的表现。本文将详细介绍 Mistral Large 2 的特点、性能和应用场景。 Mistral Large 2 概述Mistral Large 2 是一个具有 128k 上下文窗口的强大语言模型。它支持数十种语言，包括法语、德语、西班牙语、意大利语、葡萄牙语、阿拉伯语、印地语、俄语、中文、日语和韩语。此外，它还支持 80 多种编程语言，如 Python、Java、C、C++、JavaScript 和 Bash。 这个模型设计用于单节点推理，特别适合长上下文应用。它拥有 1230 亿个参数，能够在单个节点上实现高吞吐量运行。Mistral Large 2 以 Mistral 研究许可证发布，允许用于研究和非商业用途。如需商业用途，则需要获取 Mistral 商业许可证。 一般性能Mistral Large 2 在评估指标上设立了性能/服务成本的新标准。特别是在 MMLU（大规模多任务语言理解）测试中，预训练版本达到了 84.0% 的准确率，在开放模型中创造了新的性能/成本巴雷托前沿。 代码和推理能力基于 Codestral 22B 和 Codestral Mamba 的经验，Mistral Large 2 在训练中包含了大量的代码数据。它的表现远超前代 Mistral Large，并与 GPT-4、Claude 3 Opus 和 Llama 3 405B 等领先模型不相上下。 在增强模型推理能力方面，开发团队投入了大量精力。重点之一是最小化模型产生"幻觉"（生成听起来合理但实际上不正确或不相关的信息）的倾向。通过精细调整，使模型在回应时更加谨慎和敏锐，确保输出可靠且准确。 此外，新的 Mistral Large 2 经过训练，能够在无法找到解决方案或缺乏足够信息提供确切答案时坦诚承认。这种对准确性的承诺反映在数学基准测试的改进性能上，展示了其增强的推理和解决问题的能力。 {: width=“100%” } 图片转自 mistral-large-2407{:target="_blank"}