本文主要是介绍The Llama 3 Herd of Models【论文原文下载】,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
关注B站可以观看更多实战教学视频:hallo128的个人空间
The Llama 3 Herd of Models【论文原文】
- 点击下载:原文下载链接
摘要
现代人工智能(AI)系统由基础模型驱动。本文介绍了一组新的基础模型,称为 Llama 3。它是一群原生支持多语言、编码、推理和工具使用的语言模型。我们最大的模型是一个密集型 Transformer,具有 405 B {405}\mathrm{;B}405B 参数和高达 128 K {128}\mathrm{;K}128K 个令牌的上下文窗口。本文对 Llama 3 进行了广泛的实证评估。我们发现 Llama 3 在众多任务上与 GPT-4 等领先语言模型相比质量相当。我们公开发布了 Llama 3,包括 405B 参数语言模型的预训练和后训练版本以及用于输入和输出安全的 Llama Guard 3 模型。本文还展示了通过组合方法将图像、视频和语音功能集成到 Llama 3 中的实验结果。我们观察到这种方法在图像、视频和语音识别任务上与最先进的技术表现竞争。由于这些模型仍在开发中,因此尚未广泛发布。
日期:2024年7月23日
网站:https://llama.meta.com/
- 点击下载:原文下载链接
这篇关于The Llama 3 Herd of Models【论文原文下载】的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!