据 Meta 称,Llama 2 接受的公共数据训练量比 Llama 1 多 40%,处理的上下文量是 Llama 1 的两倍。

大型科技公司 Meta 和微软联手推出了 Llama 2,这是 Meta 的开源大型语言模型,将在微软的 Windows 和云计算平台 Azure 上运行。
两人于 7 月 18 日宣布合作,称 Llama 2 免费用于研究和商业用途,同时还针对在 Windows 上运行进行了优化。
该公告证实了上周的传言,即 Llama 2 将为企业和研究人员构建,以便在 Meta 的人工智能技术堆栈上创建应用程序。
Meta 声称 Llama 2 接受的公开在线数据源的训练量比 Llama 1 多 40%,处理的上下文量是 Llama 1 的两倍。
该公司表示,在编码、熟练程度、推理和知识测试表现方面,Llama 2 优于许多竞争对手的开源大型语言模型 (LLM)。然而,根据其一篇研究论文,Meta 承认,与 OpenAI 的 GPT-4 等闭源竞争对手相比,它的效率并不高
Meta 首席执行官马克·扎克伯格 (Mark Zuckerberg) 在 7 月 18 日的 Instagram 帖子中表示,Llama 2让研究人员和企业能够使用我们的下一代大型语言模型作为其工作的基础进行构建。
Meta 表示,自 2 月份 Llama 1**版发布以来,它对 Llama 1 的需求感到“震惊” ,收到了超过 10 万个访问请求。该模型很快就被图像板网站 4chan 的用户泄露到了网上。
然而,Llama 1 的数据与 ChaPT 的数据相差甚远,据路透社 2 月份报道,预计前三个月内有 1 亿或更多用户注册使用该模型。
根据《财富》1 月份的一份报告,通过此次合作,微软现在支持了人工智能领域的两大巨头,并在 2023 年累计向 OpenAI 投资了 1300 万美元。
Meta 开源 Llama 的决定在 6 月份受到了两位美国参议员的批评,他们声称 Llama 第一个版本中“看似**限度”的保护可能为恶意用户从事犯罪任务打开了大门。