Meta悄然发布Llama 2 Long AI,在某些任务上击败GPT-3.5 Turbo和Claude 2
站长网2023-10-03 10:56:141阅
本文概要:
Meta悄然发布Llama2Long AI模型,该模型在某些任务上击败了GPT-3.5Turbo和Claude2。
Llama2Long是基于Meta的开源Llama2模型,经过改进后能够更好地处理长文本和复杂任务。
Llama2Long的改进主要包括:增加了长文本数据集、修改了位置编码、使用了强化学习。
Meta Platforms在9月29日发布了一篇计算机科学论文,介绍了其新发布的Llama2Long AI模型。该模型在某些任务上击败了GPT-3.5Turbo和Claude2,这表明Meta的开源方法在生成人工智能领域取得了重大进展。
Llama 2 Long是基于Meta的开源Llama2模型,经过改进后能够更好地处理长文本和复杂任务。该模型的改进主要包括:
增加了长文本数据集:Llama2Long的数据集比Llama2大了4000亿个token,其中包括大量的长文本。
修改了位置编码:Llama2Long使用了RoPE编码,该编码能够更好地处理长文本。
使用了强化学习:Llama2Long使用了强化学习来提高其性能。
在测试中,Llama2Long在生成长文本、翻译语言、编写代码等任务上都取得了优异的成绩。例如,在生成长文本的任务中,Llama2Long的表现比GPT-3.5Turbo和Claude2都更好。
Llama2Long的发布是一个重要里程碑,表明Meta在生成人工智能领域取得了重大进展。该模型的开源性也表明,开源方法在这一领域具有竞争力。
0001
评论列表
共(0)条相关推荐
Take-Two 首席执行官:AI 无法取代人类创造力 杰出作品是由天才创造的
AI无法取代人类的创造力,这是Take-Two(2KGames、RockstarGames和PrivateDivision、Zynga等公司的母公司)首席执行官StraussZelnick在最近的投资者问答环节中发表的看法。站长网2023-05-22 11:11:120000Google承包商加入工会,抗议“报复性”裁员
🔍划重点:1.Google承包商加入AlphabetWorkersUnion(AWU),抗议对试图组建工会的同事进行的“报复性”裁员。2.承包商团队在遭到裁员后,投票决定与AWU组建工会,旨在争取更好的工资、福利和法律保护。3.NLRB决定Google和Accenture在美国的GoogleContentCreationOperations团队中属于联合雇主,引发抗议。站长网2023-11-08 10:11:220000炸场的Sora和冷静的同行
Sora面世半个多月,这个深水炸弹的后续效应依然强烈。OpenAI发布的这个文生视频模型,紧跟着Google发布Gemini1.5的消息,让支持百万级token的Gemini黯然失色,帮助OpenAI在科技圈成功「抢C」,一跃成为视频模型届的GPT3.5时刻。站长网2024-03-06 15:49:340000亚马逊为 Alexa 构建更大的语言模型
亚马逊正在构建一个更大的语言模型来为其Alexa数字助手提供支持,这是其投资生成人式工智能以提升其所有业务的客户体验计划的一部分。在公司2023年第一季度的财报电话会议上,亚马逊CEOJassy表示,将“打造世界上最好的个人助理”。站长网2023-05-04 14:59:380000首发支持Win12 Intel酷睿Ultra处理器押注AI:重塑所有体验
快科技8月4日消息,Intel今年的处理器产品线会有重要变化,桌面版会推出14代酷睿,但它实际上是13代酷睿架构基础上打磨而来的,插槽及主板向下兼容,而移动版则会迎来全新的酷睿Ultra,也就是MeteorLake。这个系列变化就大多了,不仅首发Intel4工艺这是Intel第一代EUV工艺,芯片架构也会是酷睿首次使用小芯片架构,CPU、GPU及IO模块最多有4种工艺。站长网2023-08-05 09:04:370000