Meta可能正开发Llama 3,据称比GPT-4强大、免费开源!
本文要点:
1. Meta可能正在开发比GPT-4更强大的AI大模型Llama3,并保持开源免费。
2.消息称 Llama3计划达到GPT-4的性能水平,但仍将免费提供。然而Meta尚未对此进行官方确认。
3. Llama2在某些应用上达到GPT-3.5水平,但与GPT-4等模型仍有明显差距。Llama3是否能超过GPT-4在技术上还存在不确定性。
据人工智能新闻网站the decoder报道,Meta可能正在开发比GPT-4更强大的AI大模型Llama3,并且保持开源免费。
报道称,这是OpenAI 工程师、前 Google Brain 工程师 Jason Wei 在 Meta 组织的 Generative AI Group 社交活动中听到的消息。
Jason Wei注意到 Meta 现在有足够的计算能力来训练 Llama3和4。他透露,Llama3计划达到GPT-4的性能水平,但仍将免费提供。
不过,Meta目前还没有发表任何关于Llama3何时发布的声明。尽管消息源来自Jason Wei,但其听到的消息也可能有误。
可以参考的是,从2023年2月下旬发布Llama1到2023年7月下旬发布 Llama2, Meta 花了大约五个月的时间。
GPT-4具有比标准版 Llama 更复杂的架构
GPT-4可能通过使用更复杂的混合架构来实现其高性能,该架构具有16个专家网络,每个网络具有约1110亿个参数。
因此,从 Llama2升级到 Llama3可能比简单地通过更多训练进行扩展更具挑战性,并且可能比从 Llama1跳到 Llama2需要更长的时间。
Llama2在某些应用程序中达到了GPT-3.5的水平,同时正在由开源社区通过微调和附加功能进行优化。
例如,最近发布的Code Llama基于 Llama2,通过微调在 HumanEval 编码基准中达到了GPT-3.5和GPT-4级别的结果(取决于测量类型)。
然而,Meta 在论文中指出, Llama2与 GPT-4和Google 的 PaLM-2等闭源模型仍然存在较大的性能差距。
届时Llama3能否比GPT-4更强大还有待观察。
支持中文,性能超GPT-4!笑脸排名第一的纯代码模型
生成式AI代码开发平台Phind在官网发布了最新V7版本,性能方面超越GPT-4,运行效率提升了5倍,并且支持中文和16K超长上下文。据悉,PhindV7是基于Phind的开源代码模型CodeLlama-34BV2,以及700亿个高质量代码和推理问题进行了额外精调。站长网2023-11-30 09:06:410001抖音、小红书掘金PC市场
流量红利见顶后,互联网大厂将目光投向了被冷落已久的PC市场。从之前抖音、快手发布的用户使用峰值可以看出,中午12点,晚19-21点是用户使用的高峰期。在此外的上班时间中,两大App的流量则较为平缓,不过随着存量时代到来,各大App已经将这一时间段视为新增长点。当代年轻人的工作方式也为这些陷入流量焦虑的互联网大厂提供了机会。站长网2023-05-29 15:03:440000苹果WWDC 2023部分日程曝光,除了iOS17还有这些重磅新品登场?
早前,苹果已正式宣布WWDC2023苹果全球开发者大会将于今年6月6日-6月10日正式举行,如今随着日子一天天临近,关于本次大会的爆料消息也逐渐浮出水面。像是近日,网上有博主爆料称,苹果目前已向参加本次大会的人员发放相关的活动日程安排表。站长网2023-05-25 03:25:010001抖音开放平台宣布开放抖音小程序核销工具解决方案
今日,抖音开放平台宣布开放抖音小程序核销工具解决方案,帮助生服商家更好的解决核销问题,提升经营效率。核销工具是消费者在抖音购买团购券后,直接可在抖音小程序内核销团购券的工具。它可帮助商家实现“原生团购卖券——>抖音小程序核销团购券”的链路。站长网2023-05-26 15:38:070003Runway又一竞争对手来了!Morph Studio可一键生成短视频
最近,一些创业公司开始把视线从AI图片生成转移到AI视频生成上,MorphStudio通过纯文本就可以生成高质量的短视频,提供了一个无门槛的视频内容创作方式,有望为短视频创作带来变革。官网地址:https://www.morphstudio.xyz/站长网2023-08-28 11:06:370001