2023年夏季,Meta面临重大抉择:是否开源“Llama 2”与GPT-4一较高下
2023年夏季,Meta创始人兼首席执行官马克·扎克伯格面临着一个关键抉择:是否将生成式AI模型“Llama 2”开源,以挑战OpenAI的GPT-4。这一决策的背后,是Meta在AI竞赛中的追赶与突破,也是开源技术的一次重要尝试。
Llama最初是为研究人员准备的,但在被泄露后迅速受到开发者欢迎。与收费模型不同,Llama免费且开源,使研究人员、开发者和其他用户可以访问底层代码及其“权重”,从而使用、微调或改进它。Meta高层,包括首席AI科学家杨立昆和AI研究副总裁乔勒·皮诺,都希望Llama 2能更广泛地开源,以降低成本、加快速度并帮助Meta在AI竞赛中追赶其他对手。
然而,开源也面临挑战。如何盈利?法律风险如何规避?此外,之前两个开源AI产品都引发了广泛批评。扎克伯格在做出决定前广泛听取了各方意见,最终决定开源Llama 2。他坚信开源能够吸引更多开发者使用特定技术,推动创新。
Llama 2的发布对Meta和扎克伯格而言是一个至关重要的转折点。到2024年4月,Llama 3横空出世,无论在速度还是准确性方面,已基本追上甚至超越了那些闭源的竞争对手。在几个基准测试中,Llama 3模型甚至与OpenAI和Anthropic最好的模型相当,甚至表现得更好。
在开源AI模型与闭源模型之间的哲学争议中,Llama的故事或许将成为关键篇章。更重要的是,Llama成为了Meta全力投入生成式AI战略的核心支点。如今,扎克伯格在硅谷开发者眼中已成为了“科技民主化”的捍卫者。
Llama模型崛起,有望树立新的行业标准
尽管ChatGPT在大众心中仍是主流AI工具的代表,但实际上,Llama模型已悄然融入Meta的众多产品中。从Facebook、Instagram、WhatsApp到Messenger的AI助手,再到用户可自定义的AI聊天机器人,Llama变得无处不在。它甚至为Meta与雷朋合作开发的智能眼镜以及Quest头显中的智能助手提供技术支持。在开源AI社区Hugging Face等网站上,Llama模型的下载量已突破6亿次大关。
Llama也是Meta聊天机器人Meta AI的“大脑”,该机器人可在Meta四大社交媒体上使用。Meta报告称,在第三季度末,Meta AI已经拥有超过5亿的月活跃用户。扎克伯格预计,到今年年底,Meta AI将成为使用最多的人工智能聊天机器人。
然而,Meta的这一转型却让不少观察者感到费解。尽管Meta不惜斥资数十亿美元打造Llama,并预计2024年资本支出将高达400亿美元,但这一巨大的支出让一些投资者疑惑何时能实现盈利。尽管如此,Llama的成功让扎克伯格摆脱了外界对其超现实雄心的质疑,也帮助其公司度过了困境。更重要的是,Llama的崛起为扎克伯格提供了一个解决长期痛点的机会:即避免被竞争对手的封闭生态系统所束缚。
在AI领域深耕十年,催生出类似互联网的新行业
Meta在AI领域的探索可追溯到2013年,当时扎克伯格邀请了长期在纽约大学任教的AI专家杨立昆来掌舵Facebook新成立的FAIR实验室。杨立昆回忆道,当他初谈此职位时,首要关切的便是Facebook是否会将其研究成果开源。而扎克伯格给出的答复令他倍感振奋:“哦,你大可放心。”
然而,在生成式AI风起云涌之前,Meta对AI的应用大多局限于幕后。随着OpenAI推出ChatGPT,生成式AI领域迎来了爆发式增长。尽管Meta的支出飙升,但公众尚未充分认识到大语言模型可能产生的幻觉现象。因此,当Galactica的一些输出内容令科学家震惊时,它引发了广泛的批评。在遭受了多天的激烈批评后,Meta的研究人员决定关闭Galactica。
尽管有这些限制措施,完整的LLaMA模型还是在几周内被泄露到了网上。Meta对在网上发布该模型的网站提出了下架请求,试图控制其传播范围。然而,一些批评人士警告Meta将面临严重的后果。恐慌情绪甚至蔓延至了国会山。两名美国参议员致信扎克伯格,对Llama的发布提出了批评并发出警告。然而与此同时杨立昆却表示他和Meta的其他高层领导对于Llama模型的巨大需求感到惊讶。这些反馈直接引起了扎克伯格、首席技术官安德鲁·博兹·博斯沃思以及杨立昆的重视促使他们每周都要召开一次电话会议共同探讨应对策略经过深思熟虑扎克伯格最终下定决心并获得了多位高管的支持于2023年7月正式公布了开源模型。
值得注意的是Llama 2并未实现完全开放。Meta并未透露用于训练模型的数据集其中包括Facebook和Instagram上的所有数据这些数据被广泛视为Meta的关键竞争优势。同时Meta还限制月活跃用户超过7亿的公司使用其服务主要是为了防止大型科技竞争对手的介入不过源代码和模型权重仍然可以下载Meta也鼓励用户向协作社区贡献改进意见漏洞修复以及优化结果。甚至在Llama 2发布之前扎克伯格就已经为其爆火奠定了基础并将其视为Meta的下一件大事。他选择了前苹果高管达勒来领导这个全新的团队专注于加速生成式AI的研发进程以便将其应用于Meta应用的各项功能和工具中。在2023年6月的一次内部全体会议上扎克伯格分享了他对Meta AI未来的展望他表示Meta正在将生成式AI技术融入其所有产品中并重申了该公司对AI研究采取“基于科学的开放方法”的承诺达勒也表示:“我肩负着一项艰巨的任务那就是开发最先进的模型并以创纪录的速度将它们集成到产品中。”简而言之:Llama已成为这场游戏的主角。对于一家年收入高达1350亿美元的公司而言Meta所采取的策略似乎并不符合常规逻辑。开源软件通常被视为一种技术推广的手段它更有利于那些与Meta这样的行业巨头竞争的小型初创公司或资源有限的团队。然而如今Llama已经经过了一年多的实践检验扎克伯格的观点在某些人看来颇具说服力。研究Meta的沃尔夫研究公司分析师什维塔·卡朱莉亚认为将Llama作为开源软件发布是Meta的“天才之作”。这一举措不仅帮助Meta吸引了顶尖人才还加速了其平台的创新步伐并为其开辟了新的收入来源她解释说开源的Llama使Meta能够迅速赶上OpenAI、谷歌和Anthropic等竞争对手部分原因在于成千上万的开发者正在以惊人的速度对Llama进行构建和改进她还指出:“如果Meta没有选择开源那么它可能需要更长的时间才能与其他前沿模型接轨。”卡朱莉亚相信未来Meta将拥有众多新的盈利机会例如基于Llama的Meta AI功能可能会推出订阅和广告选项以及AI驱动的应用内商业信息等她说:“一旦这些AI服务在全球范围内积累了足够的用户和使用量它们就有可能实现盈利。”同时她认为AI生成的内容本身将具有巨大的价值在最近的财报电话会议上扎克伯格表示:“我认为我们将迎来一个全新的内容类别即AI生成或总结的内容或者由AI以某种方式整合的现有内容。”帕特里克·温德尔是数据和AI公司Databricks的联合创始人兼工程副总裁该公司于7月在其平台上部署了Meta的Llama 3.1模型温德尔认为如果将这些内容视为推动Facebook诞生的第一波科技浪潮那么由苹果和谷歌主导的第二波科技浪潮那么我认为扎克伯格已经预见到第三波科技浪潮即将到来他不希望看到只有一两家公司完全控制所有AI的使用避免这种情况的一个有效方法就是市场商品化即免费提供核心知识产权从而打破垄断格局。”尽管术语的使用存在争议但Meta在关键领域取得了显著成就非营利组织艾伦AI研究所的研究科学家内森·兰伯特表示尽管开源的定义可能有分歧但目前超过90%的开源AI模型都是基于Llama构建的。”在Meta内部Llama与创收业务之间的联系日益紧密今年1月扎克伯格将AI研究团队FAIR与在Meta应用程序中部署生成式AI产品的团队整合到了同一个部门杨立昆和皮诺现在直接向首席产品官克里斯·考克斯汇报工作达勒也是如此皮诺表示:“将FAIR与应用产品家族结合在一起是非常有意义的。”她指出即使在重组之前她的团队所做的研究也往往能在几个月后就应用到Meta的产品中。”扎克伯格还为FAIR设定了一个更为宏伟的目标:开发通用人工智能(AGI)即拥有类似人类智能的AI虽然Meta更喜欢用AMI(高级机器智能)这一术语但皮诺表示无论名称如何Meta现在已经有了一个“真正的路线图”来创造这种AI而这个路线图很可能就是依赖于不断壮大的Llama与此同时该公司正在致力于开发Llama 4模型目前该模型正在一个由超过10万颗英伟达GPU组成的集群上进行训练。”然而并非所有人都对Llama持乐观态度多年来扎克伯格和他的公司一直在努力应对公众对其在Facebook、Instagram和WhatsApp上使用其他类型AI进行个性化新闻推送内容审核和定向广告的不信任批评者指责其算法加剧了政治两极分化青少年心理健康危机以及错误信息的传播因此Llama可能会面临更加严格的审查。”一些批评人士还担心像Llama这样的开源模型在恶意行为者手中可能会变得非常危险正是因为其开放性过高在当前紧张的地缘政治氛围中这些担忧可能会进一步加剧。”尽管如此扎克伯格的一些老朋友对这种AI军备竞赛表示担忧Facebook的联合创始人现任Asana首席执行官达斯汀·莫斯科维茨就指出虽然他不反对开源大语言模型但他认为不断发布更强大的模型可能并不合适。”然而扎克伯格及其盟友坚信开源模型的风险实际上比那些封闭的专有模式要小他们主张对开源AI进行过度的监管可能会扼杀创新。”无论结果如何扎克伯格都被视为这一变革的关键推动者内部人士透露他个人深度参与了推动Llama和开源的工作这是Meta能够如此迅速和专注发展的关键原因。”为了推动这一变革扎克伯格一直在积极招募AI人才并亲自参与招募过程据报道他曾用个人电子邮件从谷歌DeepMind挖角研究人员这些邮件中强调了AI对Meta的重要性。”埃里克·梅杰曾在Meta工作了8年领导一个专注于机器学习的团队他认为只有像扎克伯格这样的高管才能实现这种彻底的转变他比喻说这就像一艘超级巨轮在转向需要强有力的领导人来引领整个公司向同一个方向前进从某种意义上说扎克伯格在公司内部就像是一个受人崇拜的英雄。”然而随着资本支出的飙升和Meta的转型投资者的耐心可能会受到考验沃尔夫分析师卡朱里亚表示目前投资者对Meta的转型持容忍态度因为已经奠定了基础并展示了未来的机会但如果从2025年到2026年收入没有开始加速增长投资者可能会开始失去耐心尽管如此扎克伯格控制着约61%拥有表决权的股份因此他在一定程度上可以免受投资者不满的影响。”杨立昆表示在GPU和生成式AI方面的巨额投资需要一个愿意冒险的领导者幸运的是不仅有这样的领导者还有一个利润丰厚的核心业务来为这一愿景提供资金因此再次回到了科技和商业交汇处的对话中心而这次讨论的重点不再是虚拟化身等边缘话题而是关于AI的未来及其在商业中的应用。(腾讯科技特约编译金鹿)