当前位置: 网站首页 > 手机 > 详情

折腾十年-我的青葱岁月 清秋子(折腾十年-我的青葱岁月 小说)

2024-05-10 04:10:32 手机 0

北京时间6月19日,在人工智能(AI)的争夺战中,马克·扎克伯格早起却赶到很晚。现在,他正在做一件他不喜欢的事情:追赶。

早在十年前,Facebook创始人就看到了AI的前景,并斥巨资推动自己的AI发展。他聘请了AI 早期梦想家之一、被称为“AI 教父”的Yann LeCun 来领导该业务。然而现在,就在OpenAI 的ChatGPT 进入消费市场几个月后,Meta 在同样的技术上落后了。

折腾十年-我的青葱岁月 清秋子(折腾十年-我的青葱岁月 小说)

十年的先发优势

2013年,Facebook(现称为Meta)开始投资人工智能。扎克伯格和时任首席技术官Mike Schroepfer 亲自出面聘请一位人工智能领域的领导者来领导公司的一个新的研究部门,以推进人工智能的发展。他们找到的副手是纽约大学教授杨立坤,他在人工智能领域取得了著名的突破。

杨根深植于学术界和基础研究,主张创建一种能够反映他的优先事项的文化:雇用科学家而不是工程师,强调学术成果,例如研究论文,而不是为公司的最终用户开发产品。知情人士表示,多年来,这一战略使Meta 的基础人工智能研究实验室对顶尖人才有吸引力,但也对该公司将其技术成果商业化的能力提出了挑战。

Meta 鼓励采用分散的、自下而上的方法来确定研究方向和资源分配。知情人士表示,研究人员各自推动自己的议程,在不同的方向上追求独立的项目,而不是制定统一的全公司战略。 Meta将硬件资源分割成多个小块,分配给各个项目。一些研究人员获得的计算机芯片超出了他们的需要,他们将它们用于不必要的任务,以避免放弃它们。

与此同时,Meta 在为其数据中心配备人工智能开发所需的最强大的计算机芯片方面进展缓慢。即使该公司获得更多此类芯片,也没有良好的机制将它们交到工程师和研究人员手中。有人说,有时会有数千件令人垂涎的昂贵硬件闲置在那里。

Meta 正在对其数据中心进行彻底检修,这可能导致了一些低迷。据Meta 博客文章称,截至5 月,Meta 最新的AI 超级计算机拥有16,000 个此类芯片。

内部争斗

知情人士表示,随着大型语言模型在2020 年开始展示出越来越多的功能,Meta AI 研究部门内部的紧张关系也随之加剧。两个阵营存在分歧:一个阵营敦促企业认真投资大型模型,将其作为行业的新方向;而包括杨丽坤在内的其他阵营则认为这些大型模型是一种昙花一现的时尚,缺乏科学价值。有人透露,杨立坤无论在公司内部还是在公开场合都强烈反对大型语言模型,认为它们不会让人工智能更接近人类智能。这使得持相反观点的研究人员很难获得大型模型开发所需的支持和支持。很多资源。

因此,一些元研究人员只剩下更少的资源来继续推进大型模型的开发。他们在2022 年开发了一种名为“开放预训练模型”(OPT)的大型语言模型,使用了约1,000 个芯片,并在2023 年使用了约2,000 个芯片开发了Meta 的旗舰模型LLaMA。相比之下,行业标准需要5,000 到10,000 个芯片来开发这样的语言模型。大模型。最初,Meta 允许有限的外部研究人员访问LLaMA,但后来它在网上泄露,引发了一系列创新。 Meta 高管认为这是Meta 分享其人工智能技术雄心的一个典型例子。

自那以后,Meta 失去了许多去年从事这些和其他关键生成式人工智能项目的人工智能研究人员。许多人感到精疲力竭,或者对Meta 能否跟上竞争缺乏信心。据LinkedIn 资料和知情人士透露,为LLaMA 撰写研究论文的14 名作者中有6 名已经离开或宣布将离开。为OPT 撰写论文的19 名合著者中,有8 名也离开了。

去年11 月OpenAI 发布ChatGPT 后,Meta 员工离职开始加速。一些人在人工智能初创公司热潮的诱惑下离开,这正在推动包括谷歌在内的硅谷公司进行彻底的人事变动。 LinkedIn数据显示,截至今年3月,LinkedIn上提及GPT的职位发布数量同比增长79%。

Meta 的一位发言人表示,该公司正在继续招募和引进新的人工智能人才。

重新追赶

ChatGPT发布后,扎克伯格、Meta首席产品官Chris Cox和首席技术官Andrew Bosworth共同负责公司所有AI相关工作。这三位高管现在每周都会花几个小时研究人工智能、参加会议并批准人工智能项目。

此前,Meta 花了数年时间优先考虑学术发现并免费分享,但无法充分利用其商业潜力。现在,该公司正在迅速将资源重新集中在开发可用的人工智能产品和功能上,包括自己的聊天机器人。

Meta 的新生成人工智能部门专注于构建可用的产品和工具,而不是科学研究。该部门收到了2000 多份内部申请,并迅速召集了来自不同团队的数百名员工。知情人士称,硬件资源已从人工智能研究部门转移,用于训练新的生成式人工智能模型。

扎克伯格三月份表示,“推进人工智能并将其集成到我们制造的每一款产品中”是该公司最大的单笔投资。在5 月份Meta 的年度股东大会上,扎克伯格表示该公司还希望将人工智能扩展到虚拟世界。

Meta发言人表示,在本月早些时候与员工举行的市政厅会议上,扎克伯格宣布了该公司目前正在开发的一系列生成式人工智能产品,包括用于Messenger和WhatsApp的人工智能代理,用户可以根据文本提示生成人工智能贴纸并在聊天和照片生成功能。照片生成功能允许Instagram用户使用文字提示修改自己的照片,然后在Instagram Stories中分享。

然而,Meta 仍然面临着广泛的挑战。知情人士表示,经过七年政府和媒体对其用户隐私做法的严格审查,该公司对风险的容忍度越来越低,在如何以及何时推出人工智能产品方面产生了摩擦。

否认落后

今年5月,白宫举办了人工智能领导峰会,称其为“人工智能创新前沿公司”的会议。不过,扎克伯格并未受到邀请。

Meta AI 研究副总裁Joelle Pineau 在一份声明中表示,该公司在人工智能开发方面并不落后,并捍卫了之前对人工智能学术研究和架构的关注,称这是Meta 的发展方向。为成功奠定基础。

皮诺说,Meta 的人工智能研究部门“是人工智能研究人员和开放科学的世界领先目的地之一,仅在过去一年,研究成果就显着增加”。她说:“我们的研究突破为我们为我们的应用程序系列带来全新的生成式人工智能体验奠定了坚实的基础。” “我们支持Meta 人工智能研究人员过去和现在的贡献。我们为他们帮助塑造了先进、一流的AI技术的未来而感到自豪。”凤凰科技《AI 前哨》将持续关注此事。