扎克伯格在今年年初成立了一个小组,开发新的大语言模型。据报道,这个大模型预计在2024年初开始训练,性能将比Llama 2强大数倍,与OpenAI的GPT-4不相上下。目前,Meta正在建这个项目所需的数据中心,并购买更多的英伟达H100芯片,计划在自己的基础设施上训练新模型。扎克伯格一直倡导开源AI模型,他希望这个新的AI大模型能够像Meta之前的AI产品一样开源。
“有意见”留言板
@不倒翁:Meta想推出新的模型挑战OpenAI的ChatGPT和谷歌的Bard,有点费劲。我觉得有个方法更简单,而且是马克扎克伯格的强项,这不小马不是练拳嘛,直接OK绑架黄教主。卡住芯片,不是更简单!
@周一见:科技巨头们在AI领域的竞争日益激烈。Meta的大动作无疑表明了他们对AI技术的重视和投入,这也预示着AI将在未来的科技发展中扮演更重要的角色。然而,芯片短缺的问题也凸显出了当前AI发展的一大瓶颈,这需要整个行业共同面对和解决。
@贰言:Meta打算在2024年开始训练一个新的大模型,这个模型将以GPT-4为标准。他们这么做无非是想利用GPT-4的高级技术,来提升他们自己的AI技术的实力和准确度。这样一来,不仅可以让用户的体验更好,满意度更高,同时也能让Meta在人工智能这个领域保持领先地位,提升他们在AI市场的竞争力。
@Eva:当他们完成这些的时候,GPT-5已经问世了。
好文章,需要你的鼓励
很多人担心被AI取代,陷入无意义感。按照杨元庆的思路,其实无论是模型的打造者,还是模型的使用者,都不该把AI放在人的对立面。
MIT研究团队提出递归语言模型(RLM),通过将长文本存储在外部编程环境中,让AI能够编写代码来探索和分解文本,并递归调用自身处理子任务。该方法成功处理了比传统模型大两个数量级的文本长度,在多项长文本任务上显著优于现有方法,同时保持了相当的成本效率,为AI处理超长文本提供了全新解决方案。
谷歌宣布对Gmail进行重大升级,全面集成Gemini AI功能,将其转变为"个人主动式收件箱助手"。新功能包括AI收件箱视图,可按优先级自动分组邮件;"帮我快速了解"功能提供邮件活动摘要;扩展"帮我写邮件"工具至所有用户;支持复杂问题查询如"我的航班何时降落"。部分功能免费提供,高级功能需付费订阅。谷歌强调用户数据安全,邮件内容不会用于训练公共AI模型。
华为研究团队推出SWE-Lego框架,通过混合数据集、改进监督学习和测试时扩展三大创新,让8B参数AI模型在代码自动修复任务上击败32B对手。该系统在SWE-bench Verified测试中达到42.2%成功率,加上扩展技术后提升至49.6%,证明了精巧方法设计胜过简单规模扩展的技术理念。