Meta推出先进大型语言模型 下一个ChatGPT不远了?_MET:Llama

ChatGPT的爆火引爆了AI行业,全球科技巨头争相杀入这一领域展开混战。周五,Meta也宣布推出大型语言模型LLaMA,加入到由微软、谷歌等科技巨头主导的AI“军备竞赛”中。

当地时间2月24日,Meta宣布将推出针对研究社区的“Meta人工智能大型语言模型”系统,简称“LLaMA”。

同ChatGPT、NewBing不同,LLaMA并不是一个任何人都可以与之对话的产品,也并未接入任何Meta应用。更为确切地说,该产品将是一个开源的“研究工具”。

公司CEO扎克伯格在社交媒体上表示,LLaMA旨在帮助研究人员推进研究工作,LLM在文本生成、问题回答、书面材料总结,以及自动证明数学定理、预测蛋白质结构等更复杂的方面也有很大的发展前景。

麻将链游Mahjong Meta完成1200万美元融资:8月3日消息,Web3麻将链游平台Mahjong Meta宣布完成1200万美元融资,Dragonfly、Folius Ventures联合领投,Meteorite Labs、Find Satoshi Lab、Parallel Ventures、Emoote等参投。[2023/8/3 16:16:38]

Meta发布语音生成AI Voicebox,支持为元宇宙中的角色生成配音:6月17日消息,Meta发布语音生成AI模型Voicebox,支持从文本中生成语音,能够根据仅两秒长的样本匹配音频风格,并将文本样本转换为另一种语言,在给定单独的语音样本的情况下,并能够以说话者的原始语音朗读翻译后的文本内容,目前支持六种语言:英语、法语、德语、西班牙语、波兰语和葡萄牙语。

Meta表示Voicebox也可以让元宇宙中的虚拟助手和非玩家角色发出自然的声音,可以让视障人士听到AI用他们的声音朗读的朋友的书面信息,为创作者提供新的工具来轻松创建和编辑视频的音轨等等。[2023/6/17 21:43:39]

Solana生态NFT平台Metaplex宣布裁员,但称FTX崩溃对其财务状况无直接影响:11月18日消息,Solana生态NFT平台Metaplex首席执行官Stephen Hess今日凌晨在推特上宣布该公司已裁员的消息,但未透露具体裁员规模。他表示:“今天我们做出了一个艰难的决定,与Metaplex Studios团队的几名成员分道扬镳。虽然我们的财务状况没有受到FTX崩溃的直接影响,但对市场的间接影响是重大的,这要求我们采取更保守的方法前进。同时推进关键路径工作将是我的首要任务。”

此前消息,Metaplex曾于今年1月份宣布完成4600万美元融资,9月份Metaplex宣布推出其实用和治理代币MPLX,并向Solana NFT创作者进行空投。[2022/11/18 13:20:47]

开源的“研究工具”

Meta Platform的“元宇宙”部门第一季度亏损29.6亿美元:4月28日消息,根据周三发布的盈利报告,Meta Platform(FB)在其最近成立的Facebook Reality Labs(FRL)部门第一季度亏损29.6亿美元,该部门包括其增强和虚拟现实业务。

Meta宣布,该部门将公布业绩,以展示其认为对下一代在线社交体验至关重要的团队的业绩和投资。

FRL在第一季度创造了6.95亿美元的收入,这只是Meta的应用系列(包括Facebook、Instagram和WhatsApp)在该季度创造的272亿美元收入的一小部分。分析师预计“元宇宙”部门的收入为6.83亿美元。(CoinDesk)[2022/4/28 2:36:16]

Meta表示,LLaMA可以在非商业许可下提供给政府、社区和学术界的研究人员和实体工作者,正在接受研究人员的申请。

此外,LLaMA将提供底层代码供用户使用,因此用户可以自行调整模型,并将其用于与研究相关的用例。与之截然不同的是,谷歌旗下的DeepMind和OpenAI并不公开训练代码。

该公司还表示,LLaMA作为一个基础模型被设计成多功能的,可以应用于许多不同的用例,而不是为特定任务设计的微调模型。

比GPT3.5性能更强

根据Meta官网介绍,LLaMA包含4个基础模型,参数分别为70亿、130亿、330亿和650亿。其中,LLaMA65B和LLaMA33B在1.4万亿个tokens上训练,而最小的模型LLaMA7B也经过了1万亿个tokens的训练。

Meta表示,在大多数基准测试中,参数小的多的LLaMA-13B的性能优于GPT3.5的前身GPT3-175B,而LLaMA-65B更可与业内最佳的Chinchilla-70B和PaLM-540B竞争。值得一提的是,近期大火的ChatGPT便是由GPT3.5提供支持。

Meta还提及,LLaMA-13B对算力的要求“低得多”,可以在单个数据中心级GPU上运行。

扎克伯格写道:

“Meta致力于这种开放的研究模式,我们将向AI研究社区提供我们的新模型。”

值得一提的是,去年5月,Meta也曾推出过大型语言模型OPT-175B。该项目同样也是针对研究人员的,这构成了其聊天机器人blenterbot新迭代的基础。后来,该公司还推出了一款名为“卡拉狄加”(Galactica)的模型,但因经常分享偏见和不准确的信息而遭到下架。

据媒体报道,扎克伯格已将人工智能作为公司内部的首要任务,其本人也经常在财报电话会议和采访中谈论它对改进Meta产品的重要性。媒体分析称,虽然现在LLaMA没有在Meta产品中使用,但未来不排除使用的可能。

本文不构成个人投资建议,不代表平台观点,市场有风险,投资需谨慎,请独立判断和决策。

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

水星链

[0:0ms0-1:182ms