来源:国际金融报
当地时间1月18日,Meta首席执行官马克·扎克伯格宣布,对AI部门进《大奖网触屏版登录》行大规模改组,并开始训练大模型Llama 3。
过去一年,Meta实现逆风翻盘,恢复业绩增速的同时,公司股价强势反弹,重回巅峰水平。在All in元宇宙遭打脸之后,Meta及时调转方向,相继发布了大语言模型Llama 1和Llama 2,成功地享受到了人工智能爆发的红利。
不过,扎克伯格并没有打算放弃元宇宙,即便这一业务已经让Meta付出了数百亿美元的账单。他表示,Meta正在扩大AI团队的规模,并致力于推动元宇宙和人工智能的发展。
扎克伯格的新目标
1月18日,扎克伯格在Instagram和Meta的社交网络Threads同时发布了一段视频。在视频中,扎克伯格表示,越来越清楚的是,下一代服务需要构建全面的通用人工智能,构建最佳的AI辅助,面向创作者的人工智能,面向企业的人工智能等等。这需要AI各个领域的进步,从推理到计划,从编码到记忆和其他认知能力。
在这条视频的帖文中,扎克伯格着重强调了开源(Open Source)。他表示,Meta的长期愿景是建立通用人工智能,负责任地将其开源,并使其广泛可用,以便每个人都能受益。目前,Meta正在将两个主要的人工智能研究小组FAIR和GenAI更紧密地联系在一起。扎克伯格还透露,“我们目前正在训练下一代模型Llama 3”。
此外,据《Verge》报道,Meta首席产品官Chris Cox在给员工的内部信中写道,通过这一变革,能将FAIR和GenAI紧密地结合在一起,这意味着更连贯的人工智能研究组合和路线图,未来AI将被视为公司和产品长期成功的重要组成部分。该报道还提到,在采访中,扎克伯格声称Meta正计划打造“行业第一”的AI模型。
目前扎克伯格并未透露更多有关Llama 3的细节。此前,2023年7月18日,Meta发布了免费可商用版本Llama 2。据Meta官网介绍,与Llama 1相比,Llama 2的训练数据多了40%,上下文长度也翻倍,并采用了分组查询注意力机制。具体而言,Llama 2的预训练模型是在2万亿的token上训练的,同时,其精调模型是在100万人类标记数据上训练的。
开源与闭源一直是AI领域的一个重要议题。不同于OpenAI、Google DeepMind、Anthropic、Cohere等公司选择闭源并将其最先进的模型作为专有,Meta是少数支持开源并选择公开其最先进模型的公司之一。
但值得注意的是,Llama 2并非完全免费。根据Meta的授权条款,如果在Llama 2版本发布之日,被许可方或被许可方的关联公司提供的产品或服务的每月活跃用户数超过7亿,该用户或公司则必须向Meta申请许可,Meta会对此类授权严格设限。
除了强调开源、布局Llama3,扎克伯格还表示,“短期目标是到今年年底拥有35万块英伟达H100,算上其他GPU包括在内的话,算力总水平将相当于近60万块H100。”
据报道,有分析师估计,Meta在GPU上将花费超过90亿美元。其表示,英伟达的H100售价在25000至30000美元之间(根据英伟达早期名册显示,16块H100 GPU组成的系统成本约为40万美元),因此Meta可能在购买芯片上花费巨额的费用。
扎克伯格针对通用人工智能的布局推动Meta当天股价上涨2.11%,每股报收376.13美元。同日,英伟达股价上涨1.88%,收盘价每股571.07美元,市值创下1.41万亿美元新高。
元宇宙路漫漫
扎克伯格持续押注AI的同时,另一边,Meta的元宇宙却似乎陷入了较为尴尬的境地。毕竟,扎克伯格当初为了元宇宙,甚至给公司改了名。
2021年10月底,扎克伯格宣布Facebook正式更名为Meta,这一名字来源于单词Meatverse,意为元宇宙。彼时,元宇宙被认为是互联网发展的下一个阶段,扎克伯格也将此作为公司的下一个篇章。
但在更名后的一年多里,扎克伯格的“一意孤行”却让公司付出了不小的代价。2022年,Meta营收同比下降1%,净利润暴跌41%。至于扎克伯格决定“All In”的元宇宙业务,Reality Labs在2021年亏损101.9亿美元之后,2022年亏损扩大到了137.2亿美元。从业务来看,其VR硬件Oculus Quest系列销售额下降,元宇宙平台Horizon Worlds也没有实现显著增长。在二级市场,Meta这一年的表现也相当糟糕,股价一度跌到90美元以下。
不过,2023年,得益于广告业务的回暖,Meta恢复了营收增速,股价也重回历史巅峰状态。在这背后,ChatGPT的爆火让全球科技公司在2023年展开AI军备竞赛,元宇宙快速沦为资本的“弃儿”。至于Meta,扎克伯格将2023年作为“效率之年”,大幅削减成本,同时在业务层面将重心转移到广告业务的复苏和AI方面。
2023年3月,Meta正式发布了大语言模型Llama 1,并在四个多月后发布了Llama 2,除了训练数据量大幅增长外,Meta宣布Llama 2模型开源且免费商用,这种“格局打开”的做法让Meta吸引了大批开发者。
在2023财年第三季度财报电话会上,扎克伯格曾表示,2024年,无论是在工程还是计算资源方面,AI将成为Meta最大的投资领域。从此次计划斥巨资购买英伟达芯片,也能看出Meta在为接下来的AI之战做充分的准备。
不过,Meta并没有想要放弃元宇宙,即便这一业务已经让Meta付出了数百亿美元的账单。扎克伯格此前曾否认了降低元宇宙优先级的说法,并表示AI和元宇宙是两个相关的领域,Meta仍致力于元宇宙的构建。
VR市场的低迷和未来科技发展的趋势变化让一部分巨头已经对元宇宙业务进行了调整。例如字节跳动旗下PICO业务就进行了调整和优化。
Meta似乎做好了长期投入的准备。据媒体报道,在最近的达沃斯世界经济论坛上,Meta全球业务部门负责人尼科拉・门德尔索恩表示,要实现Meta对元宇宙的“全部愿景”,还需要“相当长的时间,大概十年”。她重申了公司对人工智能和硬件领域的持续投入,认为两者都将成为元宇宙发展的重要基石。
责任编辑:欧阳名军