闷声狂奔一年,字节大模型的进阶之路

.. 2024 年初,字节跳动 CEO 梁汝波在年会中提到,公司层面的半年度技术回顾里,2023 年才出现 GPT 相关讨论。作为对比,业内做得比较好的大模型创业公司基本在 2018 年到 2021 年之间已经创立。

一位字节员工曾告诉雷峰网,直到 2023 年 2 月,字节才开始探索大模型。彼时,国内一些更早入局的大厂甚至已经准备对外发布大模型。

简而言之,这场由 Open AI 在 2022 年底发布 ChatGPT 3.5 而掀起的「大模型」盛宴,字节没有成为最早的「入场嘉宾」。

过去一年多的时间里,字节在 AI,尤其是自研大模型领域,始终颇为低调,但这并不妨碍业内的期待。不少从业者在被问及最看好国内哪家公司的大模型产品时,都曾向雷峰网提及字节。

其中原因也不难理解,无论从人才密度、GPU 资源,还是技术积累各个层面,字节都有着足够的优势。诚然,字节不是最早参与到大模型研究的公司,但却是为数不多在技术积累和 GPU 资源等维度都有着深厚积淀的公司。

移动互联网初期,今日头条便通过对算法推荐的成熟应用,突破新闻门户网站的束缚。从此,信息流产品成为各家互联网公司追逐的模仿对象。

在大模型训练必不可少的 GPU 卡方面,雷峰网去年在字节的大模型野心,藏在一艘「方舟」里 已经提到,调研显示,字节的 GPU 卡在目前国内众多云厂商中排名 Top 3,并将其归因于抖音业务推荐平台的不断升级,以及火山引擎使用抖音同源机器学习平台对外服务的需求。

如今,字节终于揭开自研大模型的「神秘面纱」。5月15日,火山引擎春季Force·原动力大会上,字节跳动首次对外正式发布自研大模型:豆包大模型(原云雀大模型)家族集体亮相。

尽管不少圈内人已经听闻字节的大模型或创新低价格,但当火山引擎总裁谭待正式对外宣布价格时,豆包大模型还是给 AI 界来了一点小小的「字节式」震撼。

火山引擎春季Force·原动力大会现场,参会者争相拍摄豆包大模型价格

大模型竞争的本质是终端心智和应用场景多元化

年初有媒体发文指出:「抖音旗下的 AIGC 应用豆包月活 1756.9 万,超越 1212.5 万月活的文心一言。」

根据 QuestMobile 最新数据,2024 年 3 月,豆包月活用户已达到 2328.2 万,甩开文心一言近千万。文心一言以及天工、讯飞星火、Kimi智能助手月活跃用户分别为1466.1万、966.1万、620.4万、589.7万。

当时,本文作者身边也看到过不少安利豆包产品的用户。部分带娃家长直言:「豆包太有趣了,现在孩子每晚回来都要跟豆包对话一会儿,问各种问题。」

移动互联网时代,字节跳动做出了今日头条、抖音这样的全民产品;大模型浪潮起来以后,不少人都坐等一个 AI 时代的抖音。

无论业内人士把大模型谈的多「花」,其归根到底,还是要让所有的普通人用起来,而不是仅限于圈内的狂欢。从这个角度来看,大模型竞争的本质,是终端心智的争夺。

就眼下的情况来看,豆包毫无疑问有这个潜力和机会。这款去年才推出的产品,仅仅用不到一年就已经显示出在同类产品中强大的竞争力。

在 5 月 15 号的火山引擎春季Force·原动力大会上,字节跳动产品与战略副总裁朱骏分享了豆包 APP 的一些趣事和思考。

比如,关于这个看起来一点「科技感」没有的名字,有用户解释为抖音的官方bot——「抖bot」的谐音;还有用户解释为「都包了」,工作生活学习的需求都包了。

以至于后来,在被问到豆包名字的含义,朱骏也会用这两个答案。

实际上,正式命名以前,字节的大模型团队有一个期望,产品的名字,能够像用户对一个亲密朋友日常称呼的昵称。在这个方向下,团队列了很多名字,很快选中豆包。朱骏风趣地说到:「反正以后如果有更好的名字也还可以改嘛。」

用户数方面,豆包官方数据显示,其移动和桌面双端月活跃用户已经超过 2600 万。同时,这些用户共同创造了 800 多万个智能体。

发布会上,字节首次对外披露了其自研的底座大模型,取名为豆包大模型,也就是此前一直被外界提及的云雀大模型。

豆包大模型家族

豆包 APP,只是豆包大模型应用的一个侧面。

基于豆包大模型,字节跳动还打造了 AI 应用开发平台「扣子」、互动娱乐应用「猫箱」、AI 分身创作应用「星绘」等一系列产品。

此外,抖音、番茄小说、飞书、巨量引擎等 50 余个业务也都已经接入豆包大模型,用以提升效率和优化产品体验。这些产品中不乏亿级的用户和内容,抖音每天有 7 亿多用户以及丰富的图文短视频内容,番茄小说每天也有近 1 亿用户。

这还仅仅是字节内部产品的使用。

悄然间,OPPO小布助手、荣耀 MagicBook 的 YOYO 助理、华硕笔记本电脑豆叮AI助手、极氪汽车的座舱大模型等均已接入字节的大模型服务。

基于豆包大模型,字节在今年2月上线了 AI 应用开发平台「扣子」。仅仅三个月过去,招商银行、海底捞火锅、超级猩猩、猎聘、飞鹤等企业已经在扣子上搭建智能体并应用。复旦大学、浙江大学等名校也为课程和实验室搭建了 AI「助教」。

从 C 端的豆包 APP 用户,到 B 端的千行百业,豆包大模型不仅使用量大,应用场景之丰富也可见一斑。根据火山引擎总裁谭待介绍,目前,豆包大模型日均处理文本 1200 亿 Tokens,生成 3000 万张图片。

业内普遍认为,一般而言,大模型的使用量越大,效果也就越好,这给了豆包大模型更大的底气。「大的使用量,才能打磨出好模型。」谭待也直言。

豆包「击穿最低价」,大模型或将进入新浪潮

无论是 C 端用户使用体验,还是 B 端应用场景,真正落地成为全民应用的基础都需要足够低的价格。

这就好比,4G 网络普及加速了流量成本降低,并促成智能手机的普及,又进一步加速了视频等终端 APP 的爆发式增长。

对于当下企业而言,使用大模型能够促成效率的提升几乎是确认的,但大模型的投入一直以来都非常大,而企业在投入一个新的创新领域时,必然首先要考虑成本问题。

或许正是由于价格因素,过去一年多,大模型虽然引发了全行业的热潮,但真正投入使用的仍然只有少数企业。

在这一背景下,豆包大模型此次官宣的价格能够成为行业焦点也就不足为奇了。

5月15日的发布会上,谭待宣布豆包大模型价格的那一瞬间,掌声响彻整个会场,也将这场发布会推向高潮。

火山引擎总裁谭待公布豆包大模型定价

豆包大模型的价格有多惊人?

豆包主力模型 Pro-32k 版本模型推理输入价格只有 0.0008元/千Tokens,0.8 厘就能处理 1500 多个汉字,比行业同等模型便宜 99.3%;128k 型号价格为 0.005元/千Tokens,比行业价格低 95.8%。

更形象的说法是,根据火山引擎公布的价格计算,以 Pro-32k 版本为例,一元钱就能买到 125 万 Tokens,大约 200 万个汉字,相当于三本《三国演义》。

看到这样的价格,不少人觉得,豆包大模型在「以亏损换市场」。但在会后的媒体采访中,谭待表示:「用亏损换收入是不可持续的,我们从来不走这条路子。敢于定价这么低,是因为我们对优化推理成本的技术能力很有信心。」

关于为什么定这样的价格,谭待表示是基于两方面因素:一是能做到,二是需要这么做。

一方面,通过模型结构的优化、分布式推理、混合调度等举措,极大压低了大模型的推理成本。模型调用量越大,成本优化空间就越大。以字节业务为例,飞书的主要流量高峰在工作时间,抖音在下班后休闲时间的流量更高,这些不同业务的大模型推理,能根据业务特点错峰使用,把资源利用率跑得很高,就可以降低成本。

另一方面,今年以来,大模型能力得到极大提升以后,应用将是一个非常重要的环节。当下市场,很多企业有尝试大模型的想法,但因为不确定性的风险,多少有些畏手畏脚。只有价格降低到一定程度,试错成本足够低,更多的企业才会加入到大模型的应用中。

不久前,零一万物 CEO 李开复表示,大模型推理成本每年降低十倍,这在过去两年已经发生,优化得好更是可以降低二三十倍。

看来,字节对模型推理成本优化的预期也是非常乐观,降价所考虑的就是让大模型尽快在更多应用场景落地。

以大模型应用最广泛的内容产业为例,视频平台往往需要在浩如烟海的剧本中,筛选出优质且适合转换成影视项目的剧本。

假设,现在某公司计划利用大模型做一个 AI 剧本助手,帮助平台把几十万字的剧本提炼出核心要点,并进一步评估剧本可行性。如果想打磨出足够好的效果,可能需要 100 亿 tokens 的推理输入。过去,完成这一项目,负责人需要从公司申请 100 多万预算,这对一个中小企业而言并不算少。现在,还是这件事,使用豆包大模型,则只需要 8000 块钱。显然,这是一个几乎所有公司都能接受的价格。

换言之,曾经,很多创意想法可能因为大模型应用成本被拒之门外;现在,豆包大模型将价格打下来以后,成本极低,企业和创业者们不再因此而受到束缚,就更有机会找到好的落地场景,整个行业的蛋糕也会越做越大,从而形成价格低→ 使用量大 →落地场景丰富→应用效果好的正向循环。

经济学上,有一个专业术语叫做规模经济,意为在一定产量范围内,伴随产量增加,平均成本不断降低的现象。其原因在于,产量增加会带来一个结果,每多生产一单位产品的成本(边际成本)不断降低。

回到科技领域,同样存在类似的效应。互联网出现以后,流量成本不断降低,信息的分发成本几乎接近 0,今日头条、抖音都是其中的受益者。而现在,大模型正在加速 AI 应用的新一轮浪潮。

a16z 的合伙人 Martin Casado 曾在演讲中提到,从基本的经济分析来看,大模型将创造的边际成本降到了零,比如创建图像和语言理解。

业内都在期待大模型重塑互联网产品,这一切的前提是,它的价格足够低。现在,豆包大模型已经打了个样。

豆包「遇上」火山方舟,一场大模型的自我革新

在惊讶于低价的同时,不少企业可能担心模型的推理效果是否能够满足使用需求。

关于这一点担忧,其实答案在前文中已经有所暗示。不少用户应该都已经使用过字节面向 C 端的 AIGC 产品豆包,效果如何相信每个人都有体会。若是效果不好,它的用户数也不可能在短短一年间冲到同行业产品 TOP1。

又如,字节最近推出的 AI 分身创作产品星绘,大家也可以上手使用体验。

除了 AI 原生应用,抖音、今日头条、飞书等不少字节的产品都大量的使用了大模型。今日头条内嵌的 AI 工具不仅为用户提供了对话功能,还有笔记创作、梦境解读、创业指导等能力。

如今,不少互联网企业在发布大模型产品时,动辄喜欢加一句「超越 GPT 4」之类的说法。但整个发布会,豆包大模型都没有提到 GPT,这反而显示出谭待以及豆包整个团队的自信。

在被问及,豆包大模型和 Open AI、谷歌等海外公司的差别时,谭待笑着说道:「我可以很实事求是地讲,openAI肯定还是全球第一, anthropic、Gemini 也都做得非常好,这个差距首先是要承认的。」

与此同时,谭待也表示,虽然有差距,但是我们追的速度还是可以的。豆包的原生应用和体验越来越好,用户量也越来越大,这是比较重要的。一个最佳实践是,越来越多的人去做更多的应用,反过来又可以驱动技术的进步,从而形成一个正循环。而这些,国内目前还没有形成,但从今天以后,它可能会越来越快。

除了豆包等 C 端大模型产品,字节跳动还针对大模型推出了新一代 AI 应用开发平台——扣子专业版,具备低门槛、个性化、实时性、多模态等优势,并集合海量的 AI 资源、丰富的发布 API 服务。招商银行、海底捞等不少传统企业,都成为扣子的用户。

基于扣子和豆包大模型,招商银行搭建了可以推荐餐饮优惠门店的「掌上生活」bot,以及能汇总市场行情的「财富看点」bot。

通过使用豆包大模型,海底捞搭建了顾客评价分析模型,并将其应用于服务质量、菜品质量、经营管理的优化迭代。

在下午大消费分论坛上,海底捞信息科技部负责人杨炫之分享了海底捞的 AI 系统建设,他提到,AI 在餐饮企业的应用主要包括三方面,基于图文作业的重复性劳动(即广告文案等)、成熟模型的预测类工作(货品预测需求等)、相对开放的信息收集。

杨炫之在分享最后坦言,对于海底捞这样的传统企业而言,大模型带给更多的是便利性,或者说我们基础工作的替代,应用范围可能没有那么大。

回到大模型服务侧,作为大模型服务平台,火山方舟为模型训练、推理、评测、精调等提供了全方位功能和服务。在过往的一年多时间里,字节自身已经充分使用体验,支撑了字节的大模型的丰富生态。

火山方舟 2.0 版本,升级了插件、系统承载能力等多个维度。

以 RAG 知识库插件为例,火山方舟 2.0 内置了字节跳动多年实践沉淀的大规模高性能向量检索能力,百亿级别数据可以实现毫秒级检索,支持秒级索引流式更新,可以实现新增数据能够实时检索。知识库插件也内置了豆包向量化模型,文档解析环节集成了飞书优秀的文档解析能力,支持pdf、doc、ppt、excel、txt、markdown等多种复杂类型文档解析能力。

系统承载能力方面,火山方舟 2.0 实现了万卡公有云GPU资源池、5秒接入新建精调模型、3分钟内完成千卡扩容等效果。

谭待表示,全新升级的火山方舟 2.0 不仅提供了抖音、今日头条的搜索和内容插件等丰富的生态资源,还有着充沛的算力资源和极致弹性,保障客户的业务稳定。

前文提到的扣子专业版,已经集成在火山方舟,提供企业级 SLA 和高级特性。

回到起点,豆包已经在 C 端取得了看起来还不错的效果;在 B 端,豆包大模型一上线就因价格而广受关注,火山方舟与豆包大模型会交出怎样的答卷?

结果,或许已经呼之欲出。



想在手机阅读更多网络与创业资讯?下载【香港硅谷】Android应用
分享到Facebook
技术平台: Nasthon Systems