ByteDance正在构建一个拥有10万亿个参数的模型。这是整件事里最不值得关注的数字。

ByteDance正在构建一个拥有10万亿参数的模型。这是整件事里最不值得关注的数字。


8月7日,《金融时报》宣布,ByteDance,TikTok的母公司,正在训练一个可能达到10万亿参数的人工智能模型。消息来自三名了解该项目的人士。ByteDance拒绝置评,也没有公布发布日期。

这个数字在两天内传遍了全世界。可是,它几乎什么也说明不了。我昨天跟你说的那个模型就能让你明白为什么。

一台巨大的工业发动机悬挂在起重机上,正被放到一辆小型城市汽车的引擎盖上,而这辆车显然根本装不下它

它能装进去,我保证。只要把座椅拆掉。还有汽车。

我们真正知道的事情

参数是模型在训练过程中学会的一项内部设置。一个模型可以拥有数万亿个参数。这也是企业在甚至还没完成模型之前就能公布的少数几个数字之一。还什么都没证明,就能拿来制造一个标题,真方便。

这个模型正在进行预训练。这是第一阶段,也就是把一堆杂七杂八的数据吞进去的阶段。这个阶段会持续三到六个月。接下来还得对模型进行微调,教它正确回答问题。甚至它最终的参数数量都还没有确定。

参数数量以十亿为单位的柱状图,从DeepSeek V4-Flash的2840亿到ByteDance的10万亿,空心柱表示估算值

实心柱代表已公布的数字。空心柱代表估算值。你猜哪种更适合做标题。

为了给这个项目定位,Kimi K3,迄今为止最大的中国模型,参数量在2.8万亿左右。业内估计Anthropic的Mythos 5拥有约8万亿个参数,但没有人证实过。ByteDance因此可能会冲击全球排名前列。

为什么这个数字几乎什么也说明不了

昨天,我给你讲了DeepSeek V4-Flash-0731的故事。看看图表中的第一根柱子:2840亿个参数。这比ByteDance的项目少三十五倍。可是,在必须完成任务的测试中,这个小模型却以超过十个百分点的优势击败了自家那个大模型。它的架构没有改变。只有微调阶段被重新做了一遍。

参数数量之于模型,就像排量之于汽车。它能让你大致了解发动机的大小。它说明不了油耗、操控性,也说明不了这玩意儿早上能不能启动。

真正重要的是模型架构、数据质量,尤其是它的微调。三个不可能用一个数字概括的因素。奇怪的是,新闻稿对它们的兴趣要小得多。

没人写进标题的细节,而它比那个数字有价值得多

ByteDance的创始人张一鸣告诉他的团队,他拒绝为这个模型采用蒸馏。蒸馏就是通过复制一个已经表现出色的竞争模型的回答来学习。向它提出数百万个问题,拿到它的回答,然后用这些数据训练自己的模型。这种方法又快又有效,差不多所有人都在用。

拒绝这种方法,就意味着接受比中国竞争对手晚几个月。这是一个代价高昂而且影响深远的工业选择。就我个人而言,我觉得这比参数计数器有意思一百倍。可我在哪个大标题里都没看到它。

Doubao,这个你从没听说过的全球第二大助手

这才是这个故事真正的启示。而它和正在进行的训练毫无关系。

ByteDance已经拥有一个名为Doubao的助手。2026年4月,它每月有3.36亿活跃用户。它在中国排名第一,在全球排名第二,仅次于ChatGPT,领先于其他所有产品。

一座挤满数万人的巨大体育场,横幅上写着“3.36亿用户”,前景中一个人坐在沙发上,对此一无所知

全球第二大助手。今天中午问问你身边的人,你会觉得很有意思。

让你身边的十个人说出一个 AI 助手的名字。你会十次听到 ChatGPT。也许有一次是 Claude 或 Gemini。Doubao,零次。一个使用人数超过美国人口的产品,在我们这里却完全没有存在感。

这不是质量问题,而是市场问题。如今 AI 领域发生的很多事情,根本就到不了我们这里。

具体来说,这对你有什么改变

如果你不写代码,也不用 TikTok,你可能会问自己为什么会出现在这里。答案有三个。第一个最有用。

对比,左边是一台显示 20 兆像素并拍出模糊照片的老相机,右边是一部显示 12 兆像素并拍出清晰照片的现代手机

我们已经经历过一模一样的事情。数字是准确的。结论就差得远了。

你已经学会提防这种数字了。想想兆像素。十年里,每台相机显示的数字都比邻居家的更大。于是我们就买兆像素最多的那台。后来我们明白了,真正决定照片效果的是传感器尺寸、光学元件和软件,不是这个数字。如今,一部 12 兆像素的手机能把一台 2009 年的 20 兆像素卡片机甩在后面。对于参数,我们现在正处在完全相同的阶段。当你读到下一个宣布拥有 10 万亿参数的标题时,你就知道该拿它怎么办了。

这场竞赛会让你的账单变低。不是他们的,是你的。当四家巨头为了提供同一个功能而争斗时,价格就会暴跌。在 DeepSeek,价格已经降到了每生成一百万个词 0.28 美元,而高端模型的价格是 25 美元。结果,你的语音消息转录、照片整理或自动字幕,不再是每月订阅服务。它们会变成你已经拥有的软件里的简单选项。

你也许会在不知情的情况下使用这个模型。一个模型不只是直接卖给用户。它也可以租给其他应用。那个在你的照片编辑应用或汽车助手中回答问题的引擎,完全没有理由使用一个知名的名字。我们还是老实面对时间表吧:这个模型目前还不存在。它也许六个月后、一年后推出,也许永远不会推出。没有人宣布日期。

我的看法

最引人注目的不是这场竞赛,而是我们的盲区。当一个有 3.36 亿人使用的助手在没有在我们这里获得一行报道的情况下发展时,我们却在没完没了地评论三家美国公司。

至于这个数字本身,我直说吧:今天,10 万亿参数不是信息,而是一种意图。这个模型还不存在。它什么都不会做,也没人测试过它。我们评论的是一份报价,不是一栋房子。

真正的问题在于,张一鸣的赌注能否撑住。当所有人都在复制竞争对手时,拒绝这么做,要么是昂贵的傲慢,要么就是最终超越他们的唯一方式。从这里看,这两者非常相像。

Join the conversation

You need an account to comment on this article. Creating one is free and takes under a minute.

  • The XMLTV file, free to download every day
  • Comment on articles and reply to other readers
  • Get an e-mail when an article you follow is updated

No comments yet.

Une erreur s'est produite. Cette application peut ne plus répondre jusqu'à ce qu'elle soit rechargée.Veuillez contacter l'auteur. Reload 🗙