Kimi K3 引热议,开放权重模型恐推向「AI 共产主义」

本帖最后由 cbsphoto 于 2026-7-22 07:37 编辑

月之暗面(Moonshot AI)最新发表的开放权重模型 Kimi K3,这款模型被视为规模庞大的开放 AI 系统,在有关程式设计和 Agent 任务等基准测试展现强劲表现。

Kimi K3 背后技术成为焦点,这款模型採多模态设计,拥有约 100 万 token 的超长脉络视窗,採用名为 Kimi Delta Attention(KDA)新架构,以混合线性注意力和记忆机制降低 KV Cache 负担。此外,Kimi K3 还搭配 WideEP 技术,形同将 896 个专家分散到多颗 GPU 上,确保每颗 GPU 的高频宽记忆体(HBM)包含少数专家,使每个 token 的记忆体使用和计算利用率最佳化。

Kimi K3 整体能力虽落后如 Anthropic 的 Claude Fable 5 和 OpenAI 的 GPT-5.6 Sol 等专有模型,但在多项基准测试超越 Claude Opus 4.8 和 GPT-5.5 等第二梯队。
Kimi K3 的创新和技术,对美国竞争对手如 OpenAI、Anthropic 等构成直接威胁。不久前加入 OpenAI 领导 Strategic Futures 团队、曾为川普政府的顾问 Dean Ball 在 X 贴文,表达对 Kimi K3 的观察和看法。

「一个由开放权重模型所主导的世界,其中一个很可能出现的结果便是『全面 AI 共产主义』。」Dean Ball 表示,「这正是中国提出的主张:AI 并非一款市场产品,而是一项公共财,最终由国家以某种数位公共基础设施的形式提供。」

Dean Ball 谈到过去在政府部门工作时,有很多支持 AI 快速发展的人一直来游说他,这些人的想法认为政府应该花几百亿元甚至上千亿美元兴建资料中心,目的不是政府自身投入 AI,而是能让新创公司和企业免费使用 GPU、训练模型,然后把模型免费提供全世界使用,他们认为 AI 唯一能持续进步的方法,就是依靠政府补助。

Dean Ball 无法接受这样的论点,认为他们之中有许多人根本不晓得自己在做什么,不将创造先进模型及其服务视为一门正当的生意。

「我猜测,川普政府在某个时间点将会意识到,他们对此最好的策略是,制造大量监管风险,限制使用中国开放权重模型。」Dean Ball 表示,政府只需要一直释放讯息如「联准会提醒,中国模型可能存在后门」。「你只需创造出足够的监管风险,让每一家受监管的企业打退堂鼓即可」,他说。

Dean Ball 论点引发关注之际,外界也注意到他对 Kimi K3 本身并非全盘否定。他表示这是一款「非常好的模型」,不认为它的效能能用蒸馏(distillation)或其他类似手法来解释,并对中国政府竟然称允许这种优质模型开源释出感到惊讶。

https://technews.tw/2026/07/19/d ... houghts-on-kimi-k3/

要几千万HKD级server先至部署到既LLM都叫共产?

TOP

一直都有疑问,点解只有中国先可以蒸馏到?其他国家做唔到?

蒸馏真系可以令到个model,越来越进步?

TOP

本帖最后由 hkmand001 于 2026-7-22 11:21 编辑
一直都有疑问,点解只有中国先可以蒸馏到?其他国家做唔到?

蒸馏真系可以令到个model,越来越进步? ...
ampm 发表于 2026-7-22 11:13


姐系好简单打一个例子
而家有一个美国佬发明咗头孢。
中国佬喺头孢嘅技术之下。
研发咗第二代头孢。
美国佬走出嚟。话你应该研发另外一种。你要尊重佢嘅知识产权价值。

点解佢走出嚟反对啊?理由:
佢话如果你再系咁做,
没人再做研发第一种。每个都等人哋做咗之后先做改良。

但中国唔认同。认为技术系应该全世界一齐改良先进步

所以佢个第二代头孢。直接开放咗俾所有人用。

咁你而家觉得边个啱边个错?
没错啊,有咗第二代头孢。确实,第一代头孢嘅价值就会即刻大减。美国佬打算赚钱就没可能。

所以你没见到新闻话而家佢美国要封闭,唔俾啲模型出嚟。

佢惊俾人哋抄。惊俾人哋攞去蒸馏改良。你打算锁国定系俾自己国家啲人攞研发

但系你谂下如果全世界都开放。得佢一个锁,佢锁到D咩??

你嘅收费咁贵。人哋开放,哪怕追唔上你。只要用人哋都会用。

TOP

姐系好简单打一个例子
而家有一个美国佬发明咗头孢。
中国佬喺头孢嘅技术之下。
研发咗第二代头孢。
美国 ...
hkmand001 发表于 2026-7-22 11:19



    =小米, 人地研发出黎,佢抄
然后唔洗R&D,卖平D
D人走去买小米...然后主要品牌破产,被中国公司收购.....

TOP

=小米, 人地研发出黎,佢抄
然后唔洗R&D,卖平D
D人走去买小米...然后主要品牌破产,被中国公司收购... ...
gerrardjamie 发表于 2026-7-22 11:21

小米唔同啊。小米系将人哋嘅师傅直接勾咗过嚟。连埋个技术一齐过档。

小米基本上嚟讲就系叫做转移技术。佢没新增过,亦都没改良。佢系直接搬走咗。

但系人哋蒸馏系省略资源。优化咗程序。其实系唔同嘅嘢。
一个照版就咁搬走。
一个改良咗整个设计。

但无论边个都好。肯定会损害原先一个设计嘅人。

TOP

有啲生意人谂法都系咁,对将啲好用嘅嘢开放出嚟公用感到惊讶,有钱做咩唔赚?但世界就系有啲咁嘅事,先不管动机为何…仓颉、光纤、二维码、甚至互联网本身…好多嘢都可以系一盘生意,但都可以放出嚟公用。
只可以说,有时小脑袋容不下大格局。

TOP

姐系好简单打一个例子
而家有一个美国佬发明咗头孢。
中国佬喺头孢嘅技术之下。
研发咗第二代头孢。
美国 ...
hkmand001 发表于 2026-7-22 11:19


我想你理解错了佢话“蒸馏”意思,蒸馏应该是用最新model蒸馏.

如果你话对错,那其他公司都唔可以出AI?那meta, Mistral AI都是蒸馏

TOP

Dean Ball 论点引发关注之际,外界也注意到他对 Kimi K3 本身并非全盘否定。他表示这是一款「非常好的模型」,不认为它的效能能用蒸馏(distillation)或其他类似手法来解释,并对中国政府竟然称允许这种优质模型开源释出感到惊讶。



而家唔系话单靠蒸馏出唔到咁嘅效能?佢系认同个 model 优质的,只系唔明点解要开源出嚟

TOP

我想你理解错了佢话“蒸馏”意思,蒸馏应该是用最新model蒸馏.

如果你话对错,那其他公司都唔可以出AI?那m ...
ampm 发表于 2026-7-22 11:47


AI蒸馏(模型蒸馏)是一种技术改良与优化。它是一种广泛应用于机器学习的工程技术,主要目的是将庞大、复杂且运算昂贵的「教师模型」精髓,转移到规模较小、运算速度更快的「学生模型」上,让小型模型在保持高效能的同时,大幅降低对硬体算力的要求。

TOP