字节跳动计划训练 50 万亿参数模型,重组 Seed 基础团队

BABA+0.05%

据 LatePost 报道,字节跳动正在讨论训练参数量超过 50 万亿的大语言模型,规模将超过阿里巴巴的 Qwen 3.8-Max(2.4 万亿参数)和 Moonshot 的 K3(2.8 万亿参数),成为迄今已知的中国规模最大的模型。该项目仍处于早期阶段,将由 Seed 基金的 Xiang Liang 负责,并与负责字节跳动大语言模型预训练数据的 Shen Ke 合作开发。Seed 正在重组其架构,并据此重新分配资源。

两周前,字节跳动创始人张一鸣与 Seed 管理层举行了一次全员会议,强调大模型训练本质上极其困难,并敦促团队探索智能的极限,同时以跻身全球顶尖行列为目标。张一鸣强调,编码是关键重点,并呼吁整合火山引擎、飞书和豆包的资源,构建算力和数据优势。公司正在招募编码领域的专业人才,以提升其市场地位。

免责声明:本页面信息可能来自第三方,仅供参考,不代表 Gate 的观点或意见,亦不构成任何财务、投资或法律建议。数字资产交易风险较高,请勿仅依赖本页面信息作出决策。具体内容详见声明。
评论
0/400
暂无评论