DeepSeek通过MoE架构的创新让激活参数比大幅下降，使得同等效果的大模型所需的算力明显下降。“671B的模型，在处理每个问题时，被调用激活的专家模型参数仅约37B，算力需求起码降低到原来的约二十分之一。”阿里云无影事业部总裁张献涛曾在接受《每日 ...

早前，豆包团队发布了新一代稀疏架构UltraMem，将模型推理成本 砍掉 83%，此次，又开源了COMET，向 模型训练 成本出手。从技术理念上看，两者还可以 结合使用，组成一套“砍价刀法” 。

在深度学习的时代潮流中，节省计算资源和优化模型训练成本变得尤为重要。近日，字节跳动旗下的豆包团队宣布，再次在Mixture of Experts（MoE）模型的训练中削减成本，整整节省了高达40%的训练开支！这一次，他们的秘密武器是刚刚开源的COMET技术。

3月10日，字节豆包大模型团队官宣开源一项针对 MoE 架构的关键优化技术，可将大模型训练效率提升1.7倍，成本节省40%。据悉，该技术已实际应用于字节的万卡集群训练，累计帮助节省了数百万 GPU 小时训练算力。

周五，Deutsche Bank分析师调整了对Comet Holding AG (COTN:SW)的预期，将目标价从CHF 360下调至CHF 330，但维持对该股票的"买入"评级。此次调整是在Comet发布2025年展望不及预期后做出的。公司现预计销售额将达到CHF 4.8亿至CHF 5.2亿之间，同比增长8-17%，明显低于此前21%的市场一致预期。这一新预测更接近Deutsche ...

近期，人工智能领域的创新力量Perplexity AI宣布了一项重大举措，计划推出一款名为Comet的全新浏览器，旨在通过“智能体搜索”技术，为用户带来前所未有的搜索体验。尽管具体细节尚未揭开神秘面纱，但该公司已在X平台上发布了相关推文，并开启了注册通道，预示着这一变革性产品的到来。

IT之家 2 月 25 日消息，人工智能搜索引擎 Perplexity AI 进军浏览器市场，即将推出名为“Comet”的浏览器，致力于打造更贴近用户需求的搜索体验，并以“智能体搜索”为核心概念，但具体细节尚未公布。 IT之家注：Perplexity ...

新浪科技讯 3月10日晚间消息，字节豆包大模型团队官宣开源一项针对 MoE 架构的关键优化技术，可将大模型训练效率提升1.7倍，成本节省40%。据悉，该技术已实际应用于字节的万卡集群训练，累计帮助节省了数百万 GPU 小时训练算力。 MoE 是当前大模型的主流架构，但其在分布式训练中存在大量跨设备通信开销，严重制约了大模型训练效率和成本。以海外主流模型Mixtral-8x7B为例， 其训练过程中通 ...

人工智能搜索引擎 Perplexity 表示，它正在打造自己的网页浏览器。在周一于 X 上发布的帖子中，该公司启动了该浏览器的注册名单，但目前尚未推出，也尚不清楚何时推出，甚至不清楚浏览器的外观。 但我们已经有了一个名字：彗星（Comet）。Perplexity 发言人表示："就像 Perplexity 重塑搜索一样，我们也在重塑浏览器。请继续关注我们的更新。"毫无疑问，Perplexity 的浏 ...

1 月下旬，字节正式设立代号为“Seed Edge”的研究项目，目标是探索 AGI 的新方法，其中“Seed”是豆包大模型团队名称，Edge 代表最前沿的 AGI 探索。 该项目团队近日发布了其最新的研究成果：一项针对 MoE 架构的关键优化技术 ...

每经记者：蔡鼎 每经编辑：高涵｜2025年3月11日 星期二｜NO.1 字节开源MoE架构优化技术，训练成本省40% 字节跳动豆包大模型团队官宣开源一项针对MoE（混合专家模型）架构的关键优化技术，可将大模型训练效率提升1.7 ...