跳到正文
北京时间
原文
SenseTime· @SenseTime_AI · X·· 2026-05-26精选AI 评分77
AI 导读

商汤开源了SenseNova-U1(8B dense + A3B MoE)的完整训练代码库。这是一个统一的框架,支持文本到图像、图像编辑、交错生成、文本与视觉理解等多种多模态任务的训练。其设计注重实用性与大规模训练,采用混合并行、流式可恢复数据管道、环境变量配置、解耦模块化设计,并支持从1×8 GPU扩展到多节点集群的规模。代码库以Apache-2.0协议开源。

推荐理由

商汤把 SenseNova-U1 的训练代码全量开源,支持多模态任务和 MoE,还给了完整的并行策略,做多模态训练的可以直接 fork 过去用,Apache-2.0 很友好。

正文 · 原文

🚀 𝗪𝗲'𝘃𝗲 𝗼𝗽𝗲𝗻-𝘀𝗼𝘂𝗿𝗰𝗲𝗱 𝘁𝗵𝗲 𝗳𝘂𝗹𝗹 𝘁𝗿𝗮𝗶𝗻𝗶𝗻𝗴 𝗰𝗼𝗱𝗲𝗯𝗮𝘀𝗲 𝗳𝗼𝗿 𝗦𝗲𝗻𝘀𝗲𝗡𝗼𝘃𝗮-𝗨𝟭 (8B dense + A3B MoE). ​
​
One stack for 𝘁𝗿𝗮𝗶𝗻𝗶𝗻𝗴 𝗺𝘂𝗹𝘁𝗶𝗺𝗼𝗱𝗮𝗹 𝘁𝗮𝘀𝗸𝘀 across: text-to-image · editing · interleaved generation · text & vision understanding.​
​
Built for practical large-scale training: ​
⚙ Hybrid WP/TP/PP + ISP parallelism​
🌊 Streaming, resumable, packed data pipeline ​
🎛 Env-var driven configs for easy experimentation ​
🧱 Decoupled backbone, data, and objective modules ​
📈 Scales from 1×8 GPUs to multi-node clusters ​
​
Apache-2.0 👇 ​
https://github.com/OpenSenseNova/SenseNova-U1​
Discord: https://discord.gg/BuTXPHmQub​
​
@GitHub

来源:SenseTime · x.com