TAG:流水并行训练
小红书开源 BigMac：实现多模态训练显存与速度的统一优化
小红书开源 BigMac 多模态流水并行训练范式，彻底打破多模态 LLM 训练的显存与速度二选一困境。通过准依赖安全的嵌套流水线，将 LLM 主干 schedule 保留为底层时间线，把编码器与生成器嵌入到输入就绪且不打断执行的位置，实现显存 O(1) 压缩与零空泡。提供全局 operator 表、算法友好的流水并行接口及专业 profiler/simulator，助力从单卡验证自然扩展到大规模流水并行训练。MLLM-Understanding 与 Generation 代表性负载验证下，相比 Optim
854 
0 
美股三大指数震荡整理，芯片股走高，光通信板块大涨
2026-05-11
0 浏览
多空胶着恒指震荡整理，AI景气外溢主导行情波动
2026-05-11
0 浏览
宠物AI公司PurrPurr获阿尔法公社投资 首年GMV目标5000万
2026-05-11
0 浏览
隆源股份业绩说明会回应今年新能源汽车零部件领域新客户洽谈中
2026-05-11
0 浏览
中国品牌市占率达75%，4月我国汽车销量约252.6万辆，新能源汽车出口贡献度近五成
2026-05-11
0 浏览
4月汽车出口增长51% 国内零售下跌超20%
2026-05-11
0 浏览
4月全国新能源汽车渗透率历史首次突破60%，燃油车零售同比暴跌37%
2026-05-11
0 浏览
港股复盘：强势翻红 芯片概念股冲高回落 短期风险需警惕
2026-05-11
0 浏览
申昊科技拟设具身智能子公司 加码人形机器人业务
2026-05-11
0 浏览
