首页 > 热点播报 > 正文

商汤科技开源日日新SenseNova U1模型 实现多模态理解推理生成统一架构

4月28日晚间,商汤科技发布并开源日日新SenseNova U1系列原生理解生成统一模型。该模型基于商汤今年三月自主研发的NEO-unify架构,在单一模型架构上统一了多模态理解、推理与生成。

据悉,NEO-unify架构摒弃了主流的拼接式设计,去除了视觉编码器和变分自编码器,重新构建了统一的表征空间,并深入融入每一层计算中,实现了从模态集成向原生统一的范式跨越。

SenseNova U1系列模型能够将语言与视觉信息作为统一的复合体直接建模,实现语言和视觉信息的高效协同,在保留语义丰富度的同时维持像素级的视觉保真度。该模型还能深度理解物理世界的复杂布局与精细关系,为未来提供具身大脑奠定基础。

网友评论

24小时内最火资讯
热门IT产品
  1. ¥1999
    OPPO A6k
    ·
  2. ¥1499
    华为畅享90 Plus
    ·
  3. ¥8499
    HUAWEI Mate 80 Pro Max风驰版
    ·
  4. ¥249
    诺基亚215 4G
    ·
  5. ¥159
    诺基亚125(2023)
    ·
  6. ¥345
    飞利浦E311
    ·
  7. ¥299
    飞利浦E528
    ·
  8. ¥3299
    三星Galaxy A57 5G
    ·
  9. ¥9999
    三星Galaxy S26 Ultra
    ·
  10. ¥1799
    vivo Y500s
    ·