单一模型,三种模态:字节跳动发布Lance,实现图像与视频的理解、生成和编辑
字节跳动智能创作实验室发布了Lance,一个开源的、原生的统一多模态模型,能够在单一框架内处理图像和视频的理解、生成和编辑,仅使用30亿激活参数。Lance采用双流混合专家架构和模态感知旋转位置编码(MaPE),通过四个阶段的训练实现了在多项基准测试中的领先性能,包括图像生成、视频生成、图像编辑和视频理解,且开源发布。
单一模型,三种模态:字节跳动发布Lance,实现图像与视频的理解、生成和编辑
本文仅提供摘要
根据来源内容权限,本站仅提供编辑摘要、要点和原文链接。