十大在线配资 智源研究院:原生多模态世界模型Emu3发布, 实现视频、图像、文本大一统
2024-11-14新浪科技10月23日下午消息,智源研究院近日宣布原生多模态世界模型Emu3发布。该模型实现了视频、图像、文本三种模态的统一理解与生成。据悉,Emu3只基于下一个token预测,无需扩散模型或组合式方法十大在线配资,便能把图像、文本和视频编码为一个离散空间,在多模态混合序列上从头开始联合训练一个Transformer,展现了其在大规模训练和推理上的潜力。 在图像生成、视觉语言理解、视频生成任务中,Emu3的表现超过了 SDXL 、LLaVA-1.6、OpenSora等知名开源模型。在图像生成任务