北大Open-Sora1.0发布:开源,支持华为昇腾910b训练与推理

Open-Sora 1.0支持生成10秒、24 FPS的1024×1024视频和高分辨率图像,使用华为昇腾910b芯片进行训练和推理;采用CausalVideoVAE架构进行高效的视频和图像联合训练,特别优化包括瓦片卷积和对长视频的支持;尽管展现出潜力,但仍面临运动模糊和网格效果等问题,需持续迭代改进,目前在非风景视频生成方面能力有限。(AI寒武纪)

搜索