无问芯穹宣布开源端侧解决方案中的全模态理解小模型Megrez-3B-Omni及其纯语言模型版本Megrez-3B-Instruct。Megrez-3B-Omni是为端而生的全模态理解模型,具备处理图片、音频、文本三种模态数据的能力,在图像理解方面是多个主流测试集上精度最高的模型之一,在文本理解方面于多个权威测试集上取得端上模型最优精度,在语音理解方面支持中英文语音输入、多轮对话场景以及不同模态间自由切换。官方还宣称单模态版本的Megrez-3B-Instruct在推理速度上较上一代及其他端侧大语言模型有显著提升,最大推理速度可领先同精度模型300%。
Github地址:https://github.com/infinigence/Infini-Megrez
HuggingFace:https://huggingface.co/Infinigence/Megrez-3B-Omni
ModelScope:https://www.modelscope.cn/models/InfiniAI/Megrez-3B-Omni
