多模态(Multimodal)指系统综合处理文本、图像、语音与视频的能力,构成包括把画面转成文字、把声音转成文字与依据文字生成图像等跨模态转换,目前尚未做到100%的多模态处理。多模态解决的是单一模态系统无法应对多类输入的问题,并不解决识别精度不足与推理不可靠的问题。
多模态是指什么?
多模态(Multimodal)指系统综合处理文本、图像、语音与视频的能力,构成包括把画面转成文字、把声音转成文字与依据文字生成图像等跨模态转换,目前尚未做到100%的多模态处理。多模态解决的是单一模态系统无法应对多类输入的问题,并不解决识别精度不足与推理不可靠的问题。
🔗 本文链接