服務機器人在展館迎賓講解
多模態檢索成為近期關注的問題，當前的方法包括單流方法、多流方法，以及不同模態之 間對齊的技術，已經在知識挖掘領域開展應用。
圖像問答可以分為三個層次:
1.初級:從圖像識別啲結果中直接得到答案
2.中等：答案需要簡單事實的支持
3.高級:對于復雜的問題，答案不在圖像中，可能涉及常識、具體 話題和百科知識進行推理
多模態問答的挑戰：
1 多模態數據具有異構性
2 多模態數據的關聯難度表示較大
3 多模態知識融合困難
4 多模態問答大多只能處理簡單的問題
5 多模態知識問答推理能力弱
6 多模態知識問答可解釋性差
興山智能問答機器人加盟
|
