多模態檢索成為近期關注的問題，當前的方法包括單流方法、多流方法，以及不同模態之 間對齊的技術，已經在知識挖掘領域開展應用。

圖像問答可以分為三個層次:

1.初級:從圖像識別啲結果中直接得到答案

2.中等：答案需要簡單事實的支持

3.高級:對於複雜的問題，答案不在圖像中，可能涉及常識、具體 話題和百科知識進行推理

多模態問答的挑戰：

1 多模態數據具有異構性

2 多模態數據的關聯難度表示較大

3 多模態知識融合困難

4 多模態問答大多隻能處理簡單的問題

5 多模態知識問答推理能力弱

6 多模態知識問答可解釋性差

山西北方北鬥信息技術股份有限公司
地址：朔州市紅旗牧場朔南大道東側軍馬街北側(朔州市國防教育訓練基地院內) 聯係電話：0349-569****

山西超金彙科技有限公司
地址：朔州市朔城區建設路馨苑小區商鋪1#1、2、3、4 聯係電話：13994942****

山西諾浩新能源科技有限公司
地址：山西省朔州市開發區振武東街北側、大新二路西側 聯係電話：18534984****

山西百曉可瑞科技有限公司
地址：朔州市朔城區建設南路怡欣苑小區2號樓3單元501室 聯係電話：13811547****

山西憶西口電子商務有限公司
地址：山西省朔州市右玉縣正和東街48號 聯係電話：17782560****

朔州贏鼎科技有限公司
地址：山西省朔州市應縣南原體委(應縣一中校門西南100米) 聯係電話：13643493****