快科技2月18日消息，據(jù)“海康威視”官微發(fā)文，海康威視將大參數(shù)量、大樣本量的圖文多模態(tài)大模型與嵌入式智能硬件深度融合，發(fā)布多模態(tài)大模型文搜存儲(chǔ)系列產(chǎn)品——文搜NVR、文搜CVR。

海康威視文搜存儲(chǔ)系列產(chǎn)品利用多模態(tài)大模型實(shí)現(xiàn)自然語(yǔ)言與視頻圖像的跨模態(tài)信息檢索應(yīng)用，輸入一句話、一個(gè)詞就能秒級(jí)檢索目標(biāo)圖像。

基于多模態(tài)大模型，文搜存儲(chǔ)產(chǎn)品實(shí)現(xiàn)了海量視圖數(shù)據(jù)的開(kāi)放式語(yǔ)義檢索，不再局限于傳統(tǒng)的錄像回放及固定屬性查找。

根據(jù)需求，在搜索框內(nèi)輸入文字描述（一句話或一個(gè)詞等），例如輸入“打電話”、“白色面包車”、 “騎電瓶車未戴頭盔”、“自行車”、“小推車”、“小狗”等開(kāi)放文字語(yǔ)義描述，即可搜索出相關(guān)目標(biāo)。

搜索范圍廣，既支持人、機(jī)動(dòng)車、非機(jī)動(dòng)車等安防場(chǎng)景的高頻目標(biāo)搜索 ，也廣泛支持特定物品、異常行為等特征搜索。

利用多模態(tài)大模型技術(shù)，提取圖像與擬搜索語(yǔ)言的特征，并將圖像特征與搜索語(yǔ)言中關(guān)鍵語(yǔ)義特征對(duì)齊，實(shí)現(xiàn)高精度搜索。

如能夠理解 “穿紅色衣服”、“黑色背包”、“戴帽子”、“拉桿箱”、“棍棒”等對(duì)目標(biāo)的文字描述，精準(zhǔn)搜索出相關(guān)目標(biāo)。針對(duì)常見(jiàn)目標(biāo)的檢索，TOP20命中率可達(dá)90%以上。

同時(shí)，其采用數(shù)據(jù)三級(jí)緩存、均衡抽樣、異步加載等創(chuàng)新技術(shù)，實(shí)現(xiàn)文本搜索結(jié)果的秒級(jí)顯示。

除了手動(dòng)輸入文本進(jìn)行檢索外，貼合用戶常用情景，增設(shè)找人、找機(jī)動(dòng)車、找非機(jī)動(dòng)車、找寵物、找常用物品等快捷搜索入口，還支持用戶自定義編輯搜索慣語(yǔ)，讓操作更簡(jiǎn)單，使用更便捷。