多模態(tài)大模型產(chǎn)品亮相,?低暟l(fā)布文搜存儲系列產(chǎn)品
近日,?低暬谟^瀾大模型技術(shù)體系,將大參數(shù)量、大樣本量的圖文多模態(tài)大模型與嵌入式智能硬件深度融合,發(fā)布多模態(tài)大模型文搜存儲系列產(chǎn)品——文搜NVR、文搜CVR,為安防行業(yè)帶來重大技術(shù)革新。
?低曃乃汛鎯ο盗挟a(chǎn)品利用多模態(tài)大模型,實現(xiàn)自然語言與視頻圖像的跨模態(tài)信息檢索應(yīng)用,輸入一句話、一個詞就能秒級檢索目標(biāo)圖像,目標(biāo)檢索變得更廣、更準(zhǔn)、更快、更易,讓安防錄像回溯不再局限于傳統(tǒng)時空、報警等檢索方式,大幅提升目標(biāo)和事件的查找效率,安防業(yè)務(wù)管理變得更高效、更智能。
搜得廣:開放式語義檢索,搜人搜車搜物
基于多模態(tài)大模型,文搜存儲產(chǎn)品實現(xiàn)了海量視圖數(shù)據(jù)的開放式語義檢索,不再局限于傳統(tǒng)的錄像回放及固定屬性查找。
根據(jù)需求,在搜索框內(nèi)輸入文字描述(一句話或一個詞等),例如輸入“打電話”、“白色面包車”、 “騎電瓶車未戴頭盔”、“自行車”、“小推車”、“小狗”等開放文字語義描述,即可搜索出相關(guān)目標(biāo)。
搜索范圍廣,既支持人、機動車、非機動車等安防場景的高頻目標(biāo)搜索 ,也廣泛支持特定物品、異常行為等特征搜索。
搜得準(zhǔn):文字與圖像精準(zhǔn)匹配
利用多模態(tài)大模型技術(shù),提取圖像與擬搜索語言的特征,并將圖像特征與搜索語言中關(guān)鍵語義特征對齊,實現(xiàn)高精度搜索。
如能夠理解 “穿紅色衣服”、“黑色背包”、“戴帽子”、“拉桿箱”、“棍棒”等對目標(biāo)的文字描述,精準(zhǔn)搜索出相關(guān)目標(biāo)。針對常見目標(biāo)的檢索,TOP20命中率可達90%以上。(數(shù)據(jù)來自海康威視實驗室)
搜得快:秒級出搜索結(jié)果
采用數(shù)據(jù)三級緩存、均衡抽樣、異步加載等創(chuàng)新技術(shù),實現(xiàn)文本搜索結(jié)果的秒級顯示。
搜得易:極簡操作,輕松搜索
除了手動輸入文本進行檢索外,貼合用戶常用情景,增設(shè)找人、找機動車、找非機動車、找寵物、找常用物品等快捷搜索入口,還支持用戶自定義編輯搜索慣語,讓操作更簡單,使用更便捷。
基于觀瀾大模型技術(shù)體系,推進產(chǎn)品創(chuàng)新文搜存儲系列產(chǎn)品基于海康威視觀瀾大模型技術(shù)體系,實現(xiàn)智能化應(yīng)用的變革。觀瀾大模型中的圖文多模態(tài)大模型,在大語言模型的基礎(chǔ)上,使用圖文多模態(tài)數(shù)據(jù)進行持續(xù)預(yù)訓(xùn)練,獲得視覺感知和視覺認(rèn)知能力。受益于圖文多模態(tài)大模型強大的感知能力和跨任務(wù)泛化能力,視覺智能業(yè)務(wù)的應(yīng)用門檻被顯著降低。
文搜存儲系列產(chǎn)品是多模態(tài)大模型算法與嵌入式智能硬件結(jié)合的應(yīng)用突破,通過面向平臺的模型設(shè)計、大小模型蒸餾、跨層混合精度量化等大模型部署技術(shù)與嵌入式智能硬件創(chuàng)新設(shè)計,實現(xiàn)多模態(tài)大模型在輕量化嵌入式硬件平臺上落地,讓多模態(tài)大模型技術(shù)實現(xiàn)普惠應(yīng)用,使更多行業(yè)和用戶享受大模型帶來的智能與便捷。

請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
推薦專題
- 1 UALink規(guī)范發(fā)布:挑戰(zhàn)英偉達AI統(tǒng)治的開始
- 2 北電數(shù)智主辦酒仙橋論壇,探索AI產(chǎn)業(yè)發(fā)展新路徑
- 3 降薪、加班、裁員三重暴擊,“AI四小龍”已折戟兩家
- 4 “AI寒武紀(jì)”爆發(fā)至今,五類新物種登上歷史舞臺
- 5 國產(chǎn)智駕迎戰(zhàn)特斯拉FSD,AI含量差幾何?
- 6 光計算迎來商業(yè)化突破,但落地仍需時間
- 7 東陽光:2024年扭虧、一季度凈利大增,液冷疊加具身智能打開成長空間
- 8 地平線自動駕駛方案解讀
- 9 封殺AI“照騙”,“淘寶們”終于不忍了?
- 10 優(yōu)必選:營收大增主靠小件,虧損繼續(xù)又逢關(guān)稅,能否乘機器人東風(fēng)翻身?