蜜度發(fā)布人工智能前沿應用成果MiduCMR 實現多模態(tài)信息跨模態(tài)搜索

6月27日,蜜度發(fā)布了人工智能前沿應用成果——跨模態(tài)檢索引擎MiduCMR,在多模態(tài)信息檢索領域取得重大突破?;贛iduCMR,蜜度索驥推出跨模態(tài)檢索功能,實現視頻、音頻、圖片、文本等不同模態(tài)信息在統(tǒng)一語義空間中的跨模態(tài)檢索;蜜度版權通推出文本、圖片、視頻的版權保護與監(jiān)測功能,實現多模態(tài)信息融合的一站式知識產權保護。目前,蜜度索驥、蜜度版權通產品可在蜜度官網中進行體驗。

數字時代,數據智能已成為輔助決策的重要手段之一,社交媒體內容數據在社會治理、企業(yè)營銷、媒體變革中發(fā)揮著重要作用。隨著視頻技術、網絡技術、5G的發(fā)展,互聯(lián)網信息正在從文字、圖像向圖片、音頻、視頻相互融合的多模態(tài)內容轉變。但視頻、音頻、圖片、文本信息搜索之間存在一定的壁壘,這些形態(tài)豐富、來源多樣、數量巨大的多模態(tài)內容數據難以得到有效的分析和應用。例如視頻、短視頻通常是文字、圖像、音頻等多種形態(tài)的組合,而常用的內容提取和分析方法主要針對文字、圖像的單個模態(tài)進行,難以在多類模態(tài)之間實現“跨越”。同時音視頻在傳播過程中容易產生裁剪、編輯等二次創(chuàng)作的情況,內容較為復雜,基于文本關鍵詞的檢索方法也存在信息發(fā)現不全面、侵權線索不容易發(fā)現、信息難以合并、追溯難度大等問題。

面對數字時代的新需求,上海蜜度信息技術有限公司自主研發(fā)推出跨模態(tài)檢索引擎MiduCMR,為視頻、音頻、圖片、文本等多模態(tài)內容的檢索、分析、應用提供解決方案,幫助政企、媒體及創(chuàng)作者更好地面對全媒體多模態(tài)信息傳播的新挑戰(zhàn)。

跨越語義鴻溝 多模態(tài)信息一鍵檢索

MiduCMR突破傳統(tǒng)的單一模態(tài)的信息檢索方式,實現了跨模態(tài)信息的一鍵檢索。引擎從微博、論壇、App、短視頻等來源的多模態(tài)信息中,提取視頻、音頻、圖片、文本內容并對其進行單模態(tài)理解和多模態(tài)融合,將海量全媒體信息映射到統(tǒng)一語義空間,跨越不同模態(tài)內容間的語義鴻溝,自動理解、關聯(lián)多模態(tài)間的關鍵要素。

基于強大的跨模態(tài)檢索能力,MiduCMR實現了以文本搜圖片,以文本搜音視頻,以圖片搜文本,以圖片搜圖片,以圖片搜視頻,以音頻搜文本,以音頻搜視頻等跨模態(tài)信息檢索功能,快速呈現所需的多模態(tài)信息;并能夠智能識別圖片中的文字內容,準確解析視頻中的字幕、背景、封面等特征元素,為深度數據分析提供基礎。

多樣化識別分析 應用場景豐富

在跨模態(tài)檢索的應用方向上,MiduCMR能為政企、媒體提供多樣化的支持。目前,MiduCMR利用跨模態(tài)對比學習、語義融合、語義表征、語義檢索等技術,實現了跨模態(tài)視頻打標簽、相似視頻檢索、場景識別等一系列解決方案。

針對政務應用場景,基于MiduCMR的蜜度索驥已支持約300個特殊場景的識別分析,有效提高政企、媒體等單位對視頻等多模態(tài)內容發(fā)現、分析的準確度及應急反應速度,幫助用戶及時發(fā)現公眾需求、了解情緒變化、聆聽建議心聲、關注輿論動向、捕捉判別謠言,保護知識產權、打擊假冒偽劣,為政府宣傳、公安網安、社會治理、互聯(lián)網內容安全的數字化升級工作提供支持。

針對知識產權應用場景,基于MiduCMR的蜜度版權通已經支持全網多場景中的版權保護,幫助企業(yè)、媒體、個人、律所、MCN機構、影視創(chuàng)作機構進行文本版權、圖片版權、視頻版權的監(jiān)測、預警、追蹤與智能取證。同時,蜜度版權通能夠對商標侵權、產品設計與包裝侵權、外觀設計專利侵權等行為進行監(jiān)測、預警、追蹤與智能取證。

據悉,蜜度將基于MiduCMR推出更多的跨模態(tài)檢索產品,以人工智能技術的應用突破,在公安、消防、教育、醫(yī)療、民生以及內容監(jiān)管、品牌洞察、知識產權保護等領域提供豐富的數據智能應用與解決方案,為數字政府、數字營銷、數字媒體、數字城市等場景助力賦能。

(免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。 )