眾所周知，一篇完整的論文都要求寫(xiě)隨文摘要，摘要是提供論文內容梗概為目的，它可以讓讀者盡快了解論文的主要內容。視頻摘要的概念源自文本摘要，指從原始視頻中提取精華信息，把若干小時(shí)視頻濃縮為十幾分鐘甚至更少，大幅度縮短視頻查看的時(shí)間。通過(guò)采用視頻目標特征檢索技術(shù)，克服視頻底層特征與人類(lèi)思維所能理解的高層語(yǔ)義的鴻溝，迅速尋找到感興趣的目標。視頻摘要與檢索充分挖掘海量視頻監控錄像中的寶藏，大大提高海量監控視頻錄像分析的效率。
海量視頻調閱檢索
面臨著(zhù)巨大的挑戰，人工查找線(xiàn)索猶如大海撈針一般來(lái)說(shuō)，視頻錄像中的很多重要的線(xiàn)索或活動(dòng)對象，在監控畫(huà)面中僅僅出現十幾秒甚至數秒，而這樣的信息散落在數十小時(shí)的視頻中，人工查看極易遺漏這些轉瞬即逝的重要信息。據IMF研究實(shí)驗表明，連續觀(guān)察12分鐘的視頻圖像，觀(guān)察者會(huì )錯過(guò)45%的場(chǎng)景，而在連續觀(guān)察22分鐘后會(huì )錯過(guò)95%的場(chǎng)景，從而忽略了許多重要的信息。這使得視頻錄像的真正有效使用率大為降低，即使有足夠的人力和時(shí)間，通過(guò)人工查看原始視頻的方式來(lái)捕捉轉瞬即逝的線(xiàn)索，也存在遺漏的可能。傳統視頻線(xiàn)索的查找，猶如大海撈針，面臨巨大的挑戰。面對海量視頻錄像調閱慢、分析難等問(wèn)題，急需采用智能化的手段，快速處理和檢索海量視頻，提高視頻監控錄像分析水平和工作效率。
佳都新太視頻摘要技術(shù)
大顯身手，若干小時(shí)視頻濃縮為視頻摘要精華視頻摘要(Video Abstraction)，即對視頻的結構和內容進(jìn)行分析，從視頻文件中提取出有意義的部分，并將它們以某種方式進(jìn)行組合，形成簡(jiǎn)潔的、能夠充分表現視頻語(yǔ)義內容的概要。從時(shí)間軸上看，視頻是由一系列連續的圖像幀和相應音頻構成的集合，集合中的基本元素是圖像幀。視頻數據的結構化就是對視頻在時(shí)間上的層次分割，完成原始的非結構化的視頻流到結構化的視頻實(shí)體的轉換。將原始的視頻流劃分為合理的結構單位后，形成視頻內容的層次模型，并得到視頻內容對象的相關(guān)描述。視頻內容的提取采用模式識別或視頻結構探測的方法，獲取能夠被計算機直接處理，或能夠被人的感觀(guān)直接感覺(jué)到的信息。此時(shí)，視頻被分成背景（全靜止，不活動(dòng)的物體）以及前景（活動(dòng)的物體），活動(dòng)的物體會(huì )被提取出來(lái)，系統加以描述并插入到數據庫中。通過(guò)一定的選擇準則，選擇前景和背景內容對象作為視頻摘要的組成元素，視頻內容對象以一定的方式組合起來(lái)，經(jīng)過(guò)渲染后形成某種形式的視頻摘要，并以可視化的形式將摘要展現出來(lái)。
視頻摘要技術(shù)具有非常實(shí)用的價(jià)值，將若干小時(shí)視頻濃縮為短小精悍、信息全面的視頻摘要精華，大大提高海量監控視頻錄像分析的效率。
強大的視頻特征搜索，對類(lèi)似視頻輕松獲取
視頻數據本質(zhì)上是有文本、視頻、聲音、圖像等多種多媒體融合而成，這些媒體之間并非孤立的而是相互之間存在語(yǔ)義上的關(guān)聯(lián)。因此，對視頻檢索綜合分析各種媒介在視頻數據中所蘊含的豐富的語(yǔ)義信息，才能檢索到符合人們要求的視頻片段。利用視頻本身的底層特征，如類(lèi)型、顏色、大小等進(jìn)行標引，采用獲取圖像幀底層特征來(lái)“逼近”語(yǔ)義概念。
為了快速的從海量視頻數據中提取目標信息，利用基于內容的視頻檢索技術(shù)，跨越視頻底層特征和高層語(yǔ)義之間的語(yǔ)義鴻溝，實(shí)現對安防場(chǎng)景中海量視頻數據的主動(dòng)模糊查找功能。基于內容分析的視頻目標分類(lèi)檢索使用一種有效的運動(dòng)分割方法提取運動(dòng)目標，這些運動(dòng)目標的基本特征（人車(chē)類(lèi)別、顏色、大小等）作為元數據被提取出來(lái)并保存。利用對提取出的目標進(jìn)行目標特征分析，通過(guò)監控人員的描述特征對特征庫進(jìn)行匹配，快速找出類(lèi)似視頻搜索目標，實(shí)現利用人類(lèi)思維中高層語(yǔ)義概念來(lái)進(jìn)行視頻內容的處理。
采用視頻摘要技術(shù)可大幅度縮短視頻監控錄像倒查的時(shí)間，采用視頻目標特征搜索可有效縮小視頻錄像的搜索范圍，視頻摘要與檢索充分挖掘海量視頻監控錄像中的寶藏，大大提高海量監控視頻錄像分析的效率。下圖為一個(gè)街道的夜景，通過(guò)視頻摘要與檢索，準確地輸出人流和車(chē)流的摘要文件。
佳都新太自主研發(fā)，擁有核心知識產(chǎn)權
在智能視頻監控錄像分析領(lǐng)域，國外公司無(wú)論在算法研究還是在產(chǎn)品化應用方面都起步較早，但是直接運用于國內市場(chǎng)顯然有些水土不服。相對來(lái)說(shuō)，國內公司進(jìn)入該領(lǐng)域比較晚，在分析算法的成熟度、上層應用的開(kāi)發(fā)、與傳統安防系統的無(wú)縫集成等方面有待進(jìn)一步優(yōu)化。
佳都新太通過(guò)分析市場(chǎng)需求，在國內率先研究視頻摘要檢索技術(shù)，目前已成功研發(fā)PCI-VSRS 1008/1016以及公安偵查案件專(zhuān)用的PCI-VIAI 1008/1016，核心分析算法均擁有自主知識產(chǎn)權，且分析算法的準確性、系統的穩定性均具有較為明顯的優(yōu)勢。PCI-VSRS兼容多種主流視頻格式，適用于公安、交通、金融、監獄、大型企業(yè)等多種行業(yè)；PCI-VIAI適應于公安刑偵部門(mén)的視頻調查，為公安辦案人員快速尋找線(xiàn)索、高效的追嫌追逃提供了強而有力的技術(shù)支撐。視頻摘要檢索技術(shù)的成功應用，開(kāi)創(chuàng )了海量視頻錄像分析的新時(shí)代——海量視頻回放太久，視頻摘要檢索只爭分秒！
