视频浓缩摘要简介
視頻摘要,就是以自動或者半自動的方式,通過分析視頻的結構和內容存在的時空冗余,從原始視頻中提取有意義的片段,將它們以某種特點的方式重新組合成緊湊的、能夠充分表現視頻語義內容的濃縮視頻。
?
一、靜態視頻摘要:
靜態的視頻摘要,也稱之為視頻概要(video summary),是以一系列從原始視頻流中抽取出來的靜態語義單元來表現視頻的內容。靜態語義單元是諸如關鍵幀、標題、幻燈片等可以概括表示視頻鏡頭內容的靜態特征信息。目前的靜態視頻摘要的研究主要是基于關鍵幀選取方法來展開的。通過將多個關鍵幀組合成視頻摘要,允許用于通過少量的關鍵幀快速瀏覽原始視頻的內容,并提供快速檢索。關鍵幀的選取主要利用顏色、運動矢量等視覺特征去區分幀間的差異性。但差異性的區分計算依賴閾值的選擇,選擇過程中計算了較大、實時性較差。基于關鍵幀的視頻摘要結果簡單,觀看方便。但由于其以靜態圖像為結果的表達形式,很難準確地表達視頻的內在語義,且對“對象”動態特征的描述不夠全面,所以僅僅適用于視頻的精彩瞬間生成,無法適應需要進行“對象”特征分析的場合。
靜態視頻濃縮摘要流程圖
靜態視頻濃縮摘要通過描述原始視頻中的每幀圖像特征(如,顏色、紋理、視覺顯著性等),通過對相鄰幀間的特征差異分析,抽取出原始視頻的關鍵幀,對關鍵幀進行聚類,形成表達不同主題場景的視頻片段,最后根據視頻片段的信息進行組合,生成一段短的摘要視頻。
這種方式的優點是摘要視頻的濃縮比較高,摘要生成算法與場景無關,較為成熟。缺點是生成的摘要視頻僅僅表示了一小部分的視頻內容,丟失了大量的信息,且生成的摘要視頻不一定是用戶感興趣的片段。
?
?
二、動態視頻摘要:
動態視頻摘要,又稱之為視頻濃縮(video synthesis),是一段比原始視頻短的多的濃縮結果。動態視頻摘要可以分為精彩剪輯視頻、專題濃縮視頻、一般濃縮視頻三種。精彩剪輯視頻主要用于電影電視行業,是由原始視頻中的精彩瞬間組成,專題濃縮視頻主要應用于醫學、金融等特定領域,利用特定專業知識對原始視頻進行分析后濃縮得到的表現該領域特定內容的濃縮視頻。相對而言,一般視頻濃縮采用通用濃縮方法面向較為普通視頻,用戶可以通過播放這些相對精煉的摘要視頻來了解整個視頻的內容。
動態視頻濃縮摘要流程圖
動態視頻濃縮在得到視頻幀之后,先對當前場景建立背景模型,然后快速根據視頻照耀處理的特殊性,將原始視頻分為靜態視頻段、目標密集視頻段、摘要基本段,同時為每個摘要基本段落生成其最佳背景模型。接著,基于背景建模,對運動目標進行檢測、跟蹤,提取其運動軌跡,通過運動軌跡表示該目標對象。然后對時空異步的多目標軌跡進行重新組合,去除視頻的空間冗余,在重組的過程中應該考慮避免偽碰撞、保護原始相關性等原則,使重組的軌跡不丟失隱形信息。最后需要對重組后的軌跡及背景模型進行融合,這里主要解決的是背景圖像的最優選擇及多目標軌跡與背景的無痕融合問題。
總結
- 上一篇: MybatisPlus实现多条件拼接动态
- 下一篇: html网页在图片的后面同一行追加,ht