www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當(dāng)前位置:首頁(yè) > 模擬 > 模擬
[導(dǎo)讀]提出了一種統(tǒng)一的可以檢測(cè)出切變、漸變的視頻鏡頭檢測(cè)算法。首先,通過(guò)顏色局部累積直方圖與紋理相結(jié)合的方法獲得視頻的幀間差,對(duì)于切變檢測(cè),通過(guò)已經(jīng)計(jì)算得到的幀間差為基礎(chǔ),采用雙重窗口檢測(cè)算法實(shí)現(xiàn),對(duì)于漸變的檢測(cè),采取了統(tǒng)一的雙閾值檢測(cè)方法對(duì)所有漸變類型進(jìn)行了檢測(cè)。通過(guò)多次試驗(yàn),證明了用本文算法進(jìn)行視頻鏡頭檢測(cè)能取得比較好的效果。

O 引言
   
隨著多媒體技術(shù)和網(wǎng)絡(luò)技術(shù)的迅速發(fā)展,現(xiàn)代計(jì)算機(jī)技術(shù)特別是海量數(shù)據(jù)存儲(chǔ)與傳輸技術(shù)的成熟,視頻作為一種主要的媒體類型在人們的生活、教育、娛樂等方面日益成為不可或缺的信息載體。但是由于視頻非結(jié)構(gòu)化的數(shù)據(jù)格式、巨大的數(shù)據(jù)量以及表現(xiàn)內(nèi)容的不透明等缺點(diǎn),使得對(duì)視頻數(shù)據(jù)的管理和分析都相當(dāng)困難。而從大量視頻數(shù)據(jù)中找到自己感興趣的相關(guān)視頻片段己成為一種迫切的需求。這一技術(shù)就是目前人們普遍關(guān)注的基于內(nèi)容的視頻檢索技術(shù)(CB-VR,Content-Based Video Retrieval)。
    我們知道視頻的制作過(guò)程首先是進(jìn)行單個(gè)鏡頭的拍攝,然后,對(duì)于內(nèi)容相近的多個(gè)鏡頭通過(guò)各種鏡頭編輯方式(即鏡頭轉(zhuǎn)換方式)銜接在一起,組成場(chǎng)景以及視頻故事單元??梢婄R頭是組成視頻的基本單元,也是對(duì)視頻內(nèi)容進(jìn)行深入分析的基礎(chǔ)。所以從基于內(nèi)容的角度對(duì)視頻進(jìn)行分析時(shí),首先檢測(cè)鏡頭的轉(zhuǎn)換邊界,即各個(gè)不同鏡頭的連接處,這樣就可以將視頻分割為一個(gè)個(gè)的鏡頭;然后對(duì)每個(gè)鏡頭進(jìn)行代表幀的提取并對(duì)內(nèi)容相近的多個(gè)鏡頭進(jìn)行聚類,組成更高層次的場(chǎng)景以及視頻故事單元,便于對(duì)視頻的檢索。可見鏡頭邊界檢測(cè)是將視頻自動(dòng)地分割為鏡頭,以作為基本的索引單元,它是實(shí)現(xiàn)基于內(nèi)容的視頻檢索的第一步。本文研究的主要工作就是鏡頭邊界檢測(cè)。
    按照鏡頭之間的轉(zhuǎn)換也不同,主要分為突變(切變)和漸變,對(duì)于鏡頭邊界檢測(cè),主要的工作就是找出視頻中的突變和漸變變化。

1 相關(guān)工作
   
鏡頭邊界檢測(cè)算法主要有直方圖法、模板匹配法、基于邊緣的方法和基于模型的方法等4種。直方圖法使用像素亮度和色彩的統(tǒng)計(jì)值,不考慮像素的位置信息,抗噪聲能力較強(qiáng),但有時(shí)會(huì)漏掉場(chǎng)景切換。模板匹配法嚴(yán)格地區(qū)分像素的位置,對(duì)噪聲、鏡頭和物體的運(yùn)動(dòng)非常敏感,容易導(dǎo)致錯(cuò)誤的場(chǎng)景切換檢測(cè)?;谶吘壏椒ǖ幕舅枷胧窃阽R頭發(fā)生切換時(shí)新邊緣應(yīng)遠(yuǎn)離舊邊緣的位置,舊邊緣消失的位置也應(yīng)遠(yuǎn)離新邊緣的位置。上述3種方法都是通過(guò)計(jì)算幀間差進(jìn)行鏡頭邊界檢測(cè)的,對(duì)于突變檢測(cè)可取得較好的效果,但對(duì)漸變檢測(cè)則存在一定的困難,這些方法在很大程度上忽略了漸變切換中幀間結(jié)構(gòu)上的相關(guān)性。而基于模型的方法則是利用對(duì)鏡頭編輯的先驗(yàn)知識(shí),對(duì)各種鏡頭切換建立一定的數(shù)據(jù)模型進(jìn)行鏡頭切換的檢測(cè),因此對(duì)鏡頭漸變的檢測(cè)能取得較好的效果。本文的算法就是一種基于模型的方法。

2 鏡頭分割算法
2.1 切變檢測(cè)

    本算法根據(jù)相鄰幀圖像變化和不相似性確定切變,相鄰幀的變化屬于圖像檢索的范圍,本算法中采用了顏色局部累積直方圖與紋理相結(jié)合的方法。在一般情況下可通過(guò)將不相似值與一個(gè)閾值進(jìn)行比較來(lái)做出判斷,而基于“滑動(dòng)窗口”的方法可以克服了不相似值不僅與幀間差有關(guān),而且與成像亮度也有關(guān)的問題。
    首先定義一個(gè)時(shí)間長(zhǎng)度為2R+l的窗口,使需檢測(cè)的幀位于窗口正中。然后根據(jù)下式計(jì)算前后兩幀間的差異:

   
    如果差異滿足以下條件則認(rèn)為待檢測(cè)幀處為切變位置:
    1)窗口中D為最大值;
    2)設(shè)窗口中第二大的差異值為D2,有D<k×D2,k為正系數(shù)。
    一個(gè)圖解例子見圖1,其中橫軸對(duì)應(yīng)幀序列,豎軸對(duì)應(yīng)幀差值,設(shè)這里k=3。圖中從一R到R對(duì)應(yīng)以幀間差為D的幀的檢測(cè)窗口,由圖可見上述第1個(gè)條件滿足,第2個(gè)條件也滿足(注意檢測(cè)幀問差為D2的幀的檢測(cè)窗口需向左移,但比較時(shí)仍用幀間差為D的檢測(cè)窗口),所以認(rèn)為檢測(cè)到一個(gè)切變。如果考慮窗口右側(cè)外的那些峰,由于第2個(gè)條件得不到滿足,所以不認(rèn)為檢測(cè)到切變。該方法由于利用了在切變位置附近的局部信息,檢測(cè)效果比全局閾值法有相當(dāng)大的提高。

    由于“滑動(dòng)窗口”算法在實(shí)際中有可能遇到兩個(gè)影響效果的問題,一個(gè)是漏檢問題。例如在利用上面算法中對(duì)一些由于攝影機(jī)的晃動(dòng),造成前景中的物體相對(duì)于背景有較大的上下變動(dòng),造成了很多漏檢。另一個(gè)時(shí)誤檢。使用上面的算法對(duì)一線電影畫面幾乎靜止,但是由于加字幕、去字幕原因差生小的擾動(dòng),就會(huì)多檢測(cè)出切變,出現(xiàn)誤檢。
    本文采用了基于雙重窗口的檢測(cè)算法。
    基于雙重窗口算法進(jìn)行切變檢測(cè)的方法流程參見圖2,這里對(duì)被檢測(cè)視頻流的要求比較簡(jiǎn)單,只需對(duì)原始視頻流取平均或?qū)嚎s視頻流取直流分量就可以得到。為了把閃光的影響除去,從檢測(cè)視頻流中先將閃光位置確定下來(lái),其后在把這些位置從切變檢測(cè)得到的可能切變位置中除去,就可得到真正的切變位置。

    基于雙重窗口算法的主要特點(diǎn)是利用在大窗口中取全局閾值以提取候選切變位置,再利用以候選切變位置為中心的小窗口具體確定真正的切變位置。該算法在小窗口里的檢測(cè)中結(jié)合了雙側(cè)和單側(cè)比較檢測(cè)方法以減少漏檢提高查全率。而為了避免單側(cè)檢測(cè)可能造成的誤檢,這里采用了將圖像分塊并比較前后兩幀對(duì)應(yīng)塊直方圖的方法作進(jìn)一步的確認(rèn)。
2.2 漸變檢測(cè)
   
在切變檢測(cè)時(shí)已經(jīng)計(jì)算得到幀間差,同時(shí)采用了基于雙重窗口的切變檢測(cè)算法,計(jì)算了大窗口的幀間差均值用于解決誤檢問題。在整體實(shí)現(xiàn)算法時(shí),采取僅可能統(tǒng)一且高效的方法,因此,在漸變檢測(cè)中也借助于切變檢測(cè)中已經(jīng)計(jì)算得到的數(shù)據(jù),改進(jìn)了雙重窗口算法,使它也適合于檢測(cè)漸變。
    具體方法是:在幀間差檢測(cè)切變的同時(shí)來(lái)檢測(cè)漸變。先求得幀間差的大區(qū)間均值A(chǔ)ve1,然后根據(jù)每幀與此均值的比值決定是否存在一個(gè)潛在的漸變(在算法中我們發(fā)現(xiàn)取比值系數(shù)位0.9即可),然后開始對(duì)于以后連續(xù)的大于比值的幀間差求累積和,直到存在兩個(gè)小于此比值的幀間差出現(xiàn)。然后計(jì)算這些幀間差累積和的均值A(chǔ)ve2。在比較這兩個(gè)均值的大小決定是否真的存在漸變,通過(guò)大量實(shí)驗(yàn),發(fā)現(xiàn)當(dāng)它們的比值大于2時(shí)一般存在漸變,小于2時(shí)一般是由其它原因造成的。
    在整個(gè)算法中,并未對(duì)漸變鏡頭進(jìn)行分類,由于漸變過(guò)程中的幀間差總是大于區(qū)間內(nèi)其它鏡頭內(nèi)的幀間差。因此僅使用了兩個(gè)均值用于判斷漸變的發(fā)生,很好的完成漸變的檢測(cè)。

3 試驗(yàn)
   
視頻鏡頭檢測(cè)中,常會(huì)出現(xiàn)錯(cuò)誤的檢測(cè)或漏檢,這些都是不允許的。常用查全率(也稱復(fù)現(xiàn)率)和準(zhǔn)確度以用來(lái)表示檢索系統(tǒng)的性能。
    按本文的算法對(duì)4段視頻進(jìn)行了切變檢測(cè),對(duì)2段視頻進(jìn)行了漸變的檢測(cè),實(shí)驗(yàn)結(jié)果如下:

4 總結(jié)
   
主要介紹了視頻檢索的核心技術(shù)——視頻鏡頭的檢測(cè),重點(diǎn)提出了基于已經(jīng)計(jì)算得到的幀間差為基礎(chǔ)的雙重窗口檢測(cè)算法實(shí)現(xiàn)了切變的檢測(cè)。對(duì)于漸變的檢測(cè),采取了統(tǒng)一的雙閾值檢測(cè)方法對(duì)所有漸變類型進(jìn)行了檢測(cè)。通過(guò)多次試驗(yàn),證明了方法的可行性、有效性。

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

成都2022年10月19日 /美通社/ -- 近期,平安養(yǎng)老險(xiǎn)積極籌備個(gè)人養(yǎng)老金的產(chǎn)品設(shè)計(jì)和系統(tǒng)開發(fā)工作,發(fā)展多樣化的養(yǎng)老金融產(chǎn)品,推動(dòng)商業(yè)養(yǎng)老保險(xiǎn)、個(gè)人養(yǎng)老金、專屬商業(yè)養(yǎng)老保險(xiǎn)等產(chǎn)品供給。 搭養(yǎng)老政策東風(fēng) ...

關(guān)鍵字: 溫度 BSP 東風(fēng) 大眾

廣東佛山2022年10月19日 /美通社/ -- 空間是人居生活的基礎(chǔ)單元,承載著生存與活動(dòng)的最基本功能。而對(duì)于理想空間的解構(gòu)意義卻在物理性容器之外,體現(xiàn)出人們對(duì)于空間和生活深層關(guān)系的思考,同時(shí)也塑造著人與空間的新型連接...

關(guān)鍵字: 溫度 BSP 智能化 進(jìn)程

上海2022年10月19日 /美通社/ -- 10月17日晚間,安集科技披露業(yè)績(jī)預(yù)告。今年前三季度,公司預(yù)計(jì)實(shí)現(xiàn)營(yíng)業(yè)收入7.54億元至8.33億元,同比增長(zhǎng)60.24%至77.03%;歸母凈利潤(rùn)預(yù)計(jì)為1.73億...

關(guān)鍵字: 電子 安集科技 BSP EPS

北京2022年10月19日 /美通社/ -- 10月18日,北京市經(jīng)濟(jì)和信息化局發(fā)布2022年度第一批北京市市級(jí)企業(yè)技術(shù)中心創(chuàng)建名單的通知,諾誠(chéng)健華正式獲得"北京市企業(yè)技術(shù)中心"認(rèn)定。 北京市企業(yè)技...

關(guān)鍵字: BSP ARMA COM 代碼

北京2022年10月18日 /美通社/ -- 10月14日,國(guó)際數(shù)據(jù)公司(IDC)發(fā)布《2022Q2中國(guó)軟件定義存儲(chǔ)及超融合市場(chǎng)研究報(bào)告》,報(bào)告顯示:2022年上半年浪潮超融合銷售額同比增長(zhǎng)59.4%,近5倍于...

關(guān)鍵字: IDC BSP 數(shù)字化 數(shù)據(jù)中心

上海2022年10月18日 /美通社/ -- 2022年9月5日,是首都銀行集團(tuán)成立60周年的紀(jì)念日。趁著首都銀行集團(tuán)成立60周年與首都銀行(中國(guó))在華深耕經(jīng)營(yíng)12年的“大日子”,圍繞作為外資金融機(jī)構(gòu)對(duì)在華戰(zhàn)略的構(gòu)想和業(yè)...

關(guān)鍵字: 數(shù)字化 BSP 供應(yīng)鏈 控制

東京2022年10月18日  /美通社/ -- NIPPON EXPRESS HOLDINGS株式會(huì)社(NIPPON EXPRESS HOLDINGS, INC.)旗下集團(tuán)公司上海通運(yùn)國(guó)際物流有限公司(Nipp...

關(guān)鍵字: 溫控 精密儀器 半導(dǎo)體制造 BSP

廣州2022年10月18日 /美通社/ -- 10月15日,第 132 屆中國(guó)進(jìn)出口商品交易會(huì)("廣交會(huì)")于"云端"開幕。本屆廣交會(huì)上高新技術(shù)企業(yè)云集,展出的智能產(chǎn)品超過(guò)140,...

關(guān)鍵字: 中國(guó)智造 BSP 手機(jī) CAN

要問機(jī)器人公司哪家強(qiáng),波士頓動(dòng)力絕對(duì)是其中的佼佼者。近來(lái)年該公司在機(jī)器人研發(fā)方面獲得的一些成果令人印象深刻,比如其開發(fā)的機(jī)器人會(huì)后空翻,自主爬樓梯等。這不,波士頓動(dòng)力又發(fā)布了其機(jī)器人組團(tuán)跳男團(tuán)舞的新視頻,表演的機(jī)器人包括...

關(guān)鍵字: 機(jī)器人 BSP 工業(yè)機(jī)器人 現(xiàn)代汽車

南京2022年10月17日 /美通社/ -- 日前《2022第三屆中國(guó)高端家電品牌G50峰會(huì)》于浙江寧波落幕,來(lái)自兩百余名行業(yè)大咖、專家學(xué)者共同探討了在形勢(shì)依然嚴(yán)峻的當(dāng)下,如何以科技創(chuàng)新、高端化轉(zhuǎn)型等手段,幫助...

關(guān)鍵字: LINK AI BSP 智能家電

模擬

31144 篇文章

關(guān)注

發(fā)布文章

編輯精選

技術(shù)子站

關(guān)閉