本發(fā)明涉及多媒體信息處理領(lǐng)域，具體而言，本發(fā)明涉及一種多媒體信息處理的方法和一種多媒體信息處理的裝置。
背景技術(shù)：
：隨著生活水平的提升，帶有拍攝裝置的終端設(shè)備變得越來(lái)越普及。獲取高質(zhì)量的圖像和視頻也成為提升終端設(shè)備競(jìng)爭(zhēng)力的一個(gè)重要因素。已有的拍攝增強(qiáng)大都集中在提升圖像質(zhì)量方面，對(duì)視頻質(zhì)量的提升涉及較少。相比于圖像增強(qiáng)，視頻增強(qiáng)由于受時(shí)空一致性、處理時(shí)間有限的影響，因此實(shí)現(xiàn)起來(lái)相對(duì)困難。在現(xiàn)有帶有拍攝功能的終端設(shè)備中，如手機(jī)，采集的視頻和圖像質(zhì)量往往達(dá)不到用戶的需求。雖然有一些中高端終端設(shè)備采集的圖像質(zhì)量已經(jīng)得到了很大的提升，但是視頻質(zhì)量還有很大的提升空間，尤其是在低光照環(huán)境下采集的視頻。視頻處理要比圖像處理困難很多，主要有兩方面原因：1)圖像和視頻幀的處理時(shí)間不同，例如在頻率30fps視頻中，處理每個(gè)視頻幀的時(shí)間需控制在1/30秒內(nèi)，而處理圖像的時(shí)間可以更長(zhǎng)，因此圖像增強(qiáng)方法可根據(jù)場(chǎng)景靈活自動(dòng)調(diào)整曝光、白平衡等參數(shù)，甚至采集多幅圖像合成一幅圖像，這使得拍攝出的圖像比視頻的亮度和色彩更準(zhǔn)確；2)視頻需要保持時(shí)空一致性，而圖像沒(méi)有時(shí)空限制，為了保證時(shí)空一致性，視頻相鄰幀間的視頻采集參數(shù)，包括白平衡、曝光和對(duì)焦，需有平滑過(guò)渡，因此如果場(chǎng)景有突出變換，例如從室內(nèi)到室外的光照變換，終端對(duì)視頻采集參數(shù)調(diào)整有滯后性，而圖像采集參數(shù)都是針對(duì)當(dāng)前場(chǎng)景的亮度和顏色而定，這也導(dǎo)致拍攝出的圖像比視頻的亮度和色彩更準(zhǔn)確?，F(xiàn)有技術(shù)中，對(duì)圖像或視頻的增強(qiáng)技術(shù)主要集中于采用相應(yīng)的算法來(lái)對(duì)圖像或視頻進(jìn)行增強(qiáng)，即基于視頻或圖像自身信息進(jìn)行增強(qiáng)，增強(qiáng)效果 均不太理想，存在增強(qiáng)后的圖像及視頻失真、清晰度不足等問(wèn)題。技術(shù)實(shí)現(xiàn)要素：針對(duì)現(xiàn)有技術(shù)中對(duì)多媒體信息進(jìn)行增強(qiáng)處理的局限性問(wèn)題，本發(fā)明提出一種多媒體信息處理的方法，包括：獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息；根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理。其中，多媒體信息包括圖像信息、視頻信息、音頻信息中的至少一種。優(yōu)選地，第一類多媒體信息為圖像信息，第二類多媒體信息為視頻信息；或第一類多媒體信息為視頻信息，第二類多媒體信息為圖像信息。優(yōu)選地，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：確定采集的第二類多媒體信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)；根據(jù)采集的第一類多媒體信息，對(duì)采集的第二類多媒體信息對(duì)應(yīng)的確定出的指標(biāo)進(jìn)行增強(qiáng)處理。其中，指標(biāo)包括下述至少一項(xiàng)：分辨率、顏色、亮度、噪聲和模糊。優(yōu)選地，通過(guò)以下至少一項(xiàng)來(lái)確定采集的第二類多媒體信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)：根據(jù)檢測(cè)到的增強(qiáng)開(kāi)啟觸發(fā)操作來(lái)確定與其相匹配的需要增強(qiáng)的指標(biāo)；根據(jù)預(yù)先設(shè)置來(lái)確定與其相匹配的需要增強(qiáng)的指標(biāo)；依據(jù)自適應(yīng)參數(shù)匹配方式來(lái)自適應(yīng)確定需要增強(qiáng)的指標(biāo)。優(yōu)選地，自適應(yīng)參數(shù)匹配方式通過(guò)設(shè)備相關(guān)狀態(tài)、增強(qiáng)開(kāi)啟歷史記錄數(shù)據(jù)、采集環(huán)境、采集參數(shù)及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的一項(xiàng)或多項(xiàng)信息來(lái)確定；設(shè)備相關(guān)狀態(tài)包含以下至少一項(xiàng)：設(shè)備電量狀態(tài)、設(shè)備存儲(chǔ)狀態(tài)、采集多媒體信息時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括以下至少一項(xiàng)：場(chǎng)景亮度、語(yǔ)義內(nèi)容、顯著物的清晰度。可選地，該方法還包括：若確定出的需要增強(qiáng)的指標(biāo)為至少兩個(gè)，則確定需要增強(qiáng)的指標(biāo)的增強(qiáng)順序；根據(jù)采集的第一類多媒體信息，對(duì)采集的第二類多媒體信息對(duì)應(yīng)的確定出的指標(biāo)進(jìn)行增強(qiáng)處理，具體包括：根據(jù)采集的第一類多媒體信息，按照確定出的增強(qiáng)順序，對(duì)采集的第二類多媒體信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)依次進(jìn)行增強(qiáng)處理。優(yōu)選地，通過(guò)以下至少一項(xiàng)來(lái)確定需要增強(qiáng)的指標(biāo)的增強(qiáng)順序：增強(qiáng)順序設(shè)置觸發(fā)操作；預(yù)先設(shè)置；自適應(yīng)增強(qiáng)順序設(shè)置方式。優(yōu)選地，自適應(yīng)增強(qiáng)順序設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、增強(qiáng)設(shè)置歷史記錄信息、采集環(huán)境、采集參數(shù)、多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容及各個(gè)指標(biāo)之間的影響關(guān)系中的一項(xiàng)或多項(xiàng)信息來(lái)確定；其中，多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括場(chǎng)景亮度、語(yǔ)義內(nèi)容中的至少一項(xiàng)?？蛇x地，該方法還包括：設(shè)置兩個(gè)多媒體采集設(shè)備中的主采集設(shè)備及輔采集設(shè)備；根據(jù)圖像信息對(duì)視頻信息進(jìn)行相應(yīng)處理時(shí)，通過(guò)主采集設(shè)備采集獲取視頻信息，通過(guò)輔采集設(shè)備采集獲取圖像信息；根據(jù)視頻信息對(duì)圖像信息進(jìn)行相應(yīng)處理時(shí)，通過(guò)主采集設(shè)備采集圖像信息，通過(guò)輔采集設(shè)備采集視頻信息。優(yōu)選地，通過(guò)以下至少一種方式來(lái)設(shè)置兩個(gè)多媒體采集設(shè)備中主采集設(shè)備及輔采集設(shè)備：根據(jù)檢測(cè)到的設(shè)置觸發(fā)操作來(lái)設(shè)置主、輔采集設(shè)備；根據(jù)預(yù)先設(shè)置來(lái)設(shè)置主、輔采集設(shè)備；依據(jù)自適應(yīng)設(shè)備設(shè)置方式來(lái)自適應(yīng)設(shè)置主、輔采集設(shè)備。優(yōu)選地，自適應(yīng)設(shè)備設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、設(shè)備設(shè)置歷史記錄數(shù)據(jù)及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的一項(xiàng)或多 項(xiàng)信息來(lái)確定；設(shè)備相關(guān)狀態(tài)包含設(shè)備電量狀態(tài)和/或存儲(chǔ)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括以下至少一項(xiàng)：畫(huà)面比例分布、目標(biāo)物體在畫(huà)面中的位置信息、畫(huà)面質(zhì)量信息?？蛇x地，該方法還包括：設(shè)置多媒體信息的采集參數(shù)及增強(qiáng)策略參數(shù)；其中，獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息，具體包括：獲取兩個(gè)多媒體采集設(shè)備基于采集參數(shù)分別采集的第一類多媒體信息和第二類多媒體信息；其中，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：依據(jù)增強(qiáng)策略參數(shù)，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)增強(qiáng)處理；其中，采集參數(shù)具體包括白平衡、曝光時(shí)間、感光度、高動(dòng)態(tài)范圍、分辨率、焦點(diǎn)區(qū)域、視頻幀采集頻率中的至少一項(xiàng)。優(yōu)選地，通過(guò)以下任一方式來(lái)設(shè)置多媒體信息的采集參數(shù)及增強(qiáng)策略參數(shù)：根據(jù)檢測(cè)到的參數(shù)設(shè)置操作來(lái)設(shè)置采集參數(shù)及增強(qiáng)策略參數(shù)；根據(jù)預(yù)先參數(shù)設(shè)置來(lái)設(shè)置采集參數(shù)及增強(qiáng)策略參數(shù)；依據(jù)自適應(yīng)參數(shù)設(shè)置方式來(lái)自適應(yīng)設(shè)置采集參數(shù)及增強(qiáng)策略參數(shù)。優(yōu)選地，自適應(yīng)參數(shù)設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、參數(shù)歷史記錄數(shù)據(jù)、采集環(huán)境及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的至少一項(xiàng)來(lái)確定；設(shè)備相關(guān)狀態(tài)包含以下至少一項(xiàng)：設(shè)備電量狀態(tài)、設(shè)備存儲(chǔ)狀態(tài)、采集多媒體信息時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括以下至少一項(xiàng)：場(chǎng)景亮度、語(yǔ)義內(nèi)容、顯著物的清晰度、分辨率、曝光時(shí)間。優(yōu)選地，第一類多媒體信息為圖像信息，第二類多媒體信息為視頻信 息時(shí)，獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息，具體包括：獲取一個(gè)多媒體采集設(shè)備采集的視頻信息，以及另一個(gè)多媒體采集設(shè)備依據(jù)關(guān)鍵幀采集頻率同時(shí)采集的與視頻信息相對(duì)應(yīng)的關(guān)鍵幀圖像信息；其中，根據(jù)采集的第一類多媒體信息，對(duì)采集的第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集的關(guān)鍵幀圖像信息對(duì)采集的視頻信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理?？蛇x地，該方法還包括：設(shè)置關(guān)鍵幀采集頻率；其中，設(shè)置關(guān)鍵幀采集頻率的方式包括以下至少一項(xiàng)：根據(jù)預(yù)設(shè)頻率設(shè)置來(lái)設(shè)置關(guān)鍵幀采集頻率；依據(jù)自適應(yīng)頻率設(shè)置方式來(lái)自適應(yīng)設(shè)置關(guān)鍵幀采集頻率。優(yōu)選地，自適應(yīng)頻率設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、采集頻率歷史記錄數(shù)據(jù)、采集環(huán)境、采集參數(shù)及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的一項(xiàng)或多項(xiàng)信息來(lái)確定；其中，設(shè)備相關(guān)狀態(tài)包含以下至少一項(xiàng)：設(shè)備電量狀態(tài)、設(shè)備存儲(chǔ)狀態(tài)、采集多媒體信息時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括場(chǎng)景亮度、語(yǔ)義內(nèi)容中的至少一項(xiàng)。優(yōu)選地，根據(jù)采集的關(guān)鍵幀圖像信息對(duì)采集的視頻信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理，具體包括：根據(jù)采集到的關(guān)鍵幀圖像信息將采集到的視頻信息劃分為若干個(gè)視頻片段；利用視頻片段兩側(cè)的關(guān)鍵幀圖像信息對(duì)相應(yīng)的視頻片段對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理。優(yōu)選地，當(dāng)需要增強(qiáng)的指標(biāo)包括分辨率、顏色、亮度中的至少一項(xiàng)時(shí)，增強(qiáng)處理的方式包括基于多視圖重建的增強(qiáng)方式，和/或基于機(jī)器學(xué)習(xí)構(gòu)建增強(qiáng)模型的增強(qiáng)方式。優(yōu)選地，基于多視圖重建的增強(qiáng)方式，具體包括：建立采集到的視頻信息的視頻像素和關(guān)鍵幀圖像信息的圖像像素的匹配關(guān)系，通過(guò)圖像像素替換相匹配的視頻像素。優(yōu)選地，基于機(jī)器學(xué)習(xí)構(gòu)建增強(qiáng)模型的方式，具體包括：在采集到的視頻信息的關(guān)鍵幀圖像所在位置處提取視頻像素；以機(jī)器學(xué)習(xí)方式建立視頻像素與關(guān)鍵幀圖像信息的圖像像素的映射增強(qiáng)模型；在采集到的視頻信息的非關(guān)鍵幀圖像所在位置，通過(guò)映射增強(qiáng)模型來(lái)轉(zhuǎn)換視頻像素。優(yōu)選地，當(dāng)需要增強(qiáng)的指標(biāo)包括噪聲時(shí)，增強(qiáng)處理的方式包括基于字典重構(gòu)的方式，和/或基于深度學(xué)習(xí)的方式。優(yōu)選地，當(dāng)需要增強(qiáng)的指標(biāo)包括模糊時(shí)，增強(qiáng)處理的方式包括基于模糊核估計(jì)的方式，和/或基于深度學(xué)習(xí)的方式。可選地，還包括：在采集到的視頻信息中檢測(cè)到待處理的模糊幀時(shí)，確定對(duì)待處理的模糊幀對(duì)應(yīng)的模糊指標(biāo)進(jìn)行增強(qiáng)處理；其中，通過(guò)以下至少一種信息來(lái)檢測(cè)待處理的模糊幀：采集視頻幀時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；采集視頻幀時(shí)的對(duì)焦信息；通過(guò)分類器對(duì)采集的視頻信息進(jìn)行分類的分類結(jié)果。優(yōu)選地，第一類多媒體信息為圖像信息，第二類多媒體信息為視頻信息時(shí)，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行存儲(chǔ)處理，其中，存儲(chǔ)內(nèi)容包括以下至少一種情形：根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后的視頻信息；采集到的視頻信息和圖像信息；采集到的視頻信息和對(duì)視頻信息進(jìn)行增強(qiáng)處理時(shí)的增強(qiáng)模型；根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后的視頻信息以及采集到的圖像信息。可選地，還包括：響應(yīng)于接收到的播放觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的播放方式對(duì)視頻信息進(jìn)行播放；其中，播放方式包括以下至少一項(xiàng)：當(dāng)存儲(chǔ)增強(qiáng)處理后的視頻信息時(shí)，直接播放增強(qiáng)處理后的視頻信息；當(dāng)存儲(chǔ)采集到的視頻信息和圖像信息時(shí)，根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后播放；當(dāng)存儲(chǔ)采集到的視頻信息和增強(qiáng)模型時(shí)，通過(guò)增強(qiáng)模型對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后播放；當(dāng)存儲(chǔ)增強(qiáng)處理后的視頻信息和采集到的圖像信息時(shí)，將增強(qiáng)處理后的視頻信息和采集到的圖像信息關(guān)聯(lián)播放。優(yōu)選地，第一類多媒體信息為視頻信息，第二類多媒體信息為圖像信息時(shí)，獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息，具體包括：獲取一個(gè)多媒體采集設(shè)備采集的圖像信息，以及另一多媒體采集設(shè)備依據(jù)設(shè)置的視頻幀采集頻率采集的與圖像信息相對(duì)應(yīng)的視頻片段；其中，根據(jù)采集的第一類多媒體信息，對(duì)采集的第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集的視頻片段對(duì)采集的圖像信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理。優(yōu)選地，當(dāng)檢測(cè)到采集圖像信息的多媒體采集設(shè)備進(jìn)入預(yù)覽狀態(tài)時(shí)，或當(dāng)檢測(cè)到采集圖像信息多媒體采集設(shè)備開(kāi)始采集圖像信息時(shí)，另一多媒體采集設(shè)備依據(jù)設(shè)置的視頻幀采集頻率采集的與圖像信息相對(duì)應(yīng)的視頻片段；當(dāng)檢測(cè)到采集的視頻片段中的視頻幀數(shù)達(dá)到對(duì)應(yīng)的上限值時(shí)，另一多媒體采集設(shè)備停止采集視頻信息。優(yōu)選地，根據(jù)采集的視頻片段對(duì)采集的圖像信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理，具體包括：在采集的視頻片段中確定視頻關(guān)鍵幀；基于模糊核估計(jì)的方式，根據(jù)視頻關(guān)鍵幀對(duì)采集到的圖像信息進(jìn)行增強(qiáng)處理。優(yōu)選地，通過(guò)自適應(yīng)關(guān)鍵幀確定方式來(lái)確定視頻關(guān)鍵幀；其中，自適應(yīng)關(guān)鍵幀確定方式通過(guò)畫(huà)面模糊程度、內(nèi)容相似度、視頻幀質(zhì)量中的一項(xiàng)或多項(xiàng)信息來(lái)確定?？蛇x地，還包括：對(duì)采集到的圖像信息進(jìn)行清晰度分析；若圖像信息屬于模糊圖像，則根據(jù)采集到的視頻片段對(duì)采集到的圖像信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理；其中，需要增強(qiáng)的指標(biāo)包括于模糊。優(yōu)選地，第一類多媒體信息為視頻信息，第二類多媒體信息為圖像信息時(shí)，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行存儲(chǔ)處理，其中，存儲(chǔ)內(nèi)容包括以下至少一種情形：根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后的圖像信息；采集到的視頻信息和圖像信息；采集到的圖像信息以及采集到的視頻信息中用于對(duì)圖像信息進(jìn)行增強(qiáng)處理的視頻關(guān)鍵幀；采集到的圖像信息和對(duì)圖像信息進(jìn)行增強(qiáng)處理時(shí)的增強(qiáng)模型；根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后的圖像信息以及采集到的視頻信息?？蛇x地，還包括：響應(yīng)于接收到的顯示觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的顯示方式對(duì)圖像信息進(jìn)行顯示；其中，顯示方式包括以下至少一項(xiàng)：當(dāng)存儲(chǔ)增強(qiáng)處理后的圖像信息時(shí)，直接顯示增強(qiáng)處理后的圖像信息；當(dāng)存儲(chǔ)采集到的視頻信息和圖像信息時(shí)，根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后顯示；當(dāng)存儲(chǔ)采集到的圖像信息和進(jìn)行增強(qiáng)處理的視頻關(guān)鍵幀時(shí)，根據(jù)視頻關(guān)鍵幀確定增強(qiáng)模型，并通過(guò)增強(qiáng)模式對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后顯示；當(dāng)存儲(chǔ)采集到的圖像信息和增強(qiáng)模型時(shí)，通過(guò)增強(qiáng)模型對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后顯示；當(dāng)存儲(chǔ)增強(qiáng)處理后的圖像信息和采集到的視頻信息時(shí)，將增強(qiáng)處理后的圖像信息和采集到的視頻信息關(guān)聯(lián)顯示。優(yōu)選地，第一類多媒體信息與第二類多媒體信息為對(duì)焦于不同焦點(diǎn)區(qū)域的視頻信息；其中，焦點(diǎn)區(qū)域包括全局區(qū)域和/或局部區(qū)域。其中，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集到的對(duì)焦于一個(gè)焦點(diǎn)區(qū)域的視頻信息，對(duì)采集到的對(duì)焦于另一個(gè)焦點(diǎn)區(qū)域的視頻信息進(jìn)行聯(lián)合播放處理。其中，通過(guò)以下至少一種方式來(lái)確定焦點(diǎn)區(qū)域：當(dāng)檢測(cè)到用戶選定一個(gè)局部區(qū)域時(shí)，則確定已選定的局部區(qū)域?yàn)榻裹c(diǎn)區(qū)域，另一焦點(diǎn)區(qū)域?yàn)槿謪^(qū)域；當(dāng)檢測(cè)到用戶選定兩個(gè)局部區(qū)域時(shí)，則確定已選定的兩個(gè)局部區(qū)域?yàn)榻裹c(diǎn)區(qū)域。優(yōu)選地，通過(guò)用戶選定的焦點(diǎn)對(duì)象，檢測(cè)用戶選定的局部區(qū)域。優(yōu)選地，全局區(qū)域和/或局部區(qū)域可通過(guò)分屏的布局方式進(jìn)行聯(lián)合播放。優(yōu)選地，根據(jù)第一類多媒體信息對(duì)所述第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集到的對(duì)焦于一個(gè)焦點(diǎn)區(qū)域的視頻信息，對(duì)采集到的對(duì)焦于另一個(gè)焦點(diǎn)區(qū)域的視頻信息進(jìn)行存儲(chǔ)處理，其中，存儲(chǔ)內(nèi)容包括以下至少一種情形：采集到的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息；根據(jù)采集到的對(duì)焦于一個(gè)焦點(diǎn)區(qū)域的視頻信息，對(duì)采集到的對(duì)焦于另一個(gè)焦點(diǎn)區(qū)域的視頻信息進(jìn)行合成處理后的合成視頻信息；確定出的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息中的感興趣視頻內(nèi)容；采集到的對(duì)焦于全局區(qū)域的視頻信息以及該全局區(qū)域的視頻信息中局部區(qū)域的位置信息。優(yōu)選地，該方法還包括：響應(yīng)于接收到的播放觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的播放方式對(duì)視頻信息進(jìn)行播放；其中，播放方式包括以下至少一項(xiàng)：當(dāng)存儲(chǔ)采集到的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息時(shí)，將兩個(gè)視頻信息分別單獨(dú)播放或聯(lián)合播放；當(dāng)存儲(chǔ)合成視頻信息時(shí)，播放合成視頻；當(dāng)存儲(chǔ)確定出的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息中的感興趣視頻內(nèi)容時(shí)，播放感興趣視頻內(nèi)容；當(dāng)存儲(chǔ)全局區(qū)域的視頻信息以及該全局區(qū)域的視頻信息中局部區(qū)域的位置信息時(shí)，通過(guò)位置信息確定局部區(qū)域的視頻信息，并將全局區(qū)域的視頻信息和局部區(qū)域的視頻信息分別單獨(dú)播放或聯(lián)合播放。優(yōu)選地，第二類多媒體信息為視頻信息，第一類多媒體信息為與視頻信息相對(duì)應(yīng)的音頻信息。其中，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：從采集到的視頻信息中確定目標(biāo)對(duì)象；針對(duì)目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息和/或音頻信息進(jìn)行凸顯處理。其中，通過(guò)以下至少一種方式從采集到的視頻信息中確定目標(biāo)對(duì)象：根據(jù)檢測(cè)到的目標(biāo)對(duì)象指定操作來(lái)確定目標(biāo)對(duì)象；依據(jù)采集到的視頻信息中多個(gè)對(duì)象的數(shù)量及所處位置信息來(lái)確定目標(biāo)對(duì)象。優(yōu)選地，針對(duì)目標(biāo)對(duì)象對(duì)應(yīng)的音頻信息進(jìn)行凸顯處理，具體包括：對(duì)采集到的視頻信息進(jìn)行檢測(cè)以確定所述視頻信息中的對(duì)象數(shù)量、各個(gè)對(duì)象的位置及方位信息；依據(jù)各個(gè)對(duì)象的位置及方位信息，確定各個(gè)對(duì)象分別對(duì)應(yīng)的音頻信息；確定目標(biāo)對(duì)象對(duì)應(yīng)的音頻信息，并進(jìn)行凸顯處理。優(yōu)選地，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集到的音頻信息，對(duì)采集到的視頻信息進(jìn)行存儲(chǔ)處理，其中， 存儲(chǔ)內(nèi)容包括以下至少一種情形：采集到的視頻信息及音頻信息；目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息及音頻信息。優(yōu)選地，該方法還包括：響應(yīng)于接收到的播放觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的播放方式對(duì)視頻信息及音頻信息進(jìn)行播放；其中，播放方式包括以下至少一項(xiàng)：當(dāng)存儲(chǔ)采集到的視頻信息及音頻信息時(shí)，將采集到的視頻信息及音頻信息相關(guān)聯(lián)地播放；當(dāng)存儲(chǔ)采集到的視頻信息及音頻信息時(shí)，將采集到的視頻信息中的目標(biāo)對(duì)象與相對(duì)應(yīng)的音頻信息相關(guān)聯(lián)地播放；當(dāng)存儲(chǔ)采集到的視頻信息及音頻信息時(shí)，將采集到的視頻信息中的各個(gè)對(duì)象與相對(duì)應(yīng)的音頻信息相關(guān)聯(lián)地播放；當(dāng)存儲(chǔ)目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息及音頻信息時(shí)，將目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息及音頻信息相關(guān)聯(lián)地播放。本發(fā)明還提出一種多媒體增強(qiáng)處理的裝置，包括：多媒體信息獲取模塊，用于獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息；處理模塊，用于根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理。本發(fā)明的實(shí)施例中，獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息；根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，即通過(guò)第一類多媒體信息與第二類多媒體信息之間的關(guān)聯(lián)關(guān)系，實(shí)現(xiàn)基于第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理。而現(xiàn)有技術(shù)中，一般僅通過(guò)增強(qiáng)算法及自身信息對(duì)每類多媒體信息(如圖片和視頻)進(jìn)行單獨(dú)處理，并未考慮到同時(shí)獲取的兩類多媒體信息之間的關(guān)聯(lián)關(guān)系，并利用關(guān)聯(lián)關(guān)系執(zhí)行多媒體信息增強(qiáng)，因此會(huì)出現(xiàn)圖像或視頻畫(huà)面失真、清晰度較低等問(wèn)題。本發(fā)明中通過(guò)同時(shí)獲取到兩類多媒體信息，根據(jù)一類多媒體信息對(duì)另一個(gè)多媒體信息進(jìn)行增強(qiáng)，由于在增強(qiáng)過(guò)程中充分考慮到兩類多媒體信息各自的特點(diǎn)及關(guān)聯(lián)關(guān)系，可以克服僅通過(guò)增強(qiáng)算 法及自身信息對(duì)每類多媒體信息分別進(jìn)行增強(qiáng)處理的局限性，大大提高了增強(qiáng)處理后的多媒體信息的質(zhì)量，保證了多媒體信息的真實(shí)度及清晰度。。本發(fā)明附加的方面和優(yōu)點(diǎn)將在下面的描述中部分給出，這些將從下面的描述中變得明顯，或通過(guò)本發(fā)明的實(shí)踐了解到。附圖說(shuō)明本發(fā)明上述的和/或附加的方面和優(yōu)點(diǎn)從下面結(jié)合附圖對(duì)實(shí)施例的描述中將變得明顯和容易理解，其中：圖1示出了本發(fā)明一個(gè)實(shí)施例的多媒體信息處理的方法的流程圖示意圖；圖2為現(xiàn)有技術(shù)中一種對(duì)視頻亮度和顏色增強(qiáng)方法的轉(zhuǎn)換曲線亮度調(diào)整的示意圖；圖3為現(xiàn)有技術(shù)中利用模糊圖像的模糊核估計(jì)方式對(duì)視頻幀去噪的示意圖；圖4示出了本發(fā)明中具體實(shí)施例的視頻聯(lián)合增強(qiáng)模式的執(zhí)行步驟示意圖；圖5示出了本發(fā)明中具體實(shí)施例的手持智能終端中采集視頻的示意圖；圖6示出了本發(fā)明中具體實(shí)施例的手持智能終端中視頻聯(lián)合增強(qiáng)模式的示意圖；圖7示出了本發(fā)明中具體實(shí)施例的監(jiān)控終端中視頻聯(lián)合增強(qiáng)模式的示意圖；圖8示出了本發(fā)明中具體實(shí)施例的圖像去模糊增強(qiáng)模式的第一示意圖；圖9示出了本發(fā)明中具體實(shí)施例的圖像去模糊增強(qiáng)模式的第二示意圖；圖10示出了本發(fā)明中具體實(shí)施例的多焦點(diǎn)區(qū)域聯(lián)合播放模式的左右分屏視頻布局方式的示意圖；圖11示出了本發(fā)明中具體實(shí)施例的多焦點(diǎn)區(qū)域聯(lián)合播放模式的上下分屏視頻布局方式的示意圖；圖12示出了本發(fā)明中具體實(shí)施例的多焦點(diǎn)區(qū)域聯(lián)合播放模式的大小屏視頻布局方式的示意圖；圖13示出了本發(fā)明中具體實(shí)施例的多焦點(diǎn)區(qū)域聯(lián)合播放模式的全局區(qū) 域視頻布局方式的示意圖；圖14示出了本發(fā)明中具體實(shí)施例的多焦點(diǎn)區(qū)域聯(lián)合播放模式的大小屏視頻布局方式中大小屏切換的示意圖；圖15示出了本發(fā)明中具體實(shí)施例的多焦點(diǎn)區(qū)域聯(lián)合播放模式的大小屏視頻布局方式中大小屏錄制和播放的示意圖；圖16示出了本發(fā)明中具體實(shí)施例的目標(biāo)對(duì)象凸顯播放模式中音視頻凸顯的示意圖；圖17示出了本發(fā)明一個(gè)實(shí)施例的多媒體信息處理的裝置的結(jié)構(gòu)示意圖。具體實(shí)施方式下面詳細(xì)描述本發(fā)明的實(shí)施例，所述實(shí)施例的示例在附圖中示出，其中自始至終相同或類似的標(biāo)號(hào)表示相同或類似的元件或具有相同或類似功能的元件。下面通過(guò)參考附圖描述的實(shí)施例是示例性的，僅用于解釋本發(fā)明，而不能解釋為對(duì)本發(fā)明的限制。本申請(qǐng)使用的“模塊”、“系統(tǒng)”等術(shù)語(yǔ)旨在包括與計(jì)算機(jī)相關(guān)的實(shí)體，例如但不限于硬件、固件、軟硬件組合、軟件或者執(zhí)行中的軟件。例如，模塊可以是，但并不僅限于：處理器上運(yùn)行的進(jìn)程、處理器、對(duì)象、可執(zhí)行程序、執(zhí)行的線程、程序和/或計(jì)算機(jī)。舉例來(lái)說(shuō)，計(jì)算設(shè)備上運(yùn)行的應(yīng)用程序和此計(jì)算設(shè)備都可以是模塊。一個(gè)或多個(gè)模塊可以位于執(zhí)行中的一個(gè)進(jìn)程和/或線程內(nèi)，一個(gè)模塊也可以位于一臺(tái)計(jì)算機(jī)上和/或分布于兩臺(tái)或更多臺(tái)計(jì)算機(jī)之間。圖1示出了本發(fā)明一個(gè)實(shí)施例的多媒體信息處理的方法的流程圖示意圖。步驟s110：獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息；步驟s120：根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理。需要說(shuō)明的是，兩個(gè)多媒體采集設(shè)備可以置于同一終端設(shè)備上，上述終端設(shè)備可以為手機(jī)、pad、監(jiān)控裝置等終端。兩個(gè)多媒體采集設(shè)備同時(shí)進(jìn)行多媒體信息的采集，其中一個(gè)采集設(shè)備采集第一類多媒體信息，另一個(gè)采集設(shè)備采集第二類多媒體信息。由上可見(jiàn)，第一類多媒體信息和第二類多媒體信息之間是相互關(guān)聯(lián)的；而現(xiàn)有技術(shù)中，一般僅通過(guò)增強(qiáng)算法及自身信息對(duì)多媒體信息(如圖片和視頻)進(jìn)行單獨(dú)處理，并未考慮到同時(shí)獲取的兩類多媒體信息之間的關(guān)聯(lián)關(guān)系，并利用關(guān)聯(lián)關(guān)系執(zhí)行多媒體信息增強(qiáng)，因此會(huì)出現(xiàn)圖像或視頻畫(huà)面失真、清晰度較低等問(wèn)題。本發(fā)明中，通過(guò)同時(shí)獲取到兩類多媒體信息，并根據(jù)第一類類多媒體信息對(duì)第二類多媒體信息進(jìn)行增強(qiáng)，由于在增強(qiáng)過(guò)程中充分考慮到兩類多媒體信息各自的特點(diǎn)及關(guān)聯(lián)關(guān)系，可以克服僅通過(guò)增強(qiáng)算法及自身信息對(duì)每類多媒體信息分別進(jìn)行增強(qiáng)處理的局限性，大大提高了增強(qiáng)處理后的多媒體信息的質(zhì)量，保證了多媒體信息的真實(shí)度及清晰度。具體地，多媒體信息包括圖像信息、視頻信息、音頻信息中的至少一種。為了提升攝像頭配置，雙目攝像頭成為各大廠商著重研發(fā)與推廣的一大亮點(diǎn)。相比于單目攝像頭，雙目攝像頭有一些天然的優(yōu)勢(shì)：具備雙套采集參數(shù)，兩個(gè)攝像頭可以設(shè)置不同的拍攝模式，可以獲取三維深度信息用來(lái)提升分割、識(shí)別、跟蹤和定位的精度?，F(xiàn)有的具備雙目攝像頭的終端設(shè)備大都是利用深度信息對(duì)圖像拍攝提供更多操作模式，如合并左右攝像頭拍攝的圖像得到一張高分辨率的圖像；利用深度信息對(duì)目標(biāo)區(qū)域進(jìn)行分割；全景深拍照后對(duì)焦等。本發(fā)明的發(fā)明人發(fā)現(xiàn)，現(xiàn)有技術(shù)并沒(méi)有充分利用兩個(gè)攝像頭雙套的參數(shù)采集來(lái)對(duì)圖像及視頻質(zhì)量進(jìn)行增強(qiáng)，如何充分利用雙目攝像頭的優(yōu)勢(shì)來(lái)改善現(xiàn)有視頻和圖像質(zhì)量也是需要解決的問(wèn)題。需要說(shuō)明的是，本發(fā)明中多媒體采集設(shè)備可以為終端設(shè)備上的雙目攝像頭，也可以采用其他的實(shí)現(xiàn)方式，在此不做限定。此外，兩個(gè)攝像頭可以并排擺放，模擬人眼功能，此外兩個(gè)攝像頭也可以采用其他方式設(shè)置，這里不做具體限制。其中，當(dāng)?shù)谝活惗嗝襟w信息為圖像信息時(shí)，第二類多媒體信息可以為視頻信息。具體的，終端設(shè)備的一個(gè)攝像頭采集視頻信息，另一個(gè)攝像頭同時(shí)采集對(duì)應(yīng)的圖像信息，利用采集的圖像對(duì)視頻進(jìn)行增強(qiáng)處理，此時(shí)終端設(shè)備的增強(qiáng)處理模式可以稱為圖像增強(qiáng)視頻模式?；虍?dāng)?shù)谝活惗嗝襟w信息為視頻信息時(shí)，第二類多媒體信息可以為圖像信 息。具體的，終端設(shè)備的一個(gè)攝像頭采集圖像信息，另一個(gè)攝像頭同時(shí)采集對(duì)應(yīng)的視頻信息，利用采集的視頻對(duì)圖像進(jìn)行增強(qiáng)處理，此時(shí)終端設(shè)備的增強(qiáng)處理模式可以稱為視頻增強(qiáng)圖像模式。由于攝像頭采集的圖像或視頻對(duì)應(yīng)很多指標(biāo)，例如，亮度、分辨率等，在利用圖像增強(qiáng)視頻或利用視頻增強(qiáng)圖像時(shí)，可以對(duì)視頻或圖像的一個(gè)或多個(gè)指標(biāo)進(jìn)行增強(qiáng)處理，對(duì)此，本發(fā)明實(shí)施例提出，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：確定采集的第二類多媒體信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)；根據(jù)采集的第一類多媒體信息，對(duì)采集的第二類多媒體信息對(duì)應(yīng)的確定出的指標(biāo)進(jìn)行增強(qiáng)處理。其中，上述指標(biāo)包括下述至少一項(xiàng)：分辨率、顏色、亮度、噪聲和模糊。需要說(shuō)明的是，下述實(shí)施例的詳述中，將根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理的方式，具體為圖像信息對(duì)視頻信息進(jìn)行處理的圖像增強(qiáng)視頻模式，視頻信息對(duì)圖像信息進(jìn)行處理的視頻增強(qiáng)圖像模式，視頻信息對(duì)視頻信息進(jìn)行處理的多焦點(diǎn)區(qū)域聯(lián)合播放模式，音頻信息對(duì)視頻信息進(jìn)行處理的目標(biāo)對(duì)象凸顯播放模式。其中，實(shí)施例一至實(shí)施例八為圖像增強(qiáng)視頻模式的具體實(shí)施例；實(shí)施例九為視頻增強(qiáng)圖像模式的具體實(shí)施例；實(shí)施例十為多焦點(diǎn)區(qū)域聯(lián)合播放模式的具體實(shí)施例；實(shí)施例十一為目標(biāo)對(duì)象凸顯播放模式的具體實(shí)施例。本發(fā)明的實(shí)施例一至實(shí)施例八中，針對(duì)采集到視頻及圖像，利用圖像對(duì)視頻進(jìn)行增強(qiáng)處理，對(duì)應(yīng)的確定出的指標(biāo)包括如下五種：分辨率，亮度，顏色，噪聲和模糊：拍攝高分辨率圖像，對(duì)視頻分辨率進(jìn)行增強(qiáng)，得到高分辨率的視頻；拍攝高質(zhì)量的圖像，對(duì)視頻亮度進(jìn)行調(diào)整，提高低光照環(huán)境下拍攝的視頻亮度；拍攝高質(zhì)量的圖像，對(duì)視頻顏色進(jìn)行調(diào)整，提高非理想拍照環(huán)境下拍攝的視頻顏色對(duì)比度以及rgb顏色分布；拍攝低噪聲的圖像，對(duì)視頻進(jìn)行去噪，得到低噪聲高質(zhì)量的視頻；拍攝清晰的圖像，利用圖像對(duì)視頻幀進(jìn)行去模糊，得到清晰度提升的視頻。本發(fā)明的實(shí)施例九中，利用視頻對(duì)圖像進(jìn)行增強(qiáng)處理，對(duì)應(yīng)的確定出的指標(biāo)包括模糊：拍攝長(zhǎng)曝光的高亮度圖像時(shí)，如果圖像出現(xiàn)模糊，則利用短曝光的視頻幀來(lái) 對(duì)模糊圖像進(jìn)行增強(qiáng)，得到高亮度，清晰度好的圖像。在圖像增強(qiáng)視頻流程中，首先設(shè)置主/輔攝像頭、需要增強(qiáng)的指標(biāo)、采集參數(shù)、增強(qiáng)策略參數(shù)，啟動(dòng)兩個(gè)攝像頭進(jìn)行拍攝，主攝像頭拍攝視頻，輔攝像頭拍攝圖像，同時(shí)通過(guò)增強(qiáng)策略參數(shù)，根據(jù)拍攝的圖像對(duì)拍攝的視頻中需要進(jìn)行增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理，終端設(shè)備可以根據(jù)需要將采集的數(shù)據(jù)存儲(chǔ)，后續(xù)對(duì)存儲(chǔ)的數(shù)據(jù)進(jìn)行播放或顯示。在視頻增強(qiáng)圖像流程中，首先設(shè)置主/輔攝像頭、需要增強(qiáng)的指標(biāo)、采集參數(shù)、增強(qiáng)策略參數(shù)，啟動(dòng)兩個(gè)攝像頭進(jìn)行拍攝，主攝像頭拍攝圖像，輔攝像頭拍攝視頻，同時(shí)通過(guò)增強(qiáng)策略參數(shù)，根據(jù)拍攝的視頻對(duì)拍攝的圖像中需要進(jìn)行增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理。需要說(shuō)明的是，下述實(shí)施例的詳述中，根據(jù)采集的第一類多媒體信息，對(duì)采集的第二類多媒體信息對(duì)應(yīng)的確定出的指標(biāo)進(jìn)行增強(qiáng)處理的步驟中，可針對(duì)確定出的不同的指標(biāo)進(jìn)行增強(qiáng)處理，增強(qiáng)處理的指標(biāo)不同，對(duì)應(yīng)的增強(qiáng)模式也不同，其中，可以對(duì)上述指標(biāo)中的一個(gè)指標(biāo)進(jìn)行增強(qiáng)處理，增強(qiáng)模式包括但不限于：分辨率增強(qiáng)模式、顏色增強(qiáng)模式、亮度增強(qiáng)模式、去噪增強(qiáng)模式和去模糊增強(qiáng)模式。也可以對(duì)上述指標(biāo)中的至少兩個(gè)指標(biāo)進(jìn)行增強(qiáng)處理，此時(shí)可以稱為聯(lián)合增強(qiáng)模式。實(shí)施例一：增強(qiáng)處理模式為圖像增強(qiáng)視頻模式中的分辨率增強(qiáng)模式從視頻分辨率增強(qiáng)方面來(lái)說(shuō)，現(xiàn)有終端設(shè)備中視頻最大分辨率一般比圖像最大分辨率小；例如，一類移動(dòng)終端中的圖像最大分辨率為5312*2988，而視頻最大分辨率為3840*2160。由于受限于終端設(shè)備的cpu和內(nèi)存，為了讓用戶實(shí)時(shí)看到自己拍攝的內(nèi)容，只能相比圖像分辨率降低視頻分辨率，否則不能實(shí)時(shí)對(duì)視頻進(jìn)行處理。一種提升視頻分辨率的方法是通過(guò)插值將每個(gè)視頻幀分別增強(qiáng)分辨率，此類方法得到的視頻幀細(xì)節(jié)會(huì)變模糊。另外一種提升視頻分辨率的方法是使用高分辨率圖像對(duì)低分辨視頻進(jìn)行增強(qiáng)，主要思想是用大量高分辨率圖像和對(duì)應(yīng)的低分辨率視頻訓(xùn)練出映射模型，以該映射模型來(lái)增強(qiáng)視頻分辨率，即提取圖像和視頻的像素塊建立訓(xùn)練數(shù)據(jù)庫(kù)，基于訓(xùn)練數(shù)據(jù)庫(kù)學(xué)習(xí)得到映射模型，從而以該映射模型將高頻細(xì)節(jié) 信息遷移到低分辨率視頻從而獲取高分辨視頻。此類方法需要預(yù)先采集訓(xùn)練數(shù)據(jù)，訓(xùn)練數(shù)據(jù)量小則泛化能量弱，導(dǎo)致增強(qiáng)效果差，訓(xùn)練數(shù)據(jù)大則存儲(chǔ)空間大。在視頻分辨率增強(qiáng)方面，僅依靠視頻中每幀的信息進(jìn)行放大，只是在圖像尺寸上有所改變，并不能給用戶提供更豐富的細(xì)節(jié)信息，也無(wú)法達(dá)到提高分辨率的目的。另外，高分辨率視頻占用內(nèi)存空間變大，如何在提升視頻分辨率的同時(shí)不帶來(lái)太多內(nèi)存消耗也是現(xiàn)有技術(shù)未曾考慮的問(wèn)題。在本發(fā)明的實(shí)施例中，多媒體信息包括圖像信息和視頻信息。多媒體采集設(shè)備可以為雙目攝像頭。首先開(kāi)啟圖像增強(qiáng)視頻的分辨率增強(qiáng)模式，隨后，啟動(dòng)雙目攝像頭的兩個(gè)攝像頭分別采集圖像信息和視頻信息，其次自適應(yīng)設(shè)置攝像頭的采集參數(shù)和關(guān)鍵幀，同時(shí)根據(jù)攝像頭的采集參數(shù)和關(guān)鍵幀對(duì)視頻信息進(jìn)行分辨率增強(qiáng)，最后對(duì)增強(qiáng)結(jié)果進(jìn)行壓縮、傳輸和播放。步驟1，開(kāi)啟圖像增強(qiáng)視頻的分辨率增強(qiáng)模式。通過(guò)以下至少一項(xiàng)來(lái)確定采集的第二類多媒體信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)：根據(jù)檢測(cè)到的增強(qiáng)開(kāi)啟觸發(fā)操作來(lái)確定與其相匹配的需要增強(qiáng)的指標(biāo)；根據(jù)預(yù)先設(shè)置來(lái)確定與其相匹配的需要增強(qiáng)的指標(biāo)；依據(jù)自適應(yīng)參數(shù)匹配方式來(lái)自適應(yīng)確定需要增強(qiáng)的指標(biāo)。其中，自適應(yīng)參數(shù)匹配方式通過(guò)設(shè)備相關(guān)狀態(tài)、增強(qiáng)開(kāi)啟歷史記錄數(shù)據(jù)、采集環(huán)境、采集參數(shù)及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的一項(xiàng)或多項(xiàng)信息來(lái)確定；其中，設(shè)備相關(guān)狀態(tài)包含以下至少一項(xiàng)：設(shè)備電量狀態(tài)、設(shè)備存儲(chǔ)狀態(tài)、采集多媒體信息時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括以下至少一項(xiàng)：場(chǎng)景亮度、語(yǔ)義內(nèi)容、顯著物的清晰度。優(yōu)選地，若確定出的需要增強(qiáng)的指標(biāo)為至少兩個(gè)，則確定需要增強(qiáng)的指標(biāo)的增強(qiáng)順序；根據(jù)采集的第一類多媒體信息，按照確定出的增強(qiáng)順序，對(duì)采集的第二類多媒體信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)依次進(jìn)行增強(qiáng)處理。具體地，通過(guò)以下至少一項(xiàng)來(lái)確定需要增強(qiáng)的指標(biāo)的增強(qiáng)順序：增強(qiáng)順序設(shè)置觸發(fā)操作；預(yù)先設(shè)置；自適應(yīng)增強(qiáng)順序設(shè)置方式。其中，自適應(yīng)增強(qiáng)順序設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、增強(qiáng)設(shè)置歷史記錄信息、采集環(huán)境、采集參數(shù)、多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容及各個(gè)指標(biāo)之間的影響關(guān)系中的一項(xiàng)或多項(xiàng)信息來(lái)確定；其中，多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括場(chǎng)景亮度、語(yǔ)義內(nèi)容中的至少一項(xiàng)。本發(fā)明實(shí)施例一中，具體地，用戶可以通過(guò)如語(yǔ)音、按鍵、手勢(shì)、生物特征、外部控制器等增強(qiáng)開(kāi)啟觸發(fā)操作來(lái)開(kāi)啟圖像增強(qiáng)視頻的分辨率增強(qiáng)模式，終端設(shè)備也可以通過(guò)預(yù)先設(shè)置(如系統(tǒng)默認(rèn)設(shè)置)，或者根據(jù)自適應(yīng)參數(shù)匹配方式來(lái)開(kāi)啟該模式自適應(yīng)模式匹配方式，如根據(jù)設(shè)備相關(guān)狀態(tài)、增強(qiáng)模式開(kāi)啟歷史記錄數(shù)據(jù)、采集環(huán)境、采集參數(shù)及攝像頭實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容自適應(yīng)開(kāi)啟圖像增強(qiáng)視頻的分辨率增強(qiáng)模式，也可以由增強(qiáng)開(kāi)啟用戶觸發(fā)操作設(shè)置和系統(tǒng)默認(rèn)設(shè)置的任意組合來(lái)開(kāi)啟；例如，用戶通過(guò)按鍵方式啟動(dòng)了圖像增強(qiáng)視頻模式，終端設(shè)備再根據(jù)增強(qiáng)模式開(kāi)啟歷史記錄數(shù)據(jù)自適應(yīng)開(kāi)啟圖像增強(qiáng)視頻模式中的分辨率增強(qiáng)模式。關(guān)于語(yǔ)音開(kāi)啟，終端設(shè)備預(yù)先設(shè)定某種語(yǔ)音作為啟動(dòng)指令，例如“啟動(dòng)增強(qiáng)視頻分辨率”，終端設(shè)備接收到用戶發(fā)出的聲控指令“啟動(dòng)增強(qiáng)視頻分辨率”，則對(duì)該聲控指令進(jìn)行語(yǔ)音識(shí)別，確定此時(shí)開(kāi)啟圖像增強(qiáng)視頻模式中的分辨率增強(qiáng)模式。關(guān)于按鍵開(kāi)啟，終端設(shè)備預(yù)先設(shè)定某種按鍵作為開(kāi)啟指令，按鍵可以為硬件按鍵，例如用戶通過(guò)長(zhǎng)按音量鍵表示增強(qiáng)視頻分辨率，終端設(shè)備接收到用戶的長(zhǎng)按音量鍵事件后，確認(rèn)此時(shí)需要開(kāi)啟圖像增強(qiáng)視頻模式中的分辨率增強(qiáng)模式。按鍵也可以為虛擬按鍵，例如屏幕上的虛擬控件按鈕，終端設(shè)備在交互界面上顯示該模式的按鍵，接收到用戶點(diǎn)擊虛擬按鍵的事件后，確認(rèn)此時(shí)需要開(kāi)啟該模式。通過(guò)按鍵開(kāi)啟時(shí)，還可以結(jié)合用戶觸發(fā)時(shí)的壓力、速度、時(shí)間、頻率等多種特征信息的不同表示對(duì)應(yīng)的不同含義，例如用力快速點(diǎn)擊虛擬控件表示開(kāi)啟該模式等。關(guān)于手勢(shì)開(kāi)啟，終端設(shè)備預(yù)先設(shè)定某種手勢(shì)作為啟動(dòng)指令，手勢(shì)包括屏幕手勢(shì)，例如雙擊屏幕/或長(zhǎng)按屏幕等，通過(guò)屏幕手勢(shì)開(kāi)啟時(shí)可以結(jié)合 用戶手勢(shì)的壓力、速度、時(shí)間、頻率的不同表示對(duì)應(yīng)的不同含義；如輕按，例如，壓力小于第一預(yù)定值，重按，例如，壓力大于或等于第一預(yù)定值，又如長(zhǎng)按，例如，按壓持續(xù)時(shí)間超過(guò)第二預(yù)定值，快速雙擊等任意一個(gè)表示開(kāi)啟。手勢(shì)還包括隔空手勢(shì)，如搖晃/翻轉(zhuǎn)/傾斜終端，搖晃/翻轉(zhuǎn)/傾斜時(shí)的不同方向，角度，速度，力度可以表示不同的含義，如上下?lián)u晃、左右搖晃、空著畫(huà)圓等任意一個(gè)表示開(kāi)啟該模式。上述手勢(shì)可以是單一的手勢(shì)，也可以是任意手勢(shì)的任意組合，如長(zhǎng)按屏幕并搖晃終端設(shè)備。關(guān)于生物特征開(kāi)啟，生物特征包括但不限于手寫(xiě)特征和指紋特征，例如，終端設(shè)備在檢測(cè)到的指紋與預(yù)先注冊(cè)的用戶指紋一致，則確認(rèn)此時(shí)需要開(kāi)啟圖像增強(qiáng)視頻模式中的分辨率增強(qiáng)模式。關(guān)于系統(tǒng)默認(rèn)設(shè)置開(kāi)啟，終端設(shè)備在沒(méi)有用戶交互情況下默認(rèn)設(shè)置圖像增強(qiáng)視頻模式中的分辨率增強(qiáng)模式為開(kāi)啟或者關(guān)閉狀態(tài)。關(guān)于根據(jù)終端設(shè)備的設(shè)備相關(guān)狀態(tài)自適應(yīng)開(kāi)啟，設(shè)備相關(guān)狀態(tài)包含電量、存儲(chǔ)(如內(nèi)存)、運(yùn)動(dòng)狀態(tài)等，可以設(shè)置第一和第二預(yù)定電量，其中第一預(yù)定電量，例如20％，小于第二預(yù)定電量，例如80％，當(dāng)終端設(shè)備的電量小于第一預(yù)定電量時(shí)，則關(guān)閉視頻分辨率增強(qiáng)模式，當(dāng)電量大于第二預(yù)定電量時(shí)，則開(kāi)啟視頻分辨率增強(qiáng)模式，或者只設(shè)置一個(gè)開(kāi)啟電量，終端電量大于該開(kāi)啟電量時(shí)默認(rèn)開(kāi)啟視頻分辨率增強(qiáng)模式，否則關(guān)閉視頻分辨率增強(qiáng)模式。關(guān)于根據(jù)增強(qiáng)開(kāi)啟歷史記錄數(shù)據(jù)的自適應(yīng)開(kāi)啟，統(tǒng)計(jì)最近若干次，例如10次，采集過(guò)程中視頻分辨率增強(qiáng)模式的開(kāi)啟次數(shù)，如果開(kāi)啟次數(shù)超過(guò)一定閾值，例如5次，則終端設(shè)備自動(dòng)開(kāi)啟分辨率增強(qiáng)模式，否則關(guān)閉分辨率增強(qiáng)模式?；蛘吒鶕?jù)上一次拍攝時(shí)的設(shè)置來(lái)確定本次拍攝是否開(kāi)啟。關(guān)于采集環(huán)境，由傳感器采集得到，例如通過(guò)亮度傳感器采集得到環(huán)境亮度等信息；可以根據(jù)環(huán)境亮度來(lái)自適應(yīng)開(kāi)啟，例如當(dāng)環(huán)境平均亮度低于設(shè)定閾值時(shí)，則開(kāi)啟該模式，否則關(guān)閉該模式。關(guān)于采集參數(shù)，采集參數(shù)具體包括白平衡、曝光時(shí)間、感光度、高動(dòng)態(tài)范圍、分辨率、焦點(diǎn)區(qū)域、視頻幀采集頻率中的至少一項(xiàng)。可以根據(jù)采集參數(shù)來(lái)自適應(yīng)開(kāi)啟，例如，當(dāng)視頻的曝光時(shí)間過(guò)長(zhǎng)(高于設(shè)定閾值)時(shí)， 則開(kāi)啟該模式，否則關(guān)閉該模式。關(guān)于根據(jù)實(shí)時(shí)采集的相關(guān)內(nèi)容的自適應(yīng)開(kāi)啟，具體的，實(shí)時(shí)采集的相關(guān)內(nèi)容包含場(chǎng)景亮度、語(yǔ)義內(nèi)容、顯著物的清晰度等。可以根據(jù)場(chǎng)景亮度來(lái)自適應(yīng)開(kāi)啟，例如當(dāng)場(chǎng)景平均亮度低于設(shè)定閾值時(shí)，則開(kāi)啟該模式，否則關(guān)閉該模式?？梢愿鶕?jù)場(chǎng)景語(yǔ)義內(nèi)容來(lái)自適應(yīng)開(kāi)啟，例如檢測(cè)到場(chǎng)景中有目標(biāo)對(duì)象，如車輛、人物等出現(xiàn)時(shí)，則開(kāi)啟該模式，否則關(guān)閉該模式?？梢詸z測(cè)到場(chǎng)景的顯著區(qū)，如車牌區(qū)域等的信噪比，如果該顯著區(qū)信噪比低于某個(gè)給定閾值，則終端設(shè)備自動(dòng)開(kāi)啟分辨率增強(qiáng)模式。步驟2：使用雙目攝像頭的一個(gè)攝像頭拍攝圖像，另一個(gè)攝像頭拍攝視頻。該步驟包括設(shè)置主、輔攝像頭，設(shè)置攝像頭參數(shù)和增強(qiáng)策略參數(shù)，以及設(shè)置關(guān)鍵幀的選取。設(shè)置兩個(gè)多媒體采集設(shè)備中的主采集設(shè)備及輔采集設(shè)備；根據(jù)圖像信息對(duì)視頻信息進(jìn)行相應(yīng)處理時(shí)，通過(guò)主采集設(shè)備采集獲取視頻信息，通過(guò)輔采集設(shè)備采集獲取圖像信息；根據(jù)視頻信息對(duì)圖像信息進(jìn)行相應(yīng)處理時(shí)，通過(guò)主采集設(shè)備采集圖像信息，通過(guò)輔采集設(shè)備采集視頻信息。通過(guò)以下至少一種方式來(lái)設(shè)置兩個(gè)多媒體采集設(shè)備中主采集設(shè)備及輔采集設(shè)備：根據(jù)檢測(cè)到的設(shè)置觸發(fā)操作來(lái)設(shè)置主、輔采集設(shè)備；根據(jù)預(yù)先設(shè)置來(lái)設(shè)置主、輔采集設(shè)備；依據(jù)自適應(yīng)設(shè)備設(shè)置方式來(lái)自適應(yīng)設(shè)置主、輔采集設(shè)備。其中，自適應(yīng)設(shè)備設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、設(shè)備設(shè)置歷史記錄數(shù)據(jù)及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的一項(xiàng)或多項(xiàng)信息來(lái)確定；其中，設(shè)備相關(guān)狀態(tài)包含設(shè)備電量狀態(tài)和/或存儲(chǔ)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括以下至少一項(xiàng)：畫(huà)面比例分布、目標(biāo)物體在畫(huà)面中的位置信息、畫(huà)面質(zhì)量信息。步驟2.1，設(shè)置主、輔攝像頭。令主攝像頭采集視頻信息，輔攝像頭采集圖像信息，終端設(shè)備可以采用以下三種方式中的一種來(lái)設(shè)置主攝像頭和輔攝像頭：一是終端設(shè)備預(yù)先設(shè)置(如默認(rèn)設(shè)置)；二是終端設(shè)備接收用戶通過(guò)按鍵、手勢(shì)、外部控制器等至少一種方式發(fā)送的設(shè)置觸發(fā)操作進(jìn)行設(shè)置；三是終端設(shè)備根據(jù)設(shè)備相關(guān)狀態(tài)、設(shè)備設(shè)置歷史記錄數(shù)據(jù)、實(shí)時(shí)采集的相關(guān)內(nèi)容等自適應(yīng)調(diào)整來(lái)設(shè)定哪個(gè)攝像頭為主攝像頭，哪個(gè)攝像頭為輔攝像頭。關(guān)于系統(tǒng)默認(rèn)設(shè)置，終端設(shè)備默認(rèn)其中一個(gè)攝像頭為主，另外一個(gè)為輔攝像頭，例如正對(duì)場(chǎng)景拍攝的某一側(cè)攝像頭為主攝像頭，另一側(cè)攝像頭為輔攝像頭。關(guān)于按鍵設(shè)置，終端設(shè)備預(yù)先設(shè)定通過(guò)按鍵控制主、輔攝像頭。按鍵可以為硬件按鍵，例如音量“+”健啟動(dòng)某一側(cè)攝像頭為主攝像頭，音量“-”健啟動(dòng)另一側(cè)攝像頭為主攝像頭。按鍵也可以為虛擬按鍵，例如屏幕上的虛擬控件，菜單等。關(guān)于手勢(shì)設(shè)置，終端設(shè)備預(yù)先設(shè)定某個(gè)手勢(shì)來(lái)切換主、輔攝像頭，例如順時(shí)針劃圓表示設(shè)定某一側(cè)為主攝像頭，逆時(shí)針劃圓表示設(shè)定另一側(cè)為輔攝像頭。關(guān)于外部控制器，外部控制器包括但不限于：手寫(xiě)筆、遙控器、智能眼鏡、智能頭戴式設(shè)備等設(shè)備，這些設(shè)備跟可以通過(guò)以下技術(shù)之一來(lái)訪問(wèn)終端設(shè)備：wifi、nfc、藍(lán)牙和數(shù)據(jù)網(wǎng)絡(luò)，設(shè)備上配有按鍵或觸摸屏等控制區(qū)域來(lái)控制主、輔攝像頭啟動(dòng)，例如遙控器上的向上鍵表示某一側(cè)攝像頭為主，向下鍵表示另一側(cè)攝像頭為主。關(guān)于根據(jù)設(shè)備設(shè)置歷史記錄數(shù)據(jù)的自適應(yīng)設(shè)置，統(tǒng)計(jì)最近若干次，例如9次，采集中主、輔攝像頭的設(shè)置方式，例如如果某一側(cè)攝像頭被設(shè)為主攝像頭的次數(shù)較多，則終端設(shè)備啟動(dòng)時(shí)自動(dòng)設(shè)置該側(cè)的攝像頭為主攝像頭。或者根據(jù)上一次拍攝時(shí)的設(shè)置來(lái)確定本次拍攝時(shí)的主輔攝像頭。關(guān)于終端設(shè)備根據(jù)實(shí)時(shí)采集的相關(guān)內(nèi)容自適應(yīng)設(shè)置攝像頭，終端設(shè)備根據(jù)兩個(gè)攝像頭采集到的內(nèi)容選擇主攝像頭，例如，對(duì)拍攝內(nèi)容進(jìn)行打分，得分高的作為主攝像頭。打分參數(shù)包括但不限于：畫(huà)面比例分布、目標(biāo)物體在畫(huà)面中的位置信息、畫(huà)面質(zhì)量信息等。終端設(shè)備可以在拍攝過(guò)程中根 據(jù)拍攝畫(huà)面實(shí)時(shí)地自適應(yīng)調(diào)整主攝像頭，并將不同的主攝像頭拍攝的視頻片段按照拍攝時(shí)間進(jìn)行拼接得到一個(gè)完整不間斷的視頻序列。如果在視頻拍攝過(guò)程中開(kāi)啟的圖像增強(qiáng)視頻的分辨率增強(qiáng)模式，則可以將當(dāng)前拍攝視頻信息的攝像頭設(shè)置為主攝像頭，另一個(gè)攝像頭為輔攝像頭拍攝圖像信息；也可以根據(jù)上述實(shí)時(shí)采集內(nèi)容自適應(yīng)設(shè)置攝像頭。步驟2.2，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)。具體地，設(shè)置多媒體信息的采集參數(shù)及增強(qiáng)策略參數(shù)；獲取兩個(gè)多媒體采集設(shè)備基于采集參數(shù)分別采集的第一類多媒體信息和第二類多媒體信息；依據(jù)增強(qiáng)策略參數(shù)，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)增強(qiáng)處理；其中，采集參數(shù)具體包括白平衡、曝光時(shí)間、感光度、高動(dòng)態(tài)范圍、分辨率、焦點(diǎn)區(qū)域、視頻幀采集頻率中的至少一項(xiàng)。其中，通過(guò)以下任一方式來(lái)設(shè)置多媒體信息的采集參數(shù)及增強(qiáng)策略參數(shù)：根據(jù)檢測(cè)到的參數(shù)設(shè)置操作來(lái)設(shè)置采集參數(shù)及增強(qiáng)策略參數(shù)；根據(jù)預(yù)先參數(shù)設(shè)置來(lái)設(shè)置采集參數(shù)及增強(qiáng)策略參數(shù)；依據(jù)自適應(yīng)參數(shù)設(shè)置方式來(lái)自適應(yīng)設(shè)置采集參數(shù)及增強(qiáng)策略參數(shù)。其中，自適應(yīng)參數(shù)設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、參數(shù)歷史記錄數(shù)據(jù)、采集環(huán)境及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的至少一項(xiàng)來(lái)確定；其中，設(shè)備相關(guān)狀態(tài)包含以下至少一項(xiàng)：設(shè)備電量狀態(tài)、設(shè)備存儲(chǔ)狀態(tài)、采集多媒體信息時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括以下至少一項(xiàng)：場(chǎng)景亮度、語(yǔ)義內(nèi)容、顯著物的清晰度、分辨率、曝光時(shí)間。具體地，設(shè)置雙目攝像設(shè)備的采集參數(shù)及在增強(qiáng)處理過(guò)程中的內(nèi)部增強(qiáng)策略參數(shù)。攝像頭的采集參數(shù)是采集過(guò)程中需要設(shè)定的攝像頭參數(shù)，增強(qiáng)策略參數(shù)是所選取的視頻增強(qiáng)方法中的內(nèi)部參數(shù)等。其設(shè)置方式包括而不限于以下四種：第一種是預(yù)先參數(shù)設(shè)置(如系統(tǒng)默認(rèn)的固定值設(shè)置)，即定義參數(shù)為固定值，例如在基于機(jī)器學(xué)習(xí)的亮度增強(qiáng)方法，設(shè)定像素塊尺寸為固定值，如5個(gè)像素；第二種是終端設(shè)備接收用戶通過(guò)語(yǔ)音、按鍵或 外部控制器等至少一種方式發(fā)送的參數(shù)設(shè)置操作來(lái)設(shè)置參數(shù)；第三種是終端設(shè)備通過(guò)設(shè)備相關(guān)狀態(tài)、參數(shù)歷史記錄數(shù)據(jù)、采集環(huán)境或?qū)崟r(shí)采集的相關(guān)內(nèi)容等自適應(yīng)設(shè)置采集參數(shù)和增強(qiáng)策略參數(shù)；第四種是自適應(yīng)設(shè)置結(jié)合用戶調(diào)整設(shè)置進(jìn)行參數(shù)設(shè)置，例如終端設(shè)備默認(rèn)固定一套參數(shù)值，用戶通過(guò)按鍵方式來(lái)調(diào)整某些參數(shù)值。關(guān)于用戶交互下的語(yǔ)音設(shè)置，例如終端設(shè)備預(yù)先設(shè)定語(yǔ)音開(kāi)啟指令“采集高動(dòng)態(tài)范圍的圖像”，如果終端設(shè)備接受到該指令，則對(duì)聲控指令進(jìn)行語(yǔ)音識(shí)別，確定開(kāi)啟采集高動(dòng)態(tài)范圍圖像。或者，終端設(shè)備預(yù)先設(shè)定語(yǔ)音開(kāi)啟指令“圖像白平衡為日光燈”，則設(shè)置圖像白平衡為日光燈?；蛘撸K端設(shè)備預(yù)先設(shè)定語(yǔ)音開(kāi)啟指令“提高圖像曝光值”，則提高圖像的曝光值。關(guān)于用戶交互下的按鍵設(shè)置，按鍵可以為硬件按鍵，例如“+”鍵表示增加曝光值，“-”鍵表示減少曝光值，“home”表示采集高動(dòng)態(tài)范圍圖像。按鍵也可以為虛擬按鍵，例如屏幕上的滑動(dòng)條，按鈕，菜單等，交互界面上布局虛擬按鍵，終端設(shè)備檢測(cè)到用戶點(diǎn)擊了該虛擬按鍵的事件后，確認(rèn)改變?cè)O(shè)置參數(shù)。還可以結(jié)合用戶按的壓力、速度、時(shí)間、頻率等多種特征信息表示不同的含義，如輕按代表減少曝光值，重按代表增強(qiáng)曝光值。關(guān)于用戶交互下的外部控制器設(shè)置，外部控制器包括而不限于手寫(xiě)筆、遙控器、智能手表、智能眼鏡、智能頭戴式設(shè)備、智能衣服、或遠(yuǎn)程設(shè)備等，這些控制器以下列技術(shù)至少之一來(lái)訪問(wèn)終端設(shè)備：wifi、紅外、藍(lán)牙、網(wǎng)絡(luò)，控制器上配有按鍵或觸摸屏等控制區(qū)域來(lái)控制終端設(shè)備，例如手寫(xiě)筆做出空中手勢(shì)，設(shè)定向上為增加曝光值，向下為減少曝光值，終端設(shè)備識(shí)別出這些操作則啟動(dòng)調(diào)節(jié)參數(shù)，遙控器上設(shè)置調(diào)節(jié)白平衡、曝光、視頻采集頻率等按鍵，控制器檢測(cè)到用戶點(diǎn)擊了按鍵，發(fā)送到終端設(shè)備來(lái)調(diào)節(jié)參數(shù)。關(guān)于根據(jù)場(chǎng)景亮度、語(yǔ)義內(nèi)容的自適應(yīng)設(shè)置，可以根據(jù)場(chǎng)景的類型來(lái)調(diào)節(jié)白平衡，例如終端設(shè)備識(shí)別出場(chǎng)景是白天，則調(diào)整白平衡為日光，場(chǎng)景是夜晚偏黃則調(diào)節(jié)白平衡為鎢絲燈?？梢愿鶕?jù)場(chǎng)景中的興趣目標(biāo)來(lái)調(diào)節(jié) 對(duì)焦，例如定位顯著區(qū)域或人體區(qū)域并將對(duì)焦該區(qū)域?？梢愿鶕?jù)場(chǎng)景光線調(diào)整曝光量，例如檢測(cè)到場(chǎng)景亮度均值低于給定閾值，則終端設(shè)備提高曝光量，否則減低曝光量?？梢愿鶕?jù)場(chǎng)景中亮度方差自適應(yīng)調(diào)節(jié)高動(dòng)態(tài)范圍的采圖數(shù)，例如亮度方差高于第一給定閾值則提高采圖數(shù)，亮度方差低于第二給定閾值則減低采圖數(shù)?？梢愿鶕?jù)采集圖像的尺寸來(lái)設(shè)置亮度增強(qiáng)中的圖像像素塊的尺寸，例如定義像素塊為圖像尺寸乘以某一個(gè)比例系數(shù)。關(guān)于根據(jù)設(shè)備相關(guān)狀態(tài)的自適應(yīng)設(shè)置，設(shè)備相關(guān)狀態(tài)包括電量、存儲(chǔ)(如內(nèi)存)等，可以根據(jù)電量控制曝光值減低計(jì)算量，當(dāng)電量小于第一預(yù)定電量，例如50％時(shí)，則減低曝光值，當(dāng)電量小于第二預(yù)定電量，如5％時(shí)，則不進(jìn)行高動(dòng)態(tài)范圍設(shè)定，其中，第一預(yù)定電量大于第二預(yù)定電量。還可以根據(jù)電量控制去模糊中的參數(shù)減少計(jì)算量，小于第一預(yù)定電量，例如50％，則減少模糊核的尺寸，小于第二預(yù)定電量，例如5％，則固定模糊核尺度為最小值，可以由電量控制基于機(jī)器學(xué)習(xí)顏色增強(qiáng)中的參數(shù)來(lái)減少計(jì)算量，小于第一預(yù)定電量，例如50％，則減少單詞庫(kù)側(cè)重中的單詞數(shù)，小于第二預(yù)定電量，例如5％，則固定單詞數(shù)為最小值，可以由電量確定亮度增強(qiáng)中的參數(shù)來(lái)減少計(jì)算量，小于第一預(yù)定電量，例如50％，則減少基于機(jī)器學(xué)習(xí)方法中待采樣的像素?cái)?shù)，小于第二預(yù)定電量，例如20％，則替換機(jī)器學(xué)習(xí)方法中的模型映射法為高斯混合模型法?？梢愿鶕?jù)內(nèi)存調(diào)整視頻幀采集頻率，如果剩余內(nèi)存大于第一預(yù)定空間，例如1g，則自動(dòng)調(diào)整為指定的高采集頻率，例如3640*1920；反之，如果剩余內(nèi)存小于第二預(yù)定空間，例如300m，則調(diào)整為指定的低采集頻率，例如1920*1080。關(guān)于根據(jù)參數(shù)歷史記錄數(shù)據(jù)的自適應(yīng)設(shè)置，例如根據(jù)用戶設(shè)置的曝光值數(shù)歷史記錄數(shù)據(jù)調(diào)整曝光量，設(shè)置方式包括而不限于下面這種：計(jì)算參數(shù)歷史記錄數(shù)據(jù)中的曝光值和圖像亮度均值，用最小二乘法回歸出一個(gè)映射關(guān)系表，根據(jù)該映射表調(diào)整曝光值。例如根據(jù)用戶喜好的設(shè)置調(diào)整高動(dòng)態(tài)范圍設(shè)置，設(shè)置方式包括而不限于下面這種，統(tǒng)計(jì)最近n次，例如10次，亮度增強(qiáng)中設(shè)置高動(dòng)態(tài)范圍的次數(shù)，如果次數(shù)>n/2則優(yōu)先設(shè)置高動(dòng)態(tài)范圍?；蛘邔⒈敬闻臄z時(shí)的參數(shù)值設(shè)置為上一次拍攝時(shí)的參數(shù)值。步驟2.3，自適應(yīng)設(shè)置關(guān)鍵幀采集頻率。當(dāng)?shù)谝活惗嗝襟w信息為圖像信息，第二類多媒體信息為視頻信息時(shí)，獲取一個(gè)多媒體采集設(shè)備采集的視頻信息，以及另一個(gè)多媒體采集設(shè)備依據(jù)關(guān)鍵幀采集頻率同時(shí)采集的與視頻信息相對(duì)應(yīng)的關(guān)鍵幀圖像信息；根據(jù)采集的關(guān)鍵幀圖像信息對(duì)采集的視頻信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理。優(yōu)選地，還包括：設(shè)置關(guān)鍵幀采集頻率；其中，設(shè)置關(guān)鍵幀采集頻率的方式包括以下至少一項(xiàng)：根據(jù)預(yù)設(shè)頻率設(shè)置來(lái)設(shè)置關(guān)鍵幀采集頻率；依據(jù)自適應(yīng)頻率設(shè)置方式來(lái)自適應(yīng)設(shè)置關(guān)鍵幀采集頻率。其中，自適應(yīng)頻率設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、采集頻率歷史記錄數(shù)據(jù)、采集環(huán)境、采集參數(shù)及多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容中的一項(xiàng)或多項(xiàng)信息來(lái)確定；其中，設(shè)備相關(guān)狀態(tài)包含以下至少一項(xiàng)：設(shè)備電量狀態(tài)、設(shè)備存儲(chǔ)狀態(tài)、采集多媒體信息時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；多媒體采集設(shè)備實(shí)時(shí)采集的多媒體信息的相關(guān)內(nèi)容包括場(chǎng)景亮度、語(yǔ)義內(nèi)容中的至少一項(xiàng)。關(guān)于預(yù)設(shè)頻率設(shè)置，可以按照系統(tǒng)固定頻率選取關(guān)鍵幀，例如將采集頻率固定為給定頻率，例如1次/秒，如果視頻采集頻率為30幀/秒，即為每30幀采集一個(gè)圖像。關(guān)于根據(jù)實(shí)時(shí)采集的相關(guān)內(nèi)容自適應(yīng)設(shè)定，可根據(jù)環(huán)境亮度變換自適應(yīng)選取關(guān)鍵幀采集頻率，實(shí)時(shí)檢測(cè)環(huán)境的亮度均值，如果相鄰幀的亮度均值之差大于第一閾值，例如50，則啟動(dòng)關(guān)鍵幀選取。可以根據(jù)語(yǔ)義內(nèi)容自適應(yīng)選取關(guān)鍵幀，提取環(huán)境的整體特征描述因子，包括而不限于以下幾種：顏色直方圖、梯度直方圖、紋理直方圖和神經(jīng)網(wǎng)絡(luò)訓(xùn)練出的特征，計(jì)算相鄰幀的特征描述因子之差，如果描述因子之差大于第二閾值，則啟動(dòng)關(guān)鍵幀選取?？梢越Y(jié)合環(huán)境亮度或內(nèi)容和給定頻率選取關(guān)鍵幀，同樣是定頻率采集場(chǎng)景環(huán)境，但采集頻率根據(jù)場(chǎng)景變動(dòng)進(jìn)行自適應(yīng)調(diào)整。如果場(chǎng)景環(huán)境亮度或內(nèi)容頻繁進(jìn)行更替，則將關(guān)鍵幀采集頻率增大，相反，如果場(chǎng)景環(huán)境亮度或內(nèi)容基本保持不變，則將關(guān)鍵幀采集頻率減低。關(guān)于根據(jù)設(shè)備相關(guān)狀態(tài)選取關(guān)鍵幀采集頻率，設(shè)備相關(guān)狀態(tài)包括電量、 存儲(chǔ)(如內(nèi)存)、設(shè)備運(yùn)動(dòng)狀態(tài)等。可以根據(jù)電量設(shè)定關(guān)鍵幀采集頻率，例如當(dāng)電量小于第一預(yù)定電量時(shí)，例如50％，則減低關(guān)鍵幀采集頻率，當(dāng)電量大于第二預(yù)定電量，如80％時(shí)，則提高關(guān)鍵幀采集頻率，其中，第一預(yù)定電量小于第二預(yù)定電量?？梢愿鶕?jù)內(nèi)存設(shè)置關(guān)鍵幀頻率，例如當(dāng)內(nèi)存小于第一預(yù)定值時(shí)，例如500m，則降低關(guān)鍵幀采集頻率，當(dāng)內(nèi)存大于第二預(yù)定值時(shí)，例如700m，則提高關(guān)鍵幀采集頻率。也可以根據(jù)終端設(shè)備運(yùn)動(dòng)狀態(tài)調(diào)整采集頻率，根據(jù)終端設(shè)備內(nèi)部傳感器判斷終端設(shè)備的運(yùn)動(dòng)狀態(tài)，如果運(yùn)動(dòng)幅度大于某一閾值，則提高關(guān)鍵幀采集頻率，以保證得到足夠的高質(zhì)量關(guān)鍵幀圖像。步驟3，對(duì)視頻信息進(jìn)行分辨率增強(qiáng)。根據(jù)采集到的關(guān)鍵幀圖像信息將采集到的視頻信息劃分為若干個(gè)視頻片段；利用視頻片段兩側(cè)的關(guān)鍵幀圖像信息對(duì)相應(yīng)的視頻片段對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理。具體地，當(dāng)需要增強(qiáng)的指標(biāo)包括分辨率、顏色、亮度中的至少一項(xiàng)時(shí)，增強(qiáng)處理的方式包括基于多視圖重建的增強(qiáng)方式，和/或基于機(jī)器學(xué)習(xí)構(gòu)建增強(qiáng)模型的增強(qiáng)方式。其中，基于多視圖重建的增強(qiáng)方式，具體包括：建立采集到的視頻信息的視頻像素和關(guān)鍵幀圖像信息的圖像像素的匹配關(guān)系，通過(guò)圖像像素替換相匹配的視頻像素。其中，基于機(jī)器學(xué)習(xí)構(gòu)建增強(qiáng)模型的方式，具體包括：在采集到的視頻信息的關(guān)鍵幀圖像所在位置處提取視頻像素；以機(jī)器學(xué)習(xí)方式建立視頻像素與關(guān)鍵幀圖像信息的圖像像素的映射增強(qiáng)模型；在采集到的視頻信息的非關(guān)鍵幀圖像所在位置，通過(guò)映射增強(qiáng)模型來(lái)轉(zhuǎn)換視頻像素。步驟4，增強(qiáng)后的視頻的存儲(chǔ)。第一類多媒體信息為圖像信息，第二類多媒體信息為視頻信息時(shí)，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行存儲(chǔ)處理，其中，存儲(chǔ)內(nèi)容包括以下至少一種情形：根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后的視頻信息；采集到的視頻信息和圖像信息；采集到的視頻信息和對(duì)視頻信息進(jìn)行增強(qiáng)處理時(shí)的增強(qiáng)模型；根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后的視頻信息以及采集到的圖像信息。在本實(shí)施例中終端設(shè)備生成四類數(shù)據(jù)：采集的原始視頻信息、關(guān)鍵幀圖像信息、分辨率增強(qiáng)的映射增強(qiáng)模型和增強(qiáng)后的視頻信息。第一種是在步驟3之后，直接存儲(chǔ)增強(qiáng)后的視頻信息，不保存關(guān)鍵幀圖像信息，即在存儲(chǔ)前完成增強(qiáng)處理，在存儲(chǔ)時(shí)，視頻框中顯示原始視頻幀中的畫(huà)面，上面顯示緩沖圖標(biāo)，表示正在進(jìn)行增強(qiáng)處理，緩沖完成后，存儲(chǔ)結(jié)束。第二種是先保存原始視頻信息以及學(xué)習(xí)到的增強(qiáng)模型，不保存關(guān)鍵幀圖像信息。在用戶打開(kāi)視頻時(shí)進(jìn)行步驟3的增強(qiáng)處理。由于每個(gè)視頻片段有一個(gè)增強(qiáng)模型，將所有的增強(qiáng)模型單獨(dú)存儲(chǔ)，建立一個(gè)增強(qiáng)模型和視頻幀號(hào)的映射表。第三種是先存儲(chǔ)原始視頻信息以及拍攝的關(guān)鍵幀圖像信息，這種方式不需要在存儲(chǔ)前對(duì)原始視頻信息進(jìn)行處理，完成拍攝，可即刻完成存儲(chǔ)。終端設(shè)備自動(dòng)根據(jù)處理器的忙閑來(lái)安排處理時(shí)間，學(xué)習(xí)增強(qiáng)模型對(duì)原始視頻信息進(jìn)行步驟3的增強(qiáng)處理，增強(qiáng)處理完成后刪除關(guān)鍵幀圖像信息。該存儲(chǔ)方式也是本發(fā)明提出的一種高清視頻壓縮存儲(chǔ)的方法。為了節(jié)省視頻的存儲(chǔ)空間，可以存儲(chǔ)低分辨率視頻信息和高分辨率圖像信息來(lái)取代直接存儲(chǔ)高分率視頻信息。低分辨率視頻信息和高清圖像信息可以分別由本發(fā)明中兩個(gè)攝像頭同時(shí)采集視頻信息和圖像信息得到，也可以直接將高分辨率視頻信息進(jìn)行關(guān)鍵幀提取得到高分率圖像信息，然后將原始高分辨率視頻信息壓縮得到低分辨率視頻信息。基于低分辨率視頻信息和關(guān)聯(lián)的高分率圖像信息，可以利用分辨率增強(qiáng)方法得到高清分辨率視頻信息。第四種是經(jīng)過(guò)步驟3增強(qiáng)處理之后，存儲(chǔ)增強(qiáng)后的視頻信息，同時(shí)保存關(guān)鍵幀圖像信息，增強(qiáng)后視頻信息的獲取方式可以是前三種存儲(chǔ)方式的任意一種得到，關(guān)鍵幀圖像信息可以跟視頻信息同時(shí)保存在視頻序列中，也可以保存在照片列表中，建立視頻信息和圖像信息的關(guān)聯(lián)關(guān)系。保存關(guān) 鍵幀圖像信息可以給用戶提供一些高清的圖像信息供用戶進(jìn)行其他操作。存儲(chǔ)方式通過(guò)以下至少一項(xiàng)來(lái)設(shè)置：根據(jù)檢測(cè)到的設(shè)置操作來(lái)確定存儲(chǔ)方式；根據(jù)預(yù)先設(shè)置(如系統(tǒng)默認(rèn)設(shè)置)來(lái)確定存儲(chǔ)方式；依據(jù)自適應(yīng)存儲(chǔ)設(shè)置方式來(lái)自適應(yīng)確定存儲(chǔ)方式。具體地，自適應(yīng)存儲(chǔ)設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、存儲(chǔ)設(shè)置歷史記錄數(shù)據(jù)中的至少一項(xiàng)來(lái)確定。設(shè)置操作通過(guò)用戶的語(yǔ)音、按鍵、按鍵、手勢(shì)、對(duì)外部控制器的操控來(lái)實(shí)現(xiàn)。設(shè)備相關(guān)狀態(tài)包括存儲(chǔ)空間、電量等設(shè)備信息。即針對(duì)如何設(shè)置第一存儲(chǔ)方式，本發(fā)明給出三種設(shè)置方法，終端設(shè)備可以根據(jù)以下三種中的一種來(lái)對(duì)第一存儲(chǔ)方式進(jìn)行選擇。第一種是終端設(shè)備默認(rèn)設(shè)置；第二種是終端設(shè)備接受用戶通過(guò)語(yǔ)音、按鍵或外部控制器等方式以及這些方式的組合來(lái)設(shè)備或更改存儲(chǔ)方式；第三種是終端設(shè)備通過(guò)存儲(chǔ)空間、電量或歷史數(shù)據(jù)自適應(yīng)設(shè)置存儲(chǔ)方式。關(guān)于系統(tǒng)默認(rèn)設(shè)置，終端設(shè)備設(shè)置四種存儲(chǔ)方式中的一種作為默認(rèn)值，在終端設(shè)備沒(méi)有接收到更改存儲(chǔ)方式的指令前都使用該默認(rèn)存儲(chǔ)方式對(duì)視頻和圖像進(jìn)行存儲(chǔ)。關(guān)于用戶交互下的語(yǔ)音設(shè)置，例如終端設(shè)備預(yù)先設(shè)定語(yǔ)音指令“儲(chǔ)存增強(qiáng)后的視頻”，如果接收到該指令，則對(duì)聲控指令進(jìn)行語(yǔ)音識(shí)別，確定設(shè)置存儲(chǔ)方式為存儲(chǔ)增強(qiáng)后的視頻信息。關(guān)于用戶交互下的按鍵設(shè)置，按鍵可以為硬件按鍵，例如音量上下鍵來(lái)對(duì)四種存儲(chǔ)方式進(jìn)行選擇，home鍵來(lái)確定當(dāng)前選擇的存儲(chǔ)方式為最終的存儲(chǔ)方式。按鍵也可以為虛擬按鍵，例如屏幕上的按鈕、菜單，交互界面上的虛擬鍵盤(pán)等，終端設(shè)備檢測(cè)到用戶點(diǎn)擊該虛擬按鍵的事件后，確認(rèn)選擇的存儲(chǔ)方式。關(guān)于用戶交互下的手勢(shì)設(shè)置，終端設(shè)備預(yù)先設(shè)定某種手勢(shì)來(lái)選擇增強(qiáng)方式。手勢(shì)包括屏幕手勢(shì)，例如從左向右或者從右向左滑動(dòng)屏幕來(lái)更換存儲(chǔ)方式。手勢(shì)還包括隔空手勢(shì)，包括搖晃/傾斜終端，搖晃/傾斜時(shí)的不同方向表示不同的含義，如上下?lián)u晃更換存儲(chǔ)方式，左右傾斜來(lái)更換存儲(chǔ)方 式，上述手勢(shì)可以是單一的手勢(shì)，也可以是任意手勢(shì)的任意組合，例如右手橫向滑動(dòng)選擇增強(qiáng)方式，同時(shí)上下?lián)u晃表示確定當(dāng)前選擇的存儲(chǔ)方式為最終的存儲(chǔ)方式。關(guān)于用戶通過(guò)外部控制器設(shè)置，外部控制器包括而不限于手寫(xiě)筆、遙控器、智能手表、智能眼鏡、智能頭盔、智能衣服、或遠(yuǎn)程設(shè)備等，這些控制器通過(guò)wifi和/或紅外和/或藍(lán)牙和/或網(wǎng)絡(luò)跟交互界面交通，例如，遙控器上某些按鍵代表設(shè)置不同的存儲(chǔ)方式，檢測(cè)到用戶點(diǎn)擊了按鍵，發(fā)送到交互控制系統(tǒng)，設(shè)置存儲(chǔ)方式。關(guān)于根據(jù)存儲(chǔ)空間的自適應(yīng)設(shè)置，根據(jù)存儲(chǔ)空間，可以選擇不同的存儲(chǔ)方式，如果剩余存儲(chǔ)空間小于某一閾值，例如低于終端設(shè)備存儲(chǔ)空間的50％，則設(shè)置為第三種壓縮存儲(chǔ)方式；反之，如果剩余存儲(chǔ)空間高于某一閾值，例如高于終端設(shè)備存儲(chǔ)空間的50％，則存儲(chǔ)方式不受存儲(chǔ)空間影響。關(guān)于根據(jù)電量的自適應(yīng)設(shè)置，可以根據(jù)電量控制存儲(chǔ)方式，當(dāng)電量小于某一閾值，例如低于50％時(shí)，則選擇耗電量小的存儲(chǔ)方式，即第三種存儲(chǔ)方式，即直接存儲(chǔ)原始視頻信息和關(guān)鍵幀圖像信息者第二種存儲(chǔ)方式，即原始視頻和學(xué)習(xí)模型，不對(duì)視頻進(jìn)行增強(qiáng)處理；當(dāng)電量小于第二預(yù)定電量，例如低于15％時(shí)，則選擇耗電量最小的第三種存儲(chǔ)方式，即原始視頻信息和關(guān)鍵幀圖像信息；如果電量高于某一閾值，例如高于50％，則存儲(chǔ)方式不受電量影響。關(guān)于根據(jù)存儲(chǔ)設(shè)置歷史記錄數(shù)據(jù)的自適應(yīng)設(shè)置，例如根據(jù)用戶以往設(shè)置的存儲(chǔ)方式，來(lái)對(duì)用戶喜好進(jìn)行分析，設(shè)置為用戶偏好的存儲(chǔ)方式。步驟5，視頻的播放。響應(yīng)于接收到的播放觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的播放方式對(duì)視頻信息進(jìn)行播放；其中，播放方式包括以下至少一項(xiàng)：當(dāng)存儲(chǔ)增強(qiáng)處理后的視頻信息時(shí)，直接播放增強(qiáng)處理后的視頻信息；當(dāng)存儲(chǔ)采集到的視頻信息和圖像信息時(shí)，根據(jù)采集的圖像信息對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后播放；當(dāng)存儲(chǔ)采集到的視頻信息和增強(qiáng)模型時(shí)，通過(guò)增強(qiáng)模型對(duì)采集的視頻信息進(jìn)行增強(qiáng)處理后播放；當(dāng)存儲(chǔ)增強(qiáng)處理后的視頻信息和采集到的圖像信息時(shí)，將增強(qiáng)處理后的視頻信息和采集到的圖像信息關(guān)聯(lián)播放。例如，終端設(shè)備根據(jù)檢測(cè)到的播放觸發(fā)操作，對(duì)存儲(chǔ)的視頻進(jìn)行播放。方案一：該播放方式對(duì)應(yīng)的存儲(chǔ)方式為存儲(chǔ)增強(qiáng)后的視頻信息。終端設(shè)備檢測(cè)到用戶打開(kāi)視頻的操作，直接打開(kāi)增強(qiáng)后的視頻信息。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，即可馬上進(jìn)行視頻播放，這樣，用戶直接可以查看增強(qiáng)后的效果。方案二：該播放方式對(duì)應(yīng)的存儲(chǔ)方式為存儲(chǔ)原始視頻信息和增強(qiáng)模型。終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，打開(kāi)原始視頻信息和增強(qiáng)模型的組合。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，終端設(shè)備開(kāi)始基于增強(qiáng)模型對(duì)原始視頻信息進(jìn)行增強(qiáng)處理。在允許的緩沖時(shí)間內(nèi)完成操作，然后播放增強(qiáng)后的視頻信息。方案三：該播放方式對(duì)應(yīng)的存儲(chǔ)方式為存儲(chǔ)原始視頻信息和關(guān)鍵幀圖像信息。終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，打開(kāi)原始視頻信息和拍攝的關(guān)鍵幀圖像信息組合。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，如果終端設(shè)備已經(jīng)完成了增強(qiáng)處理，則可以直接播放視頻查看增強(qiáng)后的視頻信息。如果終端設(shè)備在后臺(tái)只是做了部分工作，沒(méi)有完成增強(qiáng)步驟，則接收到用戶點(diǎn)擊播放操作后需要時(shí)間緩沖來(lái)進(jìn)行視頻增強(qiáng)，完成增強(qiáng)后開(kāi)始播放增強(qiáng)后的視頻信息，用戶可以看到增強(qiáng)后的視頻信息。方案四：該播放方式對(duì)應(yīng)的存儲(chǔ)方式為存儲(chǔ)增強(qiáng)后的視頻信息和關(guān)鍵幀圖像信息。終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，打開(kāi)增強(qiáng)后的視頻信息和關(guān)鍵幀圖像信息的組合，增強(qiáng)的視頻信息的播放方式不僅包括了前三種的播放方式，而且基于關(guān)鍵幀圖像信息可以得到更多的播放方式。在建立視頻信息和圖像序列的關(guān)聯(lián)關(guān)系后，可以通過(guò)圖像序列鏈接到視頻信息，也可以通過(guò)視頻信息鏈接到圖像序列，通過(guò)長(zhǎng)按關(guān)鍵幀圖像序列或者視頻播放按鈕完成這種圖像和視頻間的跳轉(zhuǎn)，也可以通過(guò)語(yǔ)音，手勢(shì)等設(shè)置來(lái)完成跳轉(zhuǎn)。方案五：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，打開(kāi)增強(qiáng)后的視頻和關(guān)鍵 幀的組合。在存儲(chǔ)時(shí)記錄每個(gè)關(guān)鍵幀在視頻中出現(xiàn)的位置，用戶可以通過(guò)點(diǎn)擊關(guān)鍵幀序列中的某張圖像鏈接到相應(yīng)的視頻位置，從該位置開(kāi)始播放視頻?？梢缘幌抻陂L(zhǎng)按視頻，出現(xiàn)關(guān)鍵幀序列，點(diǎn)擊序列中的某張圖像開(kāi)始播放視頻。查看視頻時(shí)，呈現(xiàn)給用戶的是一個(gè)圖像組合，用戶可以點(diǎn)開(kāi)圖像序列進(jìn)行查看，然后點(diǎn)擊圖像進(jìn)行視頻播放。方案六：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，例如檢測(cè)到用戶點(diǎn)擊播放的操作，顯示緩沖標(biāo)志，進(jìn)行分辨率轉(zhuǎn)換，該轉(zhuǎn)換可以包括但不限于以下幾種方法：一是將整個(gè)視頻片段轉(zhuǎn)換成高分辨率視頻信息后從頭播放；二是緩沖一部分就開(kāi)始播放，邊播放邊進(jìn)行視頻轉(zhuǎn)換，受限于手機(jī)的處理能力，播放中可能會(huì)出現(xiàn)中斷來(lái)完成緩沖；三是可以點(diǎn)擊關(guān)鍵幀圖像信息中的某一張，只從該張圖像信息對(duì)應(yīng)的視頻位置為起點(diǎn)之后的視頻片段進(jìn)行轉(zhuǎn)換，緩沖方式可以是前兩種的任意一種，從圖像信息對(duì)應(yīng)的視頻位置進(jìn)行播放；四是用戶可以選擇播放低分辨率視頻信息進(jìn)行查看，如果對(duì)視頻很感興趣，可以通過(guò)按鈕或者其他操作進(jìn)行高分辨率視頻播放，選擇高分辨率播放后，可以按照前三種播放方法進(jìn)行播放。也可以將壓縮視頻進(jìn)行分享，減少手機(jī)能源消耗，在對(duì)方進(jìn)行播放時(shí)可以進(jìn)行多種播放選擇。實(shí)施例二：增強(qiáng)處理模式為圖像增強(qiáng)視頻模式中的顏色增強(qiáng)模式從視頻亮度和顏色增強(qiáng)方面來(lái)說(shuō)，目前，終端設(shè)備在低光照情形下拍攝的視頻普遍亮度暗、質(zhì)量差?，F(xiàn)有技術(shù)大都是通過(guò)一些先驗(yàn)?zāi)Ｐ蛯?duì)視頻進(jìn)行處理，比如，設(shè)置非線性映射表，如圖2所示，對(duì)每幀圖像根據(jù)亮度信息計(jì)算得到該幀圖像的直方圖均衡映射表，根據(jù)預(yù)設(shè)映射表以及計(jì)算得到的映射表加權(quán)得到一個(gè)轉(zhuǎn)換曲線，根據(jù)這一曲線對(duì)視頻幀中的像素點(diǎn)亮度進(jìn)行調(diào)整來(lái)對(duì)視頻幀進(jìn)行增強(qiáng)。另一種方式為對(duì)視頻進(jìn)行伽馬校正進(jìn)行預(yù)處理得到視頻的傳輸參數(shù)，使用改進(jìn)的圖像退化還原模型根據(jù)原始視頻和預(yù)處理得到的傳輸參數(shù)處理得到最終的增強(qiáng)結(jié)果。上述方法都是基于視頻自帶信息來(lái)進(jìn)行增強(qiáng)的，增強(qiáng)強(qiáng)度要通過(guò)人為設(shè)置參數(shù)來(lái)進(jìn)行調(diào)整。在視頻亮度及顏色調(diào)整方面，利用一些預(yù)設(shè)的映射曲線對(duì)視頻中每幀圖像進(jìn)行調(diào)整可以達(dá)到亮度顏色的變化，但是其變化的基礎(chǔ)也受限于預(yù)設(shè)的參數(shù)， 而且變化趨勢(shì)是否適用于各種場(chǎng)景也有待斟酌。在不同的光照條件下，調(diào)節(jié)的參數(shù)需要自適應(yīng)的進(jìn)行調(diào)整，預(yù)設(shè)的映射曲線有可能會(huì)出現(xiàn)不真實(shí)的變化結(jié)果，比如夜間拍攝的視頻被調(diào)整的過(guò)亮或者一些圖像區(qū)域顏色失真。該實(shí)施例的基本流程為：首先開(kāi)啟圖像增強(qiáng)視頻模式中的顏色增強(qiáng)模式，啟動(dòng)兩個(gè)攝像頭分別采集圖像信息和視頻信息；其次，設(shè)置主、輔攝像頭，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)，以及設(shè)置關(guān)鍵幀圖像信息的選取，同時(shí)根據(jù)增強(qiáng)策略參數(shù)和關(guān)鍵幀圖像信息對(duì)視頻進(jìn)行顏色增強(qiáng)，最后對(duì)采集結(jié)果進(jìn)行壓縮、傳輸和播放。步驟1：開(kāi)啟圖像增強(qiáng)視頻模式中的顏色增強(qiáng)模式。在本實(shí)施例中，步驟1采用與實(shí)施例一中類似的開(kāi)啟方式，區(qū)別在于開(kāi)啟功能的指令描述內(nèi)容，例如，語(yǔ)音開(kāi)啟中的指令為“啟動(dòng)增強(qiáng)視頻顏色”，按鍵開(kāi)啟的指令為長(zhǎng)按home鍵，虛擬按鍵中增強(qiáng)視頻顏色的按鈕，手持開(kāi)啟指令為搖晃終端等，在此不再贅述。步驟2：使用雙目攝像頭的一個(gè)攝像頭拍攝圖像信息，另一個(gè)攝像頭拍攝視頻信息。該步驟主要包括采集參數(shù)及增強(qiáng)策略參數(shù)的設(shè)置，主、輔攝像頭的設(shè)置，采集圖像和視頻的參數(shù)設(shè)置，以及關(guān)鍵幀圖像信息的選取。步驟2.1，設(shè)置主、輔攝像頭。在本實(shí)施例中，設(shè)置主、輔攝像頭的方式可以采用實(shí)施例一步驟2.1中類似的設(shè)置主、輔攝像頭方式，在此不再贅述。步驟2.2，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)。在本實(shí)施例中，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)的方式可以采用實(shí)施例一步驟2.2中類似的設(shè)置采集參數(shù)和增強(qiáng)策略參數(shù)的方式，在此不再贅述。步驟2.3，自適應(yīng)設(shè)置關(guān)鍵幀采集頻率。在本實(shí)施例中，關(guān)鍵幀的選取方式可以采用實(shí)施例一步驟2.3中類似的關(guān)鍵幀選取方式，在此不再贅述。步驟3，對(duì)視頻信息進(jìn)行顏色增強(qiáng)處理。以關(guān)鍵幀為界限將視頻劃分為一個(gè)個(gè)片段，用片段兩側(cè)的關(guān)鍵幀圖像 對(duì)該視頻片段進(jìn)行增強(qiáng)。顏色增強(qiáng)方式包括而不限于以下兩種：一種基于多視圖重建的方法，一種基于機(jī)器學(xué)習(xí)的方法。關(guān)于基于多視圖重建的顏色增強(qiáng)，以多視圖重建方法建立視頻像素和圖像像素的匹配關(guān)系，用圖像像素來(lái)替換生成視頻像素。關(guān)于基于機(jī)器學(xué)習(xí)的顏色增強(qiáng)，在關(guān)鍵幀處以機(jī)器學(xué)習(xí)方式建立視頻像素和圖像像素的映射模型，在非關(guān)鍵幀處以該映射模型來(lái)轉(zhuǎn)換視頻像素。步驟4，視頻的存儲(chǔ)。在本實(shí)施例中終端設(shè)備生成四類數(shù)據(jù)：采集的原始視頻信息、關(guān)鍵幀圖像信息、顏色增強(qiáng)模型和增強(qiáng)后的視頻信息。針對(duì)不同的數(shù)據(jù)類型，存儲(chǔ)方式包括而不限于以下四種。本實(shí)施例中的四種存儲(chǔ)方式和實(shí)施例一中步驟4介紹的四種存儲(chǔ)方式相同，在此不再贅述。設(shè)置存儲(chǔ)方式的方法采用與實(shí)施例一中步驟4類似的設(shè)置方法，不同的是該增強(qiáng)模式不改變視頻分辨率，在四種存儲(chǔ)方式中，第一種存儲(chǔ)增強(qiáng)后的視頻信息占用空間最小，當(dāng)存儲(chǔ)空間小于某一閾值，例如小于終端設(shè)備存儲(chǔ)空間的50％，則設(shè)置第一種存儲(chǔ)方式。其他設(shè)置方法相同，在此不再贅述。步驟5，視頻的播放。在對(duì)雙目攝像頭采集的數(shù)據(jù)進(jìn)行壓縮、存儲(chǔ)和傳輸后，在播放階段中解壓并播放高質(zhì)量視頻信息。針對(duì)不同的存儲(chǔ)方式，其播放方式包括而不限于實(shí)施例一中步驟5介紹的前五種中的一種，五種播放模式與實(shí)施例一步驟5中前五種描述相同，在此不再贅述。實(shí)施例三：增強(qiáng)處理模式為圖像增強(qiáng)視頻模式中的亮度增強(qiáng)模式該實(shí)施例的基本流程為：首先開(kāi)啟圖像增強(qiáng)視頻模式中的亮度增強(qiáng)模式，啟動(dòng)兩個(gè)攝像頭分別采集圖像信息和視頻信息，其次設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)，以及設(shè)置關(guān)鍵幀圖像信息的選取，同時(shí)根據(jù)增強(qiáng)策略參數(shù)和關(guān)鍵幀圖像信息對(duì)視頻進(jìn)行亮度增強(qiáng)，最后對(duì)采集結(jié)果進(jìn)行壓縮、傳輸和播放。步驟1：開(kāi)啟圖像增強(qiáng)視頻模式中的亮度增強(qiáng)模式。在本實(shí)施例中，步驟1的開(kāi)啟方式采用實(shí)施例一中類似的開(kāi)啟方式，區(qū)別在于開(kāi)啟功能的指令描述內(nèi)容，例如，語(yǔ)音開(kāi)啟中的指令為“啟動(dòng)增強(qiáng)視頻亮度”，按鍵開(kāi)啟的指令為長(zhǎng)按end鍵，虛擬按鍵中增強(qiáng)視頻亮度的按鈕，手持開(kāi)啟指令為抖動(dòng)終端等，在此不再贅述。步驟2：使用雙目攝像頭的一個(gè)攝像頭拍攝圖像信息，另一個(gè)攝像頭拍攝視頻信息；該步驟主要包括采集參數(shù)及增強(qiáng)策略參數(shù)的設(shè)置，主、輔攝像頭的設(shè)置，采集圖像和視頻的參數(shù)設(shè)置，以及關(guān)鍵幀圖像信息的選取。步驟2.1，設(shè)置主、輔攝像頭。在本實(shí)施例中，設(shè)置主、輔攝像頭的方式可以采用實(shí)施例一步驟2.1中類似的設(shè)置主、輔攝像頭的方式，在此不再贅述。步驟2.2，設(shè)置攝像頭參數(shù)和增強(qiáng)策略參數(shù)。在本實(shí)施例中，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)的方式可以采用實(shí)施例一步驟2.2中類似的設(shè)置采集參數(shù)和增強(qiáng)策略參數(shù)的方式，在此不再贅述。步驟2.3，選取關(guān)鍵幀。在本實(shí)施例中，關(guān)鍵幀的選取方式可以采用實(shí)施例一步驟2.3中類似的關(guān)鍵幀選取方式，在此不再贅述。步驟3，對(duì)視頻進(jìn)行亮度增強(qiáng)。亮度增強(qiáng)在lab顏色模型的l通道，或者h(yuǎn)sv顏色模型的v通道中執(zhí)行，首先將圖像或視頻進(jìn)行顏色空間轉(zhuǎn)換，然后提取l或者v通道分量進(jìn)行獨(dú)立增強(qiáng)。以關(guān)鍵幀為界限將視頻劃分為一個(gè)個(gè)視頻片段，用視頻片段兩側(cè)的關(guān)鍵幀圖像對(duì)該視頻片段進(jìn)行增強(qiáng)。增強(qiáng)方式包括而不限于以下兩種：一種基于多視圖重建的方法，一種基于機(jī)器學(xué)習(xí)的方法。關(guān)于基于多視圖重建的亮度增強(qiáng)，以多視圖重建方法建立視頻像素和圖像像素的匹配關(guān)系，用圖像像素亮度來(lái)替換生成視頻像素亮度。關(guān)于基于機(jī)器學(xué)習(xí)的亮度增強(qiáng)，在關(guān)鍵幀處以機(jī)器學(xué)習(xí)方式建立視頻像素亮度和圖像像素亮度的映射模型，在非關(guān)鍵幀處以該映射模型來(lái)轉(zhuǎn)換 視頻亮度。步驟4，視頻的存儲(chǔ)。在本實(shí)施例中終端設(shè)備生成四類數(shù)據(jù)：采集的原始視頻信息、關(guān)鍵幀圖像信息、亮度增強(qiáng)模型和增強(qiáng)后的視頻信息。針對(duì)不同的數(shù)據(jù)類型，存儲(chǔ)方式包括而不限于以下四種。本實(shí)施例中的四種存儲(chǔ)方式和實(shí)施例二中步驟4介紹的四種存儲(chǔ)方式相同，在此不再贅述。步驟5，視頻的播放。在本實(shí)施例中，視頻的解壓播放的方式可以采用實(shí)施例二步驟5中相同的視頻播放的方式，在此不再贅述。實(shí)施例四、增強(qiáng)處理模式為圖像增強(qiáng)視頻模式中的去噪增強(qiáng)模式從視頻去噪和去模糊方面來(lái)說(shuō)，由于視頻每幀曝光時(shí)間很短，視頻噪聲較圖像噪聲更多?，F(xiàn)有技術(shù)大都采用圖像去噪的方法對(duì)視頻幀進(jìn)行降噪處理，最終實(shí)現(xiàn)視頻去噪的目的。假定噪聲類型為高斯噪聲，通過(guò)一些濾波方法對(duì)噪聲進(jìn)行去除，也有使用字典學(xué)習(xí)的方法對(duì)噪聲進(jìn)行去除。導(dǎo)致視頻模糊可能有以下幾個(gè)因素：1)手持手機(jī)拍攝視頻時(shí)，由于手的抖動(dòng)會(huì)導(dǎo)致畫(huà)面模糊；2)降噪處理使得一些區(qū)域變得模糊；3)聚焦不準(zhǔn)造成的散焦模糊等。現(xiàn)有技術(shù)大都是對(duì)模糊圖像的模糊核進(jìn)行估計(jì)，利用得到的模糊核對(duì)模糊圖像進(jìn)行反卷積得到清晰圖像；如圖3所示。同樣的拍攝環(huán)境下，相比于圖像信息，視頻幀視頻畫(huà)面噪聲比較明顯，本實(shí)施例通過(guò)具有相似內(nèi)容的高質(zhì)量關(guān)鍵幀圖像信息來(lái)對(duì)低質(zhì)量視頻片段進(jìn)行去噪來(lái)提高視頻質(zhì)量。具體實(shí)施步驟如下：步驟1：開(kāi)啟圖像增強(qiáng)視頻模式中的去噪增強(qiáng)模式。在本實(shí)施例中，步驟1采用與實(shí)施例一中類似的開(kāi)啟方式，區(qū)別在于一些指令描述和閾值設(shè)置的不同，具體區(qū)別描述如下。在用戶開(kāi)啟視頻去噪模式中使用不同的指令描述，例如，語(yǔ)音開(kāi)啟中的指令為“啟動(dòng)視頻去噪”，按鍵開(kāi)啟的指令為長(zhǎng)按home鍵，虛擬按鍵中視頻去噪的按鈕，手持開(kāi)啟指令為搖晃終端等，在此不再贅述。在終端設(shè)備根據(jù)設(shè)備相關(guān)狀態(tài)和模式開(kāi)啟歷史記錄數(shù)據(jù)自適應(yīng)開(kāi)啟模式中使用不同的閾值設(shè)置，例如，電量閾值，次數(shù)閾值等。其他描述方式相同，在此不再贅述。在終端設(shè)備自適應(yīng)模式匹配方式自適應(yīng)開(kāi)啟視頻去噪增強(qiáng)模式中給出三種方法，一種方法是終端設(shè)備利用已有方法對(duì)拍攝到的環(huán)境進(jìn)行檢測(cè)，如果拍攝環(huán)境被檢測(cè)為低光照環(huán)境，例如夜景拍攝，則開(kāi)啟去噪增強(qiáng)模式；第二種方法是終端設(shè)備對(duì)相機(jī)拍攝參數(shù)進(jìn)行檢測(cè)，如果感光度高于某一閾值，則開(kāi)啟去噪增強(qiáng)模式；第三種可以是前兩種方法的組合，兩個(gè)條件同時(shí)滿足則開(kāi)啟去噪增強(qiáng)模式，即拍攝環(huán)境中光照強(qiáng)度低于某一閾值，且感光度高于某一閾值則開(kāi)啟去噪增強(qiáng)模式。在終端設(shè)備根據(jù)實(shí)時(shí)采集內(nèi)容自適應(yīng)開(kāi)啟視頻去噪模式中計(jì)算拍攝幀的信噪比，信噪比低于某一閾值則開(kāi)啟視頻去噪模式。步驟2：使用雙目攝像頭的一個(gè)攝像頭拍攝圖像，另一個(gè)攝像頭拍攝視頻。該步驟主要包括采集參數(shù)及增強(qiáng)策略參數(shù)的設(shè)置，主、輔攝像頭的設(shè)置，采集圖像和視頻的參數(shù)設(shè)置，以及關(guān)鍵幀圖像信息的選取。步驟2.1，設(shè)置主、輔攝像頭。在本實(shí)施例中，設(shè)置主、輔攝像頭的方式可以采用實(shí)施例1步驟2.1中類似的設(shè)置主、輔攝像頭的方式，在此不再贅述。步驟2.2，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)。在本實(shí)施例中，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)可以采用實(shí)施例一步驟2.2中類似的設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)方式，在此不再贅述。除了前述的參數(shù)設(shè)置方式，本實(shí)施例針對(duì)去噪模式提出了新的參數(shù)設(shè)置方法。在本實(shí)施例中是利用雙目攝像頭中一個(gè)采集圖像信息，一個(gè)采集視頻信息，對(duì)視頻信息進(jìn)行去噪。在此主要是對(duì)圖像采集的分辨率，曝光時(shí)間，感光度進(jìn)行設(shè)置，出于節(jié)能以及算法設(shè)計(jì)兩方面的考慮，輔攝像頭采集圖像信息的分辨率應(yīng)與視頻信息的分辨率設(shè)置保持一致，如果圖像信息的最低分辨率比當(dāng)前視頻信息的分辨率高，則采用圖像信息的最低分辨率進(jìn)行采集。 如果在電量允許的前提下，曝光時(shí)間可以根據(jù)終端設(shè)備運(yùn)動(dòng)狀態(tài)進(jìn)行調(diào)整。如果終端設(shè)備內(nèi)部傳感器檢測(cè)到終端設(shè)備處于平穩(wěn)的拍攝狀態(tài)，則提高曝光時(shí)間，例如取曝光時(shí)間范圍中的最大值，提高圖像信息和視頻信息亮度，降低噪聲干擾；如果傳感器檢測(cè)到終端設(shè)備存在抖動(dòng)或者其他運(yùn)動(dòng)趨勢(shì)，則適當(dāng)減少曝光時(shí)間，避免圖像信息出現(xiàn)模糊，影響視頻信息去噪效果。步驟2.3，選取關(guān)鍵幀圖像信息。在本實(shí)施例中，關(guān)鍵幀選取方式可以采用實(shí)施例一步驟2.3中類似的關(guān)鍵幀選取方式，在此不再贅述。針對(duì)去噪模式，本實(shí)施給出新的關(guān)鍵幀圖像信息選取方式。如果光照強(qiáng)度越低，則關(guān)鍵幀采集頻率提高，反之光照強(qiáng)度越高，則降低關(guān)鍵幀采集頻率；利用終端設(shè)備自身傳感器檢測(cè)終端設(shè)備運(yùn)動(dòng)狀態(tài)，如果運(yùn)動(dòng)幅度大于某一閾值，則提高采集頻率，以保證得到足夠的高質(zhì)量關(guān)鍵幀圖像。如果關(guān)鍵幀采集時(shí)終端設(shè)備出現(xiàn)運(yùn)動(dòng)，則在運(yùn)動(dòng)結(jié)束時(shí)采集另一張關(guān)鍵幀圖像信息作為前一幀關(guān)鍵幀圖像信息的備選，當(dāng)前一幀關(guān)鍵幀圖像信息出現(xiàn)模糊時(shí)，則可以利用備選關(guān)鍵幀圖像信息對(duì)視頻片段進(jìn)行去噪，以保證去噪效果。步驟3：使用關(guān)鍵幀序列去除視頻的噪聲。當(dāng)需要增強(qiáng)的指標(biāo)包括噪聲時(shí)，增強(qiáng)處理的方式包括基于字典重構(gòu)的方式，和/或基于深度學(xué)習(xí)的方式。在原始視頻信息中檢測(cè)到待處理的模糊幀時(shí)，確定對(duì)待處理的模糊幀進(jìn)行去模糊增強(qiáng)處理；其中，通過(guò)以下至少一種信息來(lái)檢測(cè)待處理的模糊幀：多媒體采集設(shè)備的運(yùn)動(dòng)狀態(tài)；在原始視頻信息中對(duì)焦失敗的幀；通過(guò)分類器對(duì)原始視頻信息進(jìn)行分類的分類結(jié)果。具體地，每一個(gè)高質(zhì)量關(guān)鍵幀對(duì)應(yīng)一個(gè)視頻子序列，假設(shè)視頻關(guān)鍵幀1，其對(duì)應(yīng)的視頻子序列中包含60幀，利用相鄰的1幀或者多幀關(guān)鍵幀圖像對(duì)視頻進(jìn)行去噪，例如用關(guān)鍵幀1對(duì)這60幀圖像進(jìn)行去噪，去噪的方式包括但不限于以下方式之一：一種是基于字典重構(gòu)的方法，如nlm(nonlocalmeans)算法；一種是基于深度學(xué)習(xí)的方法，如卷積神經(jīng)網(wǎng)絡(luò)cnn(convolutionalnetwork)。與傳統(tǒng)去噪方法相比，本實(shí)施例使用一個(gè)參考圖像，即關(guān)鍵幀圖像，對(duì)噪聲視頻進(jìn)行去噪，針對(duì)這一個(gè)特性，對(duì)現(xiàn)有方法進(jìn)行了改進(jìn)。下面對(duì)上述兩種方法進(jìn)行詳細(xì)介紹。1)基于字典重構(gòu)的方法，即改進(jìn)的nlm如果輸入的關(guān)鍵幀圖像與視頻幀圖像的分辨率不一致，首先將關(guān)鍵幀圖像與視頻的尺度進(jìn)行統(tǒng)一，將視頻進(jìn)行放縮或者關(guān)鍵幀圖像進(jìn)行放縮，或者同時(shí)對(duì)視頻和關(guān)鍵幀圖像進(jìn)行放縮，使得關(guān)鍵幀圖像和視頻具有相同的尺寸。利用立體匹配的方法計(jì)算關(guān)鍵幀圖像與視頻片段中每幀的視差，對(duì)視頻幀中的像素和關(guān)鍵幀圖像的像素進(jìn)行對(duì)齊，即圖像間一致性像素的位置關(guān)系。如果輸入的關(guān)鍵幀圖像和視頻幀圖像的分辨率一致，則直接利用立體匹配的方法計(jì)算視差進(jìn)行圖像對(duì)齊。在得到關(guān)鍵幀圖像和視頻幀圖像像素間的位置關(guān)系后，在圖像間查找相似塊。對(duì)于每個(gè)視頻幀，以該幀圖像中一個(gè)像素點(diǎn)為中心取一個(gè)大小為a*a的像素塊p，其中a可以預(yù)先設(shè)定，也可以根據(jù)圖像大小或者其他因素進(jìn)行自適應(yīng)調(diào)整。基于得到的視頻幀與關(guān)鍵幀圖像一致性像素間的位置關(guān)系，找到視頻幀中該像素在關(guān)鍵幀圖像中的位置，以該位置為中心，取b*b大小的鄰域，其中b可以預(yù)先設(shè)定，也可以根據(jù)圖像大小等其他因素進(jìn)行自適應(yīng)調(diào)整。以該鄰域塊中的每個(gè)像素為中心取一個(gè)大小為a*a像素塊q，一共可以得到b*b個(gè)像素塊，計(jì)算像素塊p與b*b個(gè)像素塊間的距離，距離計(jì)算公式可以采用但不限于歐式距離平方和，即塊間相同位置的像素值差的平方和為，如a取值8，像素塊距離即為低質(zhì)量像素塊中64個(gè)像素與關(guān)鍵幀像素塊中64個(gè)像素值差的平方和。如果距離小于某一閾值則認(rèn)為兩個(gè)像素塊相似。找到的所有小于該閾值的相似塊，標(biāo)記為集合ω。然后需要計(jì)算相似塊的權(quán)重，根據(jù)這些相似塊的距離計(jì)算每塊的權(quán)重w，距離越大權(quán)重越小，反之則越大。權(quán)重可采用但不限于高斯函數(shù)來(lái)計(jì)算。最后，利用這些相似的像素塊對(duì)高噪聲的像素塊進(jìn)行重建，即對(duì)相似塊進(jìn)行加權(quán)平均，在此也可以對(duì)原始像素塊分配一定權(quán)重，在重構(gòu)中占有一定比例來(lái)保證重構(gòu)后的像素塊與原始像素塊的一致性。對(duì)視頻幀中的每個(gè)像素都按此方法進(jìn)行基于塊重構(gòu)的方法進(jìn)行重新估計(jì)來(lái)達(dá)到對(duì)每張視頻幀的去噪，對(duì)視頻片段中的每幀去噪來(lái)對(duì)整個(gè)視頻片段進(jìn)行去噪。由于關(guān)鍵幀圖像與視頻幀存在視差，有些視頻幀的像素在關(guān)鍵幀中找不到對(duì)應(yīng)的像素，對(duì)于這些像素也就沒(méi)有辦法在高質(zhì)量的圖像中查找相似的像素塊進(jìn)行重構(gòu)。對(duì)于這些像素點(diǎn)，可以采用最初的nlm方法在自身所在的視頻幀中查找相似像素塊重構(gòu)進(jìn)行去噪處理。同時(shí)為了節(jié)省處理時(shí)間，可以考慮視頻幀間的關(guān)系，如果視頻片段中幀間內(nèi)容變化不大，則可以同時(shí)對(duì)多個(gè)視頻幀中像素進(jìn)行重構(gòu)，即不同幀中相同的像素點(diǎn)可以利用統(tǒng)一的相似像素塊進(jìn)行重構(gòu)，達(dá)到對(duì)多個(gè)像素點(diǎn)同時(shí)去噪的效果。2)基于深度學(xué)習(xí)的方法如果輸入的關(guān)鍵幀圖像與視頻幀圖像的分辨率不一致，與第一種方法中采取一樣的步驟對(duì)關(guān)鍵幀圖像與視頻的尺度進(jìn)行統(tǒng)一。利用立體匹配的方法計(jì)算關(guān)鍵幀圖像與視頻片段中每幀的視差，對(duì)視頻幀中的像素和關(guān)鍵幀圖像的像素進(jìn)行對(duì)齊。根據(jù)對(duì)齊結(jié)果，對(duì)關(guān)鍵幀圖像和視頻幀進(jìn)行裁剪，得到一對(duì)具有相同尺寸，相同內(nèi)容的圖像對(duì)，一張從關(guān)鍵幀圖像中裁剪得到的無(wú)噪聲圖像，另一張從視頻幀圖像中裁剪得到的噪聲圖像，兩張圖像同一位置中的像素點(diǎn)內(nèi)容一致，但是一個(gè)是來(lái)自高質(zhì)量的關(guān)鍵幀圖像，稱為無(wú)噪聲的像素點(diǎn)，一個(gè)是來(lái)自低質(zhì)量的視頻幀圖像，稱為噪聲像素點(diǎn)?；诙鄬?duì)圖像，取對(duì)應(yīng)的像素塊，可以得到很多對(duì)像素塊?；谶@些像素塊，利用現(xiàn)有的基于深度學(xué)習(xí)的方法，訓(xùn)練得到一個(gè)具有去噪功能的卷積網(wǎng)，對(duì)視頻幀中的像素塊進(jìn)行去噪。該模型可以線下采集大量樣本訓(xùn)練得到一個(gè)初始模型預(yù)裝在終端設(shè)備中，然后再利用得到的圖像對(duì)，對(duì)該模型進(jìn)行修正，來(lái)對(duì)視頻幀進(jìn)行去噪；也可以在線訓(xùn)練一個(gè)模型對(duì)視頻幀進(jìn)行去噪。步驟4：視頻的存儲(chǔ)。在本實(shí)施例中終端設(shè)備生成四類數(shù)據(jù)：采集的原始視頻信息、關(guān)鍵幀圖像信息、去噪增強(qiáng)模型和增強(qiáng)后的視頻信息。針對(duì)不同的數(shù)據(jù)類型，存儲(chǔ)方式包括而不限于以下四種。本實(shí)施例中的四種存儲(chǔ)方式和實(shí)施例二中步驟4介紹的四種存儲(chǔ)方式相同，在此不再贅述。設(shè)置存儲(chǔ)方式的方法采用與實(shí)施例二中步驟4相同的設(shè)置方法，在此不再贅述。步驟5，視頻的播放。在對(duì)雙目攝像頭采集的數(shù)據(jù)進(jìn)行壓縮、存儲(chǔ)和傳輸后，在播放階段中解壓和瀏覽高質(zhì)量視頻。針對(duì)不同的存儲(chǔ)方式，其播放方式包括而不限于實(shí)施例二中步驟5介紹的五種中的一種，五種播放模式與實(shí)施二步驟5中描述相同，在此不再贅述。實(shí)施例五、增強(qiáng)處理模式為圖像增強(qiáng)視頻模式中的去模糊增強(qiáng)模式在拍攝視頻時(shí)，多種因素會(huì)導(dǎo)致畫(huà)面模糊，主要有：1)手持終端設(shè)備拍攝中手的抖動(dòng)，2)運(yùn)動(dòng)物體導(dǎo)致的畫(huà)面模糊，3)對(duì)焦失敗導(dǎo)致的目標(biāo)區(qū)域模糊。本實(shí)施例通過(guò)雙目攝像頭中的一個(gè)攝像頭采集圖像，另一個(gè)攝像頭采集視頻，利用圖像對(duì)視頻進(jìn)行去模糊，得到一個(gè)高質(zhì)量的視頻。具體步驟如下：步驟1：終端設(shè)備確定需要使用雙目攝像頭實(shí)現(xiàn)圖像輔助視頻去模糊，開(kāi)啟像增強(qiáng)視頻模式中的去模糊增強(qiáng)模式。在本實(shí)施例中，步驟1采用與實(shí)施例一中類似的開(kāi)啟方式，區(qū)別在于一些指令描述和閾值設(shè)置的不同，具體區(qū)別描述如下：在用戶開(kāi)啟去模糊增強(qiáng)模式中使用不同的指令描述，例如，語(yǔ)音開(kāi)啟中的指令為“啟動(dòng)視頻去模糊”，按鍵開(kāi)啟的指令為長(zhǎng)按home鍵，虛擬按鍵中視頻去模糊的按鈕，手持開(kāi)啟指令為搖晃終端等，在此不再贅述。在終端設(shè)備根據(jù)設(shè)備相關(guān)狀態(tài)和模式開(kāi)啟歷史記錄數(shù)據(jù)自適應(yīng)開(kāi)啟模式中使用不同的閾值設(shè)置，例如，電量閾值，次數(shù)閾值等。其他描述方式相同，在此不再贅述。在終端設(shè)備根據(jù)采集環(huán)境(即拍攝環(huán)境)和參數(shù)自適應(yīng)開(kāi)啟視頻去模糊增強(qiáng)模式中給出三種方法，一種方法是終端設(shè)備利用已有方法對(duì)拍照終端運(yùn)動(dòng)趨勢(shì)進(jìn)行檢測(cè)，如果拍攝終端處于運(yùn)動(dòng)狀態(tài)，如手持終端手的抖動(dòng)引起的拍攝終端的抖動(dòng)，則開(kāi)啟視頻去模糊增強(qiáng)模式；第二種方法是終端設(shè)備對(duì)拍攝參數(shù)進(jìn)行檢測(cè)，如果視頻采集曝光時(shí)間高于某一閾值，例如，高于300ms,則開(kāi)啟視頻去模糊增強(qiáng)模式；第三種可以是前兩種方法的組合，兩個(gè)條件同時(shí)滿足則開(kāi)啟視頻去模糊增強(qiáng)模式，即拍攝終端處于運(yùn)動(dòng)狀態(tài)，且曝光時(shí)間 高于某一閾值則開(kāi)啟視頻去模糊增強(qiáng)模式。在終端設(shè)備根據(jù)實(shí)時(shí)采集的相關(guān)內(nèi)容自適應(yīng)開(kāi)啟視頻去模糊增強(qiáng)模式中計(jì)算拍攝幀的模糊度指標(biāo)，低于某一閾值則開(kāi)啟視頻去模糊增強(qiáng)模式。步驟2：使用雙目攝像頭的一個(gè)攝像頭拍攝圖像，另一個(gè)攝像頭拍攝視頻。該步驟主要包括采集參數(shù)及增強(qiáng)策略參數(shù)的設(shè)置，主、輔攝像頭的設(shè)置，采集圖像和視頻的參數(shù)設(shè)置，以及關(guān)鍵幀圖像信息的選取。步驟2.1，設(shè)置主、輔攝像頭。在本實(shí)施例中，設(shè)置主、輔攝像頭的方式可以采用實(shí)施例一步驟2.1中類似的設(shè)置主、輔攝像頭的方式，在此不再贅述。步驟2.2，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)。在本實(shí)施例中，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)可以采用實(shí)施例一步驟2.2中類似的設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)方式，在此不再贅述。除了前述參數(shù)設(shè)置方式，本實(shí)施列針對(duì)去模糊模式提出了新的設(shè)置方法。在本實(shí)施例中是利用雙目攝像頭中的一個(gè)攝像頭采集圖像，一個(gè)攝像頭采集視頻，對(duì)視頻進(jìn)行去模糊。在此主要是對(duì)圖像采集的分辨率，曝光時(shí)間，感光度進(jìn)行設(shè)置，出于節(jié)能以及算法設(shè)計(jì)兩方面的考慮，輔攝像頭采集圖像的分辨率應(yīng)與視頻的分辨率設(shè)置保持一致，如果圖像的最低分辨率比當(dāng)前視頻的分辨率高，則采用圖像的最低分辨率進(jìn)行采集。如果拍照環(huán)境亮度正常，或者高于某一閾值，則縮短視頻和圖像曝光時(shí)間，適當(dāng)提高感光度，降低出現(xiàn)畫(huà)面模糊的概率；如果終端設(shè)備傳感器檢測(cè)到終端設(shè)備存在抖動(dòng)或者其他運(yùn)動(dòng)趨勢(shì)，則適當(dāng)減少曝光時(shí)間，避免圖像出現(xiàn)模糊，影響視頻去模糊效果。步驟2.3，選取關(guān)鍵幀圖像信息。在本實(shí)施例中，關(guān)鍵幀圖像信息選取方式可以采用實(shí)施例一步驟2.3中類似的關(guān)鍵幀圖像信息選取方式，在此不再贅述。針對(duì)去模糊模式，本實(shí)施給出新的關(guān)鍵幀選取方式。如果曝光時(shí)間變長(zhǎng)，視頻出現(xiàn)模糊的概率變高，則關(guān)鍵幀采集頻率提高，反之曝光時(shí)間變短，則降低關(guān)鍵幀采集頻率；利用終端設(shè)備自身傳感器檢測(cè)終端設(shè)備運(yùn)動(dòng)狀態(tài)，如 果關(guān)鍵幀采集時(shí)終端設(shè)備出現(xiàn)運(yùn)動(dòng)，則在運(yùn)動(dòng)結(jié)束時(shí)采集另一張關(guān)鍵幀作為前一幀關(guān)鍵幀的備選，當(dāng)前一幀關(guān)鍵幀出現(xiàn)模糊時(shí)，則可以利用備選關(guān)鍵幀對(duì)視頻片段進(jìn)行去模糊，保證了去模糊的效果。步驟3：使用關(guān)鍵幀序列去除視頻的模糊。當(dāng)需要增強(qiáng)的指標(biāo)包括模糊時(shí)，增強(qiáng)處理的方式包括基于模糊核估計(jì)的方式，和/或基于深度學(xué)習(xí)的方式。在采集到的視頻信息中檢測(cè)到待處理的模糊幀時(shí)，確定對(duì)待處理的模糊幀對(duì)應(yīng)的模糊指標(biāo)進(jìn)行增強(qiáng)處理；其中，通過(guò)以下至少一種信息來(lái)檢測(cè)待處理的模糊幀：采集視頻幀時(shí)的設(shè)備運(yùn)動(dòng)狀態(tài)；采集視頻幀時(shí)的對(duì)焦信息；通過(guò)分類器對(duì)采集的視頻信息進(jìn)行分類的分類結(jié)果。具體地，首先需要判斷哪些視頻幀畫(huà)面出現(xiàn)模糊，可以采用但不限于以下三種方案中的一種：一，根據(jù)終端設(shè)備內(nèi)置傳感器監(jiān)測(cè)終端設(shè)備自身的運(yùn)動(dòng)狀態(tài)，如果運(yùn)動(dòng)幅度大于某一閾值則判定在此時(shí)間段拍攝的視頻幀為待處理的模糊幀；二，檢測(cè)對(duì)焦失敗的幀，如果用戶指定了焦點(diǎn)區(qū)域，拍攝中間焦點(diǎn)發(fā)生移動(dòng)，即焦點(diǎn)沒(méi)有對(duì)準(zhǔn)目標(biāo)區(qū)域，則認(rèn)為該目標(biāo)區(qū)域?yàn)榇幚淼哪：齾^(qū)域；三，通過(guò)機(jī)器學(xué)習(xí)的方法，利用大量的模糊圖像與清晰圖像訓(xùn)練得到一個(gè)分類器，用得到的分類器對(duì)視頻幀進(jìn)行分類，被歸類到模糊圖像的視頻幀就是待處理的模糊幀。如果檢測(cè)到模糊幀，則對(duì)這些模糊幀進(jìn)行去模糊處理。首先找到與這些視頻幀內(nèi)容相似的且清晰的關(guān)鍵幀圖像，去模糊的方式包括但不限于以下兩種。一種是基于模糊核估計(jì)的方法，一種是基于深度學(xué)習(xí)的方法。與傳統(tǒng)去模糊方法相比，本實(shí)施例使用一個(gè)參考圖像，即關(guān)鍵幀圖像信息，對(duì)模糊的視頻信息進(jìn)行去模糊，針對(duì)這一個(gè)特性，對(duì)現(xiàn)有方法進(jìn)行了改進(jìn)。下面對(duì)上述兩種方法進(jìn)行詳細(xì)介紹。1)基于模糊核估計(jì)如果輸入的關(guān)鍵幀圖像與視頻幀圖像的分辨率不一致，與去噪方法中采取一樣的步驟對(duì)關(guān)鍵幀圖像與視頻的尺度進(jìn)行統(tǒng)一。利用立體匹配的方法計(jì) 算關(guān)鍵幀圖像與視頻片段中每幀的視差，對(duì)視頻幀中的像素和關(guān)鍵幀圖像的像素進(jìn)行對(duì)齊。根據(jù)對(duì)齊結(jié)果，對(duì)關(guān)鍵幀圖像和模糊的視頻幀進(jìn)行裁剪，得到一對(duì)具有相同尺寸，相同內(nèi)容的圖像對(duì)，一張從關(guān)鍵幀圖像中裁剪得到的干凈圖像，另一張從視頻幀圖像中裁剪得到的模糊圖像?？梢圆眉粢粡埓蟪叽绲膱D像對(duì)，可以裁剪多對(duì)小尺度的圖像對(duì)。利用最小二乘優(yōu)化方法或者其他優(yōu)化方法來(lái)對(duì)每隊(duì)圖像來(lái)估計(jì)模糊核，如果多對(duì)圖像則可以估計(jì)得到多個(gè)模糊核。如果得到一個(gè)模糊核，利用該模糊核對(duì)該幀圖像進(jìn)行去模糊；如果得到多個(gè)模糊核，可以多個(gè)模糊核加權(quán)平均得到一個(gè)平均的模糊核，利用該模糊核對(duì)該幀圖像進(jìn)行去模糊?？紤]到視頻幀的連續(xù)性，如果連續(xù)的幾幀圖像都需要去模糊處理，本實(shí)施例給出兩種處理方式。一種是分別對(duì)每張圖像進(jìn)行上述去模糊操作；一種是挑選幾幀不連續(xù)的圖像來(lái)估計(jì)模糊核，即每?jī)蓭瑘D像之間隔了幾幀模糊圖像，如果挑選出的最近得兩幀估計(jì)得到的模糊核相似則可以認(rèn)為這兩幀之間的圖像也是有相似的模糊核導(dǎo)致的，則可以使用同樣的模糊核進(jìn)行去模糊。如果兩幀的模糊核相似性不高，則需挑選之間的幀中的一幀或者幾幀重新計(jì)算模糊核進(jìn)行去模糊。為了盡量減少計(jì)算時(shí)間，盡可能減少計(jì)算核的次數(shù)，可以采用二分的方法，但不限于該方法，選取關(guān)鍵幀來(lái)計(jì)算模糊核，如果二分區(qū)間兩頭的模糊核相似，則可以同時(shí)將區(qū)間中的視頻幀用統(tǒng)一的模糊核進(jìn)行去模糊，如果二分區(qū)間兩頭的模糊核不相似，則繼續(xù)將區(qū)間進(jìn)行二分，依此進(jìn)行下去，直到對(duì)所有視頻幀完成去模糊處理。2)基于深度學(xué)習(xí)的方法預(yù)處理方法跟第一種方法中采取一樣的步驟，將關(guān)鍵幀圖像與視頻的尺度進(jìn)行統(tǒng)一。利用立體匹配的方法對(duì)視頻幀中的像素和關(guān)鍵幀圖像的像素進(jìn)行對(duì)齊。根據(jù)對(duì)齊結(jié)果，對(duì)關(guān)鍵幀圖像和視頻幀進(jìn)行裁剪，得到一對(duì)具有相同尺寸，相同內(nèi)容的圖像對(duì)，一張從關(guān)鍵幀圖像中裁剪得到的干凈圖像，另一張從視頻幀圖像中裁剪得到的噪聲圖像?；诙鄬?duì)圖像，或者將多對(duì)圖像中提取對(duì)應(yīng)的像素塊，可以得到很多對(duì)像素塊?；谶@些像素塊對(duì)或者圖像對(duì)，利用現(xiàn)有的基于深度學(xué)習(xí)的方法，訓(xùn)練得到一個(gè)具有去模糊功能的卷積網(wǎng)，對(duì)視頻幀進(jìn)行去模糊。該模型可以線下采集大量樣本訓(xùn)練得到一個(gè)初始 模型預(yù)裝在終端設(shè)備中，然后再利用得到的圖像對(duì)，對(duì)該模型進(jìn)行修正，來(lái)對(duì)視頻幀進(jìn)行去模糊；也可以在線訓(xùn)練一個(gè)模型對(duì)視頻幀進(jìn)行去模糊。步驟4：視頻的存儲(chǔ)。在本實(shí)施例中終端設(shè)備生成四類數(shù)據(jù)：采集的原始視頻信息、關(guān)鍵幀圖像信息、去模糊增強(qiáng)模型和增強(qiáng)后的視頻信息。針對(duì)不同的數(shù)據(jù)類型，存儲(chǔ)方式包括而不限于以下四種。本實(shí)施例中的四種存儲(chǔ)方式和實(shí)施例二中步驟4介紹的四種存儲(chǔ)方式相同，在此不再贅述。設(shè)置存儲(chǔ)方式的方法采用與實(shí)施例二中步驟4相同的設(shè)置方法，在此不再贅述。步驟5，視頻的播放。在對(duì)雙目攝像頭采集的數(shù)據(jù)進(jìn)行壓縮、存儲(chǔ)和傳輸后，在播放階段中解壓和瀏覽高質(zhì)量視頻。針對(duì)不同的存儲(chǔ)方式，其播放方式包括而不限于實(shí)施例二中步驟5介紹的五種中的一種，五種播放模式與實(shí)施二步驟5中描述相同，在此不再贅述。實(shí)施例六：多模式聯(lián)合的圖像增強(qiáng)視頻模式(聯(lián)合增強(qiáng)模式)本方法還包括：確定在分辨率增強(qiáng)模式、顏色增強(qiáng)模式、亮度增強(qiáng)模式、去噪增強(qiáng)模式及去模糊增強(qiáng)模式中的至少兩種增強(qiáng)模式的聯(lián)合增強(qiáng)模式，并確定與至少兩種增強(qiáng)模式相應(yīng)的模式增強(qiáng)順序。通過(guò)以下至少一項(xiàng)來(lái)確定聯(lián)合增強(qiáng)模式及相應(yīng)的模式增強(qiáng)順序的方式包括以下至少一項(xiàng)：系統(tǒng)默認(rèn)設(shè)置；自適應(yīng)模式設(shè)置方式；模式設(shè)置觸發(fā)操作。其中，自適應(yīng)模式設(shè)置方式通過(guò)設(shè)備相關(guān)狀態(tài)、模式設(shè)置歷史記錄信息、多媒體采集設(shè)備實(shí)時(shí)采集的相關(guān)內(nèi)容及各個(gè)增強(qiáng)模式之間的影響關(guān)系中的一項(xiàng)或多項(xiàng)信息來(lái)確定；其中，多媒體采集設(shè)備實(shí)時(shí)采集的相關(guān)內(nèi)容包括場(chǎng)景亮度、語(yǔ)義內(nèi)容中的至少一項(xiàng)。模式設(shè)置觸發(fā)操作通過(guò)與用戶交互下的語(yǔ)音、按鍵、手勢(shì)、通過(guò)外部 控制器等來(lái)實(shí)現(xiàn)。如前所述，圖像增強(qiáng)視頻模式包括分辨率、顏色、亮度、去噪和去模糊增強(qiáng)。本實(shí)施例用圖像對(duì)視頻的這五個(gè)模式進(jìn)行聯(lián)合增強(qiáng)，基本流程為：首先開(kāi)啟多模式聯(lián)合的視頻增強(qiáng)，其次設(shè)置主、輔攝像頭分別采集圖像信息和視頻信息，并設(shè)置攝像頭的采集參數(shù)、增強(qiáng)策略參數(shù)、選取關(guān)鍵幀圖像信息和選取待增強(qiáng)的模式，同時(shí)根據(jù)增強(qiáng)策略參數(shù)、關(guān)鍵幀圖像信息和增強(qiáng)模式對(duì)視頻進(jìn)行增強(qiáng)，最后將采集結(jié)果壓縮、傳輸和播放。步驟1：開(kāi)啟多模式聯(lián)合的視頻增強(qiáng)在本實(shí)施例中，開(kāi)啟方式采用實(shí)施例一步驟1中類似的開(kāi)啟方式，區(qū)別在于開(kāi)啟功能的指令描述內(nèi)容，例如，語(yǔ)音開(kāi)啟中的指令為“啟動(dòng)視頻多模式聯(lián)合增強(qiáng)”，按鍵開(kāi)啟的指令為按f1鍵，虛擬按鍵為多模式聯(lián)合增強(qiáng)的按鈕，手持開(kāi)啟指令為屏幕畫(huà)圓等，在此不再贅述。步驟2：使用雙目攝像頭中的一個(gè)攝像頭拍攝圖像，另一個(gè)攝像頭拍攝視頻。該步驟包括設(shè)置主、輔攝像頭，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)，選取關(guān)鍵幀圖像信息，以及選取待增強(qiáng)的模式和模式增強(qiáng)順序。步驟2.1，設(shè)置主、輔攝像頭。在本實(shí)施例中，設(shè)置主、輔攝像頭的方式可以采用實(shí)施例一步驟2.1中類似的主、輔攝像頭設(shè)置方式，在此不再贅述。步驟2.2，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)。在本實(shí)施例中，攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)的設(shè)置方式可以采用實(shí)施例一步驟2.2中類似的采集參數(shù)和增強(qiáng)策略參數(shù)的設(shè)置方式，在此不再贅述。步驟2.3，選取關(guān)鍵幀圖像信息。在本實(shí)施例中，關(guān)鍵幀圖像信息的選取方式可以采用實(shí)施例一步驟2.3中類似的關(guān)鍵幀選取方式，在此不再贅述。步驟2.4，選取聯(lián)合增強(qiáng)的模式和模式增強(qiáng)順序。關(guān)于默認(rèn)系統(tǒng)設(shè)置，終端設(shè)備默認(rèn)設(shè)置增強(qiáng)某些模式和這些模式的增強(qiáng)順序，例如啟動(dòng)時(shí)僅為開(kāi)啟顏色增強(qiáng)和亮度增強(qiáng)，并且先進(jìn)行顏色增強(qiáng)， 再進(jìn)行亮度增強(qiáng)。關(guān)于用戶交互下的語(yǔ)音設(shè)置，例如，用戶預(yù)先設(shè)定語(yǔ)音指令“多模式聯(lián)合增強(qiáng)，開(kāi)啟視頻顏色增強(qiáng)”，終端設(shè)備接受到該指令，則對(duì)聲控指令進(jìn)行語(yǔ)音識(shí)別，確定開(kāi)啟顏色增強(qiáng)功能，用戶再發(fā)出語(yǔ)音指令“多模式聯(lián)合增強(qiáng)，關(guān)閉視頻顏色增強(qiáng)”，終端設(shè)備接受到該指令，則確定關(guān)閉視頻顏色增強(qiáng)，其中，模式增強(qiáng)順序跟語(yǔ)音指令的發(fā)出順序一致。關(guān)于用戶交互下的按鍵設(shè)置，按鍵可以為硬件按鍵，例如f1表示開(kāi)啟/關(guān)閉顏色增強(qiáng)，f2表示開(kāi)啟/關(guān)閉亮度增強(qiáng)，f3表示開(kāi)啟/關(guān)閉分辨率增強(qiáng)，f4表示開(kāi)啟/關(guān)閉去模糊，f5表示開(kāi)啟/關(guān)閉去噪。按鍵也可以為虛擬按鍵，例如屏幕上的按鈕、菜單，交互界面上的虛擬鍵盤(pán)等，系統(tǒng)檢測(cè)到用戶點(diǎn)擊該虛擬按鍵的事件后，確認(rèn)開(kāi)啟/關(guān)閉某一增強(qiáng)模式。用戶按下還可以結(jié)合按的壓力、速度、時(shí)間、頻率等多種特征信息表示不同的含義，例如輕按代表關(guān)閉某一增強(qiáng)模式，重按代表開(kāi)啟某一增強(qiáng)模式。其中，模式增強(qiáng)順序跟用戶按鍵的點(diǎn)擊順序一致。關(guān)于用戶交互下的手勢(shì)設(shè)置，系統(tǒng)預(yù)先設(shè)定某一手持來(lái)開(kāi)啟/關(guān)閉某一增強(qiáng)模式。手勢(shì)包括屏幕手勢(shì)，例如從左向右滑動(dòng)屏幕表示開(kāi)啟/關(guān)閉顏色增強(qiáng)，從右向左滑動(dòng)屏幕代表開(kāi)啟/關(guān)閉亮度增強(qiáng)。手勢(shì)還包括隔空手勢(shì)，包括搖晃/翻轉(zhuǎn)/傾斜終端，搖晃/翻轉(zhuǎn)/傾斜時(shí)的不同方向，角度，速度，力度可以表示不同的含義，如上下?lián)u晃、左右搖晃、空著畫(huà)圓等，上述手勢(shì)可以是單一的手勢(shì)，例如左手橫向滑動(dòng)表示開(kāi)啟/關(guān)閉顏色增強(qiáng)，也可以是任意手勢(shì)的任意組合，例如右手橫向滑動(dòng)并空著畫(huà)圓表示開(kāi)啟/關(guān)閉分辨率增強(qiáng)。其中，視頻模式增強(qiáng)順序跟用戶手勢(shì)的控制順序一致。關(guān)于通過(guò)外部控制器的設(shè)置，外部控制器包括但不限于手寫(xiě)筆、遙控器、智能手表、智能眼鏡、智能頭戴式設(shè)備、智能衣服、或遠(yuǎn)程設(shè)備等，這些控制器通過(guò)wifi和/或紅外和/或藍(lán)牙和/或網(wǎng)絡(luò)跟終端設(shè)備通信，例如，遙控器上某些按鍵代表啟動(dòng)不同增強(qiáng)模式，終端設(shè)備檢測(cè)到用戶點(diǎn)擊了按鍵，開(kāi)啟/關(guān)閉其增強(qiáng)模式。其中，視頻模式增強(qiáng)順序跟外部控制器的指令發(fā)出順序一致。關(guān)于根據(jù)實(shí)時(shí)采集內(nèi)容的自適應(yīng)模式聯(lián)合增強(qiáng)，實(shí)時(shí)采集的內(nèi)容包括 場(chǎng)景亮度、運(yùn)動(dòng)物體、語(yǔ)義內(nèi)容等?？梢愿鶕?jù)場(chǎng)景亮度來(lái)開(kāi)啟/關(guān)閉某些增強(qiáng)模式，例如檢測(cè)到場(chǎng)景光線偏暗，則啟動(dòng)亮度、顏色、分辨率增強(qiáng)和去噪，當(dāng)光線變亮，則關(guān)閉亮度、顏色、分辨率增強(qiáng)和去噪?？梢愿鶕?jù)運(yùn)動(dòng)物體來(lái)開(kāi)啟/關(guān)閉某些增強(qiáng)模式，例如檢測(cè)到場(chǎng)景運(yùn)動(dòng)物體有/無(wú)模糊，則自動(dòng)啟動(dòng)/關(guān)閉去模糊模式，檢測(cè)到場(chǎng)景運(yùn)動(dòng)物體尺度小于一定閾值，例如運(yùn)動(dòng)物體長(zhǎng)度小于圖像長(zhǎng)度的1/10，則自動(dòng)啟動(dòng)分辨率增強(qiáng)模式?？梢愿鶕?jù)語(yǔ)義內(nèi)容來(lái)開(kāi)啟/關(guān)閉某些增強(qiáng)模式，例如檢測(cè)視頻場(chǎng)景從室內(nèi)切換到室外，則開(kāi)啟顏色增強(qiáng)以適應(yīng)白平衡變化，例如檢測(cè)到視頻場(chǎng)景中有/無(wú)車輛、人體和文字，則開(kāi)啟/關(guān)閉分辨率增強(qiáng)模式。關(guān)于根據(jù)實(shí)時(shí)采集的相關(guān)內(nèi)容的自適應(yīng)模式增強(qiáng)順序設(shè)置，如果終端設(shè)備自適應(yīng)選擇了多個(gè)模式進(jìn)行增強(qiáng)，需要對(duì)增強(qiáng)模式進(jìn)行優(yōu)先級(jí)排序，排序的原則是在該拍攝環(huán)境下，哪個(gè)模式更需要增強(qiáng)，即增強(qiáng)后對(duì)視頻質(zhì)量的提升影響最大。例如在夜間光照不夠的情形下拍攝視頻，不考慮運(yùn)動(dòng)因素，則亮度增強(qiáng)模式的優(yōu)先級(jí)最高，去噪模式的優(yōu)先級(jí)次之，接下來(lái)是顏色增強(qiáng)，然后是去模糊，最后是分辨率增強(qiáng)；又例如在運(yùn)動(dòng)的拍攝環(huán)境下，光照強(qiáng)度正常，則去模糊優(yōu)先級(jí)最高，其他增強(qiáng)模式可以根據(jù)其他條件進(jìn)行排序；又如在更復(fù)雜的拍照環(huán)境下，既存在光照不足問(wèn)題，還存在終端設(shè)備的運(yùn)動(dòng)，用戶可以對(duì)增強(qiáng)模式進(jìn)行排序，也可以根據(jù)用戶的歷史數(shù)據(jù)對(duì)用戶關(guān)注的模式進(jìn)行排序，用戶關(guān)注最多的模式排序越靠前。關(guān)于根據(jù)設(shè)備相關(guān)狀態(tài)的自適應(yīng)設(shè)置，設(shè)備狀態(tài)包括電量、內(nèi)存等。可以根據(jù)五個(gè)增強(qiáng)模式的電量消耗進(jìn)行模式設(shè)定和增強(qiáng)排序，假設(shè)排序結(jié)果為分辨率>去模糊>去噪>顏色增強(qiáng)>亮度增強(qiáng)，如果電量小于第一閾值，例如50％，則不進(jìn)行分辨率增強(qiáng)，如果電量小于第二閾值，例如40％，則不進(jìn)行去模糊，如果電量小于第三閾值，例如30％，則不進(jìn)行去噪，如果電量小于第四閾值，例如20％，則不進(jìn)行顏色增強(qiáng)，如果電量小于第五閾值，例如10％，則不進(jìn)行亮度增強(qiáng)?？梢愿鶕?jù)內(nèi)存的自適應(yīng)設(shè)置，例如根據(jù)五個(gè)增強(qiáng)模式的緩儲(chǔ)空間進(jìn)行模式設(shè)定和增強(qiáng)排序，假設(shè)排序結(jié)果為分辨率>去模糊>去噪>顏色增強(qiáng)>亮度增強(qiáng)，如果內(nèi)存小于第一閾值，例如500m，則不進(jìn)行分辨率增強(qiáng)，如果內(nèi)存小于第二閾值，例如400m，則不 進(jìn)行去模糊，如果內(nèi)存小于第三閾值，例如300m，則不進(jìn)行去噪，如果內(nèi)存小于第四閾值，例如200m，則不進(jìn)行顏色增強(qiáng)，如果內(nèi)存小于第五閾值，例如100m，則不進(jìn)行亮度增強(qiáng)。關(guān)于根據(jù)模式設(shè)置歷史記錄信息的自適應(yīng)設(shè)置，記錄所有增強(qiáng)模式被用戶選擇的次數(shù)，按照該次數(shù)進(jìn)行優(yōu)先級(jí)排序，例如，排序結(jié)果為分辨率>去模糊>去噪>顏色增強(qiáng)>亮度增強(qiáng)，當(dāng)下次啟動(dòng)時(shí)，優(yōu)先進(jìn)行分辨率增強(qiáng)，再進(jìn)行去噪、去模糊、顏色增強(qiáng)和亮度增強(qiáng)?；蛘吒鶕?jù)上一次拍攝時(shí)的增強(qiáng)模式來(lái)確定本次拍攝需要增強(qiáng)的模式。此外，五個(gè)增強(qiáng)模式之間存在影響關(guān)系，如表1所示。在表1中，“x”代表模式之間不相干，“o”代表模式a的增強(qiáng)會(huì)影響模式b的效果。考慮到模式之間的相關(guān)性，如果增強(qiáng)某一個(gè)模式，相關(guān)模式可以選擇性的不進(jìn)行增強(qiáng)或者進(jìn)行增強(qiáng)，例如如果增強(qiáng)分辨率，則視頻幀相比較清晰，可以不去模糊，如果夜景下亮度增強(qiáng)后，則噪聲也會(huì)相應(yīng)變得明顯，則需要去噪。表1.增強(qiáng)模式之間的影響關(guān)系分辨率顏色亮度去噪去模糊分辨率-xxxo顏色x-xxx亮度xx-ox去噪oxx-o去模糊oxxx-步驟3，對(duì)視頻信息進(jìn)行多模式聯(lián)合增強(qiáng)。在步驟2.4確定增強(qiáng)的模式后，該步驟對(duì)增強(qiáng)模式進(jìn)行一一增強(qiáng)，在此考慮模式增強(qiáng)的順序，即對(duì)步驟2.4中選擇出的模式確定增強(qiáng)順序。然后以增強(qiáng)順序根據(jù)之前實(shí)施例一至五中的增強(qiáng)方法對(duì)選擇的增強(qiáng)模式一一進(jìn)行處理即可。步驟4，視頻的存儲(chǔ)。在本實(shí)施例中，如果增強(qiáng)模式包括分辨率增強(qiáng)，則視頻存儲(chǔ)方式可以采用實(shí)施例一中步驟4中相同的視頻存儲(chǔ)方式，在此不再贅述。存儲(chǔ)方式的設(shè)置方法也與實(shí)施例一中步驟5中的設(shè)置方法相同，在此不再贅述。視頻的存儲(chǔ)方式可以采用實(shí)施例二中步驟4中相同的視頻存儲(chǔ)方式，在此不再贅述。存儲(chǔ)方式的設(shè)置方法也與實(shí)施例二中步驟5中的設(shè)置方法相同，在此不再贅述。步驟5，視頻的播放。在本實(shí)施例中，播放方式和存儲(chǔ)方式對(duì)應(yīng)，如果增強(qiáng)模式包括分辨率增強(qiáng)，則視頻的播放方式采用實(shí)施例一步驟5中相同的視頻播放方式，在此不再贅述。如果增強(qiáng)模式不包括分辨率增強(qiáng)，則視頻播放方式采用實(shí)施例二步驟5中相同的視頻播放的方式，在此不再贅述。下面以一個(gè)具體實(shí)施例詳細(xì)介紹視頻聯(lián)合增強(qiáng)模式，該模式包括開(kāi)啟步驟，模式增強(qiáng)步驟，參數(shù)設(shè)置步驟，存儲(chǔ)步驟，播放步驟。圖4中14個(gè)子步驟涵蓋了這五個(gè)步驟。步驟1)：開(kāi)始終端設(shè)備的照相機(jī)，進(jìn)入拍照界面，通過(guò)語(yǔ)音控制，用戶說(shuō)“開(kāi)啟視頻增強(qiáng)”，終端設(shè)備接收到“開(kāi)啟視頻增強(qiáng)”，終端設(shè)備進(jìn)入視頻增強(qiáng)模式。步驟2)：視頻增強(qiáng)模式開(kāi)啟后，拍照界面上面出現(xiàn)紅色字體的“視頻增強(qiáng)模式”，下面出現(xiàn)“視頻增強(qiáng)”按鈕，用戶單擊該按鈕，進(jìn)入增強(qiáng)模式選擇界面。步驟3)：進(jìn)入模式選擇界面，“視頻增強(qiáng)”字樣變成黃色字體，出現(xiàn)六個(gè)選項(xiàng)，分別對(duì)應(yīng)“亮度”，“顏色”，“去噪”，“去模糊”，“分辨率”，“自動(dòng)”。前五個(gè)選項(xiàng)分別對(duì)應(yīng)不同的增強(qiáng)模式，用戶可以通過(guò)勾選一個(gè)或者任意多個(gè)來(lái)進(jìn)行模式增強(qiáng)，也可以選擇最后一個(gè)“自動(dòng)”讓終端設(shè)備根據(jù)拍照環(huán)境等其他因素自適應(yīng)的選擇需要增強(qiáng)的模式。勾選完成后，再次單擊“增強(qiáng)模式”按鈕，進(jìn)入攝像頭設(shè)置界面。步驟4)：拍照界面顯示兩個(gè)攝像頭的采集畫(huà)面，用戶可以通過(guò)切換攝像頭查看拍照?qǐng)鼍埃脩艨勺杂稍O(shè)定哪個(gè)攝像頭為主攝像頭拍攝原始視頻，另外一個(gè)攝像頭為輔攝像頭拍攝關(guān)鍵幀照片。步驟5)：選定攝像頭后，點(diǎn)擊設(shè)置按鈕，可以攝像頭進(jìn)行采集參數(shù)設(shè)置，切換攝像頭，可以完成對(duì)兩個(gè)攝像頭采集參數(shù)的設(shè)置。采集參數(shù)包括但不限于曝光時(shí)間，感光度。完成采集參數(shù)設(shè)置后，單擊“錄像”按鈕，進(jìn)入下一個(gè)步驟。步驟6)：進(jìn)入錄像界面，開(kāi)始錄像，主攝像頭拍攝視頻，輔攝像頭開(kāi)始拍攝關(guān)鍵幀照片。在錄像界面，完成拍攝后，用戶按下“停止”按鈕結(jié)束拍攝，通過(guò)不同的交互方式可以進(jìn)行不同的存儲(chǔ)播放模式。單擊“停止”按鈕跳轉(zhuǎn)到圖中步驟7，直接存儲(chǔ)增強(qiáng)后的視頻；長(zhǎng)按“停止”按鈕，跳轉(zhuǎn)到步驟10，存儲(chǔ)原始視頻信息和關(guān)鍵幀圖像信息。步驟7)：視頻進(jìn)行增強(qiáng)處理，界面右下角圖像框中顯示原始視頻信息，并顯示緩沖標(biāo)志，提示用戶視頻增強(qiáng)的進(jìn)度，增強(qiáng)完成，緩沖圖標(biāo)消失，圖像框中顯示增強(qiáng)后的視頻信息。完成存儲(chǔ)后進(jìn)入正常拍攝界面。步驟8)：拍攝的視頻增強(qiáng)完成，且存儲(chǔ)在終端設(shè)備中，在進(jìn)行下次拍攝前，右下角圖像框顯示最近時(shí)間內(nèi)拍攝的視頻，可以點(diǎn)擊該圖像框?qū)υ鰪?qiáng)后的視頻信息進(jìn)行查看。步驟9)：進(jìn)入視頻播放界面，點(diǎn)擊播放按鈕即進(jìn)行視頻播放。步驟10)：直接存儲(chǔ)原始視頻信息和關(guān)鍵幀圖像信息，右下角圖像框中顯示原始視頻信息。后臺(tái)會(huì)根據(jù)處理器使用情況來(lái)對(duì)視頻增強(qiáng)進(jìn)行選擇性處理，如果處理器有空閑則對(duì)視頻進(jìn)行增強(qiáng)處理。單擊右下角圖像框查看視頻。終端設(shè)備接到單擊指令后，首先判斷視頻增強(qiáng)是否完成，如果后臺(tái)完成了增強(qiáng)步驟，則跳轉(zhuǎn)到步驟11)，如果后臺(tái)未完成增強(qiáng)步驟，則跳轉(zhuǎn)到步驟12)。步驟11)：視頻增強(qiáng)已經(jīng)完成，顯示增強(qiáng)后的視頻播放界面，單擊播放按鈕即可播放視頻。步驟12)：視頻增強(qiáng)未完成，終端設(shè)備繼續(xù)對(duì)視頻進(jìn)行增強(qiáng)，背景圖像可以顯示原始視頻信息，同時(shí)出現(xiàn)緩沖標(biāo)志提示增強(qiáng)進(jìn)度。增強(qiáng)完成后，緩沖圖標(biāo)自動(dòng)消失，跳轉(zhuǎn)到步驟13)。步驟13)：顯示增強(qiáng)后的視頻播放界面，單擊播放按鈕進(jìn)入步驟14)。步驟14)：播放視頻。實(shí)施例七：手持終端中的多模式聯(lián)合的圖像增強(qiáng)視頻模式下面以一個(gè)具體實(shí)施例詳述手持智能終端中視頻聯(lián)合增強(qiáng)模式的執(zhí)行流程。步驟1)：用戶拿起手持智能終端，發(fā)出語(yǔ)音指令“開(kāi)啟視頻增強(qiáng)”，手持智能終端啟動(dòng)兩個(gè)攝像頭，默認(rèn)某一側(cè)攝像頭a采集圖像，另一側(cè)攝像頭b采集視頻，如圖5所示。步驟2)：如圖6(a)所示，通過(guò)預(yù)覽當(dāng)前拍攝場(chǎng)景，手持智能終端檢測(cè)到場(chǎng)景為白天，設(shè)置白平衡為日光，檢測(cè)到場(chǎng)景亮度偏高，自適應(yīng)設(shè)置圖像曝光度偏低，手持智能終端默認(rèn)設(shè)置視頻采集頻率為30fps，尺寸為640*480，圖像尺寸為1920*1080，關(guān)鍵幀采集頻率設(shè)為1次/分鐘。步驟3)：根據(jù)用戶在視頻增強(qiáng)主屏幕下的操作，手持智能終端響應(yīng)于以下事件，包括：打開(kāi)設(shè)置功能，然后在觸摸屏上選取白平衡設(shè)置，如圖6(b)所示，用滑動(dòng)條滾動(dòng)調(diào)整了白平衡，并調(diào)整曝光量，更改視頻采集頻率為25fps，關(guān)鍵幀采集頻率為2次/分鐘。步驟4)：根據(jù)用戶點(diǎn)擊交互面板上的capture圖標(biāo)的操作，如圖6(c)所示，智能終端啟動(dòng)視頻采集，并且默認(rèn)開(kāi)始時(shí)的模式組合為亮度增強(qiáng)和顏色增強(qiáng)。步驟5)：當(dāng)場(chǎng)景中有一個(gè)快速移動(dòng)的小孩，視頻幀出現(xiàn)了模糊，智能終端自適應(yīng)地啟動(dòng)了去模糊模式，并將關(guān)鍵幀采集頻率提升為4次/分鐘。步驟6)：隨著小孩移動(dòng)出畫(huà)面和視頻幀模糊消失，智能終端自適應(yīng)地關(guān)閉了去模糊模式，并將關(guān)鍵幀采集頻率恢復(fù)為2次/分鐘。步驟7)：此時(shí)，由于室外日光越來(lái)越亮手持智能終端檢測(cè)到亮度增強(qiáng)，從而自適應(yīng)地減低了曝光量。步驟8)：當(dāng)用戶進(jìn)入室內(nèi)光線也隨之變暗，手持智能終端檢測(cè)亮度減弱，從而自適應(yīng)地提高了曝光量。步驟9)：用戶發(fā)出語(yǔ)音指令“啟動(dòng)高動(dòng)態(tài)范圍圖像”，手持智能終端將普通亮度采集切換為高動(dòng)態(tài)范圍采集。步驟10)：雖然光線再次變?nèi)?，視頻中出現(xiàn)大量噪聲，手持智能終端檢測(cè)到噪聲增強(qiáng)自適應(yīng)地啟動(dòng)了去噪模式。步驟11)：這時(shí)，電量低于30％，手持智能終端自適應(yīng)地關(guān)閉高動(dòng)態(tài)范圍拍攝，當(dāng)電量低于10％，手持智能終端又關(guān)閉了顏色增強(qiáng)模式，當(dāng)電量低于5％，系統(tǒng)將關(guān)閉所有增強(qiáng)模式。步驟12)：用戶發(fā)出語(yǔ)音指令“關(guān)閉視頻增強(qiáng)”，手持智能終端識(shí)別出聲控指令關(guān)閉了視頻增強(qiáng)，并壓縮存儲(chǔ)增強(qiáng)后的視頻；步驟13)：此后，用戶每次打開(kāi)該增強(qiáng)視頻，手持智能終端都識(shí)別并進(jìn)行該視頻的播放觀看。實(shí)施例八：監(jiān)控終端中的多模式聯(lián)合的圖像增強(qiáng)視頻模式在室外環(huán)境下，目前的監(jiān)控設(shè)備往往具有采集分辨率低、采集亮度差，對(duì)光線敏感，陰雨天噪聲大等缺點(diǎn)。本實(shí)施例給出一種將單目監(jiān)控?cái)z像頭替換為雙目監(jiān)控?cái)z像頭的方案，并在后臺(tái)進(jìn)行視頻質(zhì)量增強(qiáng)處理，提高分辨率、顏色、亮度和去噪去模糊。在高速公路上搭建了一個(gè)雙攝像頭監(jiān)控的智能終端設(shè)備，如圖7(a)所示，對(duì)過(guò)往車輛進(jìn)行拍攝監(jiān)控，其中一路攝像頭采集視頻，視頻尺寸固定為480*320，另一路攝像頭采集圖像，圖像尺寸固定為1920*1080，通過(guò)網(wǎng)絡(luò)將兩路數(shù)據(jù)傳輸?shù)奖O(jiān)控后端。監(jiān)控后端有一臺(tái)處理器、一個(gè)顯示屏和一套控制面板，如圖6(b)所示，其中后臺(tái)處理器對(duì)兩路數(shù)據(jù)進(jìn)行實(shí)時(shí)處理，顯示屏幕上展示當(dāng)前監(jiān)控視頻、已采集關(guān)鍵幀和虛擬控制面板，硬件控制面板包括鼠標(biāo)和鍵盤(pán)等裝置，對(duì)參數(shù)、增強(qiáng)模式組合、關(guān)鍵幀選取進(jìn)行設(shè)置。下面以一個(gè)實(shí)施例介紹監(jiān)控情況下視頻質(zhì)量增強(qiáng)方法。首先，操作員通過(guò)按鍵f1啟動(dòng)“視頻增強(qiáng)”，根據(jù)場(chǎng)景情況執(zhí)行以下步驟：步驟1)，默認(rèn)關(guān)鍵幀采集模式為系統(tǒng)自適應(yīng)調(diào)整，如果操作員不進(jìn)行設(shè)置，則跳轉(zhuǎn)到步驟2)，否則，操作員通過(guò)虛擬控制面板設(shè)置關(guān)鍵幀采集模式是n幀/秒；步驟2)，默認(rèn)模式組合為分辨率增強(qiáng)和去模糊增強(qiáng)，如果操作員不 進(jìn)行設(shè)置，則跳轉(zhuǎn)到步驟3)，否則，操作員通過(guò)虛擬控制面板選取和組合五個(gè)增強(qiáng)模式。步驟3)，顯示屏幕上實(shí)時(shí)顯示原始采集視頻、增強(qiáng)視頻以及一組最近采集的關(guān)鍵幀。顯示效果有三個(gè)：如圖6(c)所示的原始視頻，如圖6(d)所示的顏色增強(qiáng)和去噪增強(qiáng)，如圖6(e)所示的亮度增強(qiáng)。操作員通過(guò)菜單可以選取任意一種展示方式。步驟4)，當(dāng)監(jiān)控終端發(fā)現(xiàn)場(chǎng)景有一個(gè)超速車輛，可以自適應(yīng)提高關(guān)鍵幀采集率獲取更多高清晰圖像，可以調(diào)節(jié)圖像曝光量增減場(chǎng)景亮度，可以設(shè)置對(duì)焦區(qū)域?yàn)檐囕v車牌，可以選取白平衡來(lái)調(diào)整色差。步驟5)，當(dāng)拍攝場(chǎng)景為夜色、陰雨天，監(jiān)控終端根據(jù)時(shí)間和亮度自適應(yīng)啟動(dòng)去噪和亮度增強(qiáng)模式。步驟6)，每隔6個(gè)小時(shí)，監(jiān)控終端將前6個(gè)小時(shí)采集的視頻、關(guān)鍵幀、模式增強(qiáng)組合方式、和設(shè)置參數(shù)壓縮存儲(chǔ)到數(shù)據(jù)庫(kù)中。步驟7)，為了調(diào)用觀看之前存儲(chǔ)的數(shù)據(jù)，用戶通過(guò)數(shù)據(jù)庫(kù)查詢到某段數(shù)據(jù)，智能終端在顯示屏幕上展示增強(qiáng)前后的視頻和關(guān)鍵幀。實(shí)施例九、增強(qiáng)處理模式為視頻增強(qiáng)圖像模式中的去模糊增強(qiáng)模式當(dāng)?shù)谝活惗嗝襟w信息為視頻信息，第二類多媒體信息為圖像信息時(shí)，獲取一個(gè)多媒體采集設(shè)備采集的圖像信息，以及另一多媒體采集設(shè)備依據(jù)設(shè)置的視頻幀采集頻率采集的與圖像信息相對(duì)應(yīng)的視頻片段；其中，根據(jù)采集的第一類多媒體信息，對(duì)采集的第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集的視頻片段對(duì)采集的圖像信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理。優(yōu)選地，還包括：當(dāng)檢測(cè)到采集圖像信息的多媒體采集設(shè)備進(jìn)入預(yù)覽狀態(tài)時(shí)，或當(dāng)檢測(cè)到采集圖像信息多媒體采集設(shè)備開(kāi)始采集圖像信息時(shí)，另一多媒體采集設(shè)備依據(jù)設(shè)置的視頻幀采集頻率采集的與圖像信息相對(duì)應(yīng)的視頻片段；當(dāng)檢測(cè)到采集的視頻片段中的視頻幀數(shù)達(dá)到對(duì)應(yīng)的上限值時(shí)，另一多媒 體采集設(shè)備停止采集視頻信息。其中，根據(jù)采集的視頻片段對(duì)采集的圖像信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理，具體包括：在采集的視頻片段中確定視頻關(guān)鍵幀；基于模糊核估計(jì)的方式，根據(jù)視頻關(guān)鍵幀對(duì)采集到的圖像信息進(jìn)行增強(qiáng)處理。優(yōu)選地，通過(guò)自適應(yīng)關(guān)鍵幀確定方式來(lái)確定視頻關(guān)鍵幀；其中，自適應(yīng)關(guān)鍵幀確定方式通過(guò)畫(huà)面模糊程度、內(nèi)容相似度、視頻幀質(zhì)量中的一項(xiàng)或多項(xiàng)信息來(lái)確定。優(yōu)選地，還包括：對(duì)采集到的圖像信息進(jìn)行清晰度分析；若圖像信息屬于模糊圖像，則根據(jù)采集到的視頻片段對(duì)采集到的圖像信息對(duì)應(yīng)的需要增強(qiáng)的指標(biāo)進(jìn)行增強(qiáng)處理；其中，需要增強(qiáng)的指標(biāo)包括于模糊。當(dāng)?shù)谝活惗嗝襟w信息為視頻信息，第二類多媒體信息為圖像信息時(shí)，根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行存儲(chǔ)處理，其中，存儲(chǔ)內(nèi)容包括以下至少一種情形：根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后的圖像信息；采集到的視頻信息和圖像信息；采集到的圖像信息以及采集到的視頻信息中用于對(duì)圖像信息進(jìn)行增強(qiáng)處理的視頻關(guān)鍵幀；采集到的圖像信息和對(duì)圖像信息進(jìn)行增強(qiáng)處理時(shí)的增強(qiáng)模型；根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后的圖像信息以及采集到的視頻信息?？蛇x地，響應(yīng)于接收到的顯示觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的顯示方式對(duì)圖像信息進(jìn)行顯示；其中，顯示方式包括以下至少一項(xiàng)：當(dāng)存儲(chǔ)增強(qiáng)處理后的圖像信息時(shí)，直接顯示增強(qiáng)處理后的圖像信息；當(dāng)存儲(chǔ)采集到的視頻信息和圖像信息時(shí)，根據(jù)采集的視頻信息對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后顯示；當(dāng)存儲(chǔ)采集到的圖像信息和進(jìn)行增強(qiáng)處理的視頻關(guān)鍵幀時(shí)，根據(jù)視頻關(guān)鍵幀確定增強(qiáng)模型，并通過(guò)增強(qiáng)模式對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后顯示；當(dāng)存儲(chǔ)采集到的圖像信息和增強(qiáng)模型時(shí)，通過(guò)增強(qiáng)模型對(duì)采集的圖像信息進(jìn)行增強(qiáng)處理后顯示；當(dāng)存儲(chǔ)增強(qiáng)處理后的圖像信息和采集到的視頻信息時(shí)，將增強(qiáng)處理后的圖像信息和采集到的視頻信息關(guān)聯(lián)顯示。本實(shí)施例是通過(guò)雙目攝像頭中的一個(gè)攝像頭采集圖像，另一個(gè)攝像頭采集視頻，得到高質(zhì)量圖像。為了拍一張高亮度清晰的圖像，用戶往往會(huì)采用長(zhǎng)曝光拍照，在沒(méi)有三腳架固定的情況下，手持智能終端容易產(chǎn)生抖動(dòng)，拍攝畫(huà)面會(huì)出現(xiàn)模糊。在拍照的同時(shí)啟動(dòng)另一個(gè)攝像頭拍攝一小段視頻，視頻每幀曝光時(shí)間短，邊緣和紋理信息保持較好，而且相比于圖像，視頻是動(dòng)態(tài)的，可以利用視頻的這一特性來(lái)對(duì)靜態(tài)圖像進(jìn)行增強(qiáng)。通過(guò)視頻幀和照片可以估計(jì)出運(yùn)動(dòng)模糊核，進(jìn)而對(duì)圖像進(jìn)行去模糊，得到一張高亮度清晰的圖像。主要步驟如下。步驟1：開(kāi)啟視頻增強(qiáng)圖像模式中的去模糊增強(qiáng)模式。在本實(shí)施例中，步驟1采用與實(shí)施例一中類似的開(kāi)啟方式，區(qū)別在于一些指令描述和閾值設(shè)置的不同，具體區(qū)別描述如下。在用戶開(kāi)啟圖像去模糊增強(qiáng)模式中使用不同的指令描述，例如，語(yǔ)音開(kāi)啟中的指令為“啟動(dòng)圖像去模糊”，按鍵開(kāi)啟的指令為長(zhǎng)按home鍵，虛擬按鍵中圖像去模糊的按鈕，手持開(kāi)啟指令為搖晃終端等，在此不再贅述。在終端設(shè)備根據(jù)設(shè)備相關(guān)狀態(tài)和模式開(kāi)啟歷史記錄數(shù)據(jù)自適應(yīng)開(kāi)啟模式中使用不同的閾值設(shè)置，例如，電量閾值，次數(shù)閾值等。其他描述方式相同，在此不再贅述。在終端設(shè)備根據(jù)拍攝環(huán)境和采集參數(shù)自適應(yīng)開(kāi)啟圖像去模糊模式中給出三種方法，一種方法是智能終端利用現(xiàn)有方法對(duì)終端設(shè)備運(yùn)動(dòng)趨勢(shì)進(jìn)行檢測(cè)，如果拍攝終端設(shè)備處于運(yùn)動(dòng)狀態(tài)，如手持終端設(shè)備的手的抖動(dòng)引起的手持終端設(shè)備產(chǎn)生抖動(dòng)，則開(kāi)啟圖像去模糊增強(qiáng)模式；第二種方法是終端設(shè)備對(duì)拍攝參數(shù)進(jìn)行檢測(cè)，如果圖像采集的曝光時(shí)間高于某一閾值，例如高于300ms，則開(kāi)啟圖像去模糊增強(qiáng)模式；第三種可以是前兩種方法的組合，兩個(gè)條件同時(shí)滿足則開(kāi)啟圖像去模糊增強(qiáng)模式，即拍攝終端處于 運(yùn)動(dòng)狀態(tài)，且曝光時(shí)間高于某一閾值則開(kāi)啟圖像去模糊增強(qiáng)模式。在終端設(shè)備根據(jù)實(shí)時(shí)采集的相關(guān)內(nèi)容自適應(yīng)開(kāi)啟圖像去模糊模式中計(jì)算拍攝圖像的模糊度指標(biāo)，低于某一閾值則開(kāi)啟圖像去模糊模式，用于后續(xù)圖像的拍攝。步驟2：使用雙目攝像頭的一個(gè)攝像頭拍攝圖像，另一個(gè)攝像頭拍攝視頻。該步驟主要包括采集參數(shù)及增強(qiáng)策略參數(shù)的設(shè)置，主、輔攝像頭的設(shè)置，采集圖像和視頻的參數(shù)設(shè)置，以及視頻關(guān)鍵幀的選取。步驟2.1，設(shè)置主、輔攝像頭。在本實(shí)施例中，設(shè)置主、輔攝像頭的方式可以采用實(shí)施例一步驟2.1中類似的設(shè)置主、輔攝像頭的方式，在此不再贅述。在本實(shí)施中主攝像頭負(fù)責(zé)拍攝圖像，輔攝像頭負(fù)責(zé)拍攝視頻。步驟2.2，設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)本實(shí)施例中參數(shù)是雙目攝像頭采集圖像和視頻片段需要設(shè)置的參數(shù)，除了實(shí)施列一中提到的攝像頭的采集參數(shù)，增加了視頻幀采集頻率，即每秒采集的視頻幀數(shù)，以及圖像去模糊算法中的參數(shù)等。設(shè)置攝像頭的采集參數(shù)和增強(qiáng)策略參數(shù)可以采用實(shí)施例一類似的設(shè)置方式，不同的是增加了對(duì)視頻幀采集頻率的設(shè)置以及針對(duì)圖像去模糊進(jìn)行的自適應(yīng)參數(shù)調(diào)整，下面分別對(duì)新增加的設(shè)置方法進(jìn)行介紹。關(guān)于終端設(shè)備的系統(tǒng)默認(rèn)設(shè)置，將視頻幀采集頻率設(shè)置為某一默認(rèn)值，在接收到修改視頻幀采集頻率指令之前視頻幀采集頻率設(shè)置為默認(rèn)值，其他方式相同，在此不再贅述。關(guān)于用戶交互設(shè)置，對(duì)于視頻幀采集頻率，用戶可以通過(guò)語(yǔ)音，滑動(dòng)條，按鍵，文本輸入等方式來(lái)設(shè)置視頻片段幀數(shù)。采集參數(shù)受到終端設(shè)備自身取值范圍的限制，用戶手動(dòng)設(shè)置也需要在一定范圍內(nèi)選擇，否則接收到終端設(shè)備發(fā)出的警告，具體內(nèi)容在此不再贅述。關(guān)于根據(jù)環(huán)境的自適應(yīng)設(shè)置，例如，終端設(shè)備檢測(cè)到拍攝終端處于運(yùn)動(dòng)狀態(tài)，則增加輔攝像頭采集的視頻幀采集頻率。關(guān)于根據(jù)電量的自適應(yīng)設(shè)置，例如由電量控制視頻幀采集頻率，電量 小于某一閾值，例如，小于50％，則減少每秒采集的視頻幀的幀數(shù)，小于5％則固定幀數(shù)為最小值。關(guān)于根據(jù)存儲(chǔ)空間的自適應(yīng)設(shè)置。根據(jù)存儲(chǔ)空間，可以調(diào)整視頻幀采集頻率，如果剩余存儲(chǔ)空間大于某一閾值，例如，大于終端設(shè)備總存儲(chǔ)空間的50％或者大于500m，則自動(dòng)調(diào)整為高的視頻幀采集頻率，例如一秒30幀，反之，則調(diào)整為低的視頻幀采集頻率，例如一秒25幀。根據(jù)存儲(chǔ)空間，可以調(diào)整視頻幀采集頻率的多少，如果剩余存儲(chǔ)空間大于某一閾值，例如，大于終端設(shè)備總存儲(chǔ)空間的30％或者大于300m，則增加輔攝像頭采集的視頻幀采集頻率，反之則減少輔攝像采集的視頻幀采集頻率。關(guān)于根據(jù)歷史數(shù)據(jù)的自適應(yīng)設(shè)置，例如根據(jù)用戶喜好設(shè)置視頻幀采集頻率，可以采用但不限于下面這種方法：統(tǒng)計(jì)最近n次圖像去模糊中設(shè)置視頻的視頻幀采集頻率，終端設(shè)備推薦設(shè)置視頻幀采集頻率為之前設(shè)置過(guò)的采集頻率的均值。關(guān)于根據(jù)采集到的相關(guān)內(nèi)容來(lái)自適應(yīng)的設(shè)置采集參數(shù)，在本實(shí)施例中是利用雙目攝像頭中一個(gè)采集圖像，一個(gè)采集視頻，對(duì)圖像進(jìn)行去模糊。在此主要是對(duì)視頻和圖像采集的分辨率，曝光時(shí)間，感光度進(jìn)行設(shè)置，出于節(jié)能以及算法設(shè)計(jì)兩方面的考慮，輔助攝像頭采集視頻的分辨率應(yīng)與圖像的分辨率設(shè)置保持一致，如果視頻的最高分辨率比當(dāng)前圖像的分辨率低，則采用視頻的最高分辨率進(jìn)行采集。如果拍照環(huán)境亮度正常，或者高于某一閾值，則縮短圖像和視頻曝光時(shí)間，適當(dāng)提高感光度，降低出現(xiàn)畫(huà)面模糊的概率；如果傳感器檢測(cè)到終端設(shè)備存在抖動(dòng)或者其他運(yùn)動(dòng)趨勢(shì)，則適當(dāng)減少曝光時(shí)間，避免圖像和視頻出現(xiàn)模糊，影響圖像最終的效果。步驟2.3，視頻片段的采集該步驟介紹輔助攝像頭何時(shí)開(kāi)始進(jìn)行視頻拍攝，可以采用但不限于以下兩種方式中的一種：一種是在圖像拍攝前，即瀏覽界面時(shí)進(jìn)行拍攝；一種是照片開(kāi)始拍攝時(shí)同時(shí)啟動(dòng)視頻拍攝。在瀏覽界面進(jìn)行拍攝時(shí)，為了節(jié)省視頻存儲(chǔ)空間以及保證視頻畫(huà)面與照片內(nèi)容的強(qiáng)相關(guān)性，瀏覽界面拍攝的視頻只保留部分幀，該部分視頻的幀數(shù)可以用戶通過(guò)語(yǔ)音，滑動(dòng)條，文本輸入等方式進(jìn)行設(shè)置，也可以根據(jù) 總的視頻幀數(shù)來(lái)自適應(yīng)的調(diào)節(jié)該部分視頻的幀數(shù)，例如，設(shè)置為總幀數(shù)的10％。總的視頻幀數(shù)多，則該部分可以保存的視頻幀數(shù)就多，反之則變少。設(shè)置一個(gè)緩沖序列來(lái)存儲(chǔ)這部分視頻幀，將該序列存儲(chǔ)的最大幀數(shù)設(shè)置為終端設(shè)備設(shè)置的視頻片段的幀數(shù)，當(dāng)該序列存滿時(shí)，來(lái)了新的視頻幀，則去除序列中的最早拍攝的視頻幀，如果視頻序列中的視頻幀是按照拍攝時(shí)間存儲(chǔ)的，則去除第一幀，留出空間存儲(chǔ)新的視頻幀，按照此方法依此進(jìn)行視頻序列的更新，只保留最新的視頻片段。拍照開(kāi)始時(shí)繼續(xù)拍攝視頻，可以根據(jù)以下兩種判斷條件停止視頻拍攝，一是拍攝的幀數(shù)與之前幀數(shù)之和達(dá)到視頻總幀數(shù)上限時(shí)停止視頻拍攝；二是在拍照完成時(shí)，視頻幀數(shù)未到達(dá)幀數(shù)上限也停止拍攝，存儲(chǔ)得到的總的視頻幀數(shù)即可。在拍照啟動(dòng)時(shí)，同時(shí)啟動(dòng)視頻拍攝，視頻幀數(shù)達(dá)到終端設(shè)備設(shè)置的視頻幀數(shù)時(shí)停止視頻拍攝，如在拍照完成時(shí)，視頻幀數(shù)未達(dá)到終端設(shè)備設(shè)置的視頻幀數(shù)也停止拍攝，存儲(chǔ)得到的視頻片段即可。步驟3：使用視頻去除圖像的模糊；得到圖像和視頻片段后，終端設(shè)備對(duì)圖像畫(huà)面清晰度進(jìn)行分析，可以通過(guò)照片拍攝期間，終端傳感器獲得的參數(shù)，或者視頻片段是否存在運(yùn)動(dòng)目標(biāo)，或者文獻(xiàn)中的已有的分類器對(duì)圖像進(jìn)行分類。如果畫(huà)面屬于清晰圖像，則不進(jìn)行去模糊處理，否則繼續(xù)下面的去模糊處理。為了節(jié)省處理時(shí)間，可以選擇視頻片段中的幾幀對(duì)圖像進(jìn)行去模糊，即確定視頻關(guān)鍵幀。視頻關(guān)鍵幀幀數(shù)可以根據(jù)畫(huà)面模糊程度進(jìn)行自適應(yīng)調(diào)整，也可以設(shè)置為一個(gè)固定值或者一個(gè)固定的比例，例如，設(shè)置為總的幀數(shù)的五分之一等。視頻關(guān)鍵幀的選擇可以通過(guò)內(nèi)容相似度，選擇最相似的幾幀；也可以通過(guò)視頻幀質(zhì)量，選擇質(zhì)量排在前的幾幀；也可以使用組合的指標(biāo)來(lái)選擇視頻幀，例如對(duì)視頻質(zhì)量進(jìn)行排序，然后根據(jù)模糊程度設(shè)置關(guān)鍵幀幀數(shù)。得到視頻關(guān)鍵幀之后，首先將視頻關(guān)鍵幀與圖像的尺度進(jìn)行統(tǒng)一，將視頻關(guān)鍵幀進(jìn)行放縮或者圖像進(jìn)行放縮，或者同時(shí)對(duì)視頻關(guān)鍵幀和圖像進(jìn)行放縮，使得圖像和視頻幀具有相同的尺寸。利用立體匹配的方法計(jì)算關(guān)鍵幀與圖像的視差，對(duì)視頻幀和圖像進(jìn)行對(duì)齊，找到視頻幀與圖像的對(duì)應(yīng) 區(qū)域，將每幀視頻，即非模糊圖像，與模糊圖像的對(duì)應(yīng)區(qū)域建立一個(gè)模糊圖像到清晰圖像的對(duì)應(yīng)關(guān)系，基于每對(duì)對(duì)應(yīng)區(qū)域，可以利用文獻(xiàn)中已有的模糊核估計(jì)方法求解多個(gè)模糊核。將求解得到的所有模糊核進(jìn)行加權(quán)平均得到一個(gè)最終的模糊核，在此每個(gè)核的權(quán)重可以平均分配；也可以根據(jù)內(nèi)容相似度進(jìn)行分配，相似度高的權(quán)重高，相似度小的，權(quán)重小；也可以根據(jù)視頻幀的質(zhì)量進(jìn)行權(quán)重分配，質(zhì)量越高權(quán)重越高。最后，利用上述模糊核對(duì)拍攝圖像進(jìn)行去模糊。也可以采用深度學(xué)習(xí)方法利用這些圖像對(duì)學(xué)習(xí)一個(gè)去模糊模型，對(duì)圖像進(jìn)行去模糊。除了利用圖像與視頻幀的內(nèi)容關(guān)系計(jì)算模糊核之外，也可以利用現(xiàn)在算法基于連續(xù)的視頻幀來(lái)估計(jì)運(yùn)動(dòng)目標(biāo)或者終端設(shè)備自身的運(yùn)動(dòng)軌跡，來(lái)對(duì)模糊核進(jìn)行修正，提高模糊核的精度，達(dá)到更好的去模糊效果。步驟4：圖像的存儲(chǔ)；在本實(shí)施例中終端設(shè)備生成四類數(shù)據(jù)：原始圖像信息、視頻片段，去模糊模型和去模糊后的高質(zhì)量圖像。其存儲(chǔ)方式包括而不限于以下五種中的一種。第一種是直接將增強(qiáng)后的圖像存儲(chǔ)，不保存視頻片段，即在存儲(chǔ)前完成增強(qiáng)處理，在存儲(chǔ)時(shí)，照片框中顯示原始圖像，上面顯示緩沖圖標(biāo)，表示正在進(jìn)行增強(qiáng)處理，緩沖完成后，完成存儲(chǔ)；第二種是存儲(chǔ)原始圖像以及學(xué)習(xí)到的去模糊模型；第三種是存儲(chǔ)原始圖像以及選擇的視頻關(guān)鍵幀，即用于學(xué)習(xí)去模糊模型的視頻幀，這種方式降低了存儲(chǔ)前圖像的處理時(shí)間，只需找出視頻關(guān)鍵幀，計(jì)算去模糊模型可以在存儲(chǔ)完成后，終端設(shè)備自動(dòng)根據(jù)終端處理器的忙閑來(lái)自己安排處理時(shí)間，計(jì)算完去模糊模型或者直接將圖像去模糊后，即可以刪除存儲(chǔ)的視頻關(guān)鍵幀；第四種是直接存儲(chǔ)原始圖像以及保存的視頻片段，所以增強(qiáng)步驟都是終端設(shè)備在存儲(chǔ)之后執(zhí)行；第五種是在存儲(chǔ)增強(qiáng)圖像的同時(shí)也將視頻關(guān)鍵幀保存，增強(qiáng)圖像的得到方式可以是前四種存儲(chǔ)方式的任意一種得到，保存的關(guān)鍵幀序列播放可以看到一張動(dòng)態(tài)圖的效果。針對(duì)如何設(shè)置存儲(chǔ)方式，本發(fā)明給出三種設(shè)置方式，終端設(shè)備可以根據(jù)以下三種中的一種來(lái)對(duì)存儲(chǔ)方式進(jìn)行選擇。第一種是終端設(shè)備默認(rèn)設(shè)置；第二種是終端設(shè)備接收用戶通過(guò)語(yǔ)音、按鍵或外部控制器等方式以及這些方式的組合來(lái)更改存儲(chǔ)方式；第三種是終端設(shè)備通過(guò)存儲(chǔ)空間、電量或歷史數(shù)據(jù)自適應(yīng)設(shè)置存儲(chǔ)方式。關(guān)于系統(tǒng)默認(rèn)設(shè)置，終端設(shè)備設(shè)置五種存儲(chǔ)方式中的一種作為默認(rèn)值，在終端設(shè)備沒(méi)有接受到更改存儲(chǔ)方式的指令前都使用該默認(rèn)存儲(chǔ)方式對(duì)視頻和圖像進(jìn)行存儲(chǔ)。關(guān)于用戶交互下的語(yǔ)音設(shè)置，例如用戶預(yù)先設(shè)定語(yǔ)音指令“儲(chǔ)存增強(qiáng)后的圖像”，如果接受到該指令，則對(duì)聲控指令進(jìn)行語(yǔ)音識(shí)別，確定設(shè)置存儲(chǔ)方式為第一種存儲(chǔ)方式，即存儲(chǔ)增強(qiáng)后的圖像。其他用戶交互方法與實(shí)施一中步驟4中采用相同的設(shè)置方法，在此不再贅述。關(guān)于根據(jù)存儲(chǔ)空間的自適應(yīng)設(shè)置，根據(jù)存儲(chǔ)空間，可以選擇不同的存儲(chǔ)方式，如果剩余存儲(chǔ)空間小于某一閾值，例如低于終端設(shè)備存儲(chǔ)空間的10％，則設(shè)置為第一種存儲(chǔ)方式；如果剩余存儲(chǔ)空間小于某一閾值，例如低于終端設(shè)備存儲(chǔ)空間的40％，則可以設(shè)置為前三種和第五種中的一種；如果剩余存儲(chǔ)空間高于某一閾值，例如高于終端設(shè)備存儲(chǔ)空間的50％，則存儲(chǔ)方式不受存儲(chǔ)空間影響。關(guān)于根據(jù)電量的自適應(yīng)設(shè)置，可以根據(jù)電量控制存儲(chǔ)方式，當(dāng)電量小于第一預(yù)定電量時(shí)，例如低于50％時(shí)，則選擇耗電量小的存儲(chǔ)方式，即第二或者第三種存儲(chǔ)方式，即直接存儲(chǔ)原始圖像和視頻關(guān)鍵幀或者學(xué)習(xí)模型，不對(duì)圖像進(jìn)行增強(qiáng)處理；當(dāng)電量小于第二預(yù)定電量時(shí)，第二預(yù)定電量小于第一預(yù)定電量，例如低于15％時(shí)，則選擇耗電量最小的第四種存儲(chǔ)方式，即原始圖像和視頻片段；如果電量高于某一閾值，例如高于50％，則存儲(chǔ)方式不受電量影響。關(guān)于根據(jù)存儲(chǔ)方式歷史記錄數(shù)據(jù)的自適應(yīng)設(shè)置，例如根據(jù)用戶以往設(shè)置的存儲(chǔ)方式，來(lái)對(duì)用戶喜好進(jìn)行分析，設(shè)置為用戶偏好的存儲(chǔ)方式。步驟5，圖像的顯示終端設(shè)備根據(jù)檢測(cè)到的來(lái)自用戶的顯示操作操作，對(duì)存儲(chǔ)的圖像進(jìn)行 顯示。在顯示存儲(chǔ)的圖像時(shí)，對(duì)應(yīng)不同的存儲(chǔ)方式，有不同的顯示方式，本發(fā)明給出五種顯示模式。終端設(shè)備可以選擇但不限于以下五種顯示方式中一種。第一種：針對(duì)第一種存儲(chǔ)方式，終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，直接顯示去模糊后的圖像。檢測(cè)到用戶點(diǎn)擊查看的操作，例如，檢測(cè)到用戶點(diǎn)擊查看按鈕的操作，即可馬上進(jìn)行圖像顯示，這樣，用戶直接可以查看去模糊后的效果。第二種：針對(duì)第二種存儲(chǔ)方式，終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，打開(kāi)原始圖像和去模糊模型的組合。檢測(cè)到用戶點(diǎn)擊查看的操作，例如，檢測(cè)到用戶點(diǎn)擊查看按鈕的操作，終端設(shè)備開(kāi)始基于去模糊模型對(duì)圖像進(jìn)行去模糊處理。在允許的緩沖時(shí)間內(nèi)完成操作，然后顯示增強(qiáng)后的圖像。第三種：針對(duì)第三種和第四種存儲(chǔ)方式，終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，例如，檢測(cè)到用戶點(diǎn)擊查看按鈕的操作，如果終端設(shè)備已經(jīng)完成了去模糊處理，則可以直接顯示圖像查看增強(qiáng)后的效果。如果終端設(shè)備在后臺(tái)只是做了部分工作，沒(méi)有完成去模糊步驟，則接收到用戶點(diǎn)擊查看操作后需要時(shí)間緩沖來(lái)進(jìn)行圖像去模糊處理，完成處理后開(kāi)始顯示圖像，用戶可以看到去模糊后的圖像。第四種：針對(duì)第五種存儲(chǔ)方式，終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，打開(kāi)去模糊后的圖像和視頻關(guān)鍵幀的組合。去模糊后的圖像的顯示方法和第一種顯示方法相同，不同的是多了動(dòng)態(tài)圖的顯示。關(guān)鍵幀序列播放可以呈現(xiàn)一張動(dòng)態(tài)圖的效果，可以通過(guò)長(zhǎng)按照片查看與該圖像關(guān)聯(lián)的動(dòng)態(tài)圖，但不限于長(zhǎng)按這種控制方式，語(yǔ)音，手勢(shì)等設(shè)置都可以來(lái)顯示動(dòng)態(tài)圖。下面以一個(gè)具體實(shí)施列詳述圖像去模糊增強(qiáng)模式。1)開(kāi)啟交互步驟如圖8所示：步驟1)：開(kāi)啟終端設(shè)備的照相機(jī)，進(jìn)入拍照界面，通過(guò)長(zhǎng)按屏幕開(kāi)啟視頻增強(qiáng)圖像模式。步驟2)：視頻增強(qiáng)圖像模式開(kāi)啟后，拍照界面顯示兩個(gè)攝像頭的采集畫(huà)面，用戶可以通過(guò)切換攝像頭查看拍照?qǐng)鼍皝?lái)自由設(shè)定哪個(gè)攝像頭為 主攝像頭拍攝照片，另外一個(gè)攝像頭為輔攝像頭拍攝視頻。步驟3)：選定攝像頭后，可以分別對(duì)兩個(gè)攝像頭進(jìn)行采集參數(shù)設(shè)置，為了拍攝高亮度圖像，可以提高曝光時(shí)間，降低感光度，提高畫(huà)面質(zhì)量。完成參數(shù)設(shè)置后進(jìn)入下一個(gè)步驟。步驟4)：結(jié)束交互參數(shù)設(shè)置，進(jìn)入拍照界面，畫(huà)面顯示的是主攝像頭視域內(nèi)的畫(huà)面。2)模式增強(qiáng)，存儲(chǔ)和播放步驟如下：步驟1)：在拍照界面，用戶看到有興趣的畫(huà)面時(shí)，按下拍照按鈕進(jìn)行拍照，通過(guò)不同的操作方式可以進(jìn)行不同的存儲(chǔ)播放模式。單擊跳轉(zhuǎn)到圖9中步驟2)，直接存儲(chǔ)增強(qiáng)后的照片；長(zhǎng)按跳轉(zhuǎn)到步驟5)，存儲(chǔ)原始圖像和視頻片段；步驟2)：對(duì)圖像進(jìn)行增強(qiáng)處理，左上角圖像框中顯示原始圖像，并顯示緩沖標(biāo)志，提示用戶圖像增強(qiáng)的進(jìn)度，增強(qiáng)完成，緩沖圖標(biāo)消失，圖像框中顯示增強(qiáng)后的圖像。步驟3)：拍攝的照片增強(qiáng)完成，且存儲(chǔ)在終端設(shè)備中，在拍攝下一張之前，左上角圖像框顯示最近時(shí)間內(nèi)拍攝的照片，可以點(diǎn)擊該圖像框?qū)υ鰪?qiáng)后的圖像進(jìn)行查看。步驟4)：點(diǎn)擊圖像框后，顯示增強(qiáng)后的圖像。步驟5)：直接存儲(chǔ)原始圖像和視頻片段，左上角圖像框中顯示原始圖像。后臺(tái)會(huì)根據(jù)處理器使用情況來(lái)對(duì)圖像增強(qiáng)進(jìn)行選擇性處理，如果處理器有處理能力則對(duì)圖像進(jìn)行增強(qiáng)處理。單擊左上角圖像框查看圖像。終端設(shè)備接到單擊指令后，首先判斷圖像增強(qiáng)是否完成，如果后臺(tái)完成了增強(qiáng)步驟，則跳轉(zhuǎn)到步驟6)，如果后臺(tái)未完成增強(qiáng)步驟，則跳轉(zhuǎn)到步驟7)。步驟6)：圖像增強(qiáng)已經(jīng)完成，顯示增強(qiáng)后的圖像。步驟7)：圖像增強(qiáng)未完成，終端設(shè)備繼續(xù)對(duì)圖像進(jìn)行增強(qiáng)，背景圖像可以顯示原始圖像，同時(shí)出現(xiàn)緩沖標(biāo)志提示增強(qiáng)進(jìn)度。增強(qiáng)完成后，緩沖圖標(biāo)自動(dòng)消失，跳轉(zhuǎn)到步驟8)。步驟8)：顯示增強(qiáng)后的圖像。實(shí)施例十、多焦點(diǎn)區(qū)域聯(lián)合播放模式本實(shí)施例的目的是幫助用戶拍攝具有多個(gè)焦點(diǎn)的視頻。多個(gè)焦點(diǎn)的視頻可以是全局區(qū)域與用戶感興趣的某個(gè)局部區(qū)域，也可以是兩個(gè)感興趣的局部區(qū)域。例如，在拍攝家人或者朋友進(jìn)行舞蹈演出時(shí)，希望既可以對(duì)全局景象進(jìn)行拍攝，又希望對(duì)自己的家人或者朋友進(jìn)行特寫(xiě)拍攝，或者希望同時(shí)對(duì)多個(gè)朋友進(jìn)行特寫(xiě)拍攝，目前的視頻拍攝方式不僅需要用戶頻繁地進(jìn)行手動(dòng)放大及縮小的操作過(guò)程，這樣極易造成拍攝的視頻出現(xiàn)模糊或者抖動(dòng)，而且在同一時(shí)間也僅能看到全局或者看到某個(gè)放大的局部區(qū)域，無(wú)法同時(shí)拍攝全局圖像和清晰的某個(gè)局部圖像，或者無(wú)法同時(shí)拍攝多個(gè)感興趣的局部。本發(fā)明中，利用兩個(gè)攝像頭分別設(shè)置不同的對(duì)焦區(qū)域，其中一個(gè)攝像頭對(duì)焦全局，另一個(gè)攝像頭對(duì)焦局部感興趣區(qū)域或者一個(gè)攝像頭對(duì)焦某個(gè)局部感興趣區(qū)域，另一個(gè)攝像頭對(duì)焦另一個(gè)局部感興趣區(qū)域，然后兩個(gè)攝像頭同時(shí)進(jìn)行拍攝，得到一個(gè)兼具全局和局部感興趣區(qū)域的多焦點(diǎn)視頻，或者兩個(gè)清晰的局部區(qū)域視頻。需要說(shuō)明的是，下述實(shí)施例的詳述中，將根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理的方式，具體為采集到的對(duì)焦于一個(gè)焦點(diǎn)區(qū)域的視頻信息對(duì)采集到的對(duì)焦于另一個(gè)焦點(diǎn)區(qū)域的視頻信息進(jìn)行聯(lián)合播放處理的多焦點(diǎn)區(qū)域聯(lián)合播放模式。在本實(shí)施例中，第一類多媒體信息與第二類多媒體信息為對(duì)焦于不同焦點(diǎn)區(qū)域的視頻信息；其中，焦點(diǎn)區(qū)域包括全局區(qū)域和/或局部區(qū)域。具體地，根據(jù)采集到的對(duì)焦于一個(gè)焦點(diǎn)區(qū)域的視頻信息，對(duì)采集到的對(duì)焦于另一個(gè)焦點(diǎn)區(qū)域的視頻信息進(jìn)行聯(lián)合播放處理。其中，通過(guò)以下至少一種方式來(lái)確定焦點(diǎn)區(qū)域：當(dāng)檢測(cè)到用戶選定一個(gè)局部區(qū)域時(shí)，則確定已選定的局部區(qū)域?yàn)榻裹c(diǎn)區(qū)域，另一焦點(diǎn)區(qū)域?yàn)槿謪^(qū)域；當(dāng)檢測(cè)到用戶選定兩個(gè)局部區(qū)域時(shí)，則確定已選定的兩個(gè)局部區(qū)域?yàn)榻裹c(diǎn)區(qū)域。優(yōu)選地，通過(guò)用戶選定的焦點(diǎn)對(duì)象，檢測(cè)用戶選定的局部區(qū)域。其中，全局區(qū)域和/或局部區(qū)域可通過(guò)分屏的布局方式進(jìn)行聯(lián)合播放。(1)開(kāi)啟多焦點(diǎn)區(qū)域聯(lián)合播放模式包括兩種方式，一種是用戶主動(dòng)開(kāi)啟多焦點(diǎn)視頻，另一種是終端設(shè)備根據(jù)拍攝的視頻內(nèi)容，提示用戶是否需要開(kāi)啟多焦點(diǎn)視頻拍攝。與前文所述類似，用戶可以通過(guò)語(yǔ)音，按鍵，手勢(shì)，生物特征，外部控制器等以及這些交互方式的任意組合方式啟動(dòng)多焦點(diǎn)視頻拍攝模式。關(guān)于使用語(yǔ)音開(kāi)啟，例如用戶可以預(yù)先設(shè)定語(yǔ)音開(kāi)啟指令：“開(kāi)啟多焦點(diǎn)視頻拍攝”，如果終端設(shè)備接收到用戶發(fā)出的聲控指令“開(kāi)啟多焦點(diǎn)視頻拍攝”，則對(duì)該聲控指令進(jìn)行內(nèi)容識(shí)別，從而確定此時(shí)需要開(kāi)啟多焦點(diǎn)視頻拍攝。關(guān)于按鍵開(kāi)啟，按鍵可以為硬件按鍵，例如音量鍵或home鍵，用戶通過(guò)長(zhǎng)按音量鍵或home鍵開(kāi)啟多焦點(diǎn)拍攝模式，終端接收到用戶的上述長(zhǎng)按操作事件后，確認(rèn)此時(shí)需要切換至多焦點(diǎn)視頻拍攝模式。按鍵也可以為虛擬按鍵，例如屏幕上的虛擬控件按鈕，菜單等，終端可以在視頻拍攝的預(yù)覽界面顯示多焦點(diǎn)拍攝虛擬按鍵，接收到用戶點(diǎn)擊該虛擬按鍵的事件后，確認(rèn)此時(shí)需要切換至多焦點(diǎn)視頻拍攝界面。通過(guò)按鍵開(kāi)啟時(shí)，還可以結(jié)合用戶按的壓力、速度、時(shí)間、頻率等多種特征信息表示不同的含義，如輕按表示更換對(duì)焦點(diǎn)目標(biāo)人物，重按表示修改對(duì)焦人物放大倍數(shù)，又如長(zhǎng)按表示開(kāi)啟多個(gè)對(duì)焦點(diǎn)目標(biāo)人物拍攝模式等等。關(guān)于通過(guò)手勢(shì)開(kāi)啟，手勢(shì)包括屏幕手勢(shì)，例如雙擊屏幕/長(zhǎng)按屏幕等，通過(guò)屏幕手勢(shì)開(kāi)啟時(shí)可以結(jié)合用戶手勢(shì)的壓力、速度、時(shí)間、頻率的不同表示不同含義，如輕按表示更換對(duì)焦點(diǎn)目標(biāo)人物，重按表示修改對(duì)焦人物放大倍數(shù)，又如長(zhǎng)按表示開(kāi)啟多個(gè)對(duì)焦點(diǎn)目標(biāo)人物拍攝模式等等。手勢(shì)還包括隔空手勢(shì)，如搖晃終端/翻轉(zhuǎn)終端/傾斜終端，搖晃/翻轉(zhuǎn)/傾斜時(shí)的不同方向，角度，速度，力度可以表示不同的含義，如上下?lián)u晃表示更換對(duì)焦點(diǎn)目標(biāo)人物，左右搖晃表示更改拍攝時(shí)參數(shù)，又如向左傾斜表示切換展示方式，向右傾斜表示切換存儲(chǔ)方式。上述手勢(shì)可以是單一的手勢(shì)，也可以是任意手勢(shì)的任意組合。如長(zhǎng)按屏幕并搖晃終端表示開(kāi)啟多焦點(diǎn)視頻拍攝并可以實(shí)時(shí)更換對(duì)焦點(diǎn)目標(biāo)人物進(jìn)行拍攝。關(guān)于通過(guò)生物特征開(kāi)啟，包括但不限于手寫(xiě)特征、指紋特征、聲紋特 征。例如，終端在視頻拍攝預(yù)覽界面時(shí)，若指紋檢測(cè)器或者聲紋檢測(cè)器檢測(cè)到的指紋或者聲紋與預(yù)先注冊(cè)的用戶一致，則此時(shí)需要切換至提示開(kāi)啟多焦點(diǎn)視頻拍攝模式。關(guān)于通過(guò)外部控制器開(kāi)啟，外部控制器可以是與終端設(shè)備相關(guān)聯(lián)的手寫(xiě)筆，話筒等設(shè)備，例如，終端設(shè)備檢測(cè)到手寫(xiě)筆被取出又被快速插回終端，或者手寫(xiě)筆的預(yù)設(shè)按鍵被按下，或者用戶使用手寫(xiě)筆做出預(yù)設(shè)的空中手勢(shì)，則確認(rèn)此時(shí)需要切換至多焦點(diǎn)視頻拍攝模式；外部控制器可以是智能手表，智能眼鏡等，其他設(shè)備可以為手機(jī)或其他配件或附件或獨(dú)立的設(shè)備，上述可穿戴設(shè)備可以通過(guò)wifi和/或nfc和/或藍(lán)牙和/或數(shù)據(jù)網(wǎng)絡(luò)訪問(wèn)終端設(shè)備，上述可穿戴設(shè)備或其他設(shè)備通過(guò)按鍵，手勢(shì)，生物特征中的至少一種交互方式確認(rèn)用戶想要切換至多焦點(diǎn)視頻拍攝模式，并通知上述終端設(shè)備。(2)確定多焦點(diǎn)區(qū)域當(dāng)終端設(shè)備開(kāi)啟多焦點(diǎn)視頻拍攝模式后，在拍攝預(yù)覽界面，用戶可以手動(dòng)指定多個(gè)區(qū)域，如果用戶僅指定了一個(gè)區(qū)域，則此時(shí)的多焦點(diǎn)區(qū)域?yàn)榕臄z預(yù)覽界面捕獲到的整個(gè)圖像和指定的這個(gè)區(qū)域。如果用戶指定了兩個(gè)以上區(qū)域，此時(shí)的多焦點(diǎn)區(qū)域視頻在拍攝時(shí)，會(huì)交替對(duì)準(zhǔn)某個(gè)指定的區(qū)域，從而得到用戶指定的多個(gè)感興趣區(qū)域組成的視頻。除了上述用戶手動(dòng)指定的方式外，終端設(shè)備可以根據(jù)當(dāng)前拍攝場(chǎng)景中的對(duì)象(如人物)自動(dòng)確定多焦點(diǎn)區(qū)域。例如，檢測(cè)場(chǎng)景中人物數(shù)量，將人物數(shù)量最多的區(qū)域作為一個(gè)感興趣區(qū)域，整個(gè)場(chǎng)景作為全局區(qū)域。也可以由用戶選定焦點(diǎn)對(duì)象。將用戶選定的焦點(diǎn)對(duì)象所在區(qū)域確認(rèn)為焦點(diǎn)區(qū)域。當(dāng)用戶開(kāi)啟多焦點(diǎn)視頻拍攝模式時(shí)，關(guān)于對(duì)焦點(diǎn)人物的選擇可以有多種方式。例如，當(dāng)進(jìn)入多焦點(diǎn)視頻拍攝的預(yù)覽模式時(shí)，自動(dòng)進(jìn)行全局區(qū)域內(nèi)的人臉檢測(cè)，用戶通過(guò)單擊或者拖動(dòng)檢測(cè)到的人臉區(qū)域的方式確定拍攝的對(duì)焦點(diǎn)區(qū)域。在進(jìn)入拍攝模式時(shí)，運(yùn)用人臉跟蹤及識(shí)別技術(shù)，可以實(shí)時(shí)跟蹤到用戶感興趣的對(duì)焦人物，使用雙目攝像頭的其中之一拍攝全局區(qū)域視頻，另一個(gè)攝像頭拍攝跟蹤到的用戶感興趣的對(duì)焦人物視頻。當(dāng) 用戶希望更換感興趣的目標(biāo)人物時(shí)，可以通過(guò)雙擊屏幕，此時(shí)即可啟動(dòng)全局區(qū)域視頻中的人臉檢測(cè)，用戶可以選擇檢測(cè)到的人臉中的某個(gè)人物，或者手動(dòng)指定感興趣的區(qū)域。同時(shí)也可以動(dòng)態(tài)地對(duì)感興趣區(qū)域的包圍框進(jìn)行修正。例如將人臉區(qū)域擴(kuò)大為臉部及肩部區(qū)域，或者人物的上半身區(qū)域，或者人物的整個(gè)身體區(qū)域。(3)用戶交互方式根據(jù)用戶拍攝多焦點(diǎn)視頻時(shí)，手持終端設(shè)備的橫屏或者豎屏狀態(tài)提供不同的交互方式。通過(guò)重力傳感器檢測(cè)到終端設(shè)備如果處于橫屏狀態(tài)拍攝視頻時(shí)，使用如圖10所示的左右屏顯示的視頻布局方式。左側(cè)為“全局區(qū)域視頻”，右側(cè)為“局部對(duì)焦感興趣目標(biāo)人物視頻”，或者左側(cè)為“局部對(duì)焦感興趣目標(biāo)人物視頻”，右側(cè)為“全局區(qū)域視頻”均可。同時(shí)根據(jù)對(duì)焦點(diǎn)人物的數(shù)量不同，左側(cè)或者右側(cè)的“局部對(duì)焦感興趣目標(biāo)人物視頻”區(qū)域可以顯示多個(gè)目標(biāo)人物。如果檢測(cè)到當(dāng)前終端設(shè)備處于豎屏狀態(tài)拍攝視頻時(shí)，使用如圖11所示的上下屏顯示的視頻布局方式。上方為“全局區(qū)域視頻”，下方為“局部對(duì)焦感興趣目標(biāo)人物視頻”，或者上方為“局部對(duì)焦感興趣目標(biāo)人物視頻”，下方為“全局區(qū)域視頻”均可。同時(shí)根據(jù)對(duì)焦點(diǎn)人物的數(shù)量不同，上方或者下方的“局部對(duì)焦感興趣目標(biāo)人物視頻”區(qū)域可以顯示多個(gè)目標(biāo)人物。當(dāng)用戶更希望關(guān)注全局區(qū)域，并且希望將自己感興趣的目標(biāo)人物存儲(chǔ)下來(lái)用于后續(xù)播放時(shí)，可以選擇如圖12所示的大小屏播放模式。全局視頻幾乎占據(jù)整個(gè)屏幕，局部對(duì)焦的感興趣目標(biāo)人物視頻處于屏幕中的一小塊位置，可以是右下角、左下角、右上角或左上角?；蛘呖梢杂捎脩糁付〝[放的位置。(4)多焦點(diǎn)視頻存儲(chǔ)優(yōu)選地，根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理，具體包括：根據(jù)采集到的對(duì)焦于一個(gè)焦點(diǎn)區(qū)域的視頻信息，對(duì)采集到的對(duì)焦于另一個(gè)焦點(diǎn)區(qū)域的視頻信息進(jìn)行存儲(chǔ)處理，其中，存儲(chǔ)內(nèi)容包括以下至少一種情形：1)采集到的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息；2)根據(jù)采集到的對(duì)焦于一個(gè)焦點(diǎn)區(qū)域的視頻信息，對(duì)采集到的對(duì)焦于另一個(gè)焦點(diǎn)區(qū)域的視頻信息進(jìn)行合成處理后的合成視頻信息；3)確定出的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息中的感興趣視頻內(nèi)容；4)采集到的對(duì)焦于全局區(qū)域的視頻信息以及該全局區(qū)域的視頻信息中局部區(qū)域的位置信息。基于多焦點(diǎn)拍攝方式，本實(shí)施列給出以下四種存儲(chǔ)方式：方式一：將兩個(gè)攝像頭拍攝的多焦點(diǎn)視頻分別存儲(chǔ)下來(lái)，得到兩個(gè)視頻文件。如果兩個(gè)攝像頭一個(gè)是全局對(duì)焦，一個(gè)是局部對(duì)焦，則存儲(chǔ)得到的兩個(gè)視頻中一個(gè)對(duì)應(yīng)全局對(duì)焦視頻，一個(gè)對(duì)應(yīng)局部對(duì)焦視頻；如果兩個(gè)攝像頭都是局部對(duì)焦，則兩個(gè)視頻分別對(duì)應(yīng)兩個(gè)攝像頭得到的局部對(duì)焦視頻。方式二：該存儲(chǔ)方式提供了一種可見(jiàn)即可得的視頻合成存儲(chǔ)方法，存儲(chǔ)內(nèi)容與終端設(shè)備顯示屏幕呈現(xiàn)的畫(huà)面相同，視頻中的每幀畫(huà)面都同時(shí)將兩個(gè)攝像頭的拍攝畫(huà)面同時(shí)呈現(xiàn)，例如，圖10-12中給出的三種屏幕呈現(xiàn)方式，對(duì)于圖12所示的大小屏方式，存儲(chǔ)得到的視頻中每幀都是一個(gè)大小屏的畫(huà)面，該畫(huà)面內(nèi)容與對(duì)應(yīng)時(shí)刻屏幕中呈現(xiàn)的內(nèi)容，畫(huà)面中大屏和小屏分別對(duì)應(yīng)兩個(gè)攝像頭拍攝的內(nèi)容。方式三：該存儲(chǔ)方式提供了一種用戶興趣驅(qū)動(dòng)的視頻合并存儲(chǔ)方法，該方式針對(duì)屏幕劃分為主屏幕和副屏幕的呈現(xiàn)方式，如圖3所示的大小屏，大屏為主屏幕，主屏幕中顯示的內(nèi)容表示用戶當(dāng)前感興趣的視域，存儲(chǔ)的最終視頻為主屏幕中顯示的內(nèi)容，視頻中的每幀都是直接呈現(xiàn)用戶該時(shí)刻感興趣的區(qū)域。方式四：該存儲(chǔ)方法是針對(duì)拍攝的全局對(duì)焦和局部對(duì)焦的拍攝方式，存儲(chǔ)時(shí)可以存儲(chǔ)全局拍攝的視頻，再加上實(shí)時(shí)跟蹤得到的局部區(qū)域在全局中的包圍框上的四個(gè)點(diǎn)位置信息確定的局部感興趣區(qū)域物體。如圖13所示，在全局區(qū)域視頻中，將全局區(qū)域視頻保存，并將全局區(qū)域中實(shí)時(shí)跟蹤到的矩形框，例如圖13中的黃色區(qū)域的四個(gè)角點(diǎn)，位置保存下來(lái)。并以 此矩形框大小作為標(biāo)準(zhǔn)，保存另一個(gè)攝像頭拍攝到的局部對(duì)焦區(qū)域的內(nèi)容。針對(duì)如何設(shè)置存儲(chǔ)方式，本發(fā)明給出三種設(shè)置方法，終端設(shè)備可以根據(jù)以下三種中的一種來(lái)對(duì)存儲(chǔ)方式進(jìn)行選擇。第一種是終端設(shè)備的系統(tǒng)默認(rèn)設(shè)置；第二種是終端設(shè)備接受用戶通過(guò)語(yǔ)音、按鍵或外部控制器等觸發(fā)操作的方式以及這些方式的組合來(lái)更改存儲(chǔ)方式；第三種是終端設(shè)備通過(guò)設(shè)備相關(guān)信息，如存儲(chǔ)空間，或歷史記錄數(shù)據(jù)自適應(yīng)設(shè)置存儲(chǔ)方式。關(guān)于系統(tǒng)默認(rèn)設(shè)置，終端設(shè)備設(shè)置四種存儲(chǔ)方式中的一種作為默認(rèn)值，在終端設(shè)備沒(méi)有接收到更改存儲(chǔ)方式的指令前都使用該默認(rèn)存儲(chǔ)方式對(duì)視頻進(jìn)行存儲(chǔ)。關(guān)于用戶交互的設(shè)置方式，采用實(shí)施例一中步驟4類似的設(shè)置方法，區(qū)別在于指令描述內(nèi)容，例如，語(yǔ)音設(shè)置中的指令為“視頻分別存儲(chǔ)”，如果終端設(shè)備接收到該指令，則對(duì)聲控指令進(jìn)行語(yǔ)音識(shí)別，確定設(shè)置存儲(chǔ)方式為第一種存儲(chǔ)方式。其他用戶交互的設(shè)置方式相同，在此不再贅述。關(guān)于根據(jù)存儲(chǔ)空間的自適應(yīng)設(shè)置，根據(jù)存儲(chǔ)空間，可以選擇不同的存儲(chǔ)方式，如果剩余存儲(chǔ)空間小于某一閾值，例如低于終端設(shè)備存儲(chǔ)空間的50％，則設(shè)置為后三種存儲(chǔ)方式中的一種；反之，如果剩余存儲(chǔ)空間高于某一閾值，例如高于終端設(shè)備存儲(chǔ)空間的50％，則存儲(chǔ)方式不受存儲(chǔ)空間影響。關(guān)于根據(jù)歷史記錄數(shù)據(jù)的自適應(yīng)設(shè)置，例如根據(jù)用戶以往設(shè)置的存儲(chǔ)方式，來(lái)對(duì)用戶喜好進(jìn)行分析，設(shè)置為用戶偏好的存儲(chǔ)方式。(5)多焦點(diǎn)視頻播放方式優(yōu)選地，響應(yīng)于接收到的播放觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的播放方式對(duì)視頻信息進(jìn)行播放；其中，播放方式包括以下至少一項(xiàng)：1)當(dāng)存儲(chǔ)采集到的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息時(shí)，將兩個(gè)視頻信息分別單獨(dú)播放或聯(lián)合播放；2)當(dāng)存儲(chǔ)合成視頻信息時(shí)，播放合成視頻；3)當(dāng)存儲(chǔ)確定出的對(duì)焦于不同焦點(diǎn)區(qū)域的兩個(gè)視頻信息中的感興趣視頻內(nèi)容時(shí)，播放感興趣視頻內(nèi)容；4)當(dāng)存儲(chǔ)全局區(qū)域的視頻信息以及該全局區(qū)域的視頻信息中局部區(qū) 域的位置信息時(shí)，通過(guò)位置信息確定局部區(qū)域的視頻信息，并將全局區(qū)域的視頻信息和局部區(qū)域的視頻信息分別單獨(dú)播放或聯(lián)合播放。與上述的存儲(chǔ)方式相對(duì)應(yīng)，本發(fā)明給出四種播放方式，終端設(shè)備可以選擇但不限于以下四種中的一種：第一種：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，針對(duì)分別存儲(chǔ)的兩個(gè)獨(dú)立的視頻。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，則可以針對(duì)兩個(gè)攝像頭拍攝得到的視頻分別進(jìn)行播放。這兩個(gè)保存的視頻以一定的時(shí)間關(guān)聯(lián)存儲(chǔ)在終端設(shè)備的存儲(chǔ)器上。當(dāng)用戶選擇播放拍攝的視頻時(shí)，可以對(duì)這兩個(gè)獨(dú)立的視頻分別全屏展示播放，也可以由終端設(shè)備自適應(yīng)地將兩個(gè)視頻畫(huà)面關(guān)聯(lián)起來(lái)同時(shí)播放，可以參照“交互方式”中介紹的“上下屏”、“左右屏”和“大小屏”三種方式對(duì)兩個(gè)視頻畫(huà)面進(jìn)行播放。第二種：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，針對(duì)存儲(chǔ)的合成視頻。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，則對(duì)合成的視頻進(jìn)行播放。用戶可以看到兩個(gè)攝像頭拍攝的多焦點(diǎn)視頻。第三種：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，針對(duì)存儲(chǔ)的合并視頻。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，則對(duì)由雙攝像頭視頻片段合并的視頻進(jìn)行播放。用戶可以看到視頻錄制時(shí)主屏幕中呈現(xiàn)的感興趣畫(huà)面的多焦點(diǎn)視頻。第四種：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，針對(duì)存儲(chǔ)的全局區(qū)域視頻和感興趣區(qū)域矩形坐標(biāo)的組合。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，用戶可以單獨(dú)播放全局區(qū)域視頻和四個(gè)坐標(biāo)點(diǎn)對(duì)應(yīng)的大小的局部區(qū)域視頻；或者可以將兩個(gè)視頻關(guān)聯(lián)播放。關(guān)聯(lián)播放的方式可以分為兩種：一種是參照“上下屏”、“左右屏”、“大小屏”三種形式將兩個(gè)視頻畫(huà)面同時(shí)播放，在“大小屏”這種形式播放時(shí)，大屏顯示的是全局區(qū)域視頻或者局部對(duì)焦區(qū)域，小屏顯示的是局部對(duì)焦感興趣區(qū)域或者全局區(qū)域視頻，用戶可以通過(guò)單擊大圖或者小圖的方式來(lái)切換這兩個(gè)塊屏幕的顯示內(nèi)容。并且，小屏在大屏上處于的位置也可以是由用戶指定擺放的，如圖14所示。當(dāng)用戶沒(méi)有指定小屏擺放的位置時(shí)，終端設(shè) 備可以自動(dòng)將小屏放置在屏幕四個(gè)角的任意一個(gè)位置。當(dāng)用戶希望改變小屏的位置時(shí)，終端設(shè)備通過(guò)檢測(cè)用戶的手勢(shì)或者操作來(lái)決定如何擺放。下面以一個(gè)實(shí)施例詳細(xì)介紹多焦點(diǎn)區(qū)域聯(lián)合播放模式的具體實(shí)現(xiàn)方案。步驟1.開(kāi)啟交互步驟：1).開(kāi)啟終端設(shè)備的照相機(jī)，進(jìn)入視頻拍攝預(yù)覽界面，通過(guò)雙擊屏幕開(kāi)啟多焦點(diǎn)視頻模式。2).多焦點(diǎn)視頻模式開(kāi)啟后，如圖15所示，預(yù)覽界面顯示兩個(gè)攝像頭采集到的畫(huà)面，其中占據(jù)全屏的是全局區(qū)域畫(huà)面，在全局區(qū)域畫(huà)面當(dāng)中，顯示出場(chǎng)景中所有的人臉區(qū)域。用戶單擊感興趣的人臉區(qū)域，并交互地拉動(dòng)檢測(cè)框，可以框住整個(gè)感興趣區(qū)域。此時(shí)屏幕中，一部分為全局區(qū)域畫(huà)面，另一部分為局部感興趣區(qū)域畫(huà)面。這兩部分畫(huà)面的布局如前所述，可以是左右屏，上下屏或者大小屏，這里以大小屏為例展示。3).選定好用戶感興趣的局部區(qū)域后，兩個(gè)攝像頭分別對(duì)焦全局區(qū)域和指定的局部區(qū)域后，即可開(kāi)始進(jìn)行多焦點(diǎn)視頻的拍攝。步驟2.多焦點(diǎn)視頻拍攝，存儲(chǔ)和播放步驟如下：步驟2.1多焦點(diǎn)視頻拍攝1).在多焦點(diǎn)視頻拍攝界面，用戶看到全局區(qū)域畫(huà)面和局部感興趣區(qū)域畫(huà)面時(shí)，用戶按下拍攝按鈕進(jìn)行視頻拍攝，通過(guò)不同的操作方式可以進(jìn)行不同的存儲(chǔ)播放模式。單擊界面中的拍攝按鈕跳轉(zhuǎn)到2)，將直接記錄當(dāng)前終端設(shè)備屏幕拍攝到的畫(huà)面；長(zhǎng)按全局區(qū)域中感興趣的包圍框?qū)⑻D(zhuǎn)到5)，存儲(chǔ)全局區(qū)域視頻和實(shí)時(shí)跟蹤得到的包圍框上的四個(gè)點(diǎn)位置，并存儲(chǔ)四個(gè)點(diǎn)位置確定存儲(chǔ)另一個(gè)攝像頭對(duì)焦拍攝的局部感興趣區(qū)域的大小的視頻。如果同時(shí)觸摸全局區(qū)域視頻和局部區(qū)域視頻，跳轉(zhuǎn)到7)，將全局區(qū)域視頻和局部感興趣區(qū)域分別存儲(chǔ)。2).直接記錄當(dāng)前終端設(shè)備屏幕上拍攝到的畫(huà)面，全局區(qū)域畫(huà)面占據(jù)整個(gè)終端設(shè)備的屏幕，局部區(qū)域畫(huà)面位于一個(gè)小窗口上。該小窗口的位置可以由用戶實(shí)時(shí)移動(dòng)改變。步驟2.2多焦點(diǎn)視頻存儲(chǔ)3).當(dāng)前屏幕上顯示的即為全局區(qū)域和局部區(qū)域組成的多焦點(diǎn)視頻，存儲(chǔ)在終端設(shè)備中。在拍攝下一段多焦點(diǎn)視頻之前，左上角圖像框顯示最近時(shí)間內(nèi)拍攝的多焦點(diǎn)視頻，可以點(diǎn)擊該圖像框?qū)ψ罱淮闻臄z的多焦點(diǎn)視頻進(jìn)行查看。步驟2.3多焦點(diǎn)視頻播放4).點(diǎn)擊左上角圖像框后，在終端設(shè)備上顯示最近一次拍攝的多焦點(diǎn)視頻，此時(shí)的播放方式與拍攝時(shí)看到的內(nèi)容相同。5).存儲(chǔ)全局區(qū)域視頻和實(shí)時(shí)跟蹤得到的包圍框上的四個(gè)點(diǎn)位置，并存儲(chǔ)由四個(gè)點(diǎn)位置確定存儲(chǔ)另一個(gè)攝像頭對(duì)焦拍攝的局部感興趣區(qū)域的大小的視頻。用戶可以單獨(dú)播放全局區(qū)域視頻和四個(gè)坐標(biāo)點(diǎn)對(duì)應(yīng)的大小的局部區(qū)域視頻；或者可以將兩個(gè)視頻關(guān)聯(lián)播放。采取“大小屏”的關(guān)聯(lián)方式將兩個(gè)視頻畫(huà)面同時(shí)播放，大屏顯示的是全局區(qū)域視頻或者局部對(duì)焦區(qū)域，小屏顯示的是局部對(duì)焦感興趣區(qū)域或者全局區(qū)域視頻，用戶可以通過(guò)單擊大圖或者小圖的方式來(lái)切換這兩塊屏幕的顯示內(nèi)容。并且，小屏在大屏上處于的位置也可以是由用戶指定擺放的。當(dāng)用戶沒(méi)有指定小屏擺放的位置時(shí)，終端設(shè)備可以自動(dòng)將小屏放置在屏幕四個(gè)角的任意一個(gè)位置。視頻存儲(chǔ)完成后，在屏幕的左上角圖框中顯示最近一次拍攝的多焦點(diǎn)視頻，如果進(jìn)行播放，則跳轉(zhuǎn)到6)。6).長(zhǎng)按屏幕上左上角圖框中的內(nèi)容，則播放最近一次拍攝的多焦點(diǎn)視頻。7).分別存儲(chǔ)了全局區(qū)域視頻和局部感興趣區(qū)域視頻，終端設(shè)備在播放時(shí)可分別播放兩部分視頻。也可以由終端設(shè)備自適應(yīng)地將兩個(gè)視頻畫(huà)面關(guān)聯(lián)起來(lái)同時(shí)播放，可以參照“交互方式”中介紹的“上下屏”、“左右屏”和“大小屏”三種方式對(duì)兩個(gè)視頻畫(huà)面進(jìn)行播放。實(shí)施例十一、增強(qiáng)處理模式為目標(biāo)對(duì)象凸顯播放模式目標(biāo)對(duì)象包括感興趣人物及物體。在下述實(shí)施例中以感興趣人物為例進(jìn)行實(shí)施例的闡述。在日常生活和工作的視頻拍攝中，經(jīng)常由于拍攝的人物較多而導(dǎo)致感 興趣的人物不突出，不僅圖像上不易定位感興趣說(shuō)話人的位置，人物的聲音也經(jīng)?；煜Ｄ壳暗囊曨l拍攝方式中并未突出感興趣人物，而雙目鏡頭和多麥克風(fēng)的使用，可以定位場(chǎng)景中人物的深度及聲音的方位，為拍攝時(shí)突出感興趣人物提供了必要的條件。本發(fā)明中，通過(guò)雙目攝像頭及兩個(gè)或多個(gè)麥克風(fēng)的配合，將拍攝視頻時(shí)圖像中人物與每個(gè)人物的說(shuō)話聲音相關(guān)聯(lián)，進(jìn)而實(shí)現(xiàn)僅播放視頻中感興趣的某個(gè)人物的動(dòng)作和聲音的目的，得到凸顯感興趣目標(biāo)人物的效果。從而實(shí)現(xiàn)在拍攝得到的多人場(chǎng)景視頻中，凸顯某一個(gè)人物的動(dòng)作及聲音。需要說(shuō)明的是，下述實(shí)施例的詳述中，將根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理的方式，具體為根據(jù)采集到的音頻信息，對(duì)采集到的視頻信息進(jìn)行音視頻凸顯處理的目標(biāo)對(duì)象凸顯播放模式。當(dāng)?shù)诙惗嗝襟w信息為視頻信息，第一類多媒體信息為與視頻信息相對(duì)應(yīng)的音頻信息時(shí)，根據(jù)采集到的音頻信息，對(duì)采集到的視頻信息進(jìn)行音視頻凸顯處理。具體地，從采集到的視頻信息中確定目標(biāo)對(duì)象；針對(duì)目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息和/或音頻信息進(jìn)行凸顯處理。其中，通過(guò)以下至少一種方式從采集到的視頻信息中確定目標(biāo)對(duì)象：根據(jù)檢測(cè)到的目標(biāo)對(duì)象指定操作來(lái)確定目標(biāo)對(duì)象；依據(jù)采集到的視頻信息中多個(gè)對(duì)象的數(shù)量及所處位置信息來(lái)確定目標(biāo)對(duì)象。優(yōu)選地，針對(duì)目標(biāo)對(duì)象對(duì)應(yīng)的音頻信息進(jìn)行凸顯處理，具體包括：對(duì)采集到的視頻信息進(jìn)行檢測(cè)以確定所述視頻信息中的對(duì)象數(shù)量、各個(gè)對(duì)象的位置及方位信息；依據(jù)各個(gè)對(duì)象的位置及方位信息，確定各個(gè)對(duì)象分別對(duì)應(yīng)的音頻信息；確定目標(biāo)對(duì)象對(duì)應(yīng)的音頻信息，并進(jìn)行凸顯處理。優(yōu)選地，在采集到的視頻信息中確定目標(biāo)對(duì)象所在的視頻片段，且依據(jù)對(duì)應(yīng)關(guān)系在采集到的音頻信息中確定與該目標(biāo)對(duì)象對(duì)應(yīng)的音頻片段。本發(fā)明提出，在拍攝得到的多人場(chǎng)景視頻中，凸顯某一個(gè)或者某幾個(gè)感興趣人物的動(dòng)作及聲音。通過(guò)雙目攝像頭及兩個(gè)或多個(gè)麥克風(fēng)的配合，將視頻 圖像中出現(xiàn)的人物與他們各自的說(shuō)話聲音相關(guān)聯(lián)，進(jìn)而實(shí)現(xiàn)僅播放或凸顯播放視頻中感興趣的某個(gè)人物或者某幾個(gè)人物的動(dòng)作和聲音的目的，得到凸顯感興趣人物的效果。具體方案如下：首先，終端針對(duì)拍攝得到視頻，檢測(cè)視頻圖像幀中的人臉區(qū)域，針對(duì)檢測(cè)到的人臉數(shù)量，可以獲得當(dāng)前場(chǎng)景中總的目標(biāo)人物數(shù)量；其次，根據(jù)檢測(cè)到的某個(gè)人臉區(qū)域可以得到該人物與拍攝相機(jī)之間的方位信息；然后，結(jié)合雙目相機(jī)通過(guò)立體匹配的方法得到該人物距離相機(jī)的深度信息，即可以得到場(chǎng)景中每個(gè)人物相對(duì)于相機(jī)坐標(biāo)系的位置及方位信息；進(jìn)一步，利用手機(jī)上的兩個(gè)或多個(gè)麥克風(fēng)，得到場(chǎng)景中每個(gè)說(shuō)話人物相對(duì)于麥克風(fēng)坐標(biāo)系的位置及方位信息；最后，通過(guò)預(yù)先標(biāo)定好相機(jī)坐標(biāo)系和麥克風(fēng)坐標(biāo)系之間的變換關(guān)系，可得到圖像上每個(gè)人物和音頻的對(duì)應(yīng)關(guān)系。得到圖像上每個(gè)人物和音頻的對(duì)應(yīng)關(guān)系后，當(dāng)用戶點(diǎn)擊播放圖像中的某個(gè)或者某幾個(gè)感興趣人物時(shí)，視頻圖像中的其他區(qū)域?qū)?huì)被虛化或者將感興趣區(qū)域進(jìn)行放大，從而凸顯感興趣人物區(qū)域。該實(shí)施例的具體實(shí)現(xiàn)及展示方式由開(kāi)啟興趣人物凸顯視頻拍攝模式、確定感興趣人物方式、對(duì)感興趣人物圖像和語(yǔ)音存儲(chǔ)的方式、對(duì)感興趣人物的圖像和語(yǔ)音進(jìn)行播放的方式四個(gè)部分組成。(1)開(kāi)啟興趣人物凸顯視頻拍攝模式該模式包括兩種方式，一種是用戶主動(dòng)開(kāi)啟興趣人物凸顯視頻拍攝模式，另一種是終端設(shè)備根據(jù)拍攝的視頻內(nèi)容，自動(dòng)提示用戶是否需要開(kāi)啟興趣人物凸顯視頻拍攝模式。1)用戶主動(dòng)開(kāi)啟的方法主要通過(guò)語(yǔ)音，手勢(shì)交互等。例如當(dāng)用戶說(shuō)“錄興趣人物”時(shí)，終端設(shè)備即開(kāi)啟興趣人物凸顯視頻拍攝模式，此時(shí)啟動(dòng)人臉檢測(cè)功能，在視頻拍攝預(yù)覽界面顯示出目前拍攝場(chǎng)景內(nèi)的所有人物，用戶可以單擊選擇某個(gè)感興趣人物進(jìn)行錄制，并且可以改變錄制的感興趣人物；或者將當(dāng)前視頻中檢測(cè)到的所有人物都實(shí)時(shí)記錄下來(lái)，以備后續(xù)播放時(shí)選擇特定的感興趣人物進(jìn)行播放；或者在僅錄制某一個(gè)、某幾個(gè)或者全部人物都錄制的模式之間進(jìn)行切換。2)終端設(shè)備自動(dòng)檢測(cè)視頻內(nèi)容，主要是基于視頻理解技術(shù)，例如通 過(guò)分析視頻中的內(nèi)容，判斷當(dāng)前視頻主要拍攝的場(chǎng)景是進(jìn)行多人會(huì)議、演講等場(chǎng)合時(shí)，終端設(shè)備自動(dòng)提示用戶是否需要開(kāi)啟興趣人物凸顯視頻拍攝模式。在開(kāi)啟興趣人物凸顯視頻拍攝模式后，即可通過(guò)用戶的手勢(shì)或者語(yǔ)音交互確定是錄制單個(gè)感興趣人物，或者是錄制整個(gè)場(chǎng)景中的所有人物，或者在兩種方式之間切換。(2)確定興趣人物方式用戶拍攝興趣人物凸顯視頻，指定感興趣人物的方式分為用戶主動(dòng)的通過(guò)語(yǔ)音、手勢(shì)或外部設(shè)備的交互方式，或者終端設(shè)備自動(dòng)地確定感興趣人物。1)用戶主動(dòng)確定感興趣人物的方式包括語(yǔ)音、手勢(shì)和外部設(shè)備交互等。語(yǔ)音交互：用戶通過(guò)語(yǔ)音交互開(kāi)啟錄制，錄制時(shí)，也可以通過(guò)語(yǔ)音確定錄制的是單個(gè)人物，還是多個(gè)人物，并且可以在這兩種方式之間切換。例如，當(dāng)用戶說(shuō)“錄單個(gè)人物”時(shí)，終端設(shè)備僅對(duì)用戶指定的某個(gè)感興趣人物的圖像和聲音進(jìn)行錄制；當(dāng)用戶說(shuō)“全錄”時(shí)，終端設(shè)備將對(duì)場(chǎng)景中檢測(cè)到的所有人物圖像和聲音進(jìn)行錄制。手勢(shì)交互：用戶可以通過(guò)單擊檢測(cè)到的某個(gè)人物，指定感興趣的目標(biāo)人物進(jìn)行錄制；可以通過(guò)雙擊另一個(gè)人物，更換感興趣的目標(biāo)人物；可以通過(guò)單擊屏幕，指定錄制整個(gè)場(chǎng)景中的所有感興趣人物；可以通過(guò)連續(xù)單擊多個(gè)目標(biāo)人物，指定錄制多個(gè)感興趣的人物。外部設(shè)備交互：上述通過(guò)手勢(shì)交互的操作，均可通過(guò)外部設(shè)備交互來(lái)實(shí)現(xiàn)。例如通過(guò)與終端設(shè)備關(guān)聯(lián)的手寫(xiě)筆，耳機(jī)等設(shè)備，實(shí)現(xiàn)指定某個(gè)感興趣目標(biāo)人物，或指定多個(gè)目標(biāo)人物，或指定整個(gè)場(chǎng)景中的所有人物為目標(biāo)人物。2)終端設(shè)備自動(dòng)地根據(jù)當(dāng)前拍攝的場(chǎng)景確定感興趣人物。終端設(shè)備在開(kāi)啟感興趣人物拍攝模式時(shí)，在圖像預(yù)覽界面檢測(cè)圖像中出現(xiàn)的人物，根據(jù)出現(xiàn)的人物數(shù)量和人物所處的位置，確定用戶感興趣的人物。例如，將場(chǎng)景中出現(xiàn)的每個(gè)人物都作為感興趣人物，將場(chǎng)景中所有人物及人物對(duì)應(yīng)的聲音都存儲(chǔ)下來(lái)；或者將位置處于畫(huà)面中靠近中心的人物作為感興趣 人物，并以顯著地標(biāo)示提示拍攝者目前中心人物為感興趣人物，如果用戶希望改變當(dāng)前終端設(shè)備確定的感興趣人物，可以通過(guò)雙擊自身感興趣的人物來(lái)進(jìn)行改變。其中，興趣人物的圖像和語(yǔ)音通過(guò)終端設(shè)備的雙目攝像頭及多個(gè)麥克風(fēng)進(jìn)行對(duì)應(yīng)。(3)對(duì)感興趣人物圖像和視頻存儲(chǔ)方式優(yōu)選地，根據(jù)采集到的音頻信息，對(duì)采集到的視頻信息進(jìn)行存儲(chǔ)處理，其中，存儲(chǔ)內(nèi)容包括以下至少一種情形：1)采集到的視頻信息及音頻信息；2)目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息及音頻信息。存儲(chǔ)方式主要有兩種：第一種：將攝像頭及麥克風(fēng)實(shí)時(shí)采集得到的內(nèi)容都存儲(chǔ)下來(lái)，并且記錄了不同時(shí)間用戶指定的感興趣人物，以備在播放時(shí)適應(yīng)多種方式。第二種：僅將拍攝時(shí)錄制的感興趣人物的圖像和聲音存儲(chǔ)下來(lái)。即：僅錄制拍攝時(shí)用戶指定的某個(gè)人物、多個(gè)人物或全部場(chǎng)景中人物的圖像和聲音。以上兩種方式，主要針對(duì)錄制場(chǎng)景在當(dāng)前終端設(shè)備攝像頭采集區(qū)域內(nèi)，如果在當(dāng)前終端設(shè)備的另一側(cè)，即攝像頭拍攝區(qū)域背面發(fā)出的聲音，以另一個(gè)文件進(jìn)行存儲(chǔ)。此時(shí)可以由用戶在播放時(shí)選擇是否需要去掉來(lái)自攝像頭拍攝區(qū)域背面發(fā)出的聲音。通過(guò)終端設(shè)備上的麥克風(fēng)，可以檢測(cè)到聲音的朝向是來(lái)自于攝像頭拍攝區(qū)域的正面，還是來(lái)自于攝像頭拍攝區(qū)域的背面。如果當(dāng)前的聲音來(lái)自于攝像頭拍攝區(qū)域的背面，則該聲音可能并不想被拍攝者記錄下來(lái)，例如，該聲音可能是“開(kāi)始錄了”，或者是當(dāng)前接聽(tīng)電話時(shí)的談話內(nèi)容。所以可以將這部分語(yǔ)音內(nèi)容單獨(dú)存儲(chǔ)。針對(duì)如何設(shè)置存儲(chǔ)方式，本發(fā)明給出三種設(shè)置方法，終端設(shè)備可以根據(jù)以下三種中的一種來(lái)對(duì)存儲(chǔ)方式進(jìn)行選擇。第一種是終端設(shè)備默認(rèn)設(shè)置；第二種是終端設(shè)備接受用戶通過(guò)語(yǔ)音、按鍵或外部控制器等方式以及這些方式的組合來(lái)更改存儲(chǔ)方式；第三種是終端設(shè)備通過(guò)存儲(chǔ)空間或歷史數(shù)據(jù)自適應(yīng)設(shè)置存儲(chǔ)方式。關(guān)于默認(rèn)設(shè)置，終端設(shè)備設(shè)置兩種存儲(chǔ)方式中的一種作為默認(rèn)值，在 終端設(shè)備沒(méi)有接收到更改存儲(chǔ)方式的指令前都使用該默認(rèn)存儲(chǔ)方式對(duì)視頻進(jìn)行存儲(chǔ)。關(guān)于用戶交互的設(shè)置方式，采用實(shí)施例一中步驟4類似的設(shè)置方法，區(qū)別在于指令描述內(nèi)容，例如，語(yǔ)音設(shè)置中的指令為“感興趣視頻存儲(chǔ)”，如果終端設(shè)備接收到該指令，則對(duì)聲控指令進(jìn)行語(yǔ)音識(shí)別，確定設(shè)置存儲(chǔ)方式為第一種存儲(chǔ)方式。其他用戶交互的設(shè)置方式相同，在此不再贅述。關(guān)于根據(jù)存儲(chǔ)空間的自適應(yīng)設(shè)置，根據(jù)存儲(chǔ)空間，可以選擇不同的存儲(chǔ)方式，如果剩余存儲(chǔ)空間小于某一閾值，例如低于終端設(shè)備存儲(chǔ)空間的50％，則設(shè)置為第二種存儲(chǔ)方式；反之，如果剩余存儲(chǔ)空間高于某一閾值，例如高于終端設(shè)備存儲(chǔ)空間的50％，則存儲(chǔ)方式不受存儲(chǔ)空間影響。關(guān)于根據(jù)歷史數(shù)據(jù)的自適應(yīng)設(shè)置，例如根據(jù)用戶以往設(shè)置的存儲(chǔ)方式，來(lái)對(duì)用戶喜好進(jìn)行分析，設(shè)置為用戶偏好的存儲(chǔ)方式。(4)對(duì)感興趣人物圖像和語(yǔ)音播放方式優(yōu)選地，響應(yīng)于接收到的播放觸發(fā)操作，基于與存儲(chǔ)內(nèi)容相匹配的播放方式對(duì)視頻信息及音頻信息進(jìn)行播放；其中，播放方式包括以下至少一項(xiàng)：1)當(dāng)存儲(chǔ)采集到的視頻信息及音頻信息時(shí)，將采集到的視頻信息及音頻信息相關(guān)聯(lián)地播放；2)當(dāng)存儲(chǔ)采集到的視頻信息及音頻信息時(shí)，將采集到的視頻信息中的目標(biāo)對(duì)象與相對(duì)應(yīng)的音頻信息相關(guān)聯(lián)地播放；3)當(dāng)存儲(chǔ)采集到的視頻信息及音頻信息時(shí)，將采集到的視頻信息中的各個(gè)對(duì)象與相對(duì)應(yīng)的音頻信息相關(guān)聯(lián)地播放；4)當(dāng)存儲(chǔ)目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息及音頻信息時(shí)，將目標(biāo)對(duì)象對(duì)應(yīng)的視頻信息及音頻信息相關(guān)聯(lián)地播放。與上述的存儲(chǔ)方式相對(duì)應(yīng)，有對(duì)應(yīng)的兩種播放方式，終端設(shè)備可以選擇但不限于以下兩種中的一種：第一種：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，針對(duì)第一種存儲(chǔ)的完整的視頻。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，對(duì)視頻進(jìn)行播放。第一種存儲(chǔ)方法將場(chǎng)景中所有人物的圖像和聲音都 有記錄，且各時(shí)間段用戶指定的感興趣人物也都記錄了下來(lái)。則在播放時(shí)，可以：1)按照用戶錄制時(shí)指定的視頻內(nèi)容播放：例如前30秒對(duì)人物1感興趣，則僅播放目標(biāo)人物1的圖像和聲音，其他人物和背景圖像均被模糊和/或靜止；或者將目標(biāo)人物的圖像區(qū)域放大，其他區(qū)域模糊和/或靜止。接下來(lái)60秒對(duì)人物2感興趣，則僅播放目標(biāo)人物2的圖像和聲音。這里的感興趣人物的選擇是在錄制時(shí)確定的，并且終端設(shè)備記錄了用戶在哪些時(shí)間段對(duì)哪個(gè)或者哪些人物感興趣；2)不做處理的播放所錄制到的所有圖像和聲音內(nèi)容；3)由于記錄了場(chǎng)景中所有人物的圖像和聲音，在播放時(shí)，用戶可以改變播放的感興趣人物的順序，例如前30秒對(duì)人物2感興趣，則僅播放目標(biāo)人物2的聲音和圖像，其他人物和背景圖像均被模糊和/或靜止。接下來(lái)60秒對(duì)人物1感興趣，則僅播放目標(biāo)人物1的圖像和聲音。第二種：終端設(shè)備檢測(cè)到用戶的打開(kāi)操作，針對(duì)第二種存儲(chǔ)的感興趣人物的視頻。檢測(cè)到用戶點(diǎn)擊播放的操作，例如，檢測(cè)到用戶點(diǎn)擊播放按鈕的操作，對(duì)視頻按照錄制時(shí)選擇的感興趣人物順序進(jìn)行播放，即與拍攝時(shí)指定的感興趣區(qū)域相同的方式進(jìn)行播放。上述兩種播放方式主要針對(duì)攝像頭拍攝的正面區(qū)域的圖像和聲音內(nèi)容，針對(duì)“存儲(chǔ)方式”中提到的來(lái)自于攝像頭拍攝的背面區(qū)域的聲音內(nèi)容，可以由用戶通過(guò)某些特定的語(yǔ)音或者手勢(shì)指令告訴終端設(shè)備是否需要播放。例如，可以通過(guò)單擊屏幕中的背景區(qū)域打開(kāi)播放來(lái)自于攝像頭拍攝背面區(qū)域的聲音內(nèi)容，播放的時(shí)間即按照文件中記錄的時(shí)間序列與其他播放視頻關(guān)聯(lián)起來(lái)。也可以通過(guò)雙擊屏幕中的背景區(qū)域關(guān)閉播放來(lái)自于攝像頭拍攝背面區(qū)域的聲音內(nèi)容。下面以一個(gè)實(shí)施例詳細(xì)介紹興趣人物凸顯視頻實(shí)施例的具體方案。步驟1.開(kāi)啟交互步驟：1).開(kāi)啟終端設(shè)備的照相機(jī)，進(jìn)入視頻拍攝預(yù)覽界面，通過(guò)長(zhǎng)按屏幕開(kāi)啟興趣人物凸顯視頻拍攝模式。2).興趣人物凸顯視頻模式開(kāi)啟后，預(yù)覽界面顯示左攝像頭采集到的畫(huà)面，該畫(huà)面占據(jù)整個(gè)屏幕。此時(shí)啟動(dòng)人臉檢測(cè)功能，在視頻拍攝預(yù)覽界 面顯示出目前拍攝場(chǎng)景內(nèi)的所有人物，將當(dāng)前視頻中檢測(cè)到的所有人物都實(shí)時(shí)記錄下來(lái)，已備后續(xù)播放時(shí)選擇特定的感興趣人物進(jìn)行播放。3).當(dāng)檢測(cè)出場(chǎng)景中的人物后，將啟動(dòng)一側(cè)攝像頭，配合另一側(cè)攝像頭計(jì)算得到場(chǎng)景中檢測(cè)到的人物的深度及方向信息，即可開(kāi)始進(jìn)行興趣人物凸顯視頻的拍攝。步驟2.興趣人物凸顯視頻拍攝，存儲(chǔ)和播放方式如下：步驟2.1興趣人物凸顯視頻拍攝1).在興趣人物凸顯視頻拍攝界面，用戶看到畫(huà)面中檢測(cè)到的人臉區(qū)域?yàn)榫G色時(shí)，表明此時(shí)場(chǎng)景中人物所處的角度及位置信息已被估計(jì)，用戶按下拍攝按鈕進(jìn)行視頻拍攝，通過(guò)不同的操作方式可以進(jìn)行不同的存儲(chǔ)播放模式。單擊界面中的拍攝按鈕跳轉(zhuǎn)到2)，將直接記錄當(dāng)前終端設(shè)備拍攝到的畫(huà)面；長(zhǎng)按畫(huà)面中某個(gè)目標(biāo)人物將跳轉(zhuǎn)到5)，存儲(chǔ)興趣人物凸顯視頻和相對(duì)應(yīng)的各個(gè)時(shí)間點(diǎn)對(duì)應(yīng)的感興趣人物。同時(shí)，實(shí)時(shí)檢測(cè)在當(dāng)前終端設(shè)備攝像頭拍攝區(qū)域背面發(fā)出的聲音，如果檢測(cè)到背面發(fā)出聲音，跳轉(zhuǎn)到7)，將攝像頭采集區(qū)域內(nèi)視頻和攝像頭背面采集到的音頻分別存儲(chǔ)。2).直接記錄當(dāng)前屏幕上拍攝到的畫(huà)面，一側(cè)攝像頭拍攝的畫(huà)面占據(jù)整個(gè)終端設(shè)備的屏幕。實(shí)時(shí)顯示當(dāng)前場(chǎng)景中的人物區(qū)域。如果在拍攝過(guò)程當(dāng)中沒(méi)有指定某個(gè)感興趣的人物，則可以在播放階段進(jìn)行感興趣人物的選擇，跳轉(zhuǎn)到5)，播放指定的感興趣人物的畫(huà)面和音頻。步驟2.2興趣人物凸顯視頻存儲(chǔ)3).當(dāng)前屏幕上顯示的即為興趣人物凸顯視頻，存儲(chǔ)在終端設(shè)備中。在拍攝下一段興趣人物凸顯視頻之前，左上角圖像框顯示最近時(shí)間內(nèi)拍攝的興趣人物凸顯視頻，可以點(diǎn)擊該圖像框?qū)ψ罱淮闻臄z的興趣人物凸顯視頻進(jìn)行查看。步驟2.3興趣人物凸顯視頻播放4).點(diǎn)擊左上角圖像框后，在終端設(shè)備上顯示最近一次拍攝的興趣人物凸顯視頻，此時(shí)的播放方式與拍攝時(shí)看到的內(nèi)容相同。如果點(diǎn)擊當(dāng)前播放視頻中某個(gè)人物時(shí)，則跳轉(zhuǎn)到步驟5進(jìn)行播放。5).如果在拍攝階段沒(méi)有指定某個(gè)或某幾個(gè)感興趣的人物，則在播放 時(shí)可以由用戶單擊感興趣的人物區(qū)域，此時(shí)僅播放該人物對(duì)應(yīng)的圖像和音頻，其他區(qū)域均靜止和/或模糊。如果在拍攝階段指定了某一段時(shí)間感興趣的人物，則將用戶指定的時(shí)長(zhǎng)及感興趣人物次序記錄下來(lái)，播放時(shí)按照拍攝時(shí)指定的感興趣人物次序及時(shí)長(zhǎng)進(jìn)行播放。6).長(zhǎng)按屏幕上左上角圖像框內(nèi)的內(nèi)容，則播放最近一次拍攝的興趣人物凸顯視頻。7).分別存儲(chǔ)了興趣人物凸顯視頻和來(lái)自于攝像頭背面區(qū)域的音頻，終端設(shè)備在播放時(shí)可分別播放兩部分內(nèi)容。如圖16(a)-(c)所示，如果對(duì)來(lái)自于攝像頭背面區(qū)域的音頻不感興趣，可以直接將該音頻內(nèi)容刪除；如果用戶希望保留來(lái)自于攝像頭背面區(qū)域的音頻，可以在播放時(shí)按照時(shí)間序列，將對(duì)應(yīng)的音頻和視頻關(guān)聯(lián)起來(lái)共同播放。本發(fā)明還提供了一種多媒體增強(qiáng)處理的裝置，如圖17所示，該裝置包括：多媒體信息獲取模塊1701、處理模塊1702。多媒體信息獲取模塊1701獲取兩個(gè)多媒體采集設(shè)備分別采集的第一類多媒體信息和第二類多媒體信息；處理模塊1702根據(jù)第一類多媒體信息對(duì)第二類多媒體信息進(jìn)行相應(yīng)處理。本發(fā)明的方案中，提供的多媒體信息處理的裝置中各模塊的具體功能實(shí)現(xiàn)，可以參照?qǐng)D1提供的多媒體信息處理的方法的具體步驟，在此不再詳述。本
技術(shù)領(lǐng)域：
技術(shù)人員可以理解，本發(fā)明包括涉及用于執(zhí)行本申請(qǐng)中所述操作中的一項(xiàng)或多項(xiàng)的設(shè)備。這些設(shè)備可以為所需的目的而專門(mén)設(shè)計(jì)和制造，或者也可以包括通用計(jì)算機(jī)中的已知設(shè)備。這些設(shè)備具有存儲(chǔ)在其內(nèi)的計(jì)算機(jī)程序，這些計(jì)算機(jī)程序選擇性地激活或重構(gòu)。這樣的計(jì)算機(jī)程序可以被存儲(chǔ)在設(shè)備(例如，計(jì)算機(jī))可讀介質(zhì)中或者存儲(chǔ)在適于存儲(chǔ)電子指令并分別耦聯(lián)到總線的任何類型的介質(zhì)中，所述計(jì)算機(jī)可讀介質(zhì)包括但不限于任何類型的盤(pán)(包括軟盤(pán)、硬盤(pán)、光盤(pán)、cd-rom、和磁光盤(pán))、rom(read-onlymemory，只讀存儲(chǔ)器)、ram(randomaccessmemory，隨即存儲(chǔ)器)、eprom(erasableprogrammableread-onlymemory，可擦寫(xiě)可編程只讀存儲(chǔ)器)、 eeprom(electricallyerasableprogrammableread-onlymemory，電可擦可編程只讀存儲(chǔ)器)、閃存、磁性卡片或光線卡片。也就是，可讀介質(zhì)包括由設(shè)備(例如，計(jì)算機(jī))以能夠讀的形式存儲(chǔ)或傳輸信息的任何介質(zhì)。本
技術(shù)領(lǐng)域：
技術(shù)人員可以理解，可以用計(jì)算機(jī)程序指令來(lái)實(shí)現(xiàn)這些結(jié)構(gòu)圖和/或框圖和/或流圖中的每個(gè)框以及這些結(jié)構(gòu)圖和/或框圖和/或流圖中的框的組合。本
技術(shù)領(lǐng)域：
技術(shù)人員可以理解，可以將這些計(jì)算機(jī)程序指令提供給通用計(jì)算機(jī)、專業(yè)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理方法的處理器來(lái)實(shí)現(xiàn)，從而通過(guò)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理方法的處理器來(lái)執(zhí)行本發(fā)明公開(kāi)的結(jié)構(gòu)圖和/或框圖和/或流圖的框或多個(gè)框中指定的方案。本
技術(shù)領(lǐng)域：
技術(shù)人員可以理解，本發(fā)明中已經(jīng)討論過(guò)的各種操作、方法、流程中的步驟、措施、方案可以被交替、更改、組合或刪除。進(jìn)一步地，具有本發(fā)明中已經(jīng)討論過(guò)的各種操作、方法、流程中的其他步驟、措施、方案也可以被交替、更改、重排、分解、組合或刪除。進(jìn)一步地，現(xiàn)有技術(shù)中的具有與本發(fā)明中公開(kāi)的各種操作、方法、流程中的步驟、措施、方案也可以被交替、更改、重排、分解、組合或刪除。以上所述僅是本發(fā)明的優(yōu)選實(shí)施方式，應(yīng)當(dāng)指出，對(duì)于本
技術(shù)領(lǐng)域：
的普通技術(shù)人員來(lái)說(shuō)，在不脫離本發(fā)明原理的前提下，還可以作出若干改進(jìn)和潤(rùn)飾，這些改進(jìn)和潤(rùn)飾也應(yīng)視為本發(fā)明的保護(hù)范圍。當(dāng)前第1頁(yè)12