基于時(shí)鐘調(diào)整的視頻同步的制作方法
【技術(shù)領(lǐng)域】
[0001]本公開(kāi)涉及數(shù)據(jù)處理的領(lǐng)域，特別是涉及與呈現(xiàn)視頻相關(guān)聯(lián)的裝置、方法和系統(tǒng)。
【背景技術(shù)】
[0002]本文所提供的背景描述是為了一般呈現(xiàn)本公開(kāi)的上下文的目的。除非本文另有說(shuō)明，在此部分描述的材料不是本申請(qǐng)中的權(quán)利要求的現(xiàn)有技術(shù)，并且不通過(guò)列入本節(jié)而承認(rèn)其為現(xiàn)有技術(shù)。
[0003]視頻通過(guò)將視頻源耦合到顯示設(shè)備而頻繁顯示。但是，這些視頻源和顯示設(shè)備經(jīng)?？梢越?jīng)配置以不同速率處理視頻。例如，從視頻源接收視頻幀的速率可不同于顯示設(shè)備經(jīng)配置以顯示所接收幀的速率。當(dāng)這種不匹配發(fā)生時(shí)，幀可以被丟棄(諸如，當(dāng)顯示速率相對(duì)低于接收速率時(shí))或重復(fù)(諸如，當(dāng)顯示速率相對(duì)高于接收速率時(shí))。當(dāng)跳越或干擾時(shí)，該丟棄或重復(fù)幀對(duì)于觀眾是可以注意到的，降低所顯示視頻的感知質(zhì)量。
【附圖說(shuō)明】
[0004]結(jié)合附圖，實(shí)施例將通過(guò)下面的詳細(xì)描述容易地理解。為了便于本描述，相同的參考數(shù)字表示相同的結(jié)構(gòu)元件。在附圖的圖中，實(shí)施例通過(guò)示例的方式而不是通過(guò)限制的方式被示出。
[0005]圖1示出根據(jù)各種實(shí)施例的用于內(nèi)容分發(fā)和消費(fèi)的示例配置。
[0006]圖2示出根據(jù)各種實(shí)施例的相關(guān)聯(lián)于用于同步視頻而調(diào)整時(shí)鐘速率的各種實(shí)體的示例配置。
[0007]圖3示出根據(jù)各種實(shí)施例的用于呈現(xiàn)視頻的示例過(guò)程。
[0008]圖4示出根據(jù)各種實(shí)施例的為了呈現(xiàn)視頻調(diào)整時(shí)鐘速率的示例過(guò)程。
[0009]圖5示出根據(jù)各種實(shí)施例的適合于實(shí)施本公開(kāi)的各個(gè)方面的示例計(jì)算環(huán)境。
[0010]圖6示出根據(jù)各種實(shí)施例的具有經(jīng)配置以使得裝置實(shí)施本公開(kāi)的各個(gè)方面的指令的示例存儲(chǔ)介質(zhì)。
【具體實(shí)施方式】
[0011]本文所述的實(shí)施例針對(duì)例如在呈現(xiàn)期間和同步視頻相關(guān)聯(lián)的方法、計(jì)算機(jī)可讀介質(zhì)和裝置。在各種實(shí)施例中，視頻幀可以由計(jì)算設(shè)備接收以用于顯示。當(dāng)它們被接收時(shí)，計(jì)算設(shè)備的時(shí)鐘可用于控制幀的顯示。在各種實(shí)施例中，時(shí)鐘可以包括例如擴(kuò)譜時(shí)鐘。在各種實(shí)施例中，所述擴(kuò)譜時(shí)鐘可以被包括在如下所述的片上系統(tǒng)的配置中。在各種實(shí)施例中，時(shí)鐘控制模塊可經(jīng)配置以調(diào)整時(shí)鐘的時(shí)鐘速率，以控制接收到的視頻幀的顯示。在各種實(shí)施例中，時(shí)鐘控制模塊可經(jīng)配置以基于接收視頻幀的時(shí)間和顯示視頻幀的時(shí)間的比較而控制時(shí)鐘速率。在各種實(shí)施例中，這些時(shí)間可基于系統(tǒng)時(shí)間，諸如從計(jì)算設(shè)備的系統(tǒng)時(shí)鐘接收。在各種實(shí)施例中，時(shí)鐘控制模塊可經(jīng)配置以進(jìn)行對(duì)計(jì)算設(shè)備的時(shí)鐘的調(diào)整調(diào)用，用于基于接收時(shí)間和顯示時(shí)間之間的差異而控制幀的顯示。在各種實(shí)施例中，這些差異可在用作到時(shí)鐘控制模塊的輸入之前通過(guò)低通濾波器。在各種實(shí)施例中，使用用作時(shí)鐘控制模塊的輸入的低通濾波差異可構(gòu)成鎖相環(huán)。通過(guò)調(diào)整時(shí)鐘，計(jì)算設(shè)備可以能夠同時(shí)操作時(shí)鐘，以提供擴(kuò)譜時(shí)鐘并提供鎖相環(huán)以用于視頻的同步。其他實(shí)施例可以被描述并要求保護(hù)。
[0012]在以下的詳細(xì)描述中，參考了構(gòu)成其一部分的附圖，其中相同的數(shù)字始終指示相同的部件，以及其中通過(guò)可以實(shí)施的圖示實(shí)施例的方式顯示。但是將理解的是，其他實(shí)施例可以被利用，并且可以進(jìn)行結(jié)構(gòu)上或邏輯上的改變，而不脫離本公開(kāi)的范圍。因此，下面的詳細(xì)描述將不被認(rèn)為是限制意義的，并且實(shí)施例的范圍由所附權(quán)利要求和它們的等同物限定。
[0013]各種操作可以最有助于理解所要求保護(hù)的主題的方式而被依次描述為多個(gè)分立動(dòng)作或操作。然而，描述的順序不應(yīng)被解釋為暗示這些操作一定是順序依賴的。尤其是，這些操作可以不以呈現(xiàn)的順序執(zhí)行。描述的操作可以以所描述的實(shí)施例不同的順序來(lái)執(zhí)行。各種附加的操作可被執(zhí)行和/或所描述的操作可以在附加的實(shí)施例中省略。
[0014]對(duì)于本公開(kāi)的目的，短語(yǔ)“A和/或B”是指㈧，⑶或(A和B)。對(duì)于本公開(kāi)的目的，短語(yǔ) “A，B 和 / 或 C，，是指(A)，(B)，(C)，(A 和 B)，(A 和 C)，(B 和 C)，或(A，B 和 C)。
[0015]描述可使用短語(yǔ)“在一個(gè)實(shí)施例中”或“在多個(gè)實(shí)施例中”，其可以各自指一個(gè)或多個(gè)相同或不同的實(shí)施例。此外，當(dāng)相對(duì)于本公開(kāi)的實(shí)施例使用時(shí)，術(shù)語(yǔ)“包括”、“包含”、“具有”之類的是同義的。
[0016]如本文所用，術(shù)語(yǔ)“邏輯”和“模塊”可以指成為其一部分或包括:專用集成電路(ASIC)、電子電路、處理器(共享、專用或組)和/或執(zhí)行一個(gè)或多個(gè)軟件或固件程序的存儲(chǔ)器(共享、專用或組)、組合邏輯電路和/或提供所描述功能的其他合適組件。
[0017]現(xiàn)在參照?qǐng)D1，示出根據(jù)各種實(shí)施例的用于內(nèi)容分發(fā)和消費(fèi)的配置100。如所示的，在實(shí)施例中，用于內(nèi)容的分發(fā)和消費(fèi)的配置100可以包括經(jīng)由一個(gè)或多個(gè)網(wǎng)絡(luò)106與一個(gè)或多個(gè)內(nèi)容聚集器/分發(fā)服務(wù)器104耦合的多個(gè)內(nèi)容消費(fèi)設(shè)備108。內(nèi)容聚集器/分發(fā)服務(wù)器104可經(jīng)配置以例如經(jīng)由一個(gè)或多個(gè)網(wǎng)絡(luò)106聚集和分發(fā)內(nèi)容到內(nèi)容消費(fèi)設(shè)備108用于消費(fèi)。在各種實(shí)施例中，本文描述的內(nèi)容呈現(xiàn)技術(shù)可被聯(lián)合配置100實(shí)現(xiàn)。在其他實(shí)施例中，可使用不同的配置、設(shè)備和/或系統(tǒng)。
[0018]在實(shí)施例中，如所示的，內(nèi)容聚集器/分發(fā)服務(wù)器104可以包括編碼器112、存儲(chǔ)器114和內(nèi)容供應(yīng)器116，其可以如所示的彼此耦合。編碼器112可經(jīng)配置以編碼來(lái)自各種內(nèi)容創(chuàng)建者和/或提供商101的內(nèi)容102，并且存儲(chǔ)器114可經(jīng)配置以存儲(chǔ)經(jīng)編碼的內(nèi)容。響應(yīng)于來(lái)自各種內(nèi)容消費(fèi)設(shè)備108的請(qǐng)求，內(nèi)容供應(yīng)器116可經(jīng)配置以有選擇地檢索并提供編碼的內(nèi)容到各種內(nèi)容消費(fèi)設(shè)備108。內(nèi)容102可以是來(lái)自各種內(nèi)容創(chuàng)建者和/或提供商的各種類型的介質(zhì)內(nèi)容，具有視頻、音頻和/或隱藏式字幕。示例內(nèi)容可以包括(但不限于)電影、電視節(jié)目、用戶創(chuàng)建的內(nèi)容(諸如，YouTube視頻、iReoorter視頻)、音樂(lè)專輯/標(biāo)題/片段，等等。內(nèi)容創(chuàng)建者和/或提供商的示例可包括(但不限于)電影制片廠/經(jīng)銷商、電視節(jié)目制作者、電視廣播公司、衛(wèi)星節(jié)目廣播公司、有線運(yùn)營(yíng)商、在線用戶，等等。
[0019]在各種實(shí)施例中，為了操作的有效性，編碼器112可經(jīng)配置以常規(guī)地以不同編碼格式將各種內(nèi)容102編碼成一個(gè)或多個(gè)常見(jiàn)編碼格式的子集。然而，編碼器112可經(jīng)配置以仍然維持到其原始編碼格式中的相應(yīng)內(nèi)容的索引或交叉引用。同樣地，為了操作的靈活性，編碼器112可以編碼或以其他方式處理每個(gè)或選定的內(nèi)容102為不同質(zhì)量水平的多個(gè)版本。該不同版本可以提供不同的分辨率、不同的比特率和/或不同的幀率，用于傳輸和/或播放。在各種實(shí)施例中，編碼器112可以發(fā)布或以其他方式提供在可用的不同分辨率、不同的比特率和/或不同的幀速率上的信息。例如，編碼器112可發(fā)布它可以其提供視頻或音頻內(nèi)容到內(nèi)容消費(fèi)設(shè)備108的比特率。音頻數(shù)據(jù)的編碼可以根據(jù)例如(但不限于)MP3標(biāo)準(zhǔn)來(lái)執(zhí)行，其由運(yùn)動(dòng)圖像專家組(MPEG)公布。視頻數(shù)據(jù)的編碼可以根據(jù)例如(但不限于)H264標(biāo)準(zhǔn)執(zhí)行，其由國(guó)際電信單元(ITU)視頻編碼專家組(VCEG)公布。編碼器112可包括一個(gè)或多個(gè)計(jì)算設(shè)備，經(jīng)配置以執(zhí)行內(nèi)容分配、編碼和/或轉(zhuǎn)碼，諸如本文所述。
[0020]存儲(chǔ)器114可以是任何類型的臨時(shí)和/或持久性存儲(chǔ)器，包括(但不限于)易失性和非易失性存儲(chǔ)器、光學(xué)、磁性和/或固態(tài)大容量存儲(chǔ)器，等等。易失性存儲(chǔ)器可包括(但不限于)靜態(tài)和/或動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器。非易失性存儲(chǔ)器可包括(但不限于)電可擦除可編程只讀存儲(chǔ)器、相變存儲(chǔ)器、電阻式存儲(chǔ)器，等等。
[0021]在各種實(shí)施例中，內(nèi)容供應(yīng)器116可經(jīng)配置以提供編碼內(nèi)容作為離散文件、文件的一部分和/或作為經(jīng)編碼內(nèi)容的連續(xù)流。內(nèi)容供應(yīng)器116可經(jīng)配置以按照多個(gè)流和/或傳輸協(xié)議的任何一個(gè)傳送已編碼的音頻/視頻數(shù)據(jù)(以及隱藏式字幕，如果提供的話)。流協(xié)議可以包括(但不限于)實(shí)時(shí)流協(xié)議(RTSP)。傳輸協(xié)議可以包括(但不限于)傳輸控制協(xié)議(TCP)、用戶數(shù)據(jù)報(bào)協(xié)議(UDP)等等。在各種實(shí)施例中，內(nèi)容供應(yīng)器116可經(jīng)配置以提供根據(jù)一個(gè)或多個(gè)輸出封裝格式進(jìn)行封裝的介質(zhì)文件。
[0022]在各種實(shí)施例中，內(nèi)容聚集器/分發(fā)服務(wù)器104可以不包括編碼器112，但可仍包括存儲(chǔ)器114和/或內(nèi)容供應(yīng)器116。在各種實(shí)施例中，內(nèi)容聚集器/分發(fā)服務(wù)器104可包括一個(gè)更多的服務(wù)器，其可以是單獨(dú)可尋址的和/或可經(jīng)配置以單獨(dú)提供編碼內(nèi)容。
[0023]網(wǎng)絡(luò)106可以是私有和/或公共、有線和/或無(wú)線、本地和/或廣域網(wǎng)的任何組合。專用網(wǎng)絡(luò)可以