用于記錄和重放具有觸覺內容的視點視頻的系統(tǒng)和方法
【專利說明】用于記錄和重放具有觸覺內容的視點視頻的系統(tǒng)和方法
[0001]對相關申請的交叉引用
[0002]本申請要求于2013年12月31日提交的美國臨時專利申請序列N0.61/922，648的優(yōu)先權利益，其全部內容通過引用被結合于此。
技術領域
[0003]本發(fā)明針對用于記錄和重放具有觸覺內容的視點視頻的系統(tǒng)和方法。
【背景技術】
[0004]電子設備允許用戶記錄可以捕捉事件的視覺和聽覺這兩方面的視頻。電子設備還可以被編程為在用戶觀看在電子設備上播放的視頻時提供觸覺感覺。觸覺感覺通常是預先編程的，使得當視頻被播放時用戶可以連同視頻一起經(jīng)歷觸覺效果，以便為用戶提供更沉浸式的體驗?，F(xiàn)有的設備只允許在視頻被記錄之后才確定觸覺效果。目前，創(chuàng)建觸覺效果和感覺是非實時進行的勞動密集型過程。
[0005]形式為頭戴式顯示器，諸如Google眼鏡，的新一代電子設備允許佩戴者從他/她的視點記錄事件的視覺和聽覺方面并且重放所謂的“視點”視頻。視頻可以發(fā)送到其他人，使得觀看者可以在他/她自己的電子設備上重放該視頻并且就好像他/她在經(jīng)歷該事件一樣重新體驗該經(jīng)歷。

【發(fā)明內容】

[0006]期望能夠在記錄事件的其它實時方面的同時記錄事件的視點視頻，使得事件的實時方面可以作為觸覺感覺與視頻一起重放，以便為觀看該視點視頻并感覺到觸覺感覺重放的觀看者提供甚至更現(xiàn)實和沉浸式的體驗。
[0007]根據(jù)本發(fā)明的一方面，提供了一種系統(tǒng)，所述系統(tǒng)包括:配置為記錄事件的視點視頻的視頻記錄器，配置為感測與事件關聯(lián)的振動的傳感器，配置為同步所記錄的視點視頻和感測到的振動的處理器，以及包括顯示器和觸覺輸出設備的重放設備。重放設備配置為重放同步的視點視頻和振動，并且觸覺輸出設備配置為基于振動生成觸覺效果。
[0008]在實施例中，視頻記錄器和傳感器是第一電子設備的部分。在實施例中，第一電子設備是頭戴式顯示設備。在實施例中，處理器和重放設備也是頭戴式顯示設備的部分。在實施例中，重放設備是與第一電子設備分離并且與其無線通信的第二電子設備。在實施例中，第二電子設備是頭戴式顯示設備。
[0009]在實施例中，視點視頻包括訓練視頻。
[0010]根據(jù)本發(fā)明的一方面，提供了一種方法，所述方法包括:利用視頻記錄器記錄事件的視點視頻，在記錄視點視頻的同時利用傳感器感測與事件關聯(lián)的振動，同步所記錄的視點視頻和感測到的振動，以及利用包括顯示器和觸覺輸出設備的重放設備重放合成的視點視頻和振動，其中觸覺輸出設備基于振動生成觸覺效果。
[0011]在實施例中，所述方法還包括把同步的視點視頻和振動傳送到重放設備。在實施例中，傳送是無線地完成的。在實施例中，傳送是至少部分地經(jīng)互聯(lián)網(wǎng)完成的。
[0012]根據(jù)本發(fā)明的一方面，提供了一種系統(tǒng)，所述系統(tǒng)包括:配置為感測與由所述系統(tǒng)的用戶經(jīng)歷的事件關聯(lián)的振動的傳感器，以及配置為基于振動生成觸覺效果并且在用戶經(jīng)歷所述事件的時候向用戶輸出觸覺效果的觸覺輸出設備。
[0013]根據(jù)本發(fā)明的一方面，提供了一種方法，所述方法包括:利用由經(jīng)歷事件的用戶攜帶的傳感器感測與事件關聯(lián)的振動，利用觸覺輸出設備基于振動生成觸覺效果，以及在用戶經(jīng)歷所述事件的時候向用戶輸出觸覺效果。
[0014]當參考附圖考慮以下描述和所附權利要求時，本發(fā)明的這些與其它方面、特征和特性，以及操作方法與結構和部件組合的相關元件的功能及制造的經(jīng)濟性，都將變得更加顯然，其中附圖、以下描述和權利要求都構成本說明書的一部分。但是，應當明確地理解，附圖僅僅是為了說明和描述的目的而不是要作為本發(fā)明限制的定義。如在說明書和權利要求中所使用的，除非上下文清楚地另外指出，否則單數(shù)形式“一”、“一個”和“該”也包括復數(shù)的所指對象。
【附圖說明】
[0015]說明以下附圖的組成部分是為了強調本公開內容的一般原理而不一定是按比例繪制的。為了一致性和清晰，指示對應組成部分的標號貫穿附圖在必要的時候重復。
[0016]圖1說明了根據(jù)本發(fā)明實施例的系統(tǒng)；
[0017]圖2說明了根據(jù)本發(fā)明實施例的方法；
[0018]圖3說明了根據(jù)本發(fā)明實施例的圖1系統(tǒng)的實現(xiàn)；
[0019]圖4說明了根據(jù)本發(fā)明實施例的圖1系統(tǒng)的實現(xiàn)；
[0020]圖5A和5B說明了根據(jù)本發(fā)明實施例的圖1系統(tǒng)的實現(xiàn)；
[0021 ]圖6說明了根據(jù)本發(fā)明實施例的圖1系統(tǒng)的實現(xiàn)；
[0022]圖7說明了根據(jù)本發(fā)明實施例的圖1系統(tǒng)的實現(xiàn)；
[0023]圖8說明了根據(jù)本發(fā)明實施例的圖1系統(tǒng)的實現(xiàn)；以及
[0024]圖9說明了根據(jù)本發(fā)明實施例的圖1系統(tǒng)的實現(xiàn)。
【具體實施方式】
[0025]圖1說明了根據(jù)本發(fā)明實施例的系統(tǒng)100。如所說明的，系統(tǒng)100包括一個或多個傳感器102，其中傳感器配置為感測由記錄事件的用戶或者是事件主題的對象所經(jīng)歷的振動，并且把感測到的振動轉換為傳感器數(shù)據(jù)。系統(tǒng)100還包括配置為捕捉和記錄事件的圖像的視頻記錄器104，以及配置為捕捉和記錄與事件關聯(lián)的聲音的音頻記錄器106。在實施例中，傳感器102、視頻記錄器104和音頻記錄器106可以是同一電子設備140的部分。在實施例中，視頻記錄器104和音頻記錄器106可以是同一電子設備的部分，而傳感器102可以與包括視頻記錄器104和音頻記錄器106的電子設備分離。在其中視頻記錄器104和音頻記錄器106是同一電子設備的部分的實施例中，該電子設備可以是頭戴式設備，諸如像Google眼鏡。在實施例中，傳感器102、視頻記錄器104和音頻記錄器106可以是單獨的獨立設備，或者是單獨的獨立設備的部分。
[0026]處理器110配置為處理由傳感器102、視頻記錄器104和音頻記錄器106輸出的信號和數(shù)據(jù)，如以下更詳細討論的。系統(tǒng)100還包括輸入變換器112、可以是處理器110的部分的輸出變換器114、以及也可以是處理器110的部分的解碼器116。輸入變換器112、輸出變換器114和解碼器116的各方面在以下更詳細地討論。
[0027]如圖1中所說明的，系統(tǒng)100還包括配置為向系統(tǒng)的用戶輸出觸覺效果的觸覺輸出設備118、配置為顯示諸如由視頻記錄器104捕捉的圖像的圖像的顯示器120、以及配置為輸出可以是由音頻記錄器106捕捉的聲音的聲音的揚聲器122。觸覺輸出設備118、顯示器120和揚聲器122可以是電子重放設備130的部分，如以下更詳細討論的。在實施例中，觸覺輸出設備118、顯示器120和/或揚聲器122可以是可佩帶設備，諸如頭戴式顯示器，的部分。在實施例中，觸覺輸出設備118、顯示器120和揚聲器122可以是配置為通過例如無線連接彼此通信的單獨設備。在實施例中，觸覺輸出設備118可以是可佩帶設備的部分，顯示器120可以是電視機的部分，而揚聲器122可以是與顯示器120分離的無線揚聲器。
[0028]觸覺輸出設備118可以包括致動器，例如，諸如其中偏心質塊被電動機移動的偏心旋轉質塊(“ERM”)的電磁致動器、其中附連到彈簧的質塊被前后驅動的線性共振致動器(“LRA”)，或者諸如壓電材料、電活性聚合物或形狀記憶合金的“智能材料”、宏