用于管理便條的系統(tǒng)和方法
【技術(shù)領(lǐng)域】
[0001] 本公開(kāi)涉及便條捕獲、識(shí)別、提取，和/或管理工具和系統(tǒng)。
【背景技術(shù)】
[0002] 便條已被廣泛用于記錄、共享，以及傳達(dá)想法和信息。例如，在協(xié)作會(huì)話（例如，集 體研討會(huì)話）期間，參與者在Post-It⑧便條、白板，或紙材上寫(xiě)下想法，然后彼此共享。此 外，人們常常全天使用便條以記住個(gè)人不想忘記的信息或內(nèi)容。如另外的實(shí)例，人們通常使 用便條作為將來(lái)要發(fā)生的動(dòng)作或事件（諸如打電話、修改文檔或填寫(xiě)時(shí)間表）的提醒。
[0003] 在許多情況下，人們可習(xí)慣在基于紙材的便條諸如Post-It?便條上寫(xiě)下適當(dāng)?shù)?信息。紙材Post-It?便條從背部粘貼的紙材Post-It?便條的分配便簽簿被簡(jiǎn)單地移除， 并且被應(yīng)用于多種表面諸如文檔、桌子的頂部、電話等?？稍诩埐腜ost-It?便條與它們的 分配便簽簿分離或附接到它們的目標(biāo)表面之前或之后，將信息寫(xiě)在紙材Post-It?便條上。 紙材Post-It?便條可容易地從一個(gè)表面移動(dòng)到另一個(gè)表面諸如在文檔之間或在文檔和桌 子的頂部之間，它們可重疊邊緣或文檔的邊界，它們可以是分層的，并且它們可隨它們所附 接到的對(duì)象移動(dòng)。

【發(fā)明內(nèi)容】

[0004] 本公開(kāi)的至少一些方面以一種收集便條的內(nèi)容的方法為特征，該方法包括以下步 驟：由傳感器來(lái)捕獲具有多個(gè)便條的場(chǎng)景的視覺(jué)表示；由處理單元來(lái)從視覺(jué)表示識(shí)別所述 多個(gè)便條中的一個(gè)便條；以及由處理單元來(lái)提取多個(gè)便條中的一個(gè)便條的內(nèi)容。
[0005] 本公開(kāi)的至少一些方面以一種便條識(shí)別系統(tǒng)為特征，該便條識(shí)別系統(tǒng)包括傳感 器、便條識(shí)別模塊，和便條提取模塊。該傳感器被構(gòu)造成捕獲具有多個(gè)便條的場(chǎng)景的視覺(jué)表 示。該便條識(shí)別模塊耦接到傳感器。該便條識(shí)別模塊被構(gòu)造成接收所捕獲的視覺(jué)表示，并 且從所捕獲的視覺(jué)表示確定所述多個(gè)便條中的一個(gè)便條的一般邊界。該便條提取模塊被構(gòu) 造成基于所述多個(gè)便條中的所述一個(gè)便條的所確定的一般邊界，從所捕獲的視覺(jué)表示提取 所述多個(gè)便條中的所述一個(gè)便條的內(nèi)容。
【附圖說(shuō)明】
[0006] 附圖包含在本說(shuō)明中并構(gòu)成本說(shuō)明的一部分，并且與【具體實(shí)施方式】一起解釋本發(fā) 明的優(yōu)點(diǎn)和原理。在附圖中，
[0007] 圖IA是示出了用戶使用移動(dòng)裝置上的圖像捕獲裝置來(lái)捕獲具有便條的工作空間 的圖像的一個(gè)實(shí)例的表示；
[0008] 圖IB是示出了移動(dòng)裝置的一個(gè)實(shí)例的框圖；
[0009] 圖IC示出了便條識(shí)別系統(tǒng)的實(shí)施例；
[0010] 圖ID示出了便條管理系統(tǒng)的實(shí)施例；
[0011] 圖2A至圖2C示出了具有標(biāo)記的便條的一些實(shí)例；
[0012] 圖3A示出了便條識(shí)別系統(tǒng)和/或便條管理系統(tǒng)的實(shí)施例的流程圖；
[0013] 圖3B示出了提取便條的內(nèi)容的實(shí)施例的流程圖；
[0014] 圖3C示出了驗(yàn)證便條的實(shí)施例的流程圖；
[0015] 圖4A至圖4D示出了具有標(biāo)記的便條的內(nèi)容提取過(guò)程的實(shí)例；
[0016] 圖5A至圖示出了具有逆向反射標(biāo)記的多個(gè)便條的內(nèi)容提取的實(shí)施例；
[0017] 圖6示出了便條識(shí)別系統(tǒng)的實(shí)施例的模塊圖；
[0018] 圖7A示出了便條管理系統(tǒng)的實(shí)施例的流程圖；
[0019] 圖7B示出了系統(tǒng)可如何標(biāo)記便條的實(shí)例；以及
[0020] 圖8示出了便條管理系統(tǒng)的實(shí)施例的模塊圖。
【具體實(shí)施方式】
[0021] 便條已經(jīng)廣泛用于記錄、共享，以及傳達(dá)想法和信息。例如，在協(xié)作會(huì)話（例如，集 體研討會(huì)話）期間，參與者在Post-丨t?便條、白板、紙材上寫(xiě)下想法，然后彼此共享。本公 開(kāi)的至少一些方面涉及捕獲多個(gè)便條并提取便條的內(nèi)容的系統(tǒng)和方法。在一些實(shí)施例中， 便條中的至少一些便條包括促進(jìn)便條的識(shí)別和提取的標(biāo)記。在一些情況下，在場(chǎng)景的一個(gè) 視覺(jué)表示中捕獲并且確認(rèn)/識(shí)別便條。場(chǎng)景的視覺(jué)表示例如可以是一個(gè)或多個(gè)便條和周?chē)?環(huán)境的數(shù)字照片。另外，本公開(kāi)的至少一些方面涉及管理多個(gè)便條的系統(tǒng)和方法，諸如存儲(chǔ) 并檢索便條、將便條分類(lèi)或分組等。在一些情況下，便條管理系統(tǒng)可改善在從大量便條中捕 獲并提取便條的內(nèi)容的效率。此外，便條管理系統(tǒng)可改善對(duì)便條進(jìn)行分組并管理的效率。
[0022] 便條可包括物理便條和數(shù)字便條。物理便條通常是指具有一般邊界和可識(shí)別內(nèi)容 的對(duì)象。物理便條可包括人們?cè)趯?duì)象（諸如紙材、白板、或接受輸入的其它對(duì)象）上書(shū)寫(xiě)、 繪畫(huà)、或者經(jīng)由其他類(lèi)型的輸入而進(jìn)入之后的所得的對(duì)象。以舉例的方式，物理便條可包括 手寫(xiě)Post-R?便條、紙材，或膜、具有圖片的白板、招貼，以及標(biāo)記。在一些情況下，一個(gè)對(duì) 象可包括若干個(gè)便條。例如，若干個(gè)想法可被書(shū)寫(xiě)在一張招貼紙或白板上。在一些具體實(shí) 施中，為了促進(jìn)這些便條的識(shí)別，標(biāo)記諸如線、標(biāo)記物、標(biāo)貼可被應(yīng)用于便條的邊緣。物理便 條可以是二維的或三維的。物理便條可具有各種形狀和尺寸。例如，物理便條可以是3英 寸X3英寸的便條；物理便條可以是26英寸X39英寸的招貼；并且物理便條可以是三角 形金屬標(biāo)記。在一些情況下，物理便條具有已知的形狀和/或尺寸。數(shù)字便條一般是指具 有信息和/或想法的數(shù)字對(duì)象。數(shù)字便條可使用數(shù)字輸入來(lái)生成。數(shù)字輸入可包括例如鍵 盤(pán)、觸摸屏、數(shù)字相機(jī)、數(shù)字記錄裝置、觸筆、數(shù)字筆等。
[0023] 在一些情況下，便條在協(xié)作空間中使用。協(xié)作空間一般是指允許多于一個(gè)人彼此 共享想法和思想的采集區(qū)域。除采集區(qū)域之外，該協(xié)作空間還可包括允許一群人遠(yuǎn)程共享 想法和思想的虛擬空間。
[0024] 圖IA示出了便條識(shí)別環(huán)境10的實(shí)例。在圖IA的實(shí)例中，環(huán)境10包括從工作空 間20捕獲并識(shí)別一個(gè)或多個(gè)便條22的移動(dòng)裝置15。如本文所述，移動(dòng)裝置為一個(gè)或多個(gè) 軟件應(yīng)用程序提供執(zhí)行環(huán)境，如所描述的，該軟件應(yīng)用程序可有效地從大量物理便條諸如 來(lái)自工作空間20的便條22的集合捕獲并提取便條內(nèi)容。在該實(shí)例中，便條22可以是具有 多個(gè)參與者的協(xié)作集體研討會(huì)話的結(jié)果。如所描述的，移動(dòng)裝置15和在該移動(dòng)裝置上執(zhí)行 的軟件可執(zhí)行多種便條相關(guān)的操作，該多種便條相關(guān)的操作包括自動(dòng)創(chuàng)建代表工作空間20 的物理便條22的數(shù)字便條。
[0025] 在所述示例性具體實(shí)施中，除其他部件之外，移動(dòng)裝置15還包括圖像捕獲裝置18 和呈現(xiàn)裝置28。此外，雖然未在圖IA中示出，但移動(dòng)裝置15可包括一個(gè)或多個(gè)處理器、微 處理器、內(nèi)部存儲(chǔ)器和/或數(shù)據(jù)存儲(chǔ)裝置以及用于執(zhí)行軟件或固件以提供本文所述的功能 的其他電子電路。
[0026] -般來(lái)講，圖像捕獲裝置18是相機(jī)或被構(gòu)造成捕獲代表工作空間20和固定在工 作空間20中的便條22的圖像數(shù)據(jù)的其他部件。換句話講，該圖像數(shù)據(jù)捕獲具有多個(gè)視覺(jué) 便條的環(huán)境（諸如工作空間20)的視覺(jué)表示。雖然被論述為移動(dòng)裝置15的相機(jī)，但圖像捕 獲裝置18可包括能夠捕獲圖像數(shù)據(jù)的其他部件，諸如視頻記錄器、紅外相機(jī)、CDD(電荷耦 合裝置）陣列、激光掃描器等。此外，所捕獲的數(shù)據(jù)可包括圖像、視頻、一系列圖像（即，在 一定時(shí)間段內(nèi)和/或按次序獲取的多個(gè)圖像）、圖像的集合等中的至少一者，并且術(shù)語(yǔ)輸入 圖像在本文中用于指多種示例性類(lèi)型的圖像數(shù)據(jù)。
[0027] 呈現(xiàn)裝置28可包括但不限于電子可尋址的顯示器，諸如液晶顯示器（IXD)或用于 與移動(dòng)裝置28 -起使用的其他類(lèi)型的顯示裝置。在一些具體實(shí)施中，移動(dòng)裝置15針對(duì)多 種格式的便條生成內(nèi)容例如分成行和/或列的列表、流程圖等以在顯示裝置28上顯示。在 一些情況下，移動(dòng)裝置15可傳輸顯示信息以用于由其他裝置諸如平板電腦、投影儀、電子 布告板或其他外部裝置來(lái)呈現(xiàn)。
[0028] 如本文所述，移動(dòng)裝置15和在其上執(zhí)行的軟件提供用于創(chuàng)建并操縱代表物理便 條22的數(shù)字便條的工作臺(tái)。例如，一般來(lái)講，移動(dòng)裝置15被構(gòu)造成處理由圖像捕獲裝置18 產(chǎn)生的圖像數(shù)據(jù)，以檢測(cè)并識(shí)別被定位在工作臺(tái)20內(nèi)的物理便條22中的至少一個(gè)物理便 條。在一些實(shí)例中，移動(dòng)裝置15被構(gòu)造成通過(guò)確定一個(gè)或多個(gè)便條的一般邊界來(lái)識(shí)別該一 個(gè)或多個(gè)便條。在便條被識(shí)別之后，移動(dòng)裝置15提取所述一個(gè)或多個(gè)便條中的至少一個(gè)一 個(gè)或多個(gè)的內(nèi)容，其中內(nèi)容是便條22的視覺(jué)信息。
[0029] 如下面進(jìn)一步描述的，移動(dòng)裝置15可實(shí)現(xiàn)用于自動(dòng)檢測(cè)和識(shí)別物理便條22以及 提取與物理便條中的每個(gè)物理便條相關(guān)聯(lián)的信息、內(nèi)容或其他特性的技術(shù)。
[0030] 在圖IA的實(shí)例中，移動(dòng)裝置15被示出為移動(dòng)電話。然而，在其他實(shí)例中，移動(dòng)裝 置15可以是平板電腦、個(gè)人數(shù)字助理（PAD)、膝上型計(jì)算機(jī)、媒體播放器、電子書(shū)閱讀器、可 佩戴計(jì)算裝置（例如，手表、眼鏡、手套），或適于執(zhí)行本文所述的技術(shù)的任何其他類(lèi)型的移 動(dòng)或非移動(dòng)計(jì)算裝置。
[0031] 圖IB示出了根據(jù)本文所述的技術(shù)操作的移動(dòng)裝置的實(shí)例的框圖。為了示例性目 的，將相對(duì)于圖IA的移動(dòng)裝置15來(lái)描述圖IB的移動(dòng)裝置。
[0032] 在該實(shí)例中，移動(dòng)裝置15包括提供用于裝置的操作的核心功能的各種硬件部件。 例如，移動(dòng)裝置15包括一個(gè)或多個(gè)可編程處理器70,該一個(gè)或多個(gè)可編程處理器70被構(gòu) 造成根據(jù)可執(zhí)行指令（即，程序代碼）進(jìn)行操作，該可執(zhí)行指令通常存儲(chǔ)在計(jì)算機(jī)可讀介質(zhì) 或數(shù)據(jù)存儲(chǔ)裝置68中，諸如靜態(tài)隨機(jī)存取存儲(chǔ)器（SRAM)裝置或閃存存儲(chǔ)器裝置。I/O 76 可包括一個(gè)或多個(gè)裝置，諸如如圖IA所述的鍵盤(pán)、相機(jī)按鈕、電源按鈕、音量