本發(fā)明涉及智能家電技術(shù)領(lǐng)域，特別涉及一種智能冰箱食物管理方法及智能冰箱。

背景技術(shù)：

隨著家電智能化的發(fā)展，冰箱也開(kāi)始智能化，日益繁忙的人們經(jīng)常去超市購(gòu)物時(shí)想不起來(lái)家里冰箱有什么食品，因而造成重復(fù)購(gòu)買(mǎi)或者漏買(mǎi)食品。因而，目前市場(chǎng)上出現(xiàn)了帶有食材錄入和過(guò)期提醒功能的冰箱。但是現(xiàn)有的智能冰箱在管理食品方面一般采用手動(dòng)、或條碼等方式手動(dòng)錄入食物信息。這些方式都需要用戶手動(dòng)操作錄入信息，在根據(jù)錄入信息生成食品列表，操作繁瑣。特別地，用戶每次放入或者取出食品是都需要手動(dòng)修改食品列表，這樣不但改變了用戶的使用習(xí)慣，并且在實(shí)際使用終端也十分不便。

因而現(xiàn)有技術(shù)還有待改進(jìn)和提高。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明要解決的技術(shù)問(wèn)題在于，針對(duì)現(xiàn)有技術(shù)的不足，提供一種智能冰箱食物管理方法及智能冰箱，以解決現(xiàn)有冰箱食物的控制方法存在的操作繁瑣并給用戶的使用帶來(lái)不便的問(wèn)題。

為了解決上述技術(shù)問(wèn)題，本發(fā)明所采用的技術(shù)方案如下：

一種智能冰箱食物管理方法，其包括：

在智能冰箱開(kāi)門(mén)時(shí)，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝用戶執(zhí)行存取操作的圖像；

對(duì)所述圖像進(jìn)行識(shí)別以獲取所述存取操作的類型以及相應(yīng)的食物名稱；

當(dāng)識(shí)別失敗時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱，其中，所述存取操作的類型包括存操作和取操作；

監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新預(yù)設(shè)的食物列表。

所述智能冰箱食物管理方法，其中，所述當(dāng)識(shí)別失敗時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱，其中，所述存取操作的類型包括存操作和取操作包括：

當(dāng)識(shí)別失敗時(shí)，所述智能冰箱將所述圖像發(fā)送至遠(yuǎn)程服務(wù)器；

所述遠(yuǎn)程服務(wù)器對(duì)所述圖像進(jìn)行識(shí)別以獲取所述存取操作的類型以及相應(yīng)的食物名稱；

當(dāng)所述遠(yuǎn)程服務(wù)器識(shí)別失敗時(shí)，將所述識(shí)別失敗的信息反饋至所述智能冰箱；

所述智能冰箱提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱，其中，所述存取操作的類型包括存操作和取操作。

所述智能冰箱食物管理方法，其還包括：

當(dāng)識(shí)別成功時(shí)，根據(jù)識(shí)別得到的所述存取操作的類型以及食物名稱更新預(yù)設(shè)的食物列表。

所述智能冰箱食物管理方法，其中，所述在智能冰箱開(kāi)門(mén)時(shí)，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝用戶執(zhí)行存取操作的圖像具體包括：

當(dāng)智能冰箱開(kāi)門(mén)時(shí)，獲取智能冰箱開(kāi)啟的儲(chǔ)藏室的類型，其中，所述儲(chǔ)藏室的類型包括冷藏室和冷凍室；

當(dāng)智能冰箱開(kāi)啟冷藏室時(shí)，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程中用戶執(zhí)行存取操作的圖像。

所述智能冰箱食物管理方法，其中，所述在智能冰箱開(kāi)門(mén)時(shí)，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝用戶執(zhí)行存取操作的圖像還包括：

當(dāng)智能冰箱開(kāi)啟冷凍室時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱；以及

監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新所述預(yù)設(shè)的食物列表，結(jié)束操作。

所述所述智能冰箱食物管理方法，其中，所述監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新預(yù)設(shè)的食物列表之后還包括：

所述智能冰箱通過(guò)網(wǎng)絡(luò)與外部設(shè)備連接，并接收外部設(shè)備推送的食品信息；以及將冰箱內(nèi)部設(shè)備狀態(tài)信息和食品需求信息反饋至外部設(shè)備，其中，所述外部設(shè)備包括運(yùn)營(yíng)商服務(wù)器和用戶終端。

一種智能冰箱，其包括：

攝像頭，用于在智能冰箱開(kāi)門(mén)時(shí)，拍攝用戶執(zhí)行存取操作的圖像；

麥克風(fēng)，用于接收用戶輸入的語(yǔ)音信息；

控制裝置，用于對(duì)所述圖像進(jìn)行識(shí)別，并當(dāng)識(shí)別失敗時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱，其中，所述存取操作的類型包括存操作和取操作；以及

監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新預(yù)設(shè)的食物列表。

所述智能冰箱，其中，所述更新模塊還用于：

當(dāng)識(shí)別成功時(shí)，根據(jù)識(shí)別得到的所述存取操作的類型以及相應(yīng)的食物名稱更新預(yù)設(shè)的食物列表。

所述所述智能冰箱，其中，所述控制裝置還包括：

獲取模塊，用于當(dāng)智能冰箱開(kāi)門(mén)時(shí)，獲取智能冰箱開(kāi)啟的儲(chǔ)藏室的類型，其中，所述儲(chǔ)藏室的類型包括冷藏室和冷凍室；

第一控制模塊，用于當(dāng)智能冰箱開(kāi)啟冷藏室時(shí)，控制設(shè)于智能冰箱內(nèi)的攝像頭拍攝智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程中用戶執(zhí)行存取操作的圖像。

所述所述智能冰箱，其中，所述控制裝置還包括：

提示模塊，用于當(dāng)智能冰箱開(kāi)啟冷凍室時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱；

所述更新模塊還用于：

監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新所述預(yù)設(shè)的食物列表，結(jié)束操作。

有益效果：與現(xiàn)有技術(shù)相比，本發(fā)明提供了一種智能冰箱食物管理方法及智能冰箱，所述方法包括：在智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程中，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝所述過(guò)程中用戶執(zhí)行存取操作的圖像；對(duì)所述圖像進(jìn)行識(shí)別，并當(dāng)識(shí)別失敗時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱；監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新預(yù)設(shè)的食物列表。本發(fā)明通過(guò)將攝像頭采集用戶對(duì)食物進(jìn)行的存放操作過(guò)程的圖像，并將圖像識(shí)別與語(yǔ)音輸入相結(jié)合，以得到所述存放操作涉及的食物信息，根據(jù)所述食物信息對(duì)食物列表進(jìn)行更新，避免了用戶手動(dòng)輸入食物信息的操作，給用戶的使用帶來(lái)方便。

附圖說(shuō)明

圖1為本發(fā)明提供的智能冰箱食物管理方法較佳實(shí)施的流程圖。

圖2為本發(fā)明提供的智能冰箱的結(jié)構(gòu)示意圖。

圖3為本發(fā)明提供的智能冰箱的控制裝置的結(jié)構(gòu)原理圖。

具體實(shí)施方式

本發(fā)明提供一種智能冰箱食物管理方法及智能冰箱，為使本發(fā)明的目的、技術(shù)方案及效果更加清楚、明確，以下參照附圖并舉實(shí)施例對(duì)本發(fā)明進(jìn)一步詳細(xì)說(shuō)明。應(yīng)當(dāng)理解，此處所描述的具體實(shí)施例僅用以解釋本發(fā)明，并不用于限定本發(fā)明。

本發(fā)明中，使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發(fā)明的說(shuō)明，其本身并沒(méi)有特定的意義。因此，模塊”、“部件”或“單元”可以混合地使用。

此外，在說(shuō)明書(shū)和權(quán)利要求書(shū)中，術(shù)語(yǔ)“第一”、“第二”等用于在類似元素之間進(jìn)行區(qū)分，而未必描述時(shí)間順序、空間順序、等級(jí)順序或者任何其他方式的順序、應(yīng)當(dāng)理解，如果使用的這些術(shù)語(yǔ)在適當(dāng)?shù)沫h(huán)境下可互換，并且此處描述的本發(fā)明的實(shí)施例能夠以本文描述或示出以外的其他順序來(lái)操作。

應(yīng)當(dāng)注意，在權(quán)利要求書(shū)中使用的術(shù)語(yǔ)“包括”不應(yīng)被解釋為限于下文所列出的手段，它并不排除其他元件或步驟。由此，它應(yīng)當(dāng)被解釋為指定如涉及的所述特征、數(shù)字、步驟或部件的存在，但是并不排除一個(gè)或多個(gè)其他特征、數(shù)字、步驟或部件、或者其組合的存在或添加。因此，措詞“包括裝置A和B的設(shè)備”的范圍不應(yīng)當(dāng)僅限于僅由組件A和B構(gòu)成的裝置。這意味著相對(duì)于本發(fā)明而言，設(shè)備的相關(guān)組件是A和B。

在本說(shuō)明書(shū)通篇中對(duì)“一個(gè)實(shí)施例”或“實(shí)施例”的引用意味著結(jié)合該實(shí)施例描述的特定特征、結(jié)構(gòu)或特性包括在本發(fā)明的至少一個(gè)實(shí)施例中。由此，在說(shuō)明書(shū)的各處出現(xiàn)的短語(yǔ)“在一個(gè)實(shí)施例中”或者“在實(shí)施例中”不一定都指同一實(shí)施例，但是可能如此。此外，根據(jù)本發(fā)明公開(kāi)對(duì)本領(lǐng)域技術(shù)人員而言顯而易見(jiàn)的是，在一個(gè)或多個(gè)實(shí)施例中，特定特征、結(jié)構(gòu)或特性可以任何合適的方式組合。

下面結(jié)合附圖，通過(guò)對(duì)實(shí)施例的描述，對(duì)發(fā)明內(nèi)容作進(jìn)一步說(shuō)明。

請(qǐng)參照?qǐng)D1和圖2，圖1為本發(fā)明提供的智能冰箱食物管理方法的較佳實(shí)施例的流程圖。所述方法包括：

S100、在智能冰箱開(kāi)門(mén)時(shí)，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝用戶執(zhí)行存取操作的圖像。

具體地，所述智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程指的是從智能冰箱門(mén)被打開(kāi)至智能冰箱門(mén)被關(guān)閉的操作，即用戶對(duì)所述智能冰箱進(jìn)行操作的過(guò)程。如圖2所示，所述智能冰箱至少設(shè)置一個(gè)攝像頭1，所述攝像頭1用于拍攝智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程終端用戶執(zhí)行存取操作的圖像。也就是說(shuō)，所述攝像頭在冰箱門(mén)6開(kāi)啟時(shí)啟動(dòng)，在所述智能冰箱門(mén)6關(guān)閉時(shí)關(guān)閉。

示例性的，所述在智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程中，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝所述過(guò)程中用戶執(zhí)行存取操作的圖像具體可以包括：

S10、監(jiān)聽(tīng)到智能冰箱開(kāi)門(mén)時(shí)，控制設(shè)置于智能冰箱內(nèi)的攝像頭啟動(dòng)；

S20、所述攝像頭拍攝其拍攝范圍內(nèi)的圖像，并實(shí)時(shí)檢測(cè)智能冰箱關(guān)門(mén)的控制信息；

S30、當(dāng)檢測(cè)到智能冰箱關(guān)門(mén)的控制信息時(shí)，所述攝像頭關(guān)閉以獲取所述智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程用戶執(zhí)行存取操作的圖像。

具體地，所述智能冰箱的冰箱門(mén)6的開(kāi)關(guān)可以在所述智能冰箱上設(shè)置有冰箱門(mén)的限位開(kāi)關(guān)5，通過(guò)所述限位開(kāi)關(guān)5來(lái)檢測(cè)冰箱門(mén)的開(kāi)/關(guān)，并檢測(cè)到的開(kāi)/關(guān)信號(hào)發(fā)送至攝像頭1，以使得所述攝像頭1根據(jù)所述開(kāi)/關(guān)信號(hào)控制其自身的啟動(dòng)/關(guān)閉。在本實(shí)施例中，所述攝像頭1為1個(gè)，安裝于冷藏室上方的正中間。相應(yīng)的，所述冰箱門(mén)6指的是智能冰箱冷藏室的門(mén)，并且所述攝像頭1兩側(cè)的還可以分別設(shè)置有兩排LED光源，對(duì)所述攝像頭1進(jìn)行補(bǔ)光，以保證所述攝像頭拍攝照片的清晰度。所述限位開(kāi)關(guān)5也是可以設(shè)置于冷藏上方。當(dāng)然，由于一個(gè)攝像頭的監(jiān)控范圍一定，為了能夠全方位監(jiān)控冰箱內(nèi)的食材，冰箱內(nèi)可以安裝多個(gè)攝像頭。所述攝像頭可以安裝于需要監(jiān)控的冷藏室的頂部或者側(cè)壁，以攝像頭能夠監(jiān)控到目標(biāo)監(jiān)測(cè)空間的俯瞰畫(huà)面為宜。

在實(shí)施例的變形實(shí)施例中，所述啟動(dòng)攝像頭還可以其他方式控制，例如，當(dāng)控制裝置檢測(cè)到有人體靠近冰箱時(shí)，啟動(dòng)所述攝像頭。具體的，在冰箱外殼上安裝人體感應(yīng)器，當(dāng)該人體感應(yīng)器感應(yīng)到有人體靠近冰箱時(shí)，向控制裝置發(fā)送一個(gè)指示信號(hào)，控制裝置在接收到該指示信號(hào)后啟動(dòng)攝像頭。

在本發(fā)明的另一個(gè)實(shí)施例中，由于所述攝像頭1設(shè)置于冷藏室內(nèi)，從而所述在智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程中，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝所述過(guò)程中用戶執(zhí)行存取操作的圖像還具體可以包括：

S101、當(dāng)智能冰箱開(kāi)門(mén)時(shí)，獲取智能冰箱開(kāi)啟的儲(chǔ)藏室的類型，其中，所述儲(chǔ)藏室的類型包括冷藏室和冷凍室；

S102、當(dāng)智能冰箱開(kāi)啟冷藏室時(shí)，通過(guò)設(shè)于智能冰箱內(nèi)的攝像頭拍攝智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程中用戶執(zhí)行存取操作的圖像；

S103、當(dāng)智能冰箱開(kāi)啟冷凍室時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱；

S104、監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新所述預(yù)設(shè)的食物列表，結(jié)束操作。

具體地，所述獲取智能冰箱開(kāi)啟的儲(chǔ)藏室的類型可以通過(guò)判斷智能冰箱開(kāi)啟的冰箱門(mén)來(lái)確定。在實(shí)際應(yīng)用中，所述智能冰箱于智能冰箱體相接觸的位置可以分別設(shè)置限位開(kāi)關(guān)，根據(jù)限位開(kāi)關(guān)產(chǎn)生的控制信號(hào)來(lái)確定開(kāi)啟的冰箱門(mén)的類型，所述冰箱門(mén)的類型包括冷藏室門(mén)和冷凍室門(mén)，進(jìn)而獲取智能冰箱開(kāi)啟的儲(chǔ)藏室的類型為冷藏室或冷凍室。當(dāng)為冷藏室時(shí)，控制攝像頭啟動(dòng)并獲取圖像，當(dāng)為冷凍室時(shí)，則直接提示用戶語(yǔ)音輸入所述存入的類型以及相應(yīng)的食物名稱。這樣可以同時(shí)對(duì)智能冰箱冷藏室和冷凍室內(nèi)的食物進(jìn)行控制，提高了對(duì)食物控制的全面性。同時(shí)，所述攝像頭只在冰箱冷藏室的門(mén)打開(kāi)期間在冷藏室區(qū)域內(nèi)對(duì)用戶放進(jìn)、拿出食品的動(dòng)作進(jìn)行拍照，這樣可以減少拍攝圖片的數(shù)量以及降低處理器圖像識(shí)別分析的運(yùn)算數(shù)據(jù)量，降低對(duì)處理器性能的較高需求，從而減低了智能冰箱的成本。

所述智能冰箱上可以設(shè)置揚(yáng)聲器4，所述提示用戶語(yǔ)音輸入的提示音可以通過(guò)所述揚(yáng)聲器4播放。并且，所述智能冰箱上還設(shè)置有麥克風(fēng)，所述麥克風(fēng)為全向麥克風(fēng)，并可以設(shè)置于智能冰箱的門(mén)面上，方便用戶通過(guò)所述麥克風(fēng)輸入語(yǔ)音信息。

所述智能冰箱還可以包括存儲(chǔ)器，例如嵌入式多媒體卡 (英文全稱：embedded Multi Media Card，英文簡(jiǎn)稱：eMMC)、安全數(shù)碼卡(英文全稱：Secure Digital Memory Card，英文簡(jiǎn)稱：SD)等存儲(chǔ)器件。攝像頭新拍攝得到的照片可以存儲(chǔ)在本地，由冰箱控制器根據(jù)本地存儲(chǔ)的照片所記錄的用戶存取過(guò)程設(shè)置食材保質(zhì)期標(biāo)簽。當(dāng)然，所述存儲(chǔ)器還可以包括預(yù)設(shè)設(shè)置的食物列表，以用于后續(xù)根據(jù)圖像進(jìn)行識(shí)別時(shí)起到比較參考的作用。

S200、對(duì)所述圖像進(jìn)行識(shí)別以獲取所述存取操作的類型以及相應(yīng)的食物名稱。

具體地，所述對(duì)所述圖像進(jìn)行識(shí)別可以通過(guò)圖像識(shí)別軟件對(duì)所述圖像進(jìn)行識(shí)別，若識(shí)別成功，則首先判斷出用戶是存入還是取出食品，即所述存取操作的類型，再判斷所存入或取出食物的類型，即所述食物的名稱。所述判斷所存入或取出食物的類型可以將獲得的識(shí)別結(jié)果分別與預(yù)設(shè)的食物圖像數(shù)據(jù)庫(kù)中的數(shù)據(jù)進(jìn)行一一比對(duì)，并篩選出相似度大于90％的識(shí)別結(jié)果作為所表示的食品的名稱。若識(shí)別失敗，則將識(shí)別失敗的食物圖像發(fā)送到遠(yuǎn)程服務(wù)器進(jìn)行輔助識(shí)別；輔助識(shí)別可以包括圖像識(shí)別軟件進(jìn)一步識(shí)別和/或人工輔助識(shí)別；遠(yuǎn)程服務(wù)器所配備的人工服務(wù)，可以是專業(yè)人員進(jìn)行輔助識(shí)別，也可以是用戶進(jìn)行人工識(shí)別，所述遠(yuǎn)程服務(wù)器將所述輔助識(shí)別的結(jié)果反饋至智能冰箱。所述智能冰箱對(duì)所述輔助識(shí)別結(jié)果進(jìn)行分析，若輔助識(shí)別結(jié)果為成功，則獲取所述識(shí)別結(jié)果攜帶的存取操作的類型以及食物名稱；若輔助識(shí)別結(jié)果為識(shí)別，則確定圖像識(shí)別的結(jié)果為失敗。

示例性的，所述對(duì)所述圖像進(jìn)行識(shí)別以獲取所述存取操作的類型以及相應(yīng)的食物名稱具體可以包括：

S201、所述智能冰箱對(duì)所述圖像進(jìn)行識(shí)別，并以獲取所述存取操作的類型以及相應(yīng)的食物名稱；

S202、當(dāng)識(shí)別失敗時(shí)，當(dāng)所述遠(yuǎn)程服務(wù)器識(shí)別失敗時(shí)，將所述識(shí)別失敗的信息反饋至所述智能冰箱；

S203、所述智能冰箱提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱，其中，所述存取操作的類型包括存操作和取操作。

具體地，所述遠(yuǎn)程服務(wù)器反饋的識(shí)別結(jié)果攜帶識(shí)別狀態(tài)以及識(shí)別得到的信息。也就是說(shuō)，當(dāng)遠(yuǎn)程服務(wù)器識(shí)別成功時(shí)，其反饋的識(shí)別結(jié)果中處理攜帶識(shí)別成功的信息外，還攜帶所述圖像對(duì)應(yīng)的存取操作的類型以及食物名稱。

S300、當(dāng)識(shí)別失敗時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱，其中，所述存取操作的類型包括存操作和取操作。

具體地，所述識(shí)別結(jié)果為失敗說(shuō)明根據(jù)攝像頭采集的圖像無(wú)法確定所述存取操作的類型以及相應(yīng)的食物名稱。這時(shí)為了準(zhǔn)確的管理冰箱的食物，則通過(guò)設(shè)置于冰箱上的揚(yáng)聲器4播放提示音以提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱的類型。所述提示音可以間隔固定時(shí)間的重復(fù)播放，直至用戶輸入語(yǔ)音信息為止。在實(shí)際應(yīng)用中，所述提示音也可以直接詢問(wèn)用戶所述存取操作為存入操作或取出操作，并進(jìn)一步詢問(wèn)存入/取出食物的名稱。這樣可以使得用戶快速準(zhǔn)確的輸入需要的語(yǔ)音信息。

S400、監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新預(yù)設(shè)的食物列表。

具體地，當(dāng)接收到麥克風(fēng)輸入的語(yǔ)音相信時(shí)，對(duì)所述語(yǔ)音信息進(jìn)行識(shí)別，并將所述識(shí)別的內(nèi)容與所述圖像進(jìn)行關(guān)聯(lián)記錄。這樣當(dāng)在智能冰箱門(mén)關(guān)閉后，可以根據(jù)語(yǔ)音信息及圖像關(guān)聯(lián)信息，對(duì)所述圖像對(duì)應(yīng)的存入操作的信息進(jìn)行歸類記錄，以更新預(yù)設(shè)的食物列表。

進(jìn)一步，為了便于用戶快速了解冰箱內(nèi)食物的信息，還可以將所述食物列表顯示于冰箱的顯示界面上，并且根據(jù)存入操作對(duì)顯示界面顯示的食物列表進(jìn)行同步更新，這樣可以保證用戶實(shí)時(shí)獲取最新的食物列表信息，更加準(zhǔn)確的對(duì)食物進(jìn)行控制。

在本實(shí)施例，所述智能冰箱可以通過(guò)其自帶的控制系統(tǒng)對(duì)攝像頭采集的圖像進(jìn)行識(shí)別以及接收語(yǔ)音輸入，并根據(jù)圖像識(shí)別結(jié)果/語(yǔ)音輸入信息更新預(yù)設(shè)食物列表。在本實(shí)施例的變形實(shí)施例中，所述智能冰箱可以設(shè)置以智能設(shè)備，如PAD裝置。將所述PAD終端配置于智能冰箱的門(mén)面上，所述PAD與所述USB攝像頭連接，所述攝像頭將拍攝的圖像發(fā)送至所述PAD終端，所述PAD終端，并將冰箱食品信息顯示在PAD終端上，使得用戶通過(guò)PAD終端顯示界面或與所述PAD終端相連接的手機(jī)的APP客戶端可以獲取所有相關(guān)信息。同時(shí)，還可以通過(guò)PAD終端連接網(wǎng)絡(luò)能夠獲取銷售商或運(yùn)營(yíng)商的信息推送、進(jìn)行線上食品訂購(gòu)、故障保修等。

本發(fā)明還提供了一種智能冰箱，如圖2所示，所述智能冰箱包括：

攝像頭1，用于在智能冰箱開(kāi)門(mén)時(shí)，拍攝用戶執(zhí)行存取操作的圖像；

麥克風(fēng)2，用于接收用戶輸入的語(yǔ)音信息；

控制裝置3，用于對(duì)所述圖像進(jìn)行識(shí)別，并當(dāng)識(shí)別失敗時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱，其中，所述存取操作的類型包括存操作和取操作；以及

監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新預(yù)設(shè)的食物列表。

所述智能冰箱，其中，如圖3所示，所述控制裝置3包括：

識(shí)別模塊301，用于對(duì)所述圖像進(jìn)行識(shí)別；

第一執(zhí)行模塊302，用于當(dāng)識(shí)別失敗時(shí)，將所述圖像發(fā)送至遠(yuǎn)程服務(wù)器以使得所述遠(yuǎn)程服務(wù)器對(duì)所述圖像進(jìn)行識(shí)別；

更新模塊303，用于當(dāng)遠(yuǎn)程服務(wù)器反饋?zhàn)R別失敗時(shí)，監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新預(yù)設(shè)的食物列表。

所述智能冰箱，其中，所述所述更新模塊還用于：

用于當(dāng)識(shí)別成功時(shí)，根據(jù)識(shí)別得到的所述存取操作的類型以及食物名稱更新預(yù)設(shè)的食物列表。

所述所述智能冰箱食物管理系統(tǒng)，其中，控制裝置還包括：

獲取模塊，用于當(dāng)智能冰箱開(kāi)門(mén)時(shí)，獲取智能冰箱開(kāi)啟的儲(chǔ)藏室的類型，其中，所述儲(chǔ)藏室的類型包括冷藏室和冷凍室；

第一控制模塊，用于當(dāng)智能冰箱開(kāi)啟冷藏室時(shí)，控制設(shè)于智能冰箱內(nèi)的攝像頭拍攝智能冰箱開(kāi)門(mén)至關(guān)門(mén)過(guò)程中用戶執(zhí)行存取操作的圖像。

所述所述智能冰，其中，所述控制裝置還包括：

提示模塊，用于當(dāng)智能冰箱開(kāi)啟冷凍室時(shí)，提示用戶通過(guò)語(yǔ)音輸入所述存取操作的類型以及相應(yīng)的食物名稱；

所述更新模塊還用于：

監(jiān)聽(tīng)設(shè)置于冰箱上的麥克風(fēng)輸入的語(yǔ)音信息，并根據(jù)所述語(yǔ)音信息更新所述預(yù)設(shè)的食物列表，結(jié)束操作。

上述智能冰箱的各個(gè)模塊在上述方法中已經(jīng)詳細(xì)說(shuō)明，在這里就不再一一陳述。

在本發(fā)明所提供的實(shí)施例中，應(yīng)該理解到，所揭露的系統(tǒng)和方法，可以通過(guò)其它的方式實(shí)現(xiàn)。例如，以上所描述的裝置實(shí)施例僅僅是示意性的，例如，所述模塊的劃分，僅僅為一種邏輯功能劃分，實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式，例如多個(gè)單元或組件可以結(jié)合或者可以集成到另一個(gè)系統(tǒng)，或一些特征可以忽略，或不執(zhí)行。另一點(diǎn)，所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過(guò)一些接口，裝置或單元的間接耦合或通信連接，可以是電性，機(jī)械或其它的形式。

所述作為分離部件說(shuō)明的單元可以是或者也可以不是物理上分開(kāi)的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位于一個(gè)地方，或者也可以分布到多個(gè)網(wǎng)絡(luò)單元上?？梢愿鶕?jù)實(shí)際的需要選擇其中的部分或者全部單元來(lái)實(shí)現(xiàn)本實(shí)施例方案的目的。

另外，在本發(fā)明各個(gè)實(shí)施例中的各功能單元可以集成在一個(gè)處理單元中，也可以是各個(gè)單元單獨(dú)物理存在，也可以兩個(gè)或兩個(gè)以上單元集成在一個(gè)單元中。上述集成的單元既可以采用硬件的形式實(shí)現(xiàn)，也可以采用硬件加軟件功能單元的形式實(shí)現(xiàn)。

上述以軟件功能單元的形式實(shí)現(xiàn)的集成的單元，可以存儲(chǔ)在一個(gè)計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中。上述軟件功能單元存儲(chǔ)在一個(gè)存儲(chǔ)介質(zhì)中，包括若干指令用以使得一臺(tái)計(jì)算機(jī)設(shè)備(可以是個(gè)人計(jì)算機(jī)，服務(wù)器，或者網(wǎng)絡(luò)設(shè)備等)或處理器(processor)執(zhí)行本發(fā)明各個(gè)實(shí)施例所述方法的部分步驟。而前述的存儲(chǔ)介質(zhì)包括：U盤(pán)、移動(dòng)硬盤(pán)、只讀存儲(chǔ)器(Read-Only Memory，ROM)、隨機(jī)存取存儲(chǔ)器(Random Access Memory，RAM)、磁碟或者光盤(pán)等各種可以存儲(chǔ)程序代碼的介質(zhì)。

最后應(yīng)說(shuō)明的是：以上實(shí)施例僅用以說(shuō)明本發(fā)明的技術(shù)方案，而非對(duì)其限制；盡管參照前述實(shí)施例對(duì)本發(fā)明進(jìn)行了詳細(xì)的說(shuō)明，本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解：其依然可以對(duì)前述各實(shí)施例所記載的技術(shù)方案進(jìn)行修改，或者對(duì)其中部分技術(shù)特征進(jìn)行等同替換；而這些修改或者替換，并不使相應(yīng)技術(shù)方案的本質(zhì)脫離本發(fā)明各實(shí)施例技術(shù)方案的精神和范圍。