本發(fā)明涉及一種基于圖像識(shí)別的菜譜推送系統(tǒng)及其使用方法。

背景技術(shù)：

隨著智能家電越來越普及，智能家電的功能也備受爭(zhēng)議，大多智能家電只能充當(dāng)家電的遙控器，在用戶實(shí)際應(yīng)用場(chǎng)景中并沒有明顯的有利影響。

在廚電產(chǎn)品中，云菜譜被認(rèn)為是智能廚電一項(xiàng)重要的功能，現(xiàn)階段的云菜譜大多由用戶自行搜索瀏覽來進(jìn)行選擇，或者通過大數(shù)據(jù)分析大多數(shù)用戶的使用習(xí)慣來推送最多人用的菜譜或者用戶關(guān)注最多的菜譜。但這種方式對(duì)于年輕一代缺乏趣味性，而且推送出來的菜譜用戶不一定有所需的全部食材，還需要另外去購(gòu)買。

中國(guó)專利文獻(xiàn)號(hào)CN103884151A于2014年6月25日公布了一種根據(jù)用戶需求推送菜譜的方法、冰箱、用戶終端及系統(tǒng)；具體公開了：根據(jù)用戶需求推送菜譜的方法，包括如下步驟：接收用戶發(fā)送的菜類信息指示；根據(jù)所述菜類信息指示和冰箱內(nèi)已有的食品信息進(jìn)行菜譜搜索，得到目標(biāo)菜譜信息；將目標(biāo)菜譜信息在冰箱的顯示屏上顯示或發(fā)送給用戶終端。根據(jù)用戶需求推送菜譜的冰箱，包括：第一信息接收單元，用于接收用戶發(fā)送的菜類信息指示；第一信息處理單元，用于根據(jù)所述菜類信息指示和冰箱內(nèi)已有的食品信息進(jìn)行菜譜搜索，得到目標(biāo)菜譜信息；第二信息處理單元，用于將目標(biāo)菜譜信息在冰箱的顯示屏上顯示或發(fā)送給用戶終端。該結(jié)構(gòu)提供了一種根據(jù)用戶需求推送菜譜的方法及冰箱，其支持用戶根據(jù)需求進(jìn)行搜索配菜，并提供了一種優(yōu)化配菜的算法機(jī)制，提高了能量效率和用戶體驗(yàn)性。但其具有一定的局限性，而且趣味性較低，用戶體現(xiàn)較差，菜譜推送不夠全面；此外，其只適用于冰箱，適用范圍較小。

因此，有必要做進(jìn)一步改進(jìn)。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明的目的旨在提供一種操作簡(jiǎn)單、趣味性強(qiáng)、適用性廣、方便易用的基于圖像識(shí)別的菜譜推送系統(tǒng)及其使用方法，以克服現(xiàn)有技術(shù)中的不足之處。

按此目的設(shè)計(jì)的一種基于圖像識(shí)別的菜譜推送系統(tǒng)，其特征在于：包括云端的云菜譜系統(tǒng)、移動(dòng)終端上的攝像單元和顯示單元；移動(dòng)終端通過攝像單元錄制視頻，并傳送到云菜譜系統(tǒng)，經(jīng)過對(duì)食材圖像的比對(duì)和/或分析后，向用戶反饋食材識(shí)別信息或推送相應(yīng)的菜譜信息，相關(guān)信息通過移動(dòng)終端上的顯示單元顯示出來；所述云菜譜系統(tǒng)包括食材圖像數(shù)據(jù)庫和菜譜數(shù)據(jù)庫。

食材信息在顯示單元上的顯示形式包括但不限于圖標(biāo)、圖片和/或文字。

食材信息在顯示單元上的顯示狀態(tài)包括置灰或半透明的狀態(tài)一，及高亮或不透明的狀態(tài)二。

食材圖像數(shù)據(jù)庫支持上傳食材圖像功能，菜譜數(shù)據(jù)庫支持上傳菜譜功能。

用戶通過定向搜索、瀏覽菜譜商城或選擇云菜譜系統(tǒng)推送的方式獲得想要烹調(diào)的菜譜。

食材圖像數(shù)據(jù)庫內(nèi)還存儲(chǔ)有各食材的營(yíng)養(yǎng)信息、適用人群和/或配伍禁忌，菜譜數(shù)據(jù)庫內(nèi)還存儲(chǔ)有各菜譜的營(yíng)養(yǎng)信息和/或適用人群。

一種如上述基于圖像識(shí)別的菜譜推送系統(tǒng)的使用方法，其特征在于：包括以下步驟：

a、打開移動(dòng)終端上的應(yīng)用，根據(jù)實(shí)際情況選擇“有現(xiàn)成菜譜”、“有現(xiàn)成食材”或“沒有現(xiàn)成食材”；

b、“有現(xiàn)成菜譜”：根據(jù)現(xiàn)成菜譜顯示所需食材，用戶根據(jù)所需食材自行選購(gòu)或打開視頻傳輸，實(shí)時(shí)錄制視頻，云菜譜系統(tǒng)對(duì)視頻中的圖像實(shí)時(shí)進(jìn)行識(shí)別；

“有現(xiàn)成食材”：打開視頻傳輸，通過識(shí)別現(xiàn)成食材云菜譜系統(tǒng)推送相應(yīng)菜譜，或直接輸入食材信息搜索相應(yīng)菜譜；

“沒有現(xiàn)成食材”：打開視頻傳輸，實(shí)時(shí)錄制視頻，云菜譜系統(tǒng)對(duì)視頻中的圖像實(shí)時(shí)進(jìn)行識(shí)別，識(shí)別出食材A、B、C…并在顯示單元上以狀態(tài)二顯示，云菜譜系統(tǒng)實(shí)時(shí)對(duì)識(shí)別出的食材A、B、C…進(jìn)行排列組合，計(jì)算出可以烹調(diào)的菜譜，計(jì)算出的菜譜實(shí)時(shí)顯示在顯示單元上，并將其要用到的食材排列在一行，若有多個(gè)菜譜，則進(jìn)行多行排列，供用戶選擇菜譜；

c、用戶選定某一菜譜后，顯示單元顯示該菜譜所用的所有食材，并將視頻中已識(shí)別出的食材以狀態(tài)二顯示，未識(shí)別出的食材以狀態(tài)一顯示；

d、在錄制視頻的過程中找到所有食材并被識(shí)別出來；

e、下載菜譜執(zhí)行包；

f、完成烹飪。

本發(fā)明通過兩種方式與云菜譜系統(tǒng)進(jìn)行互動(dòng)，一種是對(duì)現(xiàn)有的食材進(jìn)行識(shí)別，獲取所能制作的菜譜，一種是對(duì)某一食材推送的菜譜所需的其他食材進(jìn)行搜尋。小孩子使用，可以促進(jìn)其認(rèn)識(shí)食材，有一定的教育作用；年輕人使用，可與云菜譜系統(tǒng)在虛擬現(xiàn)實(shí)的場(chǎng)景中進(jìn)行互動(dòng)，以游戲的方式推送菜譜，激發(fā)其使用和烹飪的欲望；中年人使用，可以作為食材購(gòu)物的記錄，選定所要制作的菜譜，購(gòu)買食材時(shí)打開視頻傳輸即可知道食材購(gòu)買是否有缺漏。

附圖說明

圖1為本發(fā)明一實(shí)施例的使用步驟框線圖。

具體實(shí)施方式

下面結(jié)合附圖及實(shí)施例對(duì)本發(fā)明作進(jìn)一步描述。

針對(duì)當(dāng)下云菜譜推送方式無法滿足年輕一代追求趣味性的需求的現(xiàn)狀，而且購(gòu)買食材時(shí)也沒有提示，需要用戶自己記錄，比較麻煩?，F(xiàn)結(jié)合圖像識(shí)別技術(shù)完善云菜譜系統(tǒng)的推送方式，用戶可通過打開視頻傳輸對(duì)現(xiàn)成的食材進(jìn)行識(shí)別或者在菜市場(chǎng)買菜時(shí)打開視頻傳輸，云菜譜系統(tǒng)實(shí)時(shí)對(duì)周邊的食材進(jìn)行識(shí)別，獲取食材種類，進(jìn)而推送相應(yīng)的云菜譜，并且顯示該菜譜還需要準(zhǔn)備哪種食材，方便用戶進(jìn)行選購(gòu)。具體如下：

參見圖1，本基于圖像識(shí)別的菜譜推送系統(tǒng)，包括云端的云菜譜系統(tǒng)、移動(dòng)終端上的攝像單元和顯示單元；移動(dòng)終端通過攝像單元錄制視頻，并傳送到云菜譜系統(tǒng)，經(jīng)過對(duì)食材圖像的比對(duì)和/或分析后，向用戶反饋食材識(shí)別信息或推送相應(yīng)的菜譜信息，相關(guān)信息通過移動(dòng)終端上的顯示單元顯示出來；所述云菜譜系統(tǒng)包括食材圖像數(shù)據(jù)庫和菜譜數(shù)據(jù)庫。云菜譜系統(tǒng)可利用視頻傳輸功能實(shí)時(shí)查看周邊食材，通過圖像對(duì)比分析識(shí)別出界面中的食材，并在顯示單元上顯示已識(shí)別出的食材；同時(shí)，云菜譜系統(tǒng)的菜譜數(shù)據(jù)庫通過計(jì)算得出已識(shí)別出的食材可以搭配成哪些菜譜，并推送給用戶，實(shí)現(xiàn)讓用戶在和云菜譜系統(tǒng)互動(dòng)的現(xiàn)實(shí)場(chǎng)景中獲取菜譜。此外，云菜譜系統(tǒng)也可針對(duì)某一食材進(jìn)行推送，并提醒用戶缺少哪些食材，用戶可在菜市場(chǎng)買菜時(shí)打開視頻傳輸，當(dāng)識(shí)別到所需的食材時(shí)自動(dòng)提醒用戶，用戶可對(duì)食材進(jìn)行購(gòu)買。

進(jìn)一步說，食材信息在顯示單元上的顯示形式包括但不限于圖標(biāo)、圖片和/或文字。

進(jìn)一步說，食材信息在顯示單元上的顯示狀態(tài)包括置灰或半透明的狀態(tài)一，及高亮或不透明的狀態(tài)二。

進(jìn)一步說，食材圖像數(shù)據(jù)庫支持上傳食材圖像功能，發(fā)現(xiàn)新食材，而食材圖像數(shù)據(jù)庫上也沒有相關(guān)記載時(shí)，用戶可親自編輯該食材的信息，并將相關(guān)信息和/或圖像上傳至食材圖像數(shù)據(jù)庫；菜譜數(shù)據(jù)庫支持上傳菜譜功能，用戶發(fā)明一款新的菜式或新的煮法時(shí)，可親自編輯相關(guān)信息，并將相關(guān)信息上傳至菜譜數(shù)據(jù)庫，實(shí)現(xiàn)菜譜數(shù)據(jù)的增加和更新。

進(jìn)一步說，用戶通過定向搜索、瀏覽菜譜商城或選擇云菜譜系統(tǒng)推送的方式獲得想要烹調(diào)的菜譜。

進(jìn)一步說，為確保用戶使用菜譜的合適性和安全性，食材圖像數(shù)據(jù)庫內(nèi)還存儲(chǔ)有各食材的營(yíng)養(yǎng)信息、適用人群和/或配伍禁忌等，菜譜數(shù)據(jù)庫內(nèi)還存儲(chǔ)有各菜譜的營(yíng)養(yǎng)信息和/或適用人群等。

進(jìn)一步說，移動(dòng)終端包括聯(lián)網(wǎng)的智能手機(jī)、筆記本電腦和平板電腦。

上述基于圖像識(shí)別的菜譜推送系統(tǒng)的使用方法，包括以下步驟：

a、打開移動(dòng)終端上的應(yīng)用，根據(jù)實(shí)際情況選擇“有現(xiàn)成菜譜”、“有現(xiàn)成食材”或“沒有現(xiàn)成食材”；

b、“有現(xiàn)成菜譜”：根據(jù)現(xiàn)成菜譜顯示所需食材，用戶根據(jù)所需食材自行選購(gòu)或打開視頻傳輸，實(shí)時(shí)錄制視頻，云菜譜系統(tǒng)對(duì)視頻中的圖像實(shí)時(shí)進(jìn)行識(shí)別；

“有現(xiàn)成食材”：打開視頻傳輸，通過識(shí)別現(xiàn)成食材云菜譜系統(tǒng)推送相應(yīng)菜譜，或直接輸入食材信息搜索相應(yīng)菜譜；

“沒有現(xiàn)成食材”：打開視頻傳輸，實(shí)時(shí)錄制視頻，云菜譜系統(tǒng)對(duì)視頻中的圖像實(shí)時(shí)進(jìn)行識(shí)別，識(shí)別出食材A、B、C…并在顯示單元上以狀態(tài)二顯示，云菜譜系統(tǒng)實(shí)時(shí)對(duì)識(shí)別出的食材A、B、C…進(jìn)行排列組合，計(jì)算出可以烹調(diào)的菜譜，計(jì)算出的菜譜實(shí)時(shí)顯示在顯示單元上，并將其要用到的食材排列在一行，若有多個(gè)菜譜，則進(jìn)行多行排列，供用戶選擇菜譜；

c、用戶選定某一菜譜后，顯示單元顯示該菜譜所用的所有食材，并將視頻中已識(shí)別出的食材以狀態(tài)二顯示，未識(shí)別出的食材以狀態(tài)一顯示；

d、在錄制視頻的過程中找到所有食材并被識(shí)別出來；

e、下載菜譜執(zhí)行包；

f、完成烹飪。

使用情景一：有想制作的菜譜，需要購(gòu)買食材

1.用戶在云菜譜系統(tǒng)中選中想要烹調(diào)的菜譜(可通過定向搜索、瀏覽菜譜商城或選擇系統(tǒng)推送的菜譜等方式)；

2.打開云菜譜系統(tǒng)的食材識(shí)別，移動(dòng)終端的屏幕上方顯示菜譜制作所需的食材(顯示形式包括圖標(biāo)、圖片或文字)，并且屏幕實(shí)時(shí)顯示視頻的界面，當(dāng)食材還沒識(shí)別出來的時(shí)候以狀態(tài)一(置灰或半透明等狀態(tài))顯示，當(dāng)食材已被識(shí)別出來的時(shí)候以狀態(tài)二(高亮或不透明等狀態(tài))顯示；

3.用戶購(gòu)買食材時(shí)通過攝像對(duì)各種食材進(jìn)行實(shí)時(shí)識(shí)別，當(dāng)系統(tǒng)檢測(cè)到所需的食材時(shí)，識(shí)別食材的位置產(chǎn)生圖標(biāo)(或食材的圖片或文字)并移動(dòng)到屏幕上方對(duì)應(yīng)的地方，將圖標(biāo)(或食材的圖片或文字)由狀態(tài)一變?yōu)闋顟B(tài)二，以此來提醒用戶購(gòu)買該食材。

使用情景二：有現(xiàn)成食材，需要推送菜譜并購(gòu)買其余的食材

1.用戶在云菜譜系統(tǒng)中開啟圖像識(shí)別對(duì)現(xiàn)有的食材進(jìn)行識(shí)別，也可手動(dòng)輸入現(xiàn)成的食材，系統(tǒng)根據(jù)用戶已有的食材推送相應(yīng)的菜譜，用戶選擇相應(yīng)的菜譜；

2.打開云菜譜系統(tǒng)的食材識(shí)別，移動(dòng)終端的屏幕上方顯示菜譜制作所需的食材(包括但不限于圖標(biāo)、圖片或文字的形式)，并且屏幕實(shí)時(shí)顯示視頻的界面，當(dāng)食材還沒識(shí)別出來的時(shí)候以狀態(tài)一顯示，當(dāng)食材已被識(shí)別出來的時(shí)候以狀態(tài)二顯示；

3.用戶購(gòu)買食材時(shí)通過視頻對(duì)各種食材進(jìn)行實(shí)時(shí)識(shí)別，當(dāng)系統(tǒng)檢測(cè)到所需的食材時(shí)，識(shí)別食材的位置產(chǎn)生圖標(biāo)(或食材的圖片或文字)并移動(dòng)到屏幕上方對(duì)應(yīng)的地方，將圖標(biāo)(或食材的圖片或文字)由狀態(tài)一變?yōu)闋顟B(tài)二，以此來提醒用戶購(gòu)買該食材。

使用情景三：不知道要制作什么菜譜，沒有現(xiàn)成食材，需購(gòu)買食材

1.用戶購(gòu)買食材時(shí)打開云菜譜系統(tǒng)的圖像識(shí)別，通過視頻對(duì)各種食材進(jìn)行實(shí)時(shí)識(shí)別，并從識(shí)別出食材的位置產(chǎn)生食材對(duì)應(yīng)的圖標(biāo)(或圖片或文字)，圖標(biāo)(或圖片或文字)產(chǎn)生后排列到屏幕的邊上；

2.系統(tǒng)實(shí)時(shí)對(duì)所識(shí)別的食材進(jìn)行排列組合，計(jì)算出可以組合完成的云菜譜，并在屏幕上將可以組合起來的食材圖標(biāo)排成一行，若有多種組合方式，則進(jìn)行以多行顯示，并在行首顯示菜譜名稱。

3.用戶選擇相應(yīng)的菜譜后，界面上方顯示該菜譜所需的食材圖標(biāo)(或圖片或文字)，已在這一過程中識(shí)別出來的食材以狀態(tài)一顯示，還沒識(shí)別到的，需要用戶再去購(gòu)買的以狀態(tài)二顯示，以此來提醒用戶購(gòu)買食材。

上述為本發(fā)明的優(yōu)選方案，顯示和描述了本發(fā)明的基本原理、主要特征和本發(fā)明的優(yōu)點(diǎn)。本領(lǐng)域的技術(shù)人員應(yīng)該了解本發(fā)明不受上述實(shí)施例的限制，上述實(shí)施例和說明書中描述的只是說明本發(fā)明的原理，在不脫離本發(fā)明精神和范圍的前提下本發(fā)明還會(huì)有各種變化和改進(jìn)，這些變化和改進(jìn)都落入要求保護(hù)的本發(fā)明范圍內(nèi)。本發(fā)明要求保護(hù)范圍由所附的權(quán)利要求書及其等同物界定。