智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜

《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》涉及貨柜技術(shù)領(lǐng)域，具體涉及一種智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜。

智能貨柜泛指以自助售貨機(jī)的形式銷售商品的智能貨柜，通常占地面積在1～2平方米左右，一般采取無現(xiàn)金交易和普通貨幣交易。例如：自助橙子機(jī)、自助咖啡機(jī)、自助冰淇淋機(jī)、自助便當(dāng)機(jī)、傳統(tǒng)的無人自助售貨機(jī)等；由于智能貨柜的無人販?zhǔn)鄣奶匦?，需要補(bǔ)貨人員定期查詢進(jìn)行補(bǔ)貨，以使得智能貨柜能夠隨時滿足用戶的購滿需求。截至2018年3月，已有的針對智能貨柜中貨品識別的方式，通常為需要補(bǔ)貨人員在補(bǔ)貨前挨個登記商品信息，并在補(bǔ)貨過程中按照原標(biāo)記將不同類型的貨品擺放在對應(yīng)的位置以及記錄貨品的更新情況，并在補(bǔ)貨完畢以人工手動錄入或者外在文件導(dǎo)入的方式將貨品更新情況輸入該智能貨柜對應(yīng)的貨柜商品管理系統(tǒng)中。然而，2018年3月以前的針對智能貨柜中貨品識別的方式，準(zhǔn)確程度差，且補(bǔ)貨時需要對貨品進(jìn)行一一核對，需要耗費(fèi)大量人力和時間成本。

圖1是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》實(shí)施例一中的一種智能貨柜內(nèi)貨品識別方法的流程示意圖；

圖2是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的服務(wù)器、重量傳感器、貨品識別指令發(fā)送單元和圖像采集設(shè)備之間的通信示意圖；

圖3是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的包含步驟500的智能貨柜內(nèi)貨品識別方法的流程示意圖；

圖4是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的智能貨柜內(nèi)貨品識別方法中步驟100的流程示意圖；

圖5是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》中包含步驟600的智能貨柜內(nèi)貨品識別方法的流程示意圖；

圖6是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》中服務(wù)器、終端設(shè)備和智能貨柜之間的交互示意圖；

圖7是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》應(yīng)用實(shí)例中的智能貨柜內(nèi)貨品識別方法的邏輯流程圖；

圖8是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》實(shí)施例二中的一種智能貨柜內(nèi)貨品識別系統(tǒng)的結(jié)構(gòu)示意圖；

圖9是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》實(shí)施例三中的一種電子設(shè)備的結(jié)構(gòu)示意圖；

圖10是《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》實(shí)施例五中的一種智能貨柜的結(jié)構(gòu)示意圖。

2021年8月16日，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》獲得安徽省第八屆專利獎優(yōu)秀獎。

《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例一提供一種智能貨柜內(nèi)貨品識別方法的具體實(shí)施方式，參見圖1，所述智能貨柜內(nèi)貨品識別方法具體包括如下內(nèi)容：步驟100：接收目標(biāo)智能貨柜的貨品識別指令。在該實(shí)施例中，參見圖2，所述智能貨柜內(nèi)貨品識別方法的執(zhí)行主體為一種服務(wù)器，該服務(wù)器可以設(shè)置在智能貨柜內(nèi)部，也可以對多個智能貨柜進(jìn)行遠(yuǎn)程管理，另外，在所述智能貨柜中還設(shè)置有貨品識別指令發(fā)送單元和圖像采集設(shè)備，所述貨品識別指令發(fā)送單元、圖像采集設(shè)備和重量傳感器分別與服務(wù)器通信連接，可以理解的是，所述圖像采集設(shè)備可以為攝像頭，所述貨品識別指令發(fā)送單元用于在接收到貨品識別指令后，向所述服務(wù)器發(fā)送貨品識別指令。在一種具體舉例中，所述貨品識別指令發(fā)送單元可以為位移傳感器，且位移傳感器的兩部分分別為設(shè)置在所述智能貨柜的柜門上器件一以及設(shè)置在所述智能貨柜內(nèi)壁上靠近所述器件一的器件二，當(dāng)柜門被打開時，器件一和器件二之間的位移超過預(yù)設(shè)閾值，則所述位移傳感器記錄柜門發(fā)生一次開啟，當(dāng)器件一和器件二之間的位移超過預(yù)設(shè)閾值之后，器件一和器件二之間的位移又小于或等于預(yù)設(shè)閾值后，則所述位移傳感器記錄柜門發(fā)生一次關(guān)閉，在所述位移傳感器連續(xù)檢測到所述智能貨柜的柜門發(fā)生一次開啟和一次關(guān)閉后，所述位移傳感器向所述服務(wù)器發(fā)送貨品識別指令。當(dāng)然，所述智能貨柜的柜門發(fā)生一次開啟和一次關(guān)閉的情形中，也包括柜門雖然被打開，但并未發(fā)送貨品變化的情形，因此，所述貨品識別指令實(shí)際可以理解為：只要智能貨柜內(nèi)的貨品疑似發(fā)生變化的情形，即向所述服務(wù)器發(fā)送貨品識別指令，如此設(shè)置，一方面能夠保證服務(wù)器能夠及時獲知智能貨柜的貨品變化情況，另一方面，服務(wù)器每次都在接收到貨品識別指令后才獲知智能貨柜的貨品變化情況，有效減少了智能貨柜內(nèi)部的圖像采集設(shè)備及服務(wù)器的運(yùn)行損耗，進(jìn)而能夠提高智能貨柜內(nèi)部的圖像采集設(shè)備及服務(wù)器的使用壽命。步驟200：采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品。 在步驟200中，所述服務(wù)器控制所述目標(biāo)智能貨柜內(nèi)的圖像采集設(shè)備采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值。所述采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，具體包含如下內(nèi)容：控制設(shè)置在所述目標(biāo)智能貨柜內(nèi)的多個圖像采集設(shè)備采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值；其中，不同的圖像采集設(shè)備用于采集所述目標(biāo)智能貨柜中不同貨架上的貨品圖像?？梢岳斫獾氖?，每個智能貨柜內(nèi)的圖像采集設(shè)備均能夠采集到有當(dāng)前目標(biāo)智能貨柜中的全部貨品，因此，每個智能貨柜內(nèi)的圖像采集設(shè)備可以設(shè)置為多個。在一種具體實(shí)施方式中，所述步驟200具體包括如下內(nèi)容：控制設(shè)置在所述目標(biāo)智能貨柜內(nèi)的多個圖像采集設(shè)備采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，其中，不同的圖像采集設(shè)備用于采集所述目標(biāo)智能貨柜中不同貨架上的貨品圖像，且全部貨架上的貨品圖像組成所述內(nèi)部貨品圖像；以及，控制分別設(shè)置在所述目標(biāo)智能貨柜中各個貨架上的重量傳感器采集各個貨架上的貨品的重量變化值，其中，同一貨架上擺放同一類型的貨品。在一種具體舉例中，一個智能貨柜中一般均包含有多層貨架，且各層貨架的兩側(cè)及上方均可以設(shè)有多個圖像采集設(shè)備，以保證，每個智能貨柜內(nèi)的圖像采集設(shè)備均能夠采集到有當(dāng)前目標(biāo)智能貨柜中的全部貨品，同時，為了保證獲取圖像的清晰程度，每個圖像采集設(shè)備上均可以對應(yīng)的照明設(shè)備。步驟300：對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型。在步驟300中，所述服務(wù)器接收所述圖像采集設(shè)備發(fā)送的內(nèi)部貨品圖像，并對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型，通過這種圖像識別方式，使得補(bǔ)貨人員在補(bǔ)貨的過程中，無需在指定的位置擺放商品，使得補(bǔ)貨過程更加快速且便捷。

在一種具體舉例中，所述步300具體包括如下內(nèi)容：步驟301：對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的貨品的圖像特征。步驟302：根據(jù)所述貨品的圖像特征和預(yù)設(shè)的貨品圖像特征庫，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的貨品的類型；其中，所述貨品圖像特征庫中存儲有貨品的類型和圖像特征之間的對應(yīng)關(guān)系。可以理解的是，所述對所述內(nèi)部貨品圖像進(jìn)行圖像識別（image recognition method）為利用計(jì)算機(jī)對圖像進(jìn)行處理、分析和理解，以識別各種不同模式的目標(biāo)和對像的技術(shù)，即利用軟件根據(jù)圖片灰階差做進(jìn)一步識別處理，具體可以基于神經(jīng)網(wǎng)絡(luò)進(jìn)行圖像識別、基于小波矩進(jìn)行圖像識別或者基于分形特征進(jìn)行圖像識別。其中，基于神經(jīng)網(wǎng)絡(luò)進(jìn)行圖像識別的過程可以由預(yù)處理，特征提取和神經(jīng)網(wǎng)絡(luò)分類器組成，預(yù)處理就是將原始數(shù)據(jù)中的無用信息刪除，平滑，二值化和進(jìn)行幅度歸一化等；基于小波矩進(jìn)行圖像識別的過程可以通過將輸入二維二值圖像的不變矩陣作為識別特征，運(yùn)用BP網(wǎng)絡(luò)進(jìn)行識別，將輸入圖像經(jīng)過歸一化處理，極坐標(biāo)化，旋轉(zhuǎn)不變小波矩特征提取后，送入BP網(wǎng)絡(luò)分類器進(jìn)行識別，獲得識別結(jié)果；基于分形特征進(jìn)行圖像識別的過程可以包含紅外圖像預(yù)處理、紅外圖像分形特征提取和基于神經(jīng)網(wǎng)絡(luò)的紅外圖像識別。步驟400：根據(jù)所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。在步驟400中，所述服務(wù)器控制所述目標(biāo)智能貨柜中的重量傳感器采集各貨架的重量，各重量傳感器將重量與前一次采集相比的重量變化值發(fā)送至所述服務(wù)器，若存在重量未發(fā)生變化的貨架，則其對應(yīng)的重量變化值為0。另外，在該實(shí)施例中，步驟300和步驟400的執(zhí)行順序可根據(jù)實(shí)際應(yīng)用情形設(shè)定為任意順序。

在一種具體舉例中，一個智能貨柜中一般均包含有多層貨架，且各層貨架的底端均設(shè)有至少一個重量傳感器，且各個重量傳感器均與服務(wù)器通信。例如，在下端設(shè)有重量傳感器的貨架上存在貨物時，在重力作用下，通過作為承載器的貨架將重力傳遞至重量傳感器，使重量傳感器的彈性體產(chǎn)生變形，貼附于彈性體上的應(yīng)變計(jì)橋路失去平衡，輸出與重量數(shù)值成正比例的電信號，經(jīng)線性放大器將信號放大；再經(jīng)A/D轉(zhuǎn)換為數(shù)字信號，由儀表的微處理機(jī)（CPU）對重量信號進(jìn)行處理后直接顯示重量數(shù)據(jù)，并將重量數(shù)據(jù)發(fā)送至服務(wù)器。 從上述描述可知，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例提供的智能貨柜內(nèi)貨品識別方法，能夠?qū)χ悄茇浌駜?nèi)的貨品進(jìn)行準(zhǔn)確且快速的識別，僅需將把貨品分類擺放即可，無需核對數(shù)量，有效節(jié)省了人力成本，補(bǔ)貨過程更加快速且便捷，并提高了智能貨柜的智能化程度和應(yīng)用可靠性，故使得用戶體驗(yàn)提高。

在一種具體實(shí)施方式中，參見圖3，該發(fā)明還提供一種在智能貨柜內(nèi)貨品識別方法中的步驟400之后執(zhí)行的步驟500，所述步驟500具體包括如下內(nèi)容：步驟500：基于所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和數(shù)量，更新該目標(biāo)智能貨柜的貨品實(shí)時信息。在步驟500中，所述服務(wù)器基于所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和數(shù)量，在該目標(biāo)智能貨柜對應(yīng)的數(shù)據(jù)庫中更新該目標(biāo)智能貨柜的貨品實(shí)時信息。在一種應(yīng)用實(shí)例中，所述更新該目標(biāo)智能貨柜的貨品實(shí)時信息具體可以包括：在所述目標(biāo)智能貨柜對應(yīng)的應(yīng)用APP中更新該目標(biāo)智能貨柜的貨品實(shí)時信息。從上述描述可知，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例提供的智能貨柜內(nèi)貨品識別方法，通過更新目標(biāo)智能貨柜的貨品實(shí)時信息，解決了無人貨柜商品管理系統(tǒng)的對應(yīng)的數(shù)據(jù)，在補(bǔ)貨的時候需要人工手動錄入或者外在文件導(dǎo)入，不利于系統(tǒng)數(shù)據(jù)快速更新迭代的業(yè)務(wù)增長需求，且存在重復(fù)多余的人力資源浪費(fèi)的問題。在一種具體實(shí)施方式中，參見圖4，該發(fā)明還提供一種在智能貨柜內(nèi)貨品識別方法中的步驟100的第一種具體實(shí)施方式，所述步驟100具體包括如下內(nèi)容：步驟101：接收針對所述目標(biāo)智能貨柜的用戶身份識別信息或交易信息。在一種具體實(shí)施方式中，所述步驟101具體包括如下內(nèi)容：所述服務(wù)器接收用戶通過用終端設(shè)備以掃描二維碼的方式連接進(jìn)入所述目標(biāo)智能貨柜對應(yīng)的應(yīng)用APP后，在該應(yīng)用APP中發(fā)送的用戶身份識別信息或交易信息；其中，所述二維碼設(shè)置在所述目標(biāo)智能貨柜的外壁上。在另種具體實(shí)施方式中，所述步驟101具體包括如下內(nèi)容：接收以人臉圖像識別的方式獲取的用戶身份識別信息或交易信息；其中，所述人臉圖像識別的方式包括：通過設(shè)置在所述目標(biāo)智能貨柜的外壁上的圖像采集設(shè)備獲取位于所述目標(biāo)智能貨柜外的用戶的人臉圖像，并對該人臉圖像進(jìn)行人臉圖像識別。步驟102：向所述目標(biāo)智能貨柜發(fā)送柜門開啟指令，使得所述目標(biāo)智能貨柜根據(jù)該柜門開啟指令開啟柜門的門鎖。步驟103：接收所述目標(biāo)智能貨柜在柜門開啟再關(guān)閉后發(fā)送的貨品識別指令。

《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例提供的智能貨柜內(nèi)貨品識別方法，通過掃描二維碼方式和內(nèi)置的攝像頭拍照系統(tǒng)，動態(tài)實(shí)時獲取商品圖像信息，自動上報(bào)貨柜的實(shí)時圖像，通過圖像識別，實(shí)現(xiàn)全程智能化、自動化貨品補(bǔ)錄機(jī)制，實(shí)現(xiàn)精準(zhǔn)商品數(shù)據(jù)管控方案；解放傳統(tǒng)零售無人柜在補(bǔ)貨的過程中帶來的人力資源、時間資源等浪費(fèi)現(xiàn)象；進(jìn)一步為無人柜零售行業(yè)提供高效便捷的解決方案。在一種具體實(shí)施方式中，參見圖5，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》還提供一種在智能貨柜內(nèi)貨品識別方法中的步驟600的具體實(shí)施方式，所述步驟600具體在步400之后執(zhí)行，所述步驟600具體包括如下內(nèi)容：步驟600：若檢測獲知所述目標(biāo)智能貨柜中的某類貨品的數(shù)量低于對應(yīng)的補(bǔ)貨閾值，則向補(bǔ)貨人員的終端設(shè)備發(fā)送補(bǔ)貨告知信息。從上述描述可知，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例提供的智能貨柜內(nèi)貨品識別方法，能夠更加準(zhǔn)確且可靠地實(shí)現(xiàn)對智能貨柜內(nèi)貨品的及時補(bǔ)貨，并能夠準(zhǔn)確對所述用戶身份識別信息進(jìn)行驗(yàn)證，保證了智能貨柜補(bǔ)貨及交易的安全性和可靠性。在一種具體實(shí)施方式中，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》還提供一種在智能貨柜內(nèi)貨品識別方法中的步驟400的具體實(shí)施方式，所述步驟400具體包括如下內(nèi)容：步驟401：根據(jù)所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，以及，預(yù)獲取的貨品重量庫，計(jì)算得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量初值；其中，所述貨品重量庫中存儲有貨品的類型和貨品重量之間的對應(yīng)關(guān)系。步驟402：根據(jù)所述各類貨品的數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。在步驟402中，若所述各類貨品的數(shù)量初值為整數(shù)，則所述服務(wù)器直接將該數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量；若所述各類貨品的數(shù)量初值為非整數(shù)，則所述服務(wù)器根據(jù)所述數(shù)量初值的小數(shù)部分的數(shù)值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。其中，所述根據(jù)所述數(shù)量初值的小數(shù)部分的數(shù)值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，具體包括如下內(nèi)容：判斷所述數(shù)量初值的小數(shù)部分的數(shù)值是否處于允許誤差范圍內(nèi)；若是，則將該數(shù)量初值進(jìn)行四舍五入，并將四舍五入后的值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量；若否，則向用戶的終端設(shè)備發(fā)送貨品確認(rèn)指令。

另外，參見圖6，從服務(wù)器和智能貨柜的交互角度來看，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的智能貨柜內(nèi)貨品識別方法具體包括如下內(nèi)容：（1）用戶使用終端設(shè)備掃描設(shè)置在智能貨柜上的二維碼，在移動終端內(nèi)進(jìn)入二維碼對應(yīng)的APP中，并在APP中輸入身份信息，移動終端將輸入至APP內(nèi)的用戶身份識別信息發(fā)送至服務(wù)器。（2）服務(wù)器對該用戶身份識別信息進(jìn)行驗(yàn)證，并在驗(yàn)證成功后向所述目標(biāo)智能貨柜發(fā)送柜門開啟指令。（3）所述目標(biāo)智能貨柜接收所述柜門開啟指令后，開啟柜門的門鎖，并在柜門開啟再關(guān)閉后向所述服務(wù)器發(fā)送的貨品識別指令。（4）所述服務(wù)器接收所述貨品識別指令，并向所述目標(biāo)智能貨柜的攝像頭發(fā)送拍照指令，并向所述目標(biāo)智能貨柜的重量傳感器發(fā)送重量采集指令。（5）所述目標(biāo)智能貨柜的攝像頭根據(jù)所述拍照指令進(jìn)行貨品圖像采集，并將采集得到的內(nèi)部貨品圖像發(fā)送至服務(wù)器；以及，所述目標(biāo)智能貨柜的重量傳感器根據(jù)所述重量采集指令進(jìn)行貨品重量采集，并將采集得到的重量變化值發(fā)送至服務(wù)器。（6）所述服務(wù)器對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型，根據(jù)所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，并基于所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和數(shù)量，更新數(shù)據(jù)庫中的目標(biāo)智能貨柜的貨品實(shí)時信息。（7）所述服務(wù)器將更新后的目標(biāo)智能貨柜的貨品實(shí)時信息發(fā)送至所述APP中，便于身體驗(yàn)證成功的用戶查看。

為進(jìn)一步的說明本方案，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》還提供一種智能貨柜內(nèi)貨品識別方法的具體應(yīng)用實(shí)例，參見圖7，具體包括如下內(nèi)容：S1、補(bǔ)貨人員登錄補(bǔ)貨APP，掃碼開門；S2、補(bǔ)貨人員將商品擺放到貨架上，同一個重力傳感器對應(yīng)的貨架或托盤內(nèi)只擺放一種商品；S3、關(guān)門；S4、啟動攝像頭工作，拍攝貨架圖片發(fā)送至服務(wù)器，服務(wù)器進(jìn)行圖像分析處理和比對，獲取每個貨架內(nèi)增減的商品品類；同時關(guān)門后，主控板查詢重量傳感器的重量變化值，并發(fā)送至服務(wù)器；S5、服務(wù)器獲取重量變化后，調(diào)用商品數(shù)據(jù)庫，通過該貨架內(nèi)商品的總重量變化除以單個商品的重量，進(jìn)一步計(jì)算出每個貨架內(nèi)增減商品的數(shù)量；S6、服務(wù)器自動發(fā)送補(bǔ)貨商品的品類和數(shù)量到補(bǔ)貨APP。為了加深對本專利的理解，下面對上述方案進(jìn)行詳細(xì)描述。所述貨架或托盤用于擺放貨商品，每個貨架或托盤內(nèi)置至少一個重量傳感器，并將貨架或托盤進(jìn)行有序編號，同一個序號對應(yīng)的貨架或托盤內(nèi)只擺放一種商品，即同樣的名稱和重量的商品；進(jìn)一步地，所述貨架或托盤內(nèi)擺放的貨品也可以根據(jù)形狀或形態(tài)進(jìn)行大致分區(qū)，或者根據(jù)當(dāng)前區(qū)域人群的購物習(xí)慣進(jìn)行區(qū)間定制，例如，一二層擺放飲料乳品類，三層擺放面包類，四層擺放休閑零食；或者，一層左側(cè)的托盤內(nèi)擺放飲料，一層右側(cè)的托盤擺放乳制品；二層左側(cè)托盤擺放面包，二層右側(cè)托盤擺放餅干；所述攝像頭分布安裝在每層擱架的兩側(cè)、擱架前后方或擱架頂部的至少任一個位置；所述商品數(shù)據(jù)庫，至少包含每個商品的名稱、數(shù)量和單價，還可以包含商品的品類、凈含量、包裝方式、重量允許誤差、商品最低數(shù)量、商品是否充足、商品保質(zhì)期等其中的任意一個或多個信息；所述S4中，圖像識別的方式如下：通過圖像采集的方式，將食品隨意擺放在貨柜上，將每組圖片的食材進(jìn)行人工標(biāo)記，提取食材特征，建立食材特征數(shù)據(jù)庫；通過重復(fù)的、大量的食材特征對食材進(jìn)行特征訓(xùn)練；將圖片進(jìn)行處理，建立圖像識別算法模型；根據(jù)食材特征識別出終端發(fā)送的圖片中的食材；將關(guān)門前后的每層擱架中食材進(jìn)行比對，識別出變化的食材名稱和數(shù)量；所述S5中的計(jì)算方式，結(jié)果不是整數(shù)時，采用四舍五入的方式獲取商品數(shù)量；所述S5中的計(jì)算方式，結(jié)果若不是整數(shù)時，進(jìn)一步地，當(dāng)小數(shù)點(diǎn)后的數(shù)值在一定范圍內(nèi)，進(jìn)一步地，這個范圍可以選取為4-6，則表示該商品的實(shí)際重量與商品標(biāo)示重量之間的誤差較大，可以提示補(bǔ)貨人員進(jìn)行人工確認(rèn)，以避免補(bǔ)貨商品數(shù)量統(tǒng)計(jì)錯誤；進(jìn)一步地，示例如下：如某方便面的包裝標(biāo)示重量為110克，補(bǔ)貨員新放入托盤1內(nèi)該方便面10桶，若該方便面的實(shí)際測試重量與110克偏差較大，例如每桶平均偏重5克，則重量傳感器檢測到托盤1內(nèi)重量變化可能為1150克，服務(wù)器通過圖像比對獲取到托盤1內(nèi)擺放的商品為某方便面，同時獲取到重量傳感器傳送來的重量變化為1150克，服務(wù)器調(diào)用商品數(shù)據(jù)庫，獲取該方便面的包裝標(biāo)示重量為110克，計(jì)算1150除以110，得到托盤1內(nèi)方便面數(shù)量為10.46桶，該數(shù)值小數(shù)點(diǎn)后的數(shù)值在4-6之間，則判斷誤差較大，請補(bǔ)貨人員確認(rèn)托盤1內(nèi)方便面的數(shù)量，若補(bǔ)貨人員不進(jìn)行處理，則按照四舍五入，確定補(bǔ)貨員在托盤1內(nèi)放入某方便面10桶。以上為比較極端的情況下的處理方式，一般情況下，當(dāng)商品包裝標(biāo)示重量與實(shí)際測量重量誤差較小時，

例如上述示例中，若每桶方便面的實(shí)際測試重量比包裝標(biāo)示重量平均偏重1克，則重量傳感器檢測到托盤1內(nèi)重量變化可能為1110克，采用上述同樣的處理方式，服務(wù)器經(jīng)計(jì)算得到托盤1內(nèi)方便面數(shù)量為10.09桶，小數(shù)點(diǎn)后數(shù)字不在4-6之間，則四舍五入確定補(bǔ)貨員在托盤1內(nèi)放入某方便面10桶，不需要補(bǔ)貨員確認(rèn)，可自動生成補(bǔ)貨清單。所述重量允許誤差，為每個商品的實(shí)際測量重量與包裝標(biāo)示重量之間可以接受的誤差范圍，由工作人員選取一定數(shù)量的商品標(biāo)本進(jìn)行實(shí)際測試后人為設(shè)置，重量允許誤差也可以不設(shè)置，不設(shè)置則默認(rèn)為0；所述重量變化若為負(fù)值，則表示補(bǔ)貨員從貨架或托盤上取出商品，則從貨品清單上相應(yīng)地減去該商品的庫存；所述圖像識別，若判定食品當(dāng)前擺放位置與上一次圖像結(jié)果不一致，且檢測上次圖像識別結(jié)果，判斷該商品是否為新商品，若是，則在商品庫存和補(bǔ)貨清單中增加該商品數(shù)據(jù)；若不是，則將該食品上一次擺放位置的重量傳感器數(shù)值置換到當(dāng)前位置；進(jìn)一步地，舉例說明，若某品牌可樂在上次補(bǔ)貨時是擺在托盤1位置，本次補(bǔ)貨后，經(jīng)云端圖片識別發(fā)現(xiàn)該品牌可樂擺在托盤2位置，則將托盤1的上次重量直接移植到托盤2上，通過托盤2內(nèi)的重量變化判定當(dāng)前補(bǔ)貨商品數(shù)量；其他位置以此類推。另外，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的應(yīng)用實(shí)例還包括一種補(bǔ)貨的提醒方法：將貨柜內(nèi)的每個商品設(shè)置最低數(shù)量值Kn（Kn為自然數(shù)），通過上述步驟檢測到貨柜內(nèi)每個商品的當(dāng)前數(shù)量Qn后，比較Qn與Kn的大?。喝鬛n＝0，則提示缺貨；若0

如表1所示，服務(wù)器根據(jù)當(dāng)前區(qū)域人群以往的購物數(shù)據(jù)和習(xí)慣，設(shè)置每個商品的最低要求數(shù)量，該區(qū)域人員對方便面和可樂的需求較高，故某方便面C和某可樂A的最低數(shù)量要求為3，其余商品最低數(shù)量為1，根據(jù)圖2可見，某方便面C的當(dāng)前庫存為2，低于方便面的最低數(shù)量要求3，顯示數(shù)量不足；某可樂A的當(dāng)前庫存為0，顯示缺貨；此時，服務(wù)器會發(fā)送補(bǔ)貨提醒到補(bǔ)貨人員的客戶端，補(bǔ)貨人員接收到補(bǔ)貨清單提醒后，通過補(bǔ)貨客戶端查看補(bǔ)貨提醒和當(dāng)前貨柜內(nèi)所有商品庫存，再帶領(lǐng)足夠的貨品去進(jìn)行補(bǔ)貨。

如表2所示，補(bǔ)貨人員登陸補(bǔ)貨APP，并掃描貨柜二維碼開門，將貨品放入貨柜內(nèi)，所有商品擺放完畢，關(guān)門離開。此時服務(wù)器通過圖像識別判定貨架1、2、3、4擺放的商品分別為某小面包B、某方便面C、某可樂A、某酸奶D，再通過貨架內(nèi)置的重量傳感器發(fā)送的重量變化，判斷貨架1、2、3、4的重量變化分別為0、345克、2.64千克、1.4千克，服務(wù)器調(diào)用商品數(shù)據(jù)庫，獲取每個商品的單位重量，通過以下計(jì)算獲取每個貨架商品的補(bǔ)貨數(shù)量：0/100＝0；345/115＝3；2640/330＝8；1400/200＝7；服務(wù)器將以上商品和重量信息發(fā)送給補(bǔ)貨APP端和設(shè)備端（如有顯示屏，補(bǔ)貨人員登陸后可查看），補(bǔ)貨人員即便已離開，依然隨時可登陸補(bǔ)貨APP查看補(bǔ)貨詳情。如圖3的示例，若補(bǔ)貨人員發(fā)現(xiàn)貨柜內(nèi)小面包剩余較多，且其擺在角落位置貨架1上，補(bǔ)貨人員臨時將小面包擺放到原來某可樂A的中心位置貨架3上，再將某可樂A擺放到小面包原來的貨架1上，此時服務(wù)器通過圖像識別判定貨架1擺放的商品為某可樂A，貨架3上擺放的商品為小面包，則將貨架1和3的上一次重量數(shù)值進(jìn)行對換后再根據(jù)上述方式計(jì)算兩個貨架的補(bǔ)貨數(shù)量。另外，本應(yīng)用實(shí)例中的補(bǔ)貨APP也可以是安裝在貨柜的門體上，通過貨柜顯示屏進(jìn)行顯示，進(jìn)一步地，補(bǔ)貨員開門的方式除了掃碼開門外，還可以是人臉識別開門；通過攝像頭圖像識別獲取貨品品名，通過重量傳感器獲取商品數(shù)量，識別順序可以前后調(diào)整。

從上述描述可知，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的應(yīng)用實(shí)例中的智能貨柜內(nèi)貨品識別方法，通過貨架內(nèi)安裝重量傳感器的方式，獲取貨品的重量變化，通過貨柜內(nèi)安裝攝像頭的方式獲取商品圖片，并進(jìn)行圖片識別，進(jìn)而獲取貨架上商品增減的品類；此方法不要求貨品的擺放位置固定，可以隨意將某一種貨品擺放在任意一個貨架或托盤上；根據(jù)貨品的重量變化和品類變化，結(jié)合服務(wù)器的商品數(shù)據(jù)庫信息，快速地計(jì)算出商品的補(bǔ)貨詳情，自動生成補(bǔ)貨清單；當(dāng)檢測到貨架內(nèi)商品數(shù)量低于某個設(shè)定值時，服務(wù)器自動發(fā)送補(bǔ)貨提醒給補(bǔ)貨人員；當(dāng)檢測到貨架內(nèi)商品與上次不同時，直接調(diào)用商品上次擺放貨架的重量值，更新數(shù)據(jù)；本應(yīng)用實(shí)例中的智能貨柜內(nèi)貨品識別方法，相對于傳統(tǒng)的售貨機(jī)的貨品識別方法，在補(bǔ)貨時，無需一一掃描商品條碼，直接放入商品，關(guān)門離開即可；相對于新型的無人零售機(jī)，采用此方式，貨品在貨架內(nèi)的擺放不再局限于某個貨架只能擺放某一種指定商品，補(bǔ)貨人員可以將某一種貨品擺放在任意一個貨架或托盤內(nèi)，關(guān)門即可自動獲取補(bǔ)貨品類和數(shù)量；對于補(bǔ)貨工作人員來說，方便快捷，補(bǔ)貨效率高。該發(fā)明的實(shí)施例二提供一種能夠?qū)崿F(xiàn)上述智能貨柜內(nèi)貨品識別方法全部內(nèi)容的一種智能貨柜內(nèi)貨品識別系統(tǒng)的具體實(shí)施方式，參見圖8，所述智能貨柜內(nèi)貨品識別系統(tǒng)具體包括如下內(nèi)容：貨品識別指令接收模塊10，用于接收目標(biāo)智能貨柜的貨品識別指令。圖像及重量采集模塊20，用于采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品。增減貨品類型識別模塊30，用于對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型。增減貨品數(shù)量識別模塊40，用于對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型。該發(fā)明提供的智能貨柜內(nèi)貨品識別系統(tǒng)的實(shí)施例具體可以用于執(zhí)行上述智能貨柜內(nèi)貨品識別方法的實(shí)施例的處理流程，其功能在此不再贅述，可以參照上述方法實(shí)施例的詳細(xì)描述。從上述描述可知，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例提供的智能貨柜內(nèi)貨品識別系統(tǒng)，能夠?qū)χ悄茇浌駜?nèi)的貨品進(jìn)行準(zhǔn)確且快速的識別，有效節(jié)省了人力成本，補(bǔ)貨過程更加快速且便捷，并提高了智能貨柜的智能化程度和應(yīng)用可靠性，故使得用戶體驗(yàn)提高。

《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例三提供能夠?qū)崿F(xiàn)上述智能貨柜內(nèi)貨品識別方法中全部步驟的一種電子設(shè)備的具體實(shí)施方式，參見圖9，所述電子設(shè)備具體包括如下內(nèi)容：處理器（processor）601、存儲器（memory）602、通信接口（Communications Interface）603和總線604；其中，所述處理器601、存儲器602、通信接口603通過所述總線604完成相互間的通信；所述通信接口603用于實(shí)現(xiàn)服務(wù)器及智能貨柜中各種設(shè)備之間的信息傳輸；所述處理器601用于調(diào)用所述存儲器602中的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序時實(shí)現(xiàn)上述實(shí)施例一中的全部步驟，例如，所述處理器執(zhí)行所述計(jì)算機(jī)程序時實(shí)現(xiàn)下述步驟：步驟100：接收目標(biāo)智能貨柜的貨品識別指令。步驟200：采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品。 步驟300：對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型。步驟400：根據(jù)所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。從上述描述可知，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例提供的電子設(shè)備，能夠?qū)χ悄茇浌駜?nèi)的貨品進(jìn)行準(zhǔn)確且快速的識別，有效節(jié)省了人力成本，補(bǔ)貨過程更加快速且便捷，并提高了智能貨柜的智能化程度和應(yīng)用可靠性，故使得用戶體驗(yàn)提高?！吨悄茇浌駜?nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例四提供能夠?qū)崿F(xiàn)上述智能貨柜內(nèi)貨品識別方法中全部步驟的一種計(jì)算機(jī)可讀存儲介質(zhì)，所述計(jì)算機(jī)可讀存儲介質(zhì)上存儲有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時實(shí)現(xiàn)上述實(shí)施例一的全部步驟，例如，所述處理器執(zhí)行所述計(jì)算機(jī)程序時實(shí)現(xiàn)下述步驟：步驟100：接收目標(biāo)智能貨柜的貨品識別指令。步驟200：采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品。 步驟300：對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型。步驟400：根據(jù)所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。從上述描述可知，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例提供的計(jì)算機(jī)可讀存儲介質(zhì)，能夠?qū)χ悄茇浌駜?nèi)的貨品進(jìn)行準(zhǔn)確且快速的識別，有效節(jié)省了人力成本，補(bǔ)貨過程更加快速且便捷，并提高了智能貨柜的智能化程度和應(yīng)用可靠性，故使得用戶體驗(yàn)提高?！吨悄茇浌駜?nèi)貨品識別方法及裝置、智能貨柜》的實(shí)施例五提供能夠一種智能貨柜的具體實(shí)施方式，參見圖10，所述智能貨柜具體包括如下內(nèi)容：所述智能貨柜與所述的電子設(shè)備通信，所述電子設(shè)備用于接收目標(biāo)智能貨柜的貨品識別指令，采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品，以及對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型。在一種具體舉例中，所述智能貨柜中包括位移傳感器、多個重量傳感器和多個攝像頭，一個智能貨柜中一般均包含有多層貨架，且各層貨架的兩側(cè)及上方均可以設(shè)有多個攝像頭，以保證每個智能貨柜內(nèi)的攝像頭均能夠采集到有當(dāng)前目標(biāo)智能貨柜中的全部貨品，同時，為了保證獲取圖像的清晰程度，每個攝像頭上均可以對應(yīng)的照明燈，所述貨品識別指令發(fā)送單元可以為位移傳感器，且位移傳感器的兩部分分別為設(shè)置在所述智能貨柜的柜門上器件一以及設(shè)置在所述智能貨柜內(nèi)壁上靠近所述器件一的器件二，且各層貨架的底端均設(shè)有至少一個重量傳感器，且各個重量傳感器均與服務(wù)器通信。

智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜專利目的

《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》提供一種智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜，能夠?qū)χ悄茇浌駜?nèi)的貨品進(jìn)行準(zhǔn)確且快速的識別，僅需將把貨品分類擺放即可，無需核對數(shù)量，有效節(jié)省了人力成本。

智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜技術(shù)方案

《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》提供以下技術(shù)方案：第一方面，該發(fā)明提供一種智能貨柜內(nèi)貨品識別方法，所述貨品識別方法包括：接收目標(biāo)智能貨柜的貨品識別指令；采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品；以及，對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型；根據(jù)所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。進(jìn)一步地，所述智能貨柜內(nèi)貨品識別方法還包括：基于所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和數(shù)量，更新該目標(biāo)智能貨柜的貨品實(shí)時信息。進(jìn)一步地，所述接收目標(biāo)智能貨柜的貨品識別指令包括：接收針對所述目標(biāo)智能貨柜的用戶身份識別信息或交易信息；向所述目標(biāo)智能貨柜發(fā)送柜門開啟指令，使得所述目標(biāo)智能貨柜根據(jù)該柜門開啟指令開啟柜門的門鎖；以及，接收所述目標(biāo)智能貨柜在柜門開啟再關(guān)閉后發(fā)送的貨品識別指令。進(jìn)一步地，所述接收針對所述目標(biāo)智能貨柜的用戶身份識別信息或交易信息，包括：接收用戶通過用終端設(shè)備以掃描二維碼的方式連接進(jìn)入所述目標(biāo)智能貨柜對應(yīng)的應(yīng)用APP后，在該應(yīng)用APP中發(fā)送的用戶身份識別信息或交易信息；其中，所述二維碼設(shè)置在所述目標(biāo)智能貨柜的外壁上。進(jìn)一步地，所述接收針對所述目標(biāo)智能貨柜的用戶身份識別信息或交易信息，包括：接收以人臉圖像識別的方式獲取的用戶身份識別信息或交易信息；其中，所述人臉圖像識別的方式包括：通過設(shè)置在所述目標(biāo)智能貨柜的外壁上的圖像采集設(shè)備獲取位于所述目標(biāo)智能貨柜外的用戶的人臉圖像，并對該人臉圖像進(jìn)行人臉圖像識別。進(jìn)一步地，所述采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，包括：控制設(shè)置在所述目標(biāo)智能貨柜內(nèi)的多個圖像采集設(shè)備采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，其中，不同的圖像采集設(shè)備用于采集所述目標(biāo)智能貨柜中不同貨架上的貨品圖像，且全部貨架上的貨品圖像組成所述內(nèi)部貨品圖像；以及，控制分別設(shè)置在所述目標(biāo)智能貨柜中各個貨架上的重量傳感器采集各個貨架上的貨品的重量變化值，其中，同一貨架上擺放同一類型的貨品。進(jìn)一步地，所述對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型，包括：對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的貨品的圖像特征；以及，根據(jù)所述貨品的圖像特征和預(yù)設(shè)的貨品圖像特征庫，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的貨品的類型；其中，所述貨品圖像特征庫中存儲有貨品的類型和圖像特征之間的對應(yīng)關(guān)系。進(jìn)一步地，所述根據(jù)所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，包括：根據(jù)所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，以及，預(yù)獲取的貨品重量庫，計(jì)算得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量初值；以及，根據(jù)所述各類貨品的數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量；其中，所述貨品重量庫中存儲有貨品的類型和貨品重量之間的對應(yīng)關(guān)系。

進(jìn)一步地，所述根據(jù)所述各類貨品的數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，包括：若所述各類貨品的數(shù)量初值為整數(shù)，則直接將該數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量；若所述各類貨品的數(shù)量初值為非整數(shù)，則根據(jù)所述數(shù)量初值的小數(shù)部分的數(shù)值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。進(jìn)一步地，所述根據(jù)所述數(shù)量初值的小數(shù)部分的數(shù)值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，包括：判斷所述數(shù)量初值的小數(shù)部分的數(shù)值是否處于允許誤差范圍內(nèi)；若是，則將該數(shù)量初值進(jìn)行四舍五入，并將四舍五入后的值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量；若否，則向用戶的終端設(shè)備發(fā)送貨品確認(rèn)指令。進(jìn)一步地，所述更新該目標(biāo)智能貨柜的貨品實(shí)時信息，包括：在所述目標(biāo)智能貨柜對應(yīng)的應(yīng)用APP中更新該目標(biāo)智能貨柜的貨品實(shí)時信息。進(jìn)一步地，所述貨品識別方法還包括：若檢測獲知所述目標(biāo)智能貨柜中的某類貨品的數(shù)量低于對應(yīng)的補(bǔ)貨閾值，則向補(bǔ)貨人員的終端設(shè)備發(fā)送補(bǔ)貨告知信息。第二方面，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》提供一種智能貨柜內(nèi)貨品識別系統(tǒng)，所述貨品識別系統(tǒng)包括：貨品識別指令接收模塊，用于接收目標(biāo)智能貨柜的貨品識別指令；圖像及重量采集模塊，用于采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品；增減貨品類型識別模塊，用于對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的貨品的類型；增減貨品數(shù)量識別模塊，用于對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型。第三方面，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》提供一種電子設(shè)備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運(yùn)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述程序時實(shí)現(xiàn)所述智能貨柜內(nèi)貨品識別方法的步驟。第四方面，《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》提供一種計(jì)算機(jī)可讀存儲介質(zhì)，其上存儲有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時實(shí)現(xiàn)所述智能貨柜內(nèi)貨品識別方法的步驟。第五方面，該發(fā)明提供一種智能貨柜，所述智能貨柜與所述的電子設(shè)備通信。

智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜改善效果

《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》提供的智能貨柜內(nèi)貨品識別方法，通過接收目標(biāo)智能貨柜的貨品識別指令；采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品；以及對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型；根據(jù)所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，能夠?qū)χ悄茇浌駜?nèi)的貨品進(jìn)行準(zhǔn)確且快速的識別，僅需將把貨品分類擺放即可，無需核對數(shù)量，有效節(jié)省了人力成本，并提高了智能貨柜的智能化程度和應(yīng)用可靠性，故使得用戶體驗(yàn)提高。

1.《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的特征在于，所述貨品識別方法包括：接收目標(biāo)智能貨柜的貨品識別指令；采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，包括：控制設(shè)置在所述目標(biāo)智能貨柜內(nèi)的多個圖像采集設(shè)備采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，其中，不同的圖像采集設(shè)備用于采集所述目標(biāo)智能貨柜中不同貨架上的貨品圖像，且全部貨架上的貨品圖像組成所述內(nèi)部貨品圖像；以及，控制分別設(shè)置在所述目標(biāo)智能貨柜中各個貨架上的重量傳感器采集各個貨架上的貨品的重量變化值，其中，同一貨架上擺放同一類型的貨品；其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品；以及，對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型；根據(jù)所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，包括：根據(jù)所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，以及，預(yù)獲取的貨品重量庫，計(jì)算得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量初值，其中，所述貨品重量庫中存儲有貨品的類型和貨品重量之間的對應(yīng)關(guān)系；根據(jù)所述各類貨品的數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。

2.根據(jù)權(quán)利要求1所述的貨品識別方法，其特征在于，所述智能貨柜內(nèi)貨品識別方法還包括：基于所述目標(biāo)智能貨柜中發(fā)生變化的各類貨品的類型和數(shù)量，更新該目標(biāo)智能貨柜的貨品實(shí)時信息。

3.根據(jù)權(quán)利要求1所述的貨品識別方法，其特征在于，所述接收目標(biāo)智能貨柜的貨品識別指令包括：接收針對所述目標(biāo)智能貨柜的用戶身份識別信息或交易信息；向所述目標(biāo)智能貨柜發(fā)送柜門開啟指令，使得所述目標(biāo)智能貨柜根據(jù)該柜門開啟指令開啟柜門的門鎖；以及，接收所述目標(biāo)智能貨柜在柜門開啟再關(guān)閉后發(fā)送的貨品識別指令。

4.根據(jù)權(quán)利要求3所述的貨品識別方法，其特征在于，所述接收針對所述目標(biāo)智能貨柜的用戶身份識別信息或交易信息，包括：接收用戶通過用終端設(shè)備以掃描二維碼的方式連接進(jìn)入所述目標(biāo)智能貨柜對應(yīng)的應(yīng)用APP后，在該應(yīng)用APP中發(fā)送的用戶身份識別信息或交易信息；其中，所述二維碼設(shè)置在所述目標(biāo)智能貨柜的外壁上。

5.根據(jù)權(quán)利要求3所述的貨品識別方法，其特征在于，所述接收針對所述目標(biāo)智能貨柜的用戶身份識別信息或交易信息，包括：接收以人臉圖像識別的方式獲取的用戶身份識別信息或交易信息；其中，所述人臉圖像識別的方式包括：通過設(shè)置在所述目標(biāo)智能貨柜的外壁上的圖像采集設(shè)備獲取位于所述目標(biāo)智能貨柜外的用戶的人臉圖像，并對該人臉圖像進(jìn)行人臉圖像識別。

6.根據(jù)權(quán)利要求1所述的貨品識別方法，其特征在于，所述對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型，包括：對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的貨品的圖像特征；以及，根據(jù)所述貨品的圖像特征和預(yù)設(shè)的貨品圖像特征庫，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的貨品的類型；其中，所述貨品圖像特征庫中存儲有貨品的類型和圖像特征之間的對應(yīng)關(guān)系。

7.根據(jù)權(quán)利要求1所述的貨品識別方法，其特征在于，所述根據(jù)所述各類貨品的數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，包括：若所述各類貨品的數(shù)量初值為整數(shù)，則直接將該數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量；若所述各類貨品的數(shù)量初值為非整數(shù)，則根據(jù)所述數(shù)量初值的小數(shù)部分的數(shù)值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。

8.根據(jù)權(quán)利要求7所述的貨品識別方法，其特征在于，所述根據(jù)所述數(shù)量初值的小數(shù)部分的數(shù)值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，包括：判斷所述數(shù)量初值的小數(shù)部分的數(shù)值是否處于允許誤差范圍內(nèi)；若是，則將該數(shù)量初值進(jìn)行四舍五入，并將四舍五入后的值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量；若否，則向用戶的終端設(shè)備發(fā)送貨品確認(rèn)指令。

9.根據(jù)權(quán)利要求2所述的貨品識別方法，其特征在于，所述更新該目標(biāo)智能貨柜的貨品實(shí)時信息，包括：在所述目標(biāo)智能貨柜對應(yīng)的應(yīng)用APP中更新該目標(biāo)智能貨柜的貨品實(shí)時信息。10.根據(jù)權(quán)利要求1所述的貨品識別方法，其特征在于，所述貨品識別方法還包括：若檢測獲知所述目標(biāo)智能貨柜中的某類貨品的數(shù)量低于對應(yīng)的補(bǔ)貨閾值，則向補(bǔ)貨人員的終端設(shè)備發(fā)送補(bǔ)貨告知信息。

11.《智能貨柜內(nèi)貨品識別方法及裝置、智能貨柜》的特征在于，所述貨品識別系統(tǒng)包括：貨品識別指令接收模塊，用于接收目標(biāo)智能貨柜的貨品識別指令；圖像及重量采集模塊，用于采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，并獲取該目標(biāo)智能貨柜內(nèi)各類貨品的重量變化值，包括：控制設(shè)置在所述目標(biāo)智能貨柜內(nèi)的多個圖像采集設(shè)備采集所述目標(biāo)智能貨柜的內(nèi)部貨品圖像，其中，不同的圖像采集設(shè)備用于采集所述目標(biāo)智能貨柜中不同貨架上的貨品圖像，且全部貨架上的貨品圖像組成所述內(nèi)部貨品圖像；以及，控制分別設(shè)置在所述目標(biāo)智能貨柜中各個貨架上的重量傳感器采集各個貨架上的貨品的重量變化值，其中，同一貨架上擺放同一類型的貨品；其中，所述內(nèi)部貨品圖像中包含有當(dāng)前目標(biāo)智能貨柜中的全部貨品；增減貨品類型識別模塊，用于對所述內(nèi)部貨品圖像進(jìn)行圖像識別，得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型；增減貨品數(shù)量識別模塊，用于根據(jù)所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量，包括：根據(jù)所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的類型和對應(yīng)的重量變化值，以及，預(yù)獲取的貨品重量庫，計(jì)算得到所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量初值，其中，所述貨品重量庫中存儲有貨品的類型和貨品重量之間的對應(yīng)關(guān)系；根據(jù)所述各類貨品的數(shù)量初值確定所述目標(biāo)智能貨柜中數(shù)量發(fā)生變化的各類貨品的數(shù)量。

12.一種電子設(shè)備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運(yùn)行的計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述程序時實(shí)現(xiàn)如權(quán)利要求1至10任一項(xiàng)所述智能貨柜內(nèi)貨品識別方法的步驟。

13.一種計(jì)算機(jī)可讀存儲介質(zhì)，其上存儲有計(jì)算機(jī)程序，其特征在于，該計(jì)算機(jī)程序被處理器執(zhí)行時實(shí)現(xiàn)如權(quán)利要求1至10任一項(xiàng)所述智能貨柜內(nèi)貨品識別方法的步驟。

14.一種智能貨柜，其特征在于，所述智能貨柜與權(quán)利要求12所述的電子設(shè)備通信。

本標(biāo)準(zhǔn)適用于智能化貨柜售賣動作的評價，本標(biāo)準(zhǔn)售賣動作評價相關(guān)試驗(yàn)包括: 手動售賣測試，商品取出性（多瓶售賣）測試，硬幣、紙幣通路測試，通常售賣測試，商品劃傷測試，售賣噪音測試，電壓變動測試以及特殊售賣試驗(yàn)。該標(biāo)準(zhǔn)的發(fā)布有益于智能化貨柜各售賣相關(guān)動作、指標(biāo)的規(guī)范化。指導(dǎo)智能化貨柜生產(chǎn)單位針對售賣相關(guān)特性進(jìn)行測試和質(zhì)量評價，售賣動作是否流暢、準(zhǔn)確，動作過程是否有噪聲以及其他問題，確保在投入使用前各性能良好。旨在為行業(yè)內(nèi)的企業(yè)提供品質(zhì)評價的標(biāo)準(zhǔn)，提升產(chǎn)品品質(zhì)。

本標(biāo)準(zhǔn)適用于智能化貨柜的冷卻、加熱性能的測試和品質(zhì)評價。標(biāo)準(zhǔn)技術(shù)內(nèi)容包括：電氣特性評價，冷卻特性評價，加熱特性評價，冷卻、加熱組合特性評價，環(huán)境耐候性評價以及異常狀態(tài)評價和其他一般特性評價。隨著無人設(shè)備的發(fā)展和使用市場的擴(kuò)大，智能化貨柜投入使用范圍愈加廣泛。本標(biāo)準(zhǔn)為測試智能化終端冷藏設(shè)備的冷卻、加熱性能提供依據(jù)和判斷方法，確保冷卻、加熱性能有關(guān)品質(zhì)有足夠保證。

本標(biāo)準(zhǔn)主要用于智能化貨柜的相關(guān)特性的判斷及相關(guān)技術(shù)要求的提出。主要技術(shù)內(nèi)容包括翻倒角度、調(diào)平螺釘上浮、主體推倒性、地腳螺釘固定強(qiáng)度、主體振動5方面特性技術(shù)要求的測評，確保產(chǎn)品符合出品要求,保證產(chǎn)品質(zhì)量,提高用戶體驗(yàn)滿意度。 2100433B