本技術(shù)結合不同特性的深度學(xué)習技術(shù)和特征點(diǎn)匹配技術(shù)，對各種不同的零售商品進(jìn)行高精度識別，既包括生鮮食品之類(lèi)個(gè)體外觀(guān)差異大的物品，也包括包裝成品之類(lèi)相似設計大量存在的流水線(xiàn)產(chǎn)品。而且即使這些商品混雜堆放，也能一次性精準識別所有商品。
NEC商品畫(huà)像識別示意圖
近年來(lái)，隨著(zhù)圖像識別技術(shù)的不斷發(fā)展，利用攝像頭識別零售商品的圖像識別方式使得零售店鋪結算在節省人力及無(wú)人化方面不斷進(jìn)步。但是，由于生鮮食品和包裝成品的特點(diǎn)不同，以往的圖像識別技術(shù)很難對各式各樣的商品統一進(jìn)行識別。此外，為了一次性準確識別這些商品，需要將商品整齊擺放，會(huì )增加使用者的負擔。
通過(guò)此次NEC最新研發(fā)的技術(shù)，無(wú)需再逐個(gè)讀取條形碼和RFID電子標簽，只需將商品放置到收銀臺上這一簡(jiǎn)單的操作，即可一次性識別所有商品，大幅提升了結算時(shí)商品的讀取效率。
NEC積極致力于在全球范圍內推進(jìn)“社會(huì )解決方案事業(yè)”，創(chuàng )造安全、安心、高效、公平的社會(huì )價(jià)值。將先進(jìn)的ICT技術(shù)與知識相融合，為實(shí)現更加光明、更加豐富多彩的高效社會(huì )盡一份力量。
【背景】
近年來(lái)，零售行業(yè)勞動(dòng)力不足的現象日益嚴峻，如何在店鋪運營(yíng)中節省人力、實(shí)現無(wú)人化已經(jīng)成為當下極其重要的課題。特別是對店員負擔較重的結算業(yè)務(wù)（收銀結賬），無(wú)人化需求日益迫切。
為實(shí)現結算業(yè)務(wù)的無(wú)人化，可以考慮使用自助結賬的方式。而自助結賬就需要顧客自己逐一將商品的條形碼放到機器上掃描。但是因為部分顧客對如何使用條形碼讀取設備并不熟悉，所以需要耗費大量的時(shí)間讀取條形碼，而對于像生鮮食品之類(lèi)沒(méi)有條形碼的商品，自助結賬時(shí)的對應就會(huì )變得更加復雜，結賬效率成為課題。此外，雖然已有企業(yè)開(kāi)始以給商品添加RFID電子標簽的方式進(jìn)行自動(dòng)化結算，但給低價(jià)商品添加電子標簽的方式非常不劃算，所以要實(shí)現真正意義上的普及還非常遙遠。
此次開(kāi)發(fā)的圖像識別技術(shù)是一種多種物體識別技術(shù)，無(wú)需條形碼和RFID電子標簽，即使是在零售店這樣將生鮮食品、日配品和包裝成品等各種商品混雜放置的復雜環(huán)境中，也能進(jìn)行精準識別。通過(guò)這項技術(shù)，顧客只需將購買(mǎi)的多種商品放到收銀臺上，即可一次性準確讀取商品。
【新技術(shù)的特征】
1.可對包括天然物品和流水線(xiàn)產(chǎn)品等在內的各種不同特點(diǎn)的零售商品進(jìn)行高精度識別。
本次開(kāi)發(fā)的圖像識別技術(shù)，融合了深度學(xué)習技術(shù)和特征點(diǎn)匹配技術(shù)中的不同特性。首先對將深度學(xué)習技術(shù)和特征匹配技術(shù)分別使用到每個(gè)商品時(shí)的識別精度進(jìn)行推測，調整各技術(shù)的使用比例以實(shí)現識別精度的最大化。然后再根據每個(gè)商品調整后得到的配比，對各技術(shù)的識別結果進(jìn)行整合。對于像蔬菜水果等生鮮食品之類(lèi)不同個(gè)體外觀(guān)差異巨大的天然物品，將使用可以吸收不同個(gè)體差異來(lái)進(jìn)行判別的深度學(xué)習技術(shù)，而對于像飲料、點(diǎn)心、盒裝方便面、雜貨等包裝成品之類(lèi)設計相似的工業(yè)產(chǎn)品，則使用可以詳細判別設計配置差異的特征點(diǎn)匹配技術(shù)。
而對于便當、熟食等日配品之類(lèi)同時(shí)具備天然物品（食材）和工業(yè)產(chǎn)品（商品標簽）特點(diǎn)的商品，則同時(shí)使用兩種技術(shù)，在對其結果進(jìn)行整合后再進(jìn)行識別。結合商品特性，融合兩項技術(shù)的識別方式，較之于只使用單項技術(shù)的情況，有效地提升了對于多種不同零售商品的識別精度。
2.即使是在多種商品混雜放置的復雜環(huán)境中也能精準識別
拍攝每個(gè)商品個(gè)體，即可自動(dòng)生成大量的多種商品混雜放置的復雜環(huán)境的圖片。本次開(kāi)發(fā)的多種物體識別技術(shù)，只需提前對這些圖片進(jìn)行機械學(xué)習，即可有效提升復雜環(huán)境中的識別精度。這樣就解決了機械學(xué)習時(shí)需要拍攝并準備大量學(xué)習圖像數據的課題，即使只有少量的拍攝圖像數據，也可有效提升多種商品混雜放置的復雜環(huán)境中的商品識別精度。
在2018年3月于東京國際展覽中心舉辦的“RetailTech JAPAN2018”流通技術(shù)展上， NEC展出了使用本技術(shù)的圖像識別POS結算演示系統。同時(shí)，計劃從3月開(kāi)始將使用本技術(shù)在NEC總部?jì)鹊谋憷赀M(jìn)行結算業(yè)務(wù)無(wú)人化的驗證實(shí)驗。
NEC集團積極致力于在全球范圍內推進(jìn)“社會(huì )解決方案事業(yè)”，創(chuàng )造安全、安心、高效、公平的社會(huì )價(jià)值。將先進(jìn)的ICT技術(shù)與知識相融合，為實(shí)現更加光明、更加豐富多彩的高效社會(huì )盡一份力量。
