安全系統(tǒng)、安全方法和非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種安全系統(tǒng)、安全方法和存儲(chǔ)安全程序的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，具體地涉及一種使用人物圖像的安全系統(tǒng)、安全方法和存儲(chǔ)安全程序的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)。
【背景技術(shù)】
[0002]由于顧客在店鋪行竊、兼職雇員的盜用等造成的損失正不斷且日益引起店鋪的關(guān)注。為了防止這種不當(dāng)行為，店鋪員工或店鋪管理者要盯著這些顧客和兼職雇員，或記錄由普通2D攝像機(jī)監(jiān)控的圖像并在事后肉眼檢查。
[0003]由于肉眼檢查是否發(fā)生不當(dāng)行為的效率非常低，所以作為相關(guān)的技術(shù)，例如開發(fā)了在專利文獻(xiàn)I至5中公開的系統(tǒng)。
[0004]引用列表
[0005]專利文獻(xiàn)
[0006]PTLl:日本未審專利公開N0.2011-065328
[0007]PTL2:日本未審專利公開N0.2010-094332
[0008]PTL3:日本未審專利公開N0.2009-048430
[0009]PTL4:日本未審專利公開N0.2009-009231
[0010]PTL5:日本未審專利公開N0.2008-257487

【發(fā)明內(nèi)容】

[0011]技術(shù)問題
[0012]例如，根據(jù)如專利文獻(xiàn)I的相關(guān)技術(shù)中公開的技術(shù)，當(dāng)?shù)赇亞T工的面部擺動(dòng)的次數(shù)是特定值以上，并且在收銀機(jī)中注銷的金額是參考值或更多時(shí)，檢測(cè)到發(fā)生了可疑行為(可疑動(dòng)作)。
[0013]然而，由于相關(guān)的技術(shù)執(zhí)行基于面部擺動(dòng)等的檢測(cè)，所以在一些情況下它不能檢測(cè)到店鋪員工等的可疑動(dòng)作。舉例來說，盡管可疑動(dòng)作經(jīng)常由手部來進(jìn)行，但是相關(guān)的技術(shù)不能檢測(cè)基于手部動(dòng)作的行為。
[0014]因此，在相關(guān)技術(shù)中公開的技術(shù)有一個(gè)問題，即很難精確地檢測(cè)到店鋪員工、顧客等的可疑動(dòng)作。
[0015]根據(jù)上述情況，本發(fā)明的示例性目的是提供一種能夠精確地檢測(cè)可疑動(dòng)作的安全系統(tǒng)、安全方法和存儲(chǔ)安全程序的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)。
[0016]技術(shù)方案
[0017]根據(jù)本發(fā)明示例性方面的一種安全系統(tǒng)，包括:圖像信息獲取單元，用于獲取關(guān)于店鋪內(nèi)的人物的被攝圖像的輸入圖像信息;跟蹤單元，用于基于所述輸入圖像信息跟蹤所述人物的手部的動(dòng)作；以及可疑動(dòng)作檢測(cè)單元，用于基于跟蹤的所述手部動(dòng)作檢測(cè)所述人物的可疑動(dòng)作。
[0018]根據(jù)本發(fā)明示例性方面的一種安全方法，包括:獲取關(guān)于店鋪內(nèi)的人物的被攝圖像的輸入圖像信息；基于所述輸入圖像信息跟蹤所述人物的手部的動(dòng)作；以及基于跟蹤的手部動(dòng)作檢測(cè)所述人物的可疑動(dòng)作。
[0019]根據(jù)本發(fā)明示例性方面的一種用于存儲(chǔ)安全程序的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，使計(jì)算機(jī)執(zhí)行安全處理，包括:獲取關(guān)于店鋪內(nèi)的人物的被攝圖像的輸入圖像信息;基于所述輸入圖像信息跟蹤所述人物的手部的動(dòng)作；以及基于跟蹤的手部動(dòng)作檢測(cè)所述人物的可疑動(dòng)作。
[0020]本發(fā)明的有利效果
[0021]根據(jù)本發(fā)明的示例性方面，能夠提供能夠精確地檢測(cè)可疑動(dòng)作的安全系統(tǒng)、安全方法和存儲(chǔ)安全程序的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)。
【附圖說明】
[0022]圖1是示出根據(jù)示例性實(shí)施例的安全系統(tǒng)的主要元件的方塊圖；
[0023]圖2是示出根據(jù)第一示例性實(shí)施例的安全系統(tǒng)的配置的方塊圖；
[0024]圖3A是示出根據(jù)第一示例性實(shí)施例的3D攝像機(jī)的配置例的圖；
[0025]圖3B是示出根據(jù)第一示例性實(shí)施例的3D攝像機(jī)的配置例的圖；
[0026]圖4是示出根據(jù)第一示例性實(shí)施例的距離圖像分析單元的配置的方塊圖；
[0027]圖5是示出根據(jù)第一示例性實(shí)施例的安全系統(tǒng)的操作的流程圖；
[0028]圖6是示出根據(jù)第一示例性實(shí)施例的距離圖像分析處理的操作的流程圖；
[0029]圖7是示出根據(jù)第一示例性實(shí)施例的警報(bào)信息生成處理的操作的流程圖；
[0030]圖8是示出根據(jù)第一示例性實(shí)施例的警報(bào)信息生成處理的操作的說明圖；
[0031 ]圖9是示出根據(jù)第二示例性實(shí)施例的安全系統(tǒng)的配置的方塊圖；以及
[0032]圖10是示出根據(jù)第二示例性實(shí)施例的距離圖像分析單元的配置的方塊圖。
【具體實(shí)施方式】
[0033](示例性實(shí)施例的概述)
[0034]在描述示例性實(shí)施例之前，在下文中先描述示例性實(shí)施例的特征的概述。圖1示出了根據(jù)示例性實(shí)施例的安全系統(tǒng)的主要元件。
[0035]如圖1所示，根據(jù)本示例性實(shí)施例的安全系統(tǒng)10包括圖像信息獲取單元11、跟蹤單元12和可疑動(dòng)作檢測(cè)單元13。圖像信息獲取單元11獲取輸入圖像信息，它是被攝的店鋪內(nèi)人物的圖像。跟蹤單元12基于獲取的輸入圖像信息跟蹤人物的手部動(dòng)作?？梢蓜?dòng)作探測(cè)單元13基于跟蹤的手部動(dòng)作檢測(cè)人物的可疑動(dòng)作。
[0036]如上所述，在示例性實(shí)施例中，跟蹤店鋪內(nèi)人物的手部動(dòng)作，并且基于跟蹤結(jié)果檢測(cè)可疑動(dòng)作。例如，通過跟蹤店鋪內(nèi)商品貨架前的顧客或店鋪員工的手部動(dòng)作，能夠精確地檢測(cè)會(huì)導(dǎo)致店鋪行竊或盜用的可疑動(dòng)作。
[0037](第一示例性實(shí)施例)
[0038]將在下文中，參考附圖描述第一示例性實(shí)施例。圖2是示出根據(jù)該示例性實(shí)施例的安全系統(tǒng)的配置的方塊圖。該安全系統(tǒng)是檢測(cè)店鋪內(nèi)的顧客或店鋪員工的可疑動(dòng)作等并輸出(顯示)警報(bào)(報(bào)警)等的系統(tǒng)。注意，顧客包括所有來到(進(jìn)入)店鋪的人物，店鋪員工包括所有在店鋪工作的人物。
[0039]如圖2所示，根據(jù)本示例性實(shí)施例的安全系統(tǒng)I包括安全裝置100、3D攝像機(jī)210、面部識(shí)別攝像機(jī)220、店鋪內(nèi)攝像機(jī)230和警報(bào)裝置240。例如，當(dāng)安全系統(tǒng)I的各組件被放置在同一個(gè)店鋪內(nèi)時(shí)，安全裝置100或警報(bào)裝置240可以放置在店鋪外部。雖然在下面的描述中假設(shè)安全系統(tǒng)I的各組件是單獨(dú)的裝置，但是各組件也可以是一個(gè)或任何數(shù)量的裝置。
[0040]3D(三維)攝像機(jī)210是被攝對(duì)象的圖像并測(cè)量對(duì)象以及產(chǎn)生距離圖像(距離圖像信息)的成像裝置(距離圖像傳感器)。距離圖像(范圍圖像)包含作為被攝對(duì)象圖像的圖像信息和作為測(cè)量的到對(duì)象的距離的距離信息。例如，3D攝像機(jī)210是Microsoft Kinect(注冊(cè)商標(biāo))或立體攝像機(jī)。通過使用3D攝像機(jī)，能夠識(shí)別(跟蹤)包括距離信息的對(duì)象(顧客的動(dòng)作等)，因此能夠執(zhí)行高度精確的識(shí)別。
[0041]如圖3A和圖3B所示，為了檢測(cè)顧客或店鋪員工的手部的可疑動(dòng)作，在本示例性實(shí)施例中，3D攝像機(jī)210拍攝在店鋪內(nèi)的特定位置處的顧客或店鋪員工的圖像。在圖3A的例子中，3D攝像機(jī)210拍攝放置(展示)了商品301的商品貨架(商品展示架)300的圖像，具體地，拍攝將要在商品貨架300前觸摸商品301的顧客400的圖像。3D攝像機(jī)210拍攝商品貨架300的商品放置區(qū)域的圖像以及在商品貨架300前顧客拿起/看商品的區(qū)域，這是在商品貨架300中將商品展不給顧客的展不區(qū)域。3D攝像機(jī)210放置在能夠拍攝商品貨架300和商品貨架300前(附近)的顧客400的圖像的位置，例如，在商品貨架300的上面(天花板等)或前面(墻等)，或在商品貨架300中。
[0042]在圖3B的例子中，3D攝像機(jī)210拍攝放置了收銀機(jī)311的收銀臺(tái)310的圖像，具體地，拍攝站在收銀臺(tái)310前且將要把商品301賣給顧客400的店鋪員工410、或?qū)⒁龅浇疱X302的店鋪員工410的圖像。3D攝像機(jī)210放置在能夠拍攝收銀臺(tái)310和收銀臺(tái)310前(附近)的店鋪員工410的圖像的位置上，例如，在收銀臺(tái)310的上面(天花板等)或前面(墻等)，或在收銀臺(tái)310(收銀機(jī)311)上。
[0043]注意，雖然在下面描述將3D攝像機(jī)210用作拍攝商品貨架300和收銀臺(tái)310的圖像的裝置的例子，但是不限于3D攝像機(jī)，而可以是只輸出拍攝圖像的普通攝像機(jī)(2D攝像機(jī))。在這種情況下，僅使用圖像信息進(jìn)行跟蹤。
[0044]面部識(shí)別攝像機(jī)220和店鋪內(nèi)攝像機(jī)230的每一個(gè)是拍攝并生成對(duì)象圖像的成像裝置(2D攝像機(jī))。面部識(shí)別照攝像機(jī)220放置在店鋪的入口等處，拍攝來到店鋪的顧客的面部圖像并生成面部圖像以識(shí)別顧客的面部。店鋪內(nèi)攝像機(jī)230放置在店鋪內(nèi)的多個(gè)位置上，拍攝店鋪內(nèi)的每個(gè)部分的圖像，并生成店鋪內(nèi)圖像，以檢測(cè)店鋪內(nèi)顧客的擁擠狀況。注意，面部識(shí)別攝像機(jī)220和店鋪內(nèi)攝像機(jī)230的每一個(gè)可以是3D攝像