攝影系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及利用多臺攝像機(jī)對被拍攝體進(jìn)行拍攝的攝影技術(shù)。
【背景技術(shù)】
[0002] 目前，作為利用多臺攝像機(jī)對被拍攝體進(jìn)行拍攝的系統(tǒng)，提案有一種監(jiān)視攝像機(jī) 系統(tǒng)，其在店鋪或主題公園等的設(shè)施內(nèi)設(shè)置多臺攝像機(jī)，對被拍攝體的情況進(jìn)行拍攝并保 存，或者在顯示裝置中進(jìn)行顯示，由此在防止犯罪等中使用。另外，以確認(rèn)老人或孩子的日 常狀況的監(jiān)護(hù)為目的，也有在老人院或者保育園中設(shè)置多臺攝像機(jī)的系統(tǒng)。
[0003] 在這些系統(tǒng)中，由于攝像機(jī)長時間地進(jìn)行圖像的取得和記錄，確認(rèn)其全部的圖像 需要花費(fèi)非常多的時間，因此較為困難，存在對于沒有發(fā)生任何事態(tài)、即沒有發(fā)生變化的圖 像不進(jìn)行確認(rèn)，而只確認(rèn)特定時刻的圖像即可這樣的需求。例如，監(jiān)視攝像機(jī)中發(fā)生了犯罪 等的前后的圖像，如果是監(jiān)護(hù)的情況下對特定人物進(jìn)行動作的狀況進(jìn)行拍攝的圖像。另外， 如果是孩子的監(jiān)護(hù)等，監(jiān)護(hù)者有想要看到孩子的樣子的需求，對于顯示出笑臉的圖像或哭 泣的圖像等任何事情發(fā)生時的圖像的需要較高。
[0004] 像這樣，對于想要從長時間的大量的圖像中提取特定的時刻的圖像的需求，提案 有以下這樣的各種功能。
[0005] 在下述專利文獻(xiàn)1中提案有精簡圖像生成裝置，其根據(jù)1個以上的攝影裝置所記 錄的記錄圖像中，自動地制成用于掌握目標(biāo)人物、物體的活動狀況的短時間的圖像。對人 物、物體安裝無線標(biāo)簽（tag)，根據(jù)無線標(biāo)簽接收機(jī)掌握人物、物體的大致位置，判斷是在哪 個時間段由哪一臺攝影裝置對該人物、物體進(jìn)行了攝影，從多個攝影裝置的圖像中取出對 該人物、物體進(jìn)行拍攝的圖像。然后，針對將所取出的圖像按每一定的單位時間劃分成的單 位圖像，計(jì)算圖像的特征量，識別發(fā)生了什么事態(tài)（事情），生成精簡圖像。
[0006] 另外，在下述專利文獻(xiàn)2中提案有，基于多個人物的臉識別結(jié)果進(jìn)行適當(dāng)?shù)臄z影 控制的圖像攝影裝置和圖像攝影方法以及計(jì)算機(jī)程序。從各個被拍攝體檢測出笑臉度、圖 像幀內(nèi)的位置、檢測臉的傾斜、性別等的被拍攝體的屬性這樣的多個臉識別參數(shù)，基于檢測 出的這些臉識別參數(shù)的相互的關(guān)系，進(jìn)行快門的時刻決定和自拍器的設(shè)定等的攝影控制。 由此基于多個人物的臉識別結(jié)果的相互關(guān)系，能夠取得對用戶最佳的圖像。
[0007] 另外，在下述專利文獻(xiàn)3中提案有一種圖像處理裝置和圖像處理程序，其能夠在 作為被拍攝體包含多個人物的圖像中，可靠地提取大多數(shù)人物注視相同的對象物的場面。 通過推定多個人物的視線，并且計(jì)算出到推定了視線的多個人物的距離，利用視線的推定 結(jié)果和距離的計(jì)算結(jié)果，判定多個人物的視線是否交叉?；谠撆卸ńY(jié)果，可靠地提取大多 數(shù)人物注視相同對象物的場面。
[0008] 現(xiàn)有技術(shù)文獻(xiàn)
[0009] 專利文獻(xiàn)
[0010] 專利文獻(xiàn)1 :特開2012-160880號公報(bào)
[0011] 專利文獻(xiàn)2 :特開2010-016796號公報(bào)
[0012]專利文獻(xiàn)3 :特開2009-239347號公報(bào)

【發(fā)明內(nèi)容】

[0013]發(fā)明要解決的技術(shù)問題
[0014]像這樣，對于想要從圖像中提取特定的時刻的圖像的需求，提案有多種功能，但是 存在如下所述的問題。
[0015]在專利文獻(xiàn)1記載的裝置中，使用無線標(biāo)簽提取特定的人物、物體，按每一定時間 識別是否發(fā)生了什么事態(tài)，生成精簡圖像，但是從多個攝像機(jī)只能提取一個顯示有人物、物 體的攝像機(jī)圖像進(jìn)行事態(tài)分析。因此，能夠?qū)M(jìn)餐、睡覺、游戲、團(tuán)體活動這樣的事態(tài)進(jìn)行分 析，但是在這樣的事態(tài)中，對于幼兒對什么感興趣這樣的詳細(xì)的事態(tài)，根據(jù)攝像機(jī)的角度和 位置不能將人物注視的對象作為圖像保存，因此有可能不能進(jìn)行判斷。
[0016]另外，在專利文獻(xiàn)2記載的裝置中，根據(jù)臉識別參數(shù)的相互的關(guān)系，進(jìn)行快門的時 刻決定和自拍器的設(shè)定等的攝影控制，在作為被拍攝體的人物表現(xiàn)出笑臉的時刻進(jìn)行拍 攝，但是不能準(zhǔn)確地掌握人物注視著什么而表現(xiàn)出笑臉。
[0017]同樣地，在專利文獻(xiàn)3記載的裝置中，能夠在作為被拍攝體包含多個人物的圖像 中提取大多數(shù)人物注視相同對象物的場面的圖像，但是之后看到圖像也不能判斷出注視著 什么。
[0018]本發(fā)明是為了解決上述的課題而完成的，其目的在于提供一種能夠更詳細(xì)地認(rèn)知 拍攝圖像的時刻的狀況、事態(tài)的攝影技術(shù)。
[0019]用于解決問題的技術(shù)手段
[0020] 根據(jù)本發(fā)明的一個觀點(diǎn)，提供一種攝影系統(tǒng)，其具有：拍攝方向不同的至少3臺攝 像機(jī)；從上述攝像機(jī)拍攝的圖像中提取被拍攝體的特征點(diǎn)的特征點(diǎn)提取部；和保存上述攝 像機(jī)拍攝的圖像的圖像存儲部，該攝影系統(tǒng)的特征在于，還包括：根據(jù)上述特征點(diǎn)提取部提 取的上述特征點(diǎn)計(jì)算被拍攝體的特征量的特征量計(jì)算部；根據(jù)上述特征點(diǎn)提取部提取的特 征點(diǎn)推定被拍攝體朝向的方向的方向推定部；和決定要保存在上述圖像存儲部中的攝像機(jī) 圖像的保存攝像機(jī)圖像決定部，在上述特征量計(jì)算部計(jì)算出的特征量與預(yù)先設(shè)定的特定的 特征量的差為一定量以下的情況下，保存攝像機(jī)圖像決定部將上述多個由上述特征點(diǎn)提取 部提取了特征點(diǎn)的圖像決定為第一保存圖像，并且，根據(jù)上述方向推定部基于在上述第一 保存圖像中提取的特征點(diǎn)推定的被拍攝體朝向的方向來確定攝像機(jī)，決定第二保存圖像。
[0021] 配置拍攝方向不同的至少3臺攝像機(jī)是指，配置3臺能夠?qū)Σ煌较蜻M(jìn)行拍攝的 攝像機(jī)。僅對相同方向進(jìn)行拍攝的攝像機(jī)不論配置幾臺，都不能同時對被拍攝體的正面朝 向的方向和被拍攝體注視的方向進(jìn)行拍攝。
[0022] 本說明書包含作為本申請的優(yōu)先權(quán)基礎(chǔ)的日本專利申請2013-122548號的說明 書和/或附圖所記載的內(nèi)容。
[0023] 發(fā)明效果
[0024]根據(jù)本發(fā)明，在之后確認(rèn)圖像時，能夠掌握該人物看到了什么而表情發(fā)生變化，能 夠更詳細(xì)地知道所拍攝的時刻的狀況、事態(tài)。
【附圖說明】
[0025] 圖1是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)的構(gòu)成例的框圖。
[0026] 圖2是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)的設(shè)置環(huán)境的圖。
[0027] 圖3是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)的設(shè)置環(huán)境的側(cè)視圖。
[0028] 圖4是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)的設(shè)置環(huán)境的俯視圖。
[0029] 圖5是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)的工作順序的流程圖。
[0030] 圖6是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)所拍攝的人物的圖像的圖。
[0031] 圖7是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)的攝像機(jī)配置的圖。
[0032] 圖8是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)所拍攝的對象物的圖像的圖。
[0033] 圖9表示本發(fā)明的第二實(shí)施方式的攝影系統(tǒng)的構(gòu)成例的框圖。
[0034] 圖10是表示本發(fā)明的第二實(shí)施方式的攝影系統(tǒng)的設(shè)置環(huán)境的圖。
[0035] 圖11是表示本發(fā)明的第二實(shí)施方式的攝影系統(tǒng)的工作順序的流程圖。
[0036] 圖12是表示本發(fā)明的第二實(shí)施方式的攝影系統(tǒng)所拍攝的人物的圖像的圖。
[0037] 圖13是說明距離計(jì)算方法的圖。
[0038] 圖14表示本發(fā)明的第三實(shí)施方式的攝影系統(tǒng)的構(gòu)成例的框圖。
[0039] 圖15是表示本發(fā)明的第三實(shí)施方式的攝影系統(tǒng)的設(shè)置環(huán)境的圖。
[0040] 圖16是表示本發(fā)明的第三實(shí)施方式的攝影系統(tǒng)所拍攝的廣角圖像的圖。
[0041] 圖17是表示本發(fā)明的第三實(shí)施方式的攝影系統(tǒng)的工作順序的流程圖。
[0042] 圖18是表示本發(fā)明的第三實(shí)施方式的攝影系統(tǒng)所拍攝的圖像的圖。
[0043] 圖19表示本發(fā)明的第四實(shí)施方式的攝影系統(tǒng)的構(gòu)成例的框圖。
[0044] 圖20是表示本發(fā)明的第四實(shí)施方式的攝影系統(tǒng)的設(shè)置環(huán)境的圖。
[0045] 圖21是進(jìn)行拍攝的房間的側(cè)視圖。
[0046] 圖22是進(jìn)行拍攝的房間的俯視圖。
[0047] 圖23是表示攝影系統(tǒng)中的處理的流程的流程圖。
[0048] 圖24是表示在圖20的環(huán)境中由第一攝像機(jī)拍攝的攝像機(jī)圖像的例子的圖。
[0049] 圖25是表示本實(shí)施方式的攝影系統(tǒng)的攝像機(jī)配置的圖。
[0050] 圖26是表示本發(fā)明的第四實(shí)施方式的攝影系統(tǒng)所拍攝的對象物的圖像的圖。
【具體實(shí)施方式】
[0051] 以下，參照【附圖說明】本發(fā)明的實(shí)施方式。此外，附圖表示遵照本發(fā)明的原理的具體 的實(shí)施方式和實(shí)施例，但是這些附圖是用于本發(fā)明的理解的圖，決不是用于對本發(fā)明進(jìn)行 限定解釋的附圖。
[0052](第一實(shí)施方式）
[0053] 參照【附圖說明】本發(fā)明的第一實(shí)施方式。此外，各圖中的各部的大小等是為了便于 理解而夸張地描述的大小關(guān)系，與實(shí)際的大小不同。
[0054] 圖1是表示本發(fā)明的第一實(shí)施方式的攝影系統(tǒng)的構(gòu)成圖的框圖。攝影系統(tǒng)100例 如由第一攝像機(jī)101、第二攝像機(jī)102、第三攝像機(jī)103這三臺攝像機(jī)和信息處理裝置104 構(gòu)成。信息處理裝置104包括：取得第一攝像機(jī)101、第二攝像機(jī)102和第三攝像機(jī)103拍 攝的圖像的圖像取得部110 ;根據(jù)圖像取得部110取得的圖像來檢測人臉的臉檢測部111 ; 從由臉檢測部111檢測出的臉中提取多個特征點(diǎn)的特征點(diǎn)提取部112 ;根據(jù)基于特征點(diǎn)提 取部112提取的多個特征點(diǎn)求得的特征量，檢測臉的表情的表情檢測部113 ;對于表情檢測 部113檢測出表情的臉，根據(jù)基于特征點(diǎn)提取部112提取的多個特征點(diǎn)求得的特征量，推 定臉的方向的臉方向推定部114 ;存儲有表示第一攝像機(jī)101、第二攝像機(jī)102、第三攝像機(jī) 103的位置關(guān)系的參數(shù)信息的參數(shù)信息存儲部116 ;根據(jù)由表情檢測部113檢測出表情的圖 像和由臉方向推定部114推定的臉方向，將參照存儲在參數(shù)信息存儲部116的參數(shù)信息而 選擇的圖像決定為保存攝像機(jī)圖像的保存攝像機(jī)圖像決定部115 ;和存儲由保存攝像機(jī)圖 像決定部115決定的圖像的圖像存儲部117。
[0055] 參數(shù)信息存儲部116和圖像存儲部117可以由HDD(HardDiskDrive)或閃存、或 者DRAM(DynamicRandomAccessMemory)這樣的半導(dǎo)體存儲裝置或磁存儲裝置構(gòu)成。在 本例中，表情檢測部113和臉方向推定部114分別包括根據(jù)由特征點(diǎn)提取部112提取的多 個特征點(diǎn)來分別計(jì)算關(guān)于表情或臉方向的特征量的特征量計(jì)算部113a、114a。
[0056] 作為本攝影系統(tǒng)的使用環(huán)境的一例，以圖2所示的環(huán)境為例進(jìn)行詳細(xì)說明。在圖 2中，攝影系統(tǒng)設(shè)置在房間120,信息處理裝置104通過LAN124(LocalAreaNetwork:局域 網(wǎng)）分別與設(shè)置在天花板上的第