图像处理装置、图像处理方法
【技术领域】
[0001]本发明涉及根据多个图像内的像素值的变动，指定对成为特征的时刻进行指定的图像处理装置、图像处理方法。
【背景技术】
[0002]以往，如日本特开2011 — 30669号公报所记载，已知从对做出一系列的摆动动作的被拍摄体进行拍摄的动态图像的数据指定出碰撞时的图像的装置。
[0003]然而，上述的专利文献I所记载的装置中，为了从动态图像的数据指定出一系列的摆动动作中的规定的时刻，需要多普勒传感器这样的特殊的设备。
[0004]本发明鉴于这样的状况而完成，其目的在于不使用特殊的设备而能够指定所希望的时刻。
【发明内容】
[0005]一种图像处理装置，其特征在于，具备:
[0006]取得连续地拍摄的多个图像的取得单元；
[0007]计算在通过上述取得单元取得的多个图像中共同的位置中的、该多个图像的沿着时间序列的像素值的变动值的第一计算单元；以及
[0008]基于通过上述第一计算单元计算出的像素值的变动值，从上述时间序列中的多个时刻根据规定的基准指定出两个时刻的第一指定单元。
[0009]一种图像处理方法，其特征在于，包含:
[0010]取得连续地拍摄的多个图像的取得步骤；
[0011]计算通过上述取得步骤取得的多个图像中共同的位置中的、该多个图像的沿着时间序列的像素值的变动值的计算步骤；以及
[0012]基于通过上述计算步骤计算出的像素值的变动值，从上述时间序列中的多个时刻根据规定的基准指定出两个时刻的指定步骤。
【附图说明】
[0013]图1是表示本发明的图像处理装置的一实施方式的拍摄装置的硬件的结构的框图。
[0014]图2A是用于说明本实施方式的被拍摄体的动作的指定方法的示意图。
[0015]图2B是用于说明本实施方式的被拍摄体的动作的指定方法的示意图。
[0016]图3是表示从开始位置附近到碰撞位置附近的评价值的时间序列的迀移的曲线。
[0017]图4是表示图1的拍摄装置的功能性结构中用于执行动态图像拍摄处理以及摆动动态图像生成处理的功能性结构的功能框图。
[0018]图5是说明具有图4的功能性结构的图1的拍摄装置所执行的动态图像拍摄处理的流程的流程图。
[0019]图6是说明具有图4的功能性结构的图1的拍摄装置所执行的摆动动态图像生成处理的流程的流程图。
[0020]图中:1一拍摄装置，11 一CPU，12 — R0M，13 — RAM，14一总线，15—输入输出接口，16—拍摄部，17一输入部，18一输出部，19一存储部，20一通彳目部，21一驱动器，31一可移动媒体，51—输出控制部，52—拍摄控制部，53—动态图像取得部，54—指定区域设定部，55—译码处理部，56—计算处理部，57—指定区域解析部，58—动态图像生成部，71—动态图像存储部，72—解析信息存储部。
【具体实施方式】
[0021 ] 以下，使用附图，对本发明的实施方式进行说明。
[0022]图1是表示本发明的图像处理装置的一实施方式的拍摄装置的硬件的结构的框图。
[0023]拍摄装置I例如构成为数码照相机。
[0024]拍摄装置I 具备 CPU (Central Processing Unit) IK ROM (Read Only Memory) 12、RAM (Random Access Memory) 13、总线14、输入输出接口 15、拍摄部16、输入部17、输出部18、存储部19、通信部20以及驱动器21。
[0025]CPUll按照记录在R0M12的程序或者从存储部19传到RAM13的程序执行各种处理。
[0026]在RAM13也适当地存储有CPUll执行各种处理时所需的数据等。
[0027]CPU1UR0M12以及RAM13经由总线14而相互连接。在该总线14还连接有输入输出接口 15。在输入输出接口 15连接有拍摄部16、输入部17、输出部18、存储部19、通信部20以及驱动器21。
[0028]虽未图示，但拍摄部16具备光学透镜部、图像传感器。
[0029]光学透镜部由为了拍摄被拍摄体而聚光的透镜例如聚焦透镜、变焦透镜等构成。
[0030]聚焦透镜是使被拍摄体像在图像传感器的受光面上成像的透镜。变焦透镜是能够使焦距在一定的范围内自如地变化的透镜。
[0031]在光学透镜部还根据需要，设置有对焦点、曝光、白平衡等的设定参数进行调整的周边电路。
[0032]图像传感器由光电转换元件、AFE (Analog Front End)等构成。
[0033]光电转换元件例如由CMOS (Complementary Metal Oxide Semiconductor)型的光电转换元件等构成。在光电转换元件上，从光学透镜部入射被拍摄体像。因此，光电转换元件将被拍摄体像进行光电转换(拍摄)而将图像信号积蓄一定时间，将积蓄的图像信号作为模拟信号顺次供给至AFE。
[0034]AFE对该模拟的图像信号执行A/D (Analog/Digital)转换处理等的各种信号处理。通过各种信号处理，生成数字信号，作为拍摄部16的输出信号输出。
[0035]以下将这样的拍摄部16的输出信号称为“拍摄图像的数据”。拍摄图像的数据适当地供给至CPUll等。
[0036]输入部17由各种按钮等构成，按照用户的指示操作输入各种信息。
[0037]输出部18由显示器、扬声器等构成，输出图像、声音。
[0038]存储部19由硬盘或者DRAM (Dynamic Random Access Memory)等构成，存储各种图像的数据。
[0039]通信部20控制经由包含因特网的网络而与其他的装置(未图示)之间进行的通
?目O
[0040]在驱动器21适当地安装有由磁盘、光盘、光磁盘或者半导体存储器等构成的可移动媒体31。
[0041]通过驱动器21而从可移动媒体31读取的程序根据需要而安装于存储部19。
[0042]另外，可移动媒体31也能够将存储于存储部19的图像的数据等的各种数据与存储部19相同地存储。
[0043]这样构成的拍摄装置I中，具有对包含被拍摄体的动作(本实施方式中，高尔夫球的摆动)的动画进行解析，从而能够生成由规定的动作的期间(本实施方式中，从摆动的开始位置至碰撞位置的期间)形成的动画(本实施方式中，摆动动画)的功能。
[0044]图2是用于说明本实施方式的被拍摄体的动作的指定方法的示意图。此外，图2Α是用于说明对进行摆动的被拍摄体从正面拍摄的情况的图。
[0045]图2Β是用于说明对进行摆动的被拍摄体从侧方拍摄的情况的图。
[0046]本实施方式中，如图2Α以及图2Β所示，在摆动的开始后和碰撞前高尔夫球球杆(详细而言，高尔夫球球杆的头)通过的位置上设置有用于指定对动态图像数据中的高尔夫球的摆动的刚开始之后的时刻和刚要碰撞之前的时刻进行指定的区域(以下，称为“指定区域”。)Η1、Η2。
[0047]高尔夫球的摆动中，需要考虑从与摆动的开始位置(地址位置)对应的时刻到与碰撞位置对应的时刻为止的期间，摆动成为往复运动。
[0048]在成为处理的对象的动态图像数据的帧中的开始位置至碰撞位置之间设置指定区域H1、Η2，从而能够在各指定区域H1、Η2中得到高尔夫球球杆的摆动的刚开始之后和刚要碰撞之前的计2次的指定机会。
[0049]通过该结构，与仅碰撞时刻指定进行I次指定的技术相比能够减少误指定。
[0050]这里，对高尔夫球球杆存在于指定的区域的帧图像数据的指定处理进行说明。
[0051 ] 指定区域中存在高尔夫球球杆的帧图像数据的指定，通过对构成动态图像数据的多个帧图像数据之间相邻的帧图像数据间进行比较，对高尔夫球球杆不存在于指定的区域的状态的帧图像数据和高尔夫球球杆存在于指定的区域的状态的帧图像数据的像素值的变化进行指定来进行。
[0052]S卩，在相邻的帧图像数据中的各指定区域间的各像素值的差值的总计在阈值以上的情况下，能够推断为在与该总计成为阈值以上的时刻对应的帧图像数据的指定区域存在高尔夫球球杆。
[0053]详细而言，本实施方式中，在作为指定区域的亮度值的像素值的差值即平方差之和(SSD:Sum of Squared Differences)(以下，称为“评价值”。)在阈值以上的情况下，将与该评价值成为阈值以上的时刻对应的帧图像数据推断为高尔夫球球杆存在于指定区域的帧图像数据的候补。
[0054]此外，在本实施方式中，阈值根据将在指定区域不存在高尔夫球球杆的状态下计算出的差值以规定的期间计算出的平均值而决定。
[0055]图3是表示从开始位置附近到碰撞位置附近的评价值的时间序列的迀移的曲线。
[0056]—般来说，在拍摄范围的开始位置到碰撞位置之间设置有指定区域的情况下，在高尔夫球摆动的开始位置附近到碰撞位置附近，如图3所示，由于在图像中产生的干扰，相邻的帧图像数据之间的评价值成为阈值以上的时刻到刚要成为小于阈值前的时刻为止的期间(以下，称为“区间”。)存在多个。
[0057]指定区域在本实施方式中设定在摆动的开始位置附近到碰撞位置附近的之间。
[0058]从多个区间指定的两个区间分别表示开始位置的紧后的区间和碰撞位置的紧前的区间。
[0059]因此，在与开始位置附近对应的帧图像数据和与碰撞位置附近对应的帧图像数据之间的帧图像数据群中，通过在指定的两个区间中，从代表前面的区间的时刻(例如，前面的区间中的评价值最高的时刻)的规定时间前开始到从代表后面的区间的时刻(前面的区间中的评价值最高的时