显示控制装置和摄像装置的制作方法

文档序号:13518713阅读:98来源:国知局
显示控制装置和摄像装置的制作方法

本发明涉及显示控制装置和摄像装置。

本申请根据2015年6月2日在日本申请的日本特愿2015-112314号主张优先权,并将其内容引用于此。



背景技术:

在数字照相机等对图像进行摄像的摄像装置中,存在如下的摄像装置:对表示进行摄像而得到的图像的图像数据进行各种图像处理,使显示器等显示装置显示表示通过图像处理而得到的显示图像数据的显示图像。例如,在图7所示的例子中,图像处理部940根据来自摄像部920(图9)的图像数据,生成根据用途进行尺寸调整后的动态图像数据、显示图像数据1和显示图像数据2,并将它们存储在存储器中。动态图像压缩部950将对从存储器读出的显示图像数据1进行动态图像压缩处理而得到的压缩图像数据存储在存储器中。显示控制部970-1、970-2将显示图像数据1、2分别输出到显示装置20-1、20-2。

当针对存储器并列进行大量数据的读写时,很难确保连接存储器和各结构要素的dma总线(directmemoryaccessbus:直接内存存取总线、未图示)的频带,因此,有时产生延迟和拥塞。例如,在4k2k尺寸(水平方向3840像素×垂直方向2160像素)的动态图像的记录中,有时使显示装置20-1显示显示图像。这是因为,当分别针对存储器进行图像处理部940生成的动态图像数据和显示图像数据1的读写时,经由dma总线传送的dma总线传输数据增加。为了削减dma传输数据,例如如图8所示,图像处理部940不生成显示图像数据1,显示控制部970-1将从存储器读入的动态图像数据输出到显示装置20-1。

另一方面,近年来,具有边缘锐化功能的数字照相机正在普及。边缘锐化意味着如下图像处理:在图像数据中通过高通滤波器(hpf:high-passfilter)而检测到的边缘区域中,将规定边缘强调颜色叠加在该图像数据所表示的图像上。使显示装置显示通过边缘锐化而得到的边缘图像,由此,对用户通知进行摄像而得到的图像中的估计为对焦的位置。

例如,专利文献1所记载的摄像装置具有锐化信号生成部,其根据输入影像信号生成锐化信号;操作部,其受理进行基于锐化信号的轮廓校正的对象区域的指定、以及控制部,其生成记载了与所指定的区域对应的位置信息的区域门信号。该摄像装置具有掩模处理部,该掩模处理部根据区域门信号,输出在所指定的对象区域中加上锐化信号而得到的影像信号。

现有技术文献

专利文献

专利文献1:日本特开2009-231918号公报



技术实现要素:

发明要解决的课题

如图8所例示的那样,通过执行边缘锐化处理而得到的显示图像数据还被用作压缩、记录中使用的动态图像数据。如图9所示,不仅是针对显示控制部970-1、970-2的显示图像数据所表示的显示图像,还在输出到动态图像压缩部950的动态图像数据所表示的图像中叠加边缘图像。另一方面,如图10所例示的那样,为了从显示控制部970-1、970-2输出叠加了边缘图像的显示图像数据,各个显示控制部970-1、970-2均需要执行边缘锐化处理的边缘锐化处理电路、以及行存储器,该行存储器存储用于对与所生成的边缘图像叠加的定时进行调整的动态图像数据。因此,存在硬件规模增加、与现有的数字照相机相比显示控制部970-1、970-2的消耗电力也有所增加的课题。

本发明是根据上述课题而完成的,其目的在于,提供显示控制装置和摄像装置,能够避免通过滤波处理而生成的图像的记录,同时抑制硬件规模的增加。

用于解决课题的手段

根据本发明的第一方式,显示控制装置具有:多个图像数据处理部,它们取得图像数据,与同步信号同步地输出所述图像数据;同步信号生成部,其生成所述同步信号,与第二图像数据处理部相比,提前规定的偏置时间对第一图像数据处理部输出所述同步信号,所述第一图像数据处理部是所述多个图像数据处理部中的一部分,所述第二图像数据处理部是其他图像数据处理部;延迟调整部,其按照每行使来自所述第一图像数据处理部的第一图像数据延迟;滤波处理部,其对来自所述延迟调整部的所述第一图像数据进行滤波处理,而生成滤波处理数据;以及显示图像生成部,其叠加所述滤波处理数据和来自所述第二图像数据处理部的第二图像数据,而生成显示图像数据,所述偏置时间是抵消与所述滤波处理数据的生成有关的延迟时间的时间。

根据本发明的第二方式,在上述第一方式的显示控制装置中,所述滤波处理部可以进行规定的抽头数的滤波系数与延迟了分别对应的延迟时间的来自所述延迟调整部的所述第一图像数据的积和运算,作为所述滤波处理。所述偏置时间可以是与所述抽头数和行周期对应的时间。

并且,根据本发明的第三方式,在上述第一方式或第二方式的显示控制装置中,所述同步信号生成部可以根据是否需要所述滤波处理,控制是否提前规定所述偏置时间对所述第一图像数据处理部输出所述同步信号。

根据本发明的第四方式,在上述第一方式~第三方式中的任意一个方式的显示控制装置中,所述第一图像数据可以包含多个部分图像数据。所述第一图像数据处理部可以输出与所述多个部分图像数据各自的同步信号同步的所述多个部分图像数据。所述同步信号生成部可以将所生成的所述同步信号作为所述多个部分图像数据的一部分即第一部分图像数据的所述同步信号,与所述多个部分图像数据的另外一部分即第二部分图像数据的所述同步信号相比,提前规定的偏置时间输出到所述第一图像数据处理部。所述延迟调整部可以按照每行使来自所述第一图像数据处理部的所述第一部分图像数据延迟。所述滤波处理部可以对来自所述延迟调整部的所述第一部分图像数据进行滤波处理,而生成所述滤波处理数据。所述显示图像生成部可以在所述滤波处理数据中还叠加来自所述第一图像数据处理部的所述第二部分图像数据,而生成显示图像数据。

根据本发明的第五方式,在上述第一方式~第四方式中的任意一个方式的显示控制装置中,所述同步信号可以按照每帧包含垂直同步信号,所述偏置时间是不超过具有所述垂直同步信号的垂直回扫期间的范围。

根据本发明的第六方式,摄像装置具有上述第一方式~第五方式中的任意一个方式的显示控制装置。

发明效果

根据上述各方式,能够提供如下的显示控制装置和摄像装置:能够避免通过滤波处理而生成的图像的记录同时抑制硬件规模的增加,并能够抑制消耗电力的增加。

附图说明

图1是示出第1实施方式的摄像系统的结构的概略框图。

图2是示出第1实施方式的显示控制部的整体结构的概略框图。

图3是示出第1实施方式的显示控制部的一部分结构的概略框图。

图4是示出输出数据的一例的时序图。

图5是示出输出数据的另一例的时序图。

图6是示出第2实施方式的显示控制部的结构的概略框图。

图7是示出现有的摄像系统中的处理流程的一例的概念图。

图8是示出现有的摄像系统中的处理流程的另一例的概念图。

图9是示出来自现有的摄像系统的各结构要素的输出数据的一例的概念图。

图10是示出来自现有的摄像系统的各结构要素的输出数据的另一例的概念图。

具体实施方式

<第1实施方式>

接着,参照附图对本发明的实施方式进行说明。

图1是示出本发明的第1实施方式的摄像系统1的结构的概略框图。摄像系统1构成为包含摄像装置10和2个显示装置20-1、20-2。摄像装置10构成为包含图像传感器110、摄像部120、sdram(synchronousdynamicrandomaccessmemory:同步动态随机存储器)130、图像处理部140、动态图像压缩部150、dma控制器160、2个显示控制部170-1、170-2和控制部180。

图像传感器110是对通过镜头(未图示)形成在摄像面上的被摄体的光学像进行摄像的摄像元件。在图像传感器110中,在二维摄像面上配置有多个受光元件(像素),进而粘贴具有拜耳排列(bayerarrangement)的滤色器。各个受光元件通过光电转换将所入射的光转换为电信号即像素信号,将转换后的像素信号输出到摄像部120。图像传感器110例如是ccd(chargecoupleddevice;电荷耦合元件)图像传感器、cmos(complementarymetal-oxidesemiconductor;互补型金属氧化膜半导体)图像传感器等。

摄像部120根据来自控制部180的摄像开始信号的取得,开始进行对焦(focusing、焦点调节)和曝光。摄像部120通过对焦,将镜头的位置调节到被摄体的光学像中的至少一部分形成在图像传感器110的摄像面上的位置。摄像部120通过曝光,按照规定时间(例如1/30秒)对从摄像元件111输入的模拟像素信号进行取样。摄像部120对取样得到的像素信号进行模拟/数字(a/d:analog-to-digital)转换,生成摄像图像数据。该时点生成的摄像图像数据是表示各帧的拜耳图像的数据。摄像部120将所生成的摄像图像数据存储在sdram130中。

sdram130是存储部,存储摄像装置10所具有的结构要素执行的处理中使用的各种数据、通过这些处理而生成的各种数据。sdram130构成为包含存储介质。存储介质能够与摄像装置10的其他结构要素(例如显示控制部170-1)进行的处理同步地,经由dma总线190进行各种数据的存储和读出。

图像处理部140读出sdram130中新存储的摄像图像数据,对所读出的摄像图像数据进行规定图像处理。规定图像处理例如包含γ校正、yc转换、畸变校正、噪声去除等处理。γ校正是对每个像素的信号值进行校正使得亮度的变化相对于每个像素的信号值的变化恒定的处理。yc转换是针对通过γ校正而生成的摄像图像数据生成亮度图像数据(y图像数据)和色差图像数据(c图像数据)的处理。色差图像数据包含表示cb(色差:蓝色)图像的cb图像数据和表示cb(色差:蓝色)图像的cb图像数据。在以下的说明中,只要没有特别说明,则将图像处理部140生成的各种图像数据总称为图像数据。畸变校正是针对通过yc转换而生成的图像数据对由于光学系统等而产生的畸变导致的每个像素的坐标的偏移进行校正的处理。噪声去除是针对进行了畸变校正后的图像数据去除或抑制信号值中叠加的噪声成分的处理。

图像处理部140按照每个用途独立地将进行规定图像处理而生成的图像数据所表示的图像的尺寸调整为规定大小,生成各个用途的图像数据。在所生成的图像数据中包含作为动态图像压缩部150中的动态图像压缩对象的图像数据1和图像数据3。图像数据1被输出到显示控制部170-1。图像数据3从显示控制部170-2输出。图像处理部140将所生成的图像数据1、3存储在sdram130中。有时从显示控制部170-1并行地读取图像数据1。有时通过将并行读取的多个系统的图像数据1称为图像数据2等来进行区分。

动态图像压缩部150读出sdram130中存储的图像数据1。动态图像压缩部150使用规定动态图像压缩方式对所读出的图像数据1进行动态图像压缩处理,生成压缩图像数据。规定动态图像压缩方式例如是通过iso/iec23008-2hevc(highefficiencyvideocoding:高效视频编码)进行标准化的方式。动态图像压缩部150将所生成的压缩图像数据存储在sdram130中。

dma控制器160对与dma总线190连接的结构要素之间的数据的输入和输出进行控制。例如,在从显示控制部170-1输入dma请求信号时,dma控制器160将dma请求受理信号输出到请求方的显示控制部170-1。dma请求受理信号表示dma请求信号的受理。接着,dma控制器160判定是否能够从sdram130读出由dma请求信号指定的数据。在dma请求信号中,指定数据的种类、数据量等信息。dma控制器160在判定为能够读出时,将dma使能信号输出到请求方的显示控制部170-1。dma使能信号表示能够从sdram130读出由dma请求信号指定的数据。dma控制器160以所指定的信息量从sdram130读出由dma请求信号指定的种类的数据。dma控制器160生成包含所读出的数据的dma传输数据1,将所生成的dma传输数据1输出到请求方的显示控制部170-1。

显示控制部170-1生成同步信号,与所生成的同步信号同步地从sdram130读出新存储的图像数据1和与其相同的图像数据2。显示控制部170-1对所读出的图像数据2进行规定滤波处理,生成滤波处理数据。显示控制部170-1例如进行边缘锐化处理作为规定滤波处理,生成表示边缘图像的边缘图像数据作为滤波处理数据。显示控制部170-1同步地叠加图像数据1所表示的图像和滤波处理数据所表示的图像。显示控制部170-1生成表示叠加后的显示图像1的显示图像数据1。显示控制部170-1将所生成的显示图像数据1输出到显示装置20-1。

显示控制部170-2从sdram130读出新存储的图像数据3。显示控制部170-2将所读出的图像数据3作为显示图像数据2输出到显示装置20-2。

显示控制部170-1、170-2例如是数据输出接口。显示控制部170-1的结构在后面叙述。

控制部180对摄像装置10的结构要素的动作进行控制。控制部180进行根据用户的操作输入而指示的功能的处理的开始、结束、各结构要素的处理中使用的参数的设定、处理的定时的控制等。控制部180的控制的具体例在控制对象的结构要素的说明中进行叙述。

dma总线190连接摄像部120、sdram130、图像处理部140、动态图像压缩部150、显示控制部170-1、170-2和控制部180,在这些结构要素之间输入和输出各种数据。各种数据的输入和输出由dma控制器160来控制。

显示装置20-1显示从显示控制部170-1输入的显示图像数据1所表示的显示图像1。显示装置20-2显示从显示控制部170-2输入的显示图像数据2所表示的显示图像2。显示装置20-1、20-2分别是具有显示装置等显示器件的电子设备,所述显示装置等显示器件显示基于各种图像数据的图像。显示装置20-1例如是电视接收装置(tv)。显示装置20-2例如是数字照相机90内置的tft(thinfilmtransistor:薄膜晶体管)液晶显示器或电子实时取景器(evf:electronicviewfinder)。

(显示控制部的结构)

接着,对显示控制部170-1的结构进行说明。

图2是示出本实施方式的显示控制部170-1的整体结构的概略框图。显示控制部170-1构成为包含同步信号生成部171、2个图像数据处理部172、173、延迟调整部174、滤波处理部175和显示图像生成部176。

同步信号生成部171生成表示显示控制部170-1的动作定时的基准的同步信号。所生成的同步信号被用作用于供图像数据处理部172、173分别读出图像数据1、2的定时的基准。在同步信号中包含垂直同步信号vd和水平同步信号hd。垂直同步信号vd是插入到构成动态图像的各帧的图像的开头的信号。水平同步信号hd是插入到构成各帧的图像的各行的开头的信号。因此,以帧周期设定垂直同步信号vd,以行周期设定水平同步信号hd。同步信号生成部171将所生成的同步信号作为同步信号1输出到图像数据处理部172,将所生成的同步信号作为同步信号2输出到图像数据处理部173。同步信号1的输出定时是比同步信号2的输出定时提前规定的偏置时间的时刻。规定的偏置时间是抵消与滤波处理部175生成基于图像数据1的滤波处理数据1(后述)有关的延迟时间的时间。

图像数据处理部172与来自同步信号生成部171的同步信号1同步地从sdram130逐次读出图像数据1。图像数据处理部172将所读出的图像数据1输出到延迟调整部174。图像数据处理部172与同步信号1同步地生成图像数据使能信号1,将其输出到延迟调整部174。图像数据使能信号1表示能够利用图像数据1。图像数据处理部172构成为包含fifo写入(first-infirst-outwrite:先进先出写入)控制部1721、fifo读取(fiforead)控制部1722、fifo缓存器1723、数据排列转换部1724和数据使能生成部1725。

fifo写入控制部1721与来自同步信号生成部171的同步信号1同步地,控制来自sdram130的图像数据1的读出以及针对fifo缓存器1723的写入(记录)。具体而言,fifo写入控制部1721反复进行以下的处理s01-s08。(s01)fifo写入控制部1721判定是否根据同步信号1检测到表示各帧的开头的垂直同步信号vd。fifo写入控制部1721在检测到垂直同步信号vd时进入s02的处理,在未检测到垂直同步信号vd时反复进行s01的处理。(s02)fifo写入控制部1721生成dma请求信号1,将所生成的dma请求信号1输出到dma控制器160。dma请求信号1指示还未读取的图像数据1。dma请求信号1指示的数据量是比与1行相当的数据量少的数据量、例如表示规定个数的每个像素的信号值的数据量。(s03)fifo写入控制部1721在从dma控制器160输入dma请求受理信号作为应答时,检测fifo缓存器1723中存储的数据的数据量。(s04)fifo写入控制部1721判定检测到的数据量是否到达充满状态(全状态)。充满状态(全状态)是通过存储来自dma控制器160的图像数据1而达到fifo缓存器1723中能够存储的容量的上限的状态。(s05)fifo写入控制部1721在从dma控制器160输入dma数据使能信号1时,在fifo缓存器1723的开头的存储区域内存储来自dma控制器160的图像数据1(dma传输数据1)。(s06)fifo写入控制部1721在判定为未达到全状态时,反复进行s02-s05的处理。(s07)fifo写入控制部1721在判定为达到全状态时,停止s02-s05的处理,进入s08的处理。(s08)在从fifo读取控制部1722输入表示图像数据1的读出的数据读出信号时,fifo写入控制部1721返回s02的处理。

fifo读取控制部1722与来自同步信号生成部171的同步信号1同步地,控制fifo缓存器1723中存储的图像数据1的读出。具体而言,fifo读取控制部1722反复进行以下的处理s11-s13。(s11)fifo读取控制部1722判定是否根据同步信号1检测到表示各行的开头的水平同步信号hd。fifo读取控制部1722在判定为检测到水平同步信号hd时,进入s12的处理。fifo读取控制部1722在判定为未检测到水平同步信号hd时,反复进行s11的处理(等待)。(s12)fifo读取控制部1722将fifo缓存器1723中最初存储的图像数据1输出到数据排列转换部1724。fifo读取控制部1722一次输出的图像数据1的数据量是与1行相当的数据量或比该数据量少的数据量。(s13)fifo读取控制部1722生成表示读出了图像数据1的数据读出信号,将其输出到fifo缓存器1723。然后,进入s11的处理。

fifo缓存器1723是暂时存储所输入的数据、优先输出所存储的数据中的输入时刻早的数据的存储介质。fifo缓存器1723根据来自fifo写入控制部1721的控制,依次存储所输入的来自dma控制器160的图像数据1。fifo缓存器1723根据来自fifo读取控制部1722的数据读出信号的输入,将所存储的图像数据1依次输出到数据排列转换部1724。fifo缓存器1723删除已输出的图像数据1,确保新的图像数据1的存储区域。

数据排列转换部1724将每个像素的信号值的数据排列转换为与显示图像中配置的像素的顺序(光栅扫描顺序)对应的数据排列。每个像素的信号值的数据排列形成从fifo缓存器1723输入的图像数据1。数据排列转换部1724按照每行将对数据排列进行转换后的图像数据1输出到延迟调整部174。

数据使能生成部1725与来自同步信号生成部171的同步信号1同步地生成数据使能信号1。数据使能信号1表示能够利用从数据排列转换部1724输出的图像数据1。具体而言,数据使能生成部1725反复进行以下的处理s21、s22。(s21)数据使能生成部1725判定是否根据同步信号1检测到表示各行的开头的水平同步信号hd。fifo读取控制部1722在检测到水平同步信号hd时进入s22的处理。fifo读取控制部1722在未检测到水平同步信号hd时反复进行s21的处理(等待)。(s22)数据使能生成部1725将数据使能信号1输出到延迟调整部174。数据使能信号1生成数据排列转换部1724对数据排列进行转换而得到的每行的图像数据1。然后,数据使能生成部1725返回s21的处理。

图像数据处理部173与来自同步信号生成部171的同步信号2同步地从sdram130逐次读出与图像数据1相同的图像数据2,将其输出到延迟调整部174。图像数据处理部173与同步信号2同步地生成图像数据使能信号2,将其输出到显示图像生成部176。图像数据使能信号2表示能够利用图像数据2。图像数据处理部173构成为包含fifo写入控制部1731、fifo读取控制部1732、fifo缓存器1733、数据排列转换部1734和数据使能生成部1735。fifo写入控制部1731、fifo读取控制部1732、fifo缓存器1733、数据排列转换部1734和数据使能生成部1735的结构分别与fifo写入控制部1721、fifo读取控制部1722、fifo缓存器1723、数据排列转换部1724和数据使能生成部1725的结构相同。

从图像数据处理部172对延迟调整部174输入图像数据使能信号1和图像数据1。延迟调整部174与图像数据使能信号1同步地以行单位进行图像数据1的延迟,生成2n+1(n为1以上的自然数)行的图像数据1。延迟调整部174将2n+1行的图像数据1输出到滤波处理部175。在2n+1个延迟时间中还包含延迟时间0(未延迟)。

从图像数据处理部172对滤波处理部175输入图像数据使能信号1,从延迟调整部174对滤波处理部175输入2n+1个延迟时间的图像数据1。滤波处理部175与图像数据使能信号1同步地以行单位对2n+1行的图像数据1进行滤波处理,生成滤波处理数据1。滤波处理部175将所生成的滤波处理数据1输出到显示图像生成部176。滤波处理部175的滤波处理在后面叙述。

从滤波处理部175对显示图像生成部176输入图像数据使能信号1和滤波处理数据1。从图像数据处理部173对显示图像生成部176输入图像数据使能信号2和图像数据2。显示图像生成部176与图像数据使能信号1、2同步地叠加滤波处理数据1所表示的图像和图像数据2所表示的图像。显示图像生成部176生成表示叠加后的图像的显示图像数据1。显示图像生成部176将所生成的显示图像数据1输出到显示装置20-1。

(滤波处理、叠加)

接着,对滤波处理部175中的滤波处理和显示图像生成部176中的叠加处理进行说明。

图3是示出本实施方式的显示控制部170-1的一部分结构的概略框图。在图3中省略同步信号生成部171、图像数据处理部172、173和图像数据使能信号1、2的图示。在以下的说明中,以滤波处理部175进行的滤波处理是包含使用一维的5抽头(n=2)的滤波系数的积和运算的边缘锐化处理的情况为例进行说明。

延迟调整部174构成为包含4个行存储器1741-1~1741-4。行存储器1741-1~1741-4是分别按照每行存储图像数据1的存储介质。如上所述,按照每行对延迟调整部174输入图像数据使能信号1。在检测到图像数据使能信号1的输入时,行存储器1741-1~1741-4将分别存储的图像数据1输出到滤波处理部175。然后,行存储器1741-1~1741-3将分别存储的图像数据1转移到行存储器1741-2~1741-4。行存储器1741-1存储从图像数据处理部172新输入的图像数据1。该新输入的图像数据1进而被输出到滤波处理部175。因此,延迟调整部174将延迟了0~4行周期的图像数据1作为以行单位延迟的图像数据1分别输出到滤波处理部175。

滤波处理部175构成为包含滤波运算部1751、2个选择器1752、1753。在检测到从图像数据处理部172输入图像数据使能信号1时,从延迟调整部174对滤波运算部1751输入以行单位延迟的图像数据1。对选择器1752输入未延迟的图像数据1和延迟了2行的图像数据1。

从控制部180(参照图1)对滤波运算部1751设定具有表示是否进行滤波处理的值的滤波处理有效标志。滤波处理有效标志的值为1表示进行滤波处理,该值为0表示不进行滤波处理。在设定了值为1的滤波处理有效标志的情况下,滤波运算部1751针对以行单位延迟的图像数据1,使用由控制部180设定的每行的滤波系数进行积和运算。

滤波运算部1751作为5抽头滤波器发挥功能。即,滤波运算部1751将所设定的5个滤波系数与延迟了0~4行周期的图像数据1所表示的每个像素的信号值分别相乘。然后,滤波运算部1751针对通过相乘而得到的每个像素的乘法值,按照每个像素计算行之间的总和。滤波运算部1751作为如下的高通滤波器发挥作用:根据所设定的滤波系数,与空间频率更低的低频成分相比,使空间频率高于规定频率的高频成分穿过更多。作为表示高频成分的数据,得到与图像数据1相比延迟了2行周期的延迟时间的数据。2行周期的延迟时间是0~4行周期的延迟的中央值。滤波运算部1751生成通过取总和而得到的数据置换标志。数据置换标志表示每个像素的信号值是否大于规定信号值的阈值。针对信号值大于该阈值的像素,数据置换标志所表示的值为1,针对除此以外的像素,数据置换标志所表示的值为0。即,由数据置换标志所表示的值为1的像素构成的区域表示图像数据1中高频成分为主的边缘的区域。滤波运算部1751将所生成的数据置换标志输出到选择器1753。

在滤波处理有效标志的值为0的情况下,滤波运算部1751不进行滤波处理。该情况下,不生成数据置换标志。

从控制部180输入滤波处理有效标志。选择器1752在滤波处理有效标志所表示的值为0的情况下,选择未延迟的图像数据1。选择器1752在滤波处理有效标志所表示的值为1的情况下,选择延迟了2行周期的图像数据1。该2行周期的延迟与由于上述滤波处理而引起的延迟时间相当。选择器1752将选择出的图像数据1输出到选择器1753。在不进行滤波处理的情况下,选择未经由行存储器1741-1~1741-4而延迟的图像数据1。因此,能够停止对行存储器1741-1~1741-4供给电力,能够抑制不必要的电力消耗。

选择器1753选择图像数据1所表示的每个像素的信号值中数据置换标志所表示的值为1的像素。从选择器1752输入图像数据1。从滤波运算部1751输入数据置换标志。选择器1753将选择出的像素的信号值置换为给出从控制部180输入的规定图像数据置换颜色(例如橙色)的信号值。因此,未选择的像素维持信号值。选择器1753将如下滤波处理数据1输出到显示图像生成部176,该滤波处理数据1表示置换后的每个像素的信号值和除此以外的每个像素的信号值。

按照每行对显示图像生成部176输入图像数据使能信号1、2(参照图2)。在检测到图像数据使能信号1的输入时,从滤波处理部175对显示图像生成部176输入滤波处理数据1。在检测到图像数据使能信号2的输入时,从图像数据处理部173(参照图2)对显示图像生成部176输入图像数据2。显示图像生成部176对图像数据2进行基于滤波处理数据1的叠加处理,生成显示图像数据1。显示图像生成部176按照每个像素判定图像数据2所表示的信号值和滤波处理数据1所表示的信号值是否相等。显示图像生成部176将判定为不同的像素的图像数据2所表示的信号值置换为滤波处理数据1所表示的该像素的信号值。显示图像生成部176将表示置换后的信号值的显示图像数据1输出到显示装置20-1。

(数据的定时)

接着,使用图4、5对来自显示控制部170-1的各结构要素的输出数据的定时进行说明。图4、5均以同步信号生成部171输出垂直同步信号vd和水平同步信号hd作为同步信号1、2的情况为例进行说明。图4以同时输出同步信号1、2的情况为例进行说明,图5以与同步信号2相比提前2行输出同步信号1的情况为例进行说明。但是,图5中未示出同步信号1。图4、5的第1行所示的垂直同步信号vd是利用比其他区间中的规定电压(相当于高电压值(h))低的低电压值(l)表示各帧的开头的信号。第2行所示的水平同步信号hd是利用低电压值(l)表示各行的开头、利用高电压值(h)表示除此以外的部分的信号。垂直同步信号vd配置在垂直回扫期间t3内。垂直回扫期间t3是图像数据1的各帧的开头不包含表示每个像素的信号值的数据的期间。垂直回扫期间t3也被称为垂直消隐期间。垂直回扫期间t3被其前后包含属于相互不同的帧的每个像素的信号值的期间夹着。在图4、5所示的例子中,dma传输数据1、2、图像数据1、2和行存储器1741-1~1741-4分别利用高电压值(h)表示示出有意义信号值的数据的部分,利用低电压值(l)表示除此以外的部分。

图4、5的区间t1在帧的开头处开始。区间t1是dma传输数据1的高电压值(h)反复的区间。该反复表示直到fifo缓存器1723达到全状态为止,fifo写入控制部1721先行反复进行s02-s05的处理。

在时刻t0紧后开始的区间t2中,图像数据处理部172从fifo缓存器1723经由数据排列转换部1724输出第1行的图像数据1。此时,在fifo缓存器1723中产生空闲区域。直到fifo缓存器1723达到全状态为止,fifo写入控制部1721反复进行s02-s05的处理。然后,在下一行的区间中,从延迟调整部174的行存储器1741-1输出第1行的图像数据1,从图像数据处理部172输出第2行的图像数据1。直到fifo缓存器1723达到全状态为止,fifo写入控制部1721反复进行s02-s05的处理。在进一步反复进行了3行的一连串处理的时点,从延迟调整部174输出第1~5行的图像数据1。

在图4所示的例子中,与图像数据处理部172输出图像数据1的定时同步地,图像数据处理部173输出图像数据2。显示图像生成部176叠加来自图像数据处理部173的图像数据2和滤波处理数据1。滤波处理数据1是根据与图像数据2相比延迟了2行周期的图像数据1而生成的。例如,在区间t4中,输出滤波处理数据1,并且从图像数据处理部173输出第5行的图像数据2。滤波处理数据1是根据从延迟调整部174的行存储器1741-2输出的第3行的图像数据1而生成的。

在本实施方式中,与图像数据处理部173相比,同步信号生成部171以作为规定的偏置时间的与2行周期相当的时间先行对图像数据处理部172输出同步信号1。因此,在比时刻t0提前2行周期的时刻t0’,图像数据处理部172开始输出图像数据1。由此,能够使来自图像数据处理部173的图像数据2和基于图像数据1的滤波处理数据1的叠加的定时一致,而不用额外具有定时调整用的行存储器。例如,在区间t4中,从延迟调整部174的行存储器1741-2输出第5行的滤波处理数据1,从图像数据处理部173输出第5行的图像数据2。并且,即使提前2行周期,同步信号1中包含的垂直同步信号vd也包含在图像数据2中未配置每个像素的信号值的垂直回扫期间t3内,所以,图像数据处理部172、173能够对表示共通的帧的图像的图像数据1、2进行处理。

在上述例子中,以n=2的情况为例进行了说明,但是不限于此。n为1以上的自然数即可,可以是1,还可以是3以上。但是,关于给出n的偏置时间,优选要求同步信号1的垂直同步信号vd不超过同步信号2的垂直回扫期间t3。通过使同步信号1的垂直同步信号vd在同步信号2的垂直回扫期间t3内,由此,在图像数据处理部172、173之间,处理对象的图像数据1、2的帧是共通的,能够避免不同的帧之间的处理。

如以上说明的那样,本实施方式的摄像装置10的显示控制部170-1具有多个图像数据处理部172、173,这多个图像数据处理部172、173取得图像数据1、2,与同步信号1、2同步地分别输出图像数据1、2。显示控制部170-1具有同步信号生成部171,该同步信号生成部171生成同步信号1、2,与同步信号2的输出目的地即图像数据处理部173相比,提前规定偏置时间对图像数据处理部172输出所生成的同步信号1。偏置时间是抵消与根据图像数据1生成滤波处理数据1有关的延迟时间的时间。显示控制部170-1按照每行使来自图像数据处理部172的图像数据1延迟。显示控制部170-1具有滤波处理部175,该滤波处理部175对来自延迟调整部174的图像数据1进行滤波处理,生成滤波处理数据1。显示控制部170-1具有显示图像生成部176,该显示图像生成部176叠加滤波处理数据1和来自图像数据处理部173的图像数据2,生成显示图像数据1。

在图4所示的例子中,还考虑显示控制部170-1在图像数据处理部173中具有图像数据2的定时调整用的行存储器的情况,但是,电力消耗量增加。根据本实施方式的显示控制部170的结构,能够使定时一致来叠加图像数据2和滤波处理数据1,而不具有图像数据2的定时调整用的行存储器。因此,能够避免记录通过滤波处理而生成的滤波处理数据1,同时抑制硬件规模的增加。显示控制部170-1通过省略图像数据2的定时调整用的行存储器,能够降低消耗电力。

在显示控制部170-1中,滤波处理部175进行规定的抽头数(2n+1个)的滤波系数与延迟了分别对应的延迟时间后的图像数据1的积和运算,作为滤波处理。偏置时间是相当于与行周期的抽头数对应的n倍的时间。

根据该结构,由于行单位的积和运算而产生的行周期的n倍的延迟和偏置时间抵消。因此,能够使定时一致来叠加图像数据2和通过积和运算而得到的滤波处理数据1,而不具有图像数据2的定时调整用的行存储器。

在显示控制部170-1中,同步信号生成部171根据是否需要滤波处理部175中的滤波处理,控制是否与输出到图像数据处理部173相比提前规定偏置时间将所生成的同步信号输出到图像数据处理部172。

根据该结构,能够使图像数据2和与是否需要滤波处理无关地从滤波处理部175取得的图像数据1或滤波处理数据1的定时一致,而不具有图像数据2的定时调整用的行存储器。在不进行滤波处理的情况下,通过停止构成延迟调整部174的行存储器的动作,能够降低消耗电力。

同步信号生成部171生成的同步信号1、2按照每帧具有垂直同步信号vd。关于给出同步信号1的输出定时的偏置时间,要求同步信号1的垂直同步信号vd不超过垂直回扫期间。垂直回扫期间是图像数据2中包含垂直同步信号vd且不具有每个像素的信号值的区间。

根据该结构,在处理对象的图像数据处理部172、173之间,在图像数据1、2之间,处理对象的帧是共通的,能够避免帧不同的图像数据1、2之间的处理。

<第2实施方式>

接着,对本实施方式的第2实施方式进行说明。对与第1实施方式相同的结构标注相同标号并引用其说明。

本实施方式的摄像装置10a(未图示)在摄像装置10中代替显示控制部170-1而具有显示控制部170a-1。

图6是示出本实施方式的显示控制部170a-1的结构的概略框图。

显示控制部170a-1构成为包含图像数据处理部172a、173、延迟调整部174、滤波处理部175和显示图像生成部176。

图像数据处理部172a构成为包含fifo写入控制部1721、1721a、fifo读取控制部1722、1722a、fifo缓存器1723、1723a、数据排列转换部1724、1724a和数据使能生成部1725、1725a。

以构成图像数据1的2个颜色信息数据11、12分别存储在srdam13的不同存储区域中的情况为例进行说明。图像数据1例如是yc420面顺次数据,颜色信息数据11、12是cb图像数据、cr图像数据。

同步信号生成部171将所生成的同步信号作为同步信号11输出到fifo写入控制部1721、fifo读取控制部1722和数据使能生成部1725。同步信号生成部171将所生成的同步信号作为同步信号12输出到fifo写入控制部1721a、fifo读取控制部1722a和数据使能生成部1725a。同步信号生成部171输出同步信号11的定时是比输出同步信号12、2的定时提前规定偏置时间的时刻。

fifo写入控制部1721、fifo读取控制部1722、fifo缓存器1723、数据排列转换部1724和数据使能生成部1725分别具有与fifo写入控制部1721a、fifo读取控制部1722a、fifo缓存器1723a、数据排列转换部1724a和数据使能生成部1725a相同的结构。但是,fifo写入控制部1721、1721a、1731分别将dma请求信号11、dma请求信号12、dma请求信号2输出到dma控制器160(参照图1)。dma请求信号11指示颜色信息数据11。dma请求信号12指示颜色信息数据12。dma请求信号2指示图像数据2。

对fifo写入控制部1721分别输入dma请求受理信号11、dma数据使能信号11作为dma请求信号11的应答。对fifo写入控制部1721a分别输入dma请求受理信号12、dma数据使能信号12作为dma请求信号12的应答。对fifo写入控制部1731分别输入dma请求受理信号2、dma数据使能信号2作为dma请求信号2的应答。在fifo缓存器1723、1723a、1733中分别存储有从sdram130读出的dma传输数据11、12、2。与同步信号11同步地,从fifo缓存器1723经由数据排列转换部1724输出颜色信息数据11。与同步信号12同步地,从fifo缓存器1723a经由数据排列转换部1724a输出颜色信息数据12。与同步信号2同步地,从fifo缓存器1733经由数据排列转换部1734输出图像数据2。颜色信息数据11在延迟调整部174中以行单位进行延迟,是滤波处理部175的滤波处理的对象。显示图像生成部176在滤波处理部175生成的滤波处理数据11中叠加来自图像数据处理部172a的颜色信息数据12和来自图像数据处理部173的图像数据2,而生成显示图像数据。

如以上说明的那样,在本实施方式中,图像数据1包含多个颜色信息数据11、12。图像数据处理部172a将与同步信号11同步的颜色信息数据11输出到延迟调整部174,将与同步信号12同步的颜色信息数据12输出到显示图像生成部176。同步信号11是颜色信息数据11的同步信号。同步信号12是颜色信息数据12的同步信号。同步信号生成部171将所生成的同步信号11、同步信号12输出到图像数据处理部172。与同步信号12相比,同步信号生成部171提前规定偏置时间将同步信号11输出到图像数据处理部172。延迟调整部174按照每行使来自图像数据处理部172a的颜色信息数据11延迟。滤波处理部175对来自延迟调整部174的颜色信息数据11进行滤波处理,生成滤波处理数据11。显示图像生成部176进一步在滤波处理数据11和来自图像数据处理部173的图像数据2中叠加来自图像数据处理部172a的颜色信息数据12,而生成显示图像数据1。

根据该结构,针对图像数据1的一部分即颜色信息数据12,能够使定时一致来叠加图像数据2、颜色信息数据12、滤波处理数据11,而不具有定时调整用的行存储器。滤波处理数据11是对图像数据1的一部分即颜色信息数据11进行滤波处理而得到的。因此,能够避免记录基于颜色信息数据12的滤波处理数据11,同时抑制硬件规模的增加。显示控制部170-1通过省略行存储器,能够降低消耗电力。

在上述实施方式中,以图像数据1中包含的一部分的部分图像数据(第一部分图像数据)和另外的部分图像数据(第二部分图像数据)分别是颜色信息数据11、颜色信息数据12的情况为例进行了说明,但是不限于此。例如,一部分的部分图像数据、另外的部分图像数据和图像数据2可以分别是y图像数据、c图像数据和y图像数据。

在上述实施方式中,以滤波处理部175进行的滤波处理主要是如下边缘锐化处理的情况为例进行了说明,所述边缘锐化处理包含使用行单位的一维的滤波系数的积和运算,但是不限于此。滤波处理部175中的积和运算可以是还组合了像素单位的积和运算的二维的积和运算。并且,滤波处理部175中的滤波处理不限于以边缘锐化为目的的处理,也可以是其他目的、例如以不要成分(杂散)的去除、噪声成分的去除或抑制为目的的处理中使用的处理。

可以利用计算机实现上述各实施方式的摄像装置10、10a的一部分、例如图像处理部140、动态图像压缩部150、dma控制器160、显示控制部170-1、170a-1、170-2和控制部180。该情况下,将用于实现该控制功能的程序记录在计算机可读取的记录介质中,使计算机系统读入该记录介质中记录的程序并执行,由此来实现该控制功能。另外,这里所说的“计算机系统”是内置于摄像装置10、10a中的计算机系统,是包含os和外围设备等硬件的结构。并且,“计算机可读取的记录介质”是软盘、光磁盘、rom、cd-rom等移动介质、内置于计算机系统中的硬盘等存储装置。进而,“计算机可读取的记录介质”可以包含如经由因特网等网络或电话线路等通信线路发送程序的情况下的通信线那样在短时间内动态保持程序的结构、如该情况下的作为服务器或客户端的计算机系统内部的易失性存储器那样以一定时间保持程序的结构。并且,上述程序可以是用于实现所述功能的一部分的结构,还可以是能够通过与计算机系统中已经记录的程序的组合来实现所述功能的结构。

上述各实施方式的摄像装置10、10a的一部分或全部可以作为lsi(largescaleintegration:大规模集成)等集成电路来实现。摄像装置10、10a的各功能块可以单独作为处理器,也可以对一部分或全部进行集成而作为处理器。并且,集成电路化的手法不限于lsi,也可以利用专用电路或通用处理器来实现。并且,在由于半导体技术的进步而出现了代替lsi的集成电路化的技术的情况下,也可以使用基于该技术的集成电路。

在上述各实施方式中,显示控制部170-2可以具有与显示控制部170-1相同的结构。在上述各实施方式中,显示控制部170-2可以具有与图像数据处理部172相同的结构,可以省略与延迟调整部174、滤波处理部175和显示图像生成部176相同的结构。

在上述各实施方式中,显示控制部170-1、170a-1、170-2可以分别构成为单一的显示控制装置。显示控制部170-2可以与显示控制部170-1、170a-1的同步信号生成部171生成的同步信号独立地进行显示图像数据2的读出和输出,也可以与该同步信号同步地进行读出和输出。并且,在摄像装置10、10a中,可以省略显示控制部170-2。

显示装置20-1、20-2中的一方或双方可以构成为摄像装置10、10a的一部分,也可以构成为与摄像装置10、10a独立的单一的显示装置。

以上说明了本发明的优选实施方式,但是,本发明不限于这些实施方式及其变形例。能够在不脱离本发明主旨的范围内进行结构的附加、省略、置换和其他变更。本发明不由所述说明进行限定,仅由权利要求书进行限定。

产业上的可利用性

根据上述各实施方式,能够提供如下的显示控制装置和摄像装置:能够避免通过处理而生成的图像的记录同时抑制硬件规模的增加,并能够抑制消耗电力的增加。

标号说明

1:摄像系统;10、10a:摄像装置;110:图像传感器;120:摄像部;130:sdram;140:图像处理部;150:动态图像压缩部;160:dma控制器;170-1、170a-1、170-2:显示控制部;171:同步信号生成部;172、172a、173:图像数据处理部;1721、1721a、1731:fifo写入控制部;1722、1722a、1732:fifo读取控制部;1723、1723a、1733:fifo缓存器;1724、1724a、1734:数据排列转换部;1725、1725a、1735:数据使能生成部;174:延迟调整部;1741-1~1741-4:行存储器;175:滤波处理部;1751:滤波运算部;1752、1753:选择器;176:显示图像生成部;180:控制部;20-1、20-2:显示装置。

权利要求书(按照条约第19条的修改)

1.(修改后)一种显示控制装置,其具有:

多个图像数据处理部,它们与同步信号同步地从dma总线取得图像数据,并输出所述图像数据;

同步信号生成部,其生成所述同步信号,与第二图像数据处理部相比,提前规定的偏置时间对第一图像数据处理部输出所述同步信号,所述第一图像数据处理部是所述多个图像数据处理部中的一部分,所述第二图像数据处理部是其他的图像数据处理部;

延迟调整部,其按照每行使从所述第一图像数据处理部输出且与所述同步信号同步的第一图像数据延迟;

滤波处理部,其对来自所述延迟调整部的所述第一部分图像数据进行滤波处理而生成滤波处理数据,所述滤波处理是通过与规定的抽头数的滤波系数之间的积和运算来进行的;以及

显示图像生成部,其叠加所述滤波处理数据和来自所述第二图像数据处理部的第二图像数据而生成显示图像数据,

所述同步信号是每帧中包含的垂直同步信号,

所述同步信号生成部根据是否需要所述滤波处理,控制是否提前所述规定的偏置时间对所述第一图像数据处理部输出所述同步信号,

所述偏置时间是与所述抽头数和行周期对应的时间,不超过由所述垂直同步信号规定的垂直回扫期间。

2.(修改后)根据权利要求1所述的显示控制装置,其中,

所述多个图像数据处理部与来自所述同步信号生成部的同步信号同步地对所述dma总线输出dma请求信号。

3.(删除)

4.(删除)

5.(删除)

6.(修改后)一种摄像装置,其具有权利要求1或2所述的显示控制装置。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1