健康度输出装置、健康度输出系统以及程序的制作方法

文档序号:11525812阅读:333来源:国知局
健康度输出装置、健康度输出系统以及程序的制造方法

本发明涉及输出与生物体的健康度相关的信息的健康度输出装置、包括该健康度输出装置的健康度输出系统以及用于使计算机作为健康度输出装置发挥作用的程序。



背景技术:

使用了生物体图像的诊断在西洋医学的领域被广泛使用,不仅成为脸、手脚等身体的表面的皮肤的诊断的基础,也成为嘴唇、眼睑等薄膜状组织的诊断、针对胃、肠等消化器官、体内器官的使用了x射线、超声波的诊断的基本。受到专业教育的医师实施这些诊断。不仅通过基于文献等的教育,也通过在临床诊察很多的患者,来积累异常的状态的知识,实现准确度较高的诊断。

现在,研究通过利用计算机进行的数值解析来使这些诊断自动化的方案,但仍不及有经验的专业医生的等级。

另一方面,在东洋医学中,已知有通过观察脸、舌头的状态来诊断健康状态、病状的诊断方法(望诊、舌诊)。例如,在舌诊中,基于舌头和舌苔的各自的颜色、形状来诊断身体状况、健康度。换句话说,舌诊中的诊断项目有舌头的颜色、舌头的厚度、舌苔的颜色、舌苔的厚度等。

在健康的状态下,舌头的颜色是淡红色,舌苔的颜色是淡白色,舌头和舌苔的厚度标准。若产生血液循环、水分的代谢不良、发热、免疫力的降低,则它们的颜色、形状产生变化。专业医师实施这些诊断,但由于依赖于经验、直觉,因此,存在个体差,缺乏客观性。因此,为了担保诊断的正确性、客观性,以往提出有辅助患者的诊断的装置、器具。

例如,在专利文献1的舌诊辅助装置中,预先根据属性(例如寒属性、热属性、实属性、虚属性等)将多个他人的舌头图像(样本图像)分类成多组并存储于存储部,从其中确定出与患者的舌头的属性一致的组,并且从该组中确定出与患者的舌头的属性一致的舌头图像,并且输出(例如显示)与确定出的舌头图像对应的治疗方法,由此来辅助患者的诊断。

另外,在专利文献2中公开有在镜子的周围配置了多个参照体的镜器具。作为上述多个参照体,例如使用基于由医师等监修的照片而制作成的片材。通过对比映于镜子的对象物(例如本人的舌头的颜色)和多个参照体(例如他人的舌头的颜色),能够容易地把握自己的健康状态。

另外,在专利文献3中公开有通过使患者的舌头图像与标准的舌头图像接近投影,来使它们的比较变得容易而能够进行正确的诊断的系统。并且,在专利文献4中公开有显示诊断对象图像、类似病例的图像以及诊断结果来进行诊断辅助的装置。

专利文献1:日本特开2013-17660号公报(参照权利要求1、7、第23段等)

专利文献2:日本专利第5150440号公报(参照权利要求1~3、第13、15~21段、图2等)

专利文献3:日本专利第2763989号公报(参照权利要求1、第18段、图1等)

专利文献4:日本特开2007-279942号公报(参照权利要求1、第42段、图4等)

在上述的现有技术中,由于比较患者(作为诊断对象的本人)与他人的病例来诊断、把握本人的健康状态,因此,存在即使是经验较少的医师、专业外的医师,也能够进行一定诊断的优点。但是,在上述现有技术中,由于比较对象为他人的病例(图像),因此,难以区分本人与他人的健康状态的差异是基于与他人的原本的个体差、还是基于本人的疾病。并且,在疾病的程度、发展程度、图像的变化上也存在个体差。因此,难以正确地把握本人的健康度(疾病等级)。

应予说明,在专利文献2中公开有作为粘贴于镜子的周围的多个参照体,也可以使用基于用相机拍摄本人的舌头而得到的照片而制作成的参照体这一点。但是,在该情况下,由于只能制作参照体至过去的本人的健康状态的变动幅度的上限或者下限,因此,在诊断时的本人的健康状态超过该变动幅度的情况下,不能够把握健康度。

以上的问题在诊断人以外的动物的情况下也同样发生。



技术实现要素:

本发明是为了解决上述的问题点而完成的,其目的在于提供一种用户能够不受与其他的生物体(他人或者其他的动物)的个体差的影响地正确地把握成为诊断对象的生物体的健康度的健康度输出装置、健康度输出系统以及用于使计算机作为健康度输出装置发挥作用的程序。

本发明的一侧面的健康度输出装置具备:显示部,其显示对在生物体中状态根据健康度发生变化的部位进行拍摄而得到的拍摄图像,并且显示基于对于同一生物体在上述拍摄图像的获取时之前拍摄上述部位而得到的基准图像来得到的、健康度不同的多个比较图像;操作部,其用于选择上述显示部所显示的上述多个比较图像之一;以及输出部,其基于由上述操作部选择出的比较图像来输出与上述生物体的健康度相关的信息。

本发明的其他的侧面的程序是用于使计算机执行如下处理的程序,即,使显示部显示对在生物体中状态根据健康度发生变化的部位进行拍摄而得到的拍摄图像、和基于对于同一生物体在上述拍摄图像的获取时之前拍摄上述部位而得到的基准图像来得到的、健康度不同的多个比较图像的处理;以及在由操作部选择了上述显示部所显示的上述多个比较图像之一时,使输出部基于所选择出的比较图像输出与上述生物体的健康度相关的信息的处理。

本发明的又一其他的侧面的健康度输出系统包括上述健康度输出装置和信息提供装置,上述信息提供装置具备:根据上述基准图像通过图像处理来制作上述多个比较图像的比较图像制作部、以及将上述多个比较图像的数据输出至上述健康度输出装置的通信部。

本发明的又一其他的侧面的健康度输出装置具备显示部,该显示部显示对在生物体中状态根据健康度发生变化的部位进行拍摄而得到的拍摄图像,并且显示基于对于同一生物体在上述拍摄图像的获取时之前拍摄上述部位而得到的基准图像来得到的、健康度不同的多个比较图像、和与上述多个比较图像的各个对应的与上述生物体的健康度相关的信息。

本发明的又一其他的侧面的健康度输出系统包括上述健康度输出装置和信息提供装置,上述信息提供装置具备:根据上述基准图像通过图像处理来制作上述多个比较图像的比较图像制作部、存储表示上述多个比较图像的各个同与上述健康度相关的信息之间的对应关系的表格的存储部、将上述多个比较图像的数据和与上述多个比较图像的各个对应的与上述健康度相关的信息输出至上述健康度输出装置的通信部。

根据上述的构成,用户能够不受与其他的生物体的个体差的影响地正确地把握成为诊断对象的生物体的健康度。

附图说明

图1是表示本发明的实施的一方式的健康度输出系统的概要构成的说明图。

图2是表示作为上述健康度输出系统的健康度输出装置的一个例子的器官图像拍摄装置的外观的立体图。

图3是表示上述器官图像拍摄装置的概要构成的框图。

图4是表示针对拍摄对象的照明部与拍摄部之间的位置关系的说明图。

图5是表示舌头的拍摄图像以及边缘提取过滤器的一个例子和使用上述过滤器而提取出的舌头的轮廓线的说明图。

图6是表示上述健康度输出系统的基准图像输出装置的概要构成的框图。

图7是表示上述健康度输出系统的信息提供装置的概要构成的框图。

图8是表示与舌头和舌苔相关的代表性诊断项目的说明图。

图9是表示关于舌头的颜色而制作成的多个比较图像的一个例子的说明图。

图10是以rg色度坐标表示舌头的颜色的曲线图。

图11是表示基准图像中的舌头的区域的说明图。

图12是表示关于舌头的形状而制作成的多个比较图像的一个例子的说明图。

图13是表示关于舌苔的颜色而制作成的多个比较图像的一个例子的说明图。

图14是以rg色度坐标表示舌苔的颜色的曲线图。

图15是表示关于舌苔的厚度而制作成的多个比较图像的一个例子的说明图。

图16是示意性地表示利用不同的照明光源来拍摄舌头时的基准图像的说明图。

图17是示意性地表示修正前后的比较图像的说明图。

图18是表示上述健康度输出系统中,比较图像的制作处理的流程的流程图。

图19是表示上述健康度输出系统中,健康度的判断处理的流程的流程图。

图20是示意性地表示关于舌苔的颜色,将拍摄图像和多个比较图像一并显示于显示部的状态的说明图。

图21是示意性地表示关于舌头的形状,将拍摄图像和多个比较图像一并显示于显示部的状态的说明图。

图22是表示上述健康度输出系统中,其他的健康度的判断处理的流程的流程图。

图23是表示问诊项目的显示画面例的说明图。

图24是示意性地表示关于舌苔的颜色,将拍摄图像、多个比较图像、与比较图像对应的健康度的信息一并显示于显示部的状态的说明图。

图25是表示上述健康度输出系统的其他的构成的说明图。

图26是表示作为上述其他的构成的健康度输出系统中的健康度输出装置的器官图像拍摄装置的概要构成的框图。

图27是表示上述健康度输出系统中,比较图像的制作处理的流程的流程图。

图28是表示上述健康度输出系统中,健康度的判断处理的流程的流程图。

图29是示意性地表示通过内窥镜观察大肠的内壁而得到的图像的说明图。

图30是表示基于上述图像而制作成的多个比较图像的一个例子的说明图。

具体实施方式

若基于附图对本发明的实施的一方式进行说明,则如以下所示。应予说明,在本说明书中,在将数值范围表记为a~b的情况下,该数值范围包括下限a以及上限b的值。

〔系统的概要构成〕

图1是表示本实施方式的健康度输出系统100的概要构成的说明图。健康度输出系统100通过经由通信线路nw连接健康度输出装置1、基准图像输出装置50以及信息提供装置60而构成。作为通信线路nw,例如能够使用因特网。应予说明,通信线路nw可以是有线,也可以是无线。

健康度输出装置1是显示健康度不同的多个比较图像,并基于由用户选择出的比较图像来输出成为诊断对象的生物体的健康度(疾病等级)的装置。多个比较图像的数据例如由信息提供装置60制作,并输出至健康度输出装置1。在此,操作健康度输出装置1的用户可以是诊察生物体的医生,也可以是成为诊断对象的生物体自身(本人)。

这样的健康度输出装置1例如能够由安装了规定的程序(应用软件)的智能电话这样的多功能移动终端(计算机)构成。换句话说,通过计算机读取并执行上述程序,能够实现健康度输出装置1的下述的各处理。这样的程序例如能够通过经由网络的下载来获取。

基准图像输出装置50例如由个人计算机构成。该基准图像输出装置50获取成为制作上述多个比较图像时的基础的基准图像,并将该数据输出至信息提供装置60。上述的基准图像是对于与诊断对象同一生物体,在过去健康时拍摄而获取到的图像。在此,上述的过去是指在健康度输出装置1中,以对状态根据生物体的健康度发生变化的部位(例如舌头)进行拍摄而得到的拍摄图像的获取时(拍摄时)为基准(现在),在时间上追溯到比其之前的时刻。

上述的基准图像例如可以通过利用数字相机的拍摄来获取,并经由usb电缆、记录介质输入至基准图像输出装置50,也可以通过利用作为选项安装或者内置于基准图像输出装置50的网络相机(下述的基准图像拍摄部53(参照图6))的拍摄来获取,也可以从其他的装置(例如其他的个人计算机)添加至电子邮件并发送至基准图像输出装置50。

信息提供装置60是根据从基准图像输出装置50输出的基准图像的数据,通过图像处理来制作多个比较图像,并将该数据提供(输出)至健康度输出装置1的服务器(计算机)。

以下,分别对健康度输出装置1、基准图像输出装置50以及信息提供装置60详细地进行说明。

〔健康度输出装置的整体构成〕

图2是表示作为本实施方式的健康度输出装置1的一个例子的器官图像拍摄装置1a的外观的立体图,图3是表示器官图像拍摄装置1a的概要构成的框图。器官图像拍摄装置1a具备照明部2、拍摄部3、显示部4、操作部5、检测部6、通信部7以及声音输出部8。照明部2以及检测部6设置于框体21,拍摄部3、显示部4、操作部5、通信部7以及声音输出部8设置于框体22。框体21和框体22以能够相对旋转的方式连结,但并非一定需要旋转,也可以一方完全固定于另一方。应予说明,上述的照明部2等也可以设置于单个框体。

照明部2对作为拍摄对象的生物体的器官(在此为舌头)进行照明,由从上方照明拍摄对象的照明器构成。作为照明部2的光源,为了提高颜色再现性,例如使用氙气灯等发出日光色的光源。光源的明亮度根据拍摄部3的灵敏度、至拍摄对象的距离而不同,但作为一个例子,能够考虑使拍摄对象的照度为1000~10000lx这样的明亮度。照明部2除了上述的光源外,还具有点亮电路、调光电路,根据来自照明控制部9的指令,点亮/熄灭以及调光被控制。

拍摄部3在照明部2的照明下,对判断健康度的对象者(本人)的、状态根据健康度变化的部位(例如舌头)进行拍摄,并获取图像(拍摄图像)。该拍摄部3具有拍摄透镜和区域传感器(拍摄元件)。拍摄透镜的光圈(透镜的明亮度)、快门速度、焦距被设定成焦点在拍摄对象的全部范围内一致。作为一个例子,f值:16,快门速度:1/120秒,焦距:20mm。

区域传感器例如由ccd(chargecoupleddevice:电荷耦合器件)、cmos(complementarymetaloxidesemiconductor:互补金属氧化物半导体)这样的拍摄元件构成,以能够充分检测拍摄对象的颜色以及形状的方式设定灵敏度、分辨率等。作为一个例子,灵敏度:60db,分辨率:1000万像素。

拍摄部3的拍摄由拍摄控制部10控制。另外,拍摄部3除了具有拍摄透镜、区域传感器外,还具有未图示的焦点机构、光圈机构、驱动电路以及a/d转换电路等,根据来自拍摄控制部10的指令,焦点、光圈的控制、a/d转换等被控制。在拍摄部3中,作为拍摄图像的数据,分别对红(r)、绿(g)、蓝(b)例如以8位获取0~255的数据。即,在拍摄部3中,对于不同颜色(rgb)的每一种颜色,获取拍摄拍摄对象而得到的图像,由此,获取各颜色的图像数据。

图4是表示针对拍摄对象(舌头、脸)的照明部2与拍摄部3之间的位置关系的说明图。如该图所示那样,至少具有拍摄透镜31和区域传感器32的拍摄部3正对拍摄对象配置。照明部2被配置成以相对于通过拍摄对象的拍摄部3的拍摄光轴x例如为0°~45°的角度a照明拍摄对象。应予说明,拍摄光轴x是指拍摄部3具有的拍摄透镜31的光轴。

若照明时的角度a较大,则表面的凹凸的测量精度提高,但由于上嘴唇的阴影,能够拍摄舌头的范围变小。相反,若角度a较小,则拍摄范围放大,但测量精度降低,由照明光的正反射引起的颜色跳跃变大。若考虑以上情况,则照明时的角度a的优选范围是15°~30°。

显示部4具有未图示的液晶面板、背光灯、点亮电路以及控制电路,按照健康度的各诊断项目显示通过利用拍摄部3的拍摄而获取到的拍摄图像以及由信息提供装置60制作的健康度不同的多个比较图像。上述的诊断项目包括舌头的颜色、舌头的形状、舌苔的颜色、舌苔的厚度中的至少一个。

另外,显示部4也作为在通过操作部5从显示的多个比较图像中选择出一个比较图像时,基于该选择出的比较图像输出与生物体的健康度相关的信息的输出部发挥作用。表示各比较图像与健康度之间的对应关系的表格存储于制作那样的多个比较图像的信息提供装置60的存储部63(参照图7)。因此,能够通过将由操作部5选择出的比较图像的信息(编号)发送至信息提供装置60,信息提供装置60将与选择出的比较图像对应的健康度的信息发送至健康度输出装置1,从而显示部4输出(显示)与发送的健康度相关的信息(例如正常、血流较差、水分代谢异常等信息)。显示部4中的各种信息的显示被显示控制部11控制。并且,显示部4也可以一起显示多个比较图像和与该比较图像的每一个对应的与生物体的健康度相关的信息(等级1正常、等级2稍异常、等级3异常、等级4深度异常)(参照图24)。

操作部5是用于指示拍摄部3的拍摄的输入部,由ok按钮(拍摄执行按钮)5a以及cancel按钮5b构成。在本实施方式中,由共用的触摸面板显示装置41(参照图2)构成显示部4以及操作部5。触摸面板显示装置41中的操作部5的显示由操作控制部12控制。应予说明,操作部5也可以由触摸面板显示装置41以外的输入部构成(也可以在触摸面板显示装置41的显示区域外的位置设置操作部5)。

另外,操作部5也作为用于用户选择显示于显示部4的多个比较图像之一的选择部发挥作用。即,在显示部4显示有多个比较图像时,用户能够通过按压操作部5(触摸面板显示装置41)中的任意一个比较图像上的位置,来选择按压的位置的比较图像。

检测部6检测被照明部2照明的拍摄对象的上述部位(例如舌头)的周围的光的色温度。检测部6通过在rgb的颜色传感器的光入射侧配置白色的半透明盖而构成,通过观察与各传感器中的受光量相应的输出的平衡,来检测(测定)周围光的色温度。检测部6中的色温度的检测由检测控制部13控制。

由检测部6检测出的色温度的信息经由通信部7发送至信息提供装置60。由此,在信息提供装置60中,能够基于所发送的拍摄图像的获取时的色温度和在多个比较图像制作时使用的基准图像的获取时的色温度来分别把握拍摄图像以及多个比较图像的色度(饱和度、色调),能够例如修正多个比较图像,来使这些色度相互接近。

通信部7是用于将由健康度输出装置1得到的信息经由通信线路nw发送至信息提供装置60、或者接收从信息提供装置60输出的信息的接口。通信部7中的信息的收发由通信控制部16控制。作为由健康度输出装置1得到的信息,如上述那样,有通过利用操作部5的选择或者输入而得到的信息、由拍摄部3获取到的拍摄图像的图像数据、由检测部6检测出的拍摄图像的获取时的色温度的信息等。另外,作为从信息提供装置60输出的信息,有多个比较图像的数据、关于健康度及与健康度对应的应对方法的信息。

声音输出部8通过声音输出各种信息,例如由扬声器构成。尤其是,声音输出部8能够通过声音输出从信息提供装置60发送的健康度等信息。在该情况下,可以说声音输出部8也与显示部4相同,作为基于由操作部5选择出的比较图像来输出与生物体的健康度相关的信息的输出部发挥作用。声音输出部8中的声音输出由声音输出控制部17控制。

另外,器官图像拍摄装置1a具备照明控制部9、拍摄控制部10、显示控制部11、操作控制部12、检测控制部13、运算部14、存储部15、通信控制部16、声音输出控制部17以及控制这些各部的整体控制部20。照明控制部9、拍摄控制部10、显示控制部11、操作控制部12、检测控制部13、通信控制部16以及声音输出控制部17如上述那样分别控制照明部2、拍摄部3、显示部4、操作部5、检测部6、通信部7以及声音输出部8。整体控制部20例如由cpu(centralprocessingunit:中央处理器)构成,执行存储于存储部15的动作程序。应予说明,照明控制部9、拍摄控制部10、显示控制部11、操作控制部12、检测控制部13、通信控制部16及声音输出控制部17与整体控制部20也可以一体(例如由一个cpu)构成。

运算部14进行从由拍摄部3获取到的图像提取器官的轮廓线的处理。在本实施方式中,运算部14基于拍摄图像的亮度边缘(在图像中明亮度急剧变化的部分),提取作为器官的舌头的轮廓线。

亮度边缘的提取例如能够使用图5所示那样的边缘提取过滤器来进行。边缘提取过滤器是在进行1次微分时(在邻接像素间取图像数据的差时),对关注像素的附近的像素加权的过滤器。通过使用这样的边缘提取过滤器,例如对拍摄图像的各像素的g的图像数据,在关注像素和附近像素取图像数据的差,并提取该差值超过规定的阈值的像素,由此能够提取成为亮度边缘的像素。由于在舌头的周围存在起因于其阴影的亮度差,因此,通过如上述那样提取成为亮度边缘的像素,能够提取舌头的轮廓线。应予说明,在此,将对亮度的影响最大的g的图像数据用于运算,但也可以使用r、b的图像数据。

存储部15是存储由拍摄部3获取到的图像的数据、由运算部14获取到的数据、从信息提供装置60接收到的信息等、或者存储用于使上述的各种控制部动作的程序的存储器。这样的存储器能够包括ram、rom、非易失性存储器等而构成。

〔基准图像输出装置的构成〕

接下来,对基准图像输出装置50的详细内容进行说明。图6是表示基准图像输出装置50的概要构成的框图。基准图像输出装置50具备显示部51、操作部52、基准图像拍摄部53、图像处理部54、存储部55、通信部56以及控制部57。控制部57例如由cpu构成,控制基准图像输出装置50内的各部的动作。

显示部51是显示以由基准图像拍摄部53拍摄到的图像为首的各种信息的显示器(例如lcd)。操作部52包括键盘、鼠标,为了进行基准图像拍摄部53的拍摄指示、拍摄到的图像的数据的向信息提供装置60的发送指示、或者输入各种信息而设置。

基准图像拍摄部53对于与由健康度输出装置1拍摄的生物体同一生物体,拍摄状态根据健康度变化的部位,并获取成为由信息提供装置60制作多个比较图像时的基础的上述的基准图像,例如由内置的网络相机构成。应予说明,基准图像拍摄部53不是必须的构成,例如也可以为将由外部的数字相机拍摄到的图像作为基准图像,并将该数据经由记录介质、usb电缆获取至基准图像输出装置50的构成。

图像处理部54从通过利用基准图像拍摄部53的拍摄而获取到的基准图像切出必要的区域。例如,在由基准图像拍摄部53拍摄生物体的脸整体时,从脸整体的图像切出包括状态根据健康度变化的部位(例如舌头)的区域的图像。该处理例如通过从拍摄到的图像的rgb的图像数据识别出舌头的区域(例如红色),并切出包括该舌头且比脸整体的大小小的区域的图像来进行。以下,将切出的图像称作基准图像。

存储部55是存储由基准图像拍摄部53获取到的基准图像的数据、用于使基准图像输出装置50的各部动作的程序等的存储器。这样的存储部55能够包括ram、rom、非易失性存储器等而构成。另外,在经由记录介质等获取基准图像的数据、或将上述数据作为电子邮件的添加文件而从其他的装置接收到的情况下,那样的数据也存储于存储部55。并且,在从其他的装置接收到基准图像的获取时的周围光的色温度的信息的情况,该信息也存储于存储部55。应予说明,色温度的信息可以是在基准图像的获取时由外部的传感器检测出的值(rgb的检测值)其本身,也可以是拍摄白色的纸而得到的图像的rgb的数据。

通信部56是用于从健康度输出装置1以及信息提供装置60以外的其他的装置接收基准图像的数据、上述色温度的信息、或者将存储于存储部55的基准图像的数据、基准图像的获取时的周围光的色温度的信息发送至信息提供装置60的接口。

〔信息提供装置的构成〕

接下来,对信息提供装置60的详细内容进行说明。图7是表示信息提供装置60的概要构成的框图。信息提供装置60具备比较图像制作部61、图像修正部62、存储部63、健康度判断部64、通信部65以及控制部66。控制部66例如由cpu构成,控制信息提供装置60内的各部的动作。

比较图像制作部61根据从基准图像输出装置50发送并经由通信部65接收的基准图像的数据,通过图像处理,来制作健康度不同的多个比较图像。应予说明,下述多个比较图像的制作方法。

图像修正部62基于从健康度输出装置1(器官图像拍摄装置1a)发送的拍摄图像的获取时的色温度和从基准图像输出装置50发送的基准图像的获取时的色温度,修正多个比较图像,以使得比较图像的整体的颜色接近在与拍摄图像的获取时相同的照明下拍摄到的图像的颜色。应予说明,下述比较图像的修正方法。

存储部63是存储从基准图像输出装置50发送的基准图像的数据、由比较图像制作部61制作成的多个比较图像的数据、由图像修正部62修正后的多个比较图像的数据、从健康度输出装置1发送的信息(选择出的比较图像的信息、拍摄图像获取时的色温度的信息)等、或者存储用于使上述的各部动作的程序的存储器。这样的存储器能够包括ram、rom、非易失性存储器等而构成。尤其是,健康度不同的多个比较图像的数据与各比较图像的健康度对应地存储于存储部63。

健康度判断部64基于通过健康度输出装置1的操作部5选择出的比较图像来判断并输出生物体的健康度。换句话说,若通过健康度输出装置1的操作部5选择多个比较图像中的一个,则该选择信息被发送至信息提供装置60。因此,健康度判断部64能够通过从存储部63读出与选择出的比较图像对应的健康度,来判断健康度。

〔比较图像的制作方法〕

接下来,对多个比较图像的制作方法进行说明。上述的多个比较图像是对于成为判断生物体的健康度时的指标的至少一个诊断项目,使基准图像通过图像处理变化至健康度不同的多个阶段而得到的图像(阶段样本)。

在此,图8示出在东洋医学中,与舌头和舌苔相关的代表性的诊断项目。一般而言,对于舌头,列举舌头的颜色、舌头的厚度、舌头表面的湿气(光泽度)、舌头的形状(齿痕)、裂纹(舌头表面的龟裂)这5个项目作为诊断项目。另外,关于舌苔,列举舌苔的颜色、舌苔的光滑度(乳头状突起组织的分离度)、舌苔的厚度、舌苔的有无、舌苔的分布状态这5个项目作为诊断项目。在图8的“状态的变化”中,○印表示正常(健康)的状态,若从其远离,则为异常(疾病)的状态。

在图8的各诊断项目中,特别重要的项目是舌头的颜色、舌头的形状(齿痕)、舌苔的颜色、舌苔的厚度这4个项目。以下,按照各诊断项目对多个比较图像的制作方法进行说明。

(与舌头的颜色相关的比较图像)

图9示出关于舌头的颜色,基于本人的健康时的图像(基准图像)制作成的多个比较图像的一个例子,从左示出舌头的颜色为紫红色(等级1;异常)、淡白色(等级2;异常)、淡红色(等级3;正常)、深红色(等级4;异常)的情况。舌头的颜色在舌头的中心下部的舌尖或者其附件的区域a1,在紫红色至深红色之间变化。因此,在将r以及g作为2个变量的色度坐标中,舌头的颜色大体沿以下的式子变化。

g=-0.5r+c…(1)

其中,r表示舌头的区域a1中的相对于rgb的图像数据的总和的r的图像数据的比例(r/(r+g+b)),g表示舌头的区域a1中的相对于rgb的图像数据的总和的g的图像数据的比例(g/(r+g+b)),c为常量。图10是以rg色度坐标表示式(1)的曲线图。

基准图像是在本人健康时拍摄得到的图像,此时的区域a1中的r比例以及g比例根据区域a1的图像数据求出。因此,通过将求出的r比例以及g比例代入至式(1),能够求出本人固有的常量c的值,由此能够确定出式(1)。

因而,能够通过使基准图像中的舌头的区域a1的颜色变化至式(1)的曲线图上的点x1~x4的颜色(r以及g的组合分别为x1=(r1,g1),x2=(r2,g2),x3=(r3,g3),x4=(r4,g4)),来制作出健康度不同的4个比较图像1-1~1-4。其中,点x1~x4中包括与健康时的舌头的颜色对应的点(在上述的例子中为点x3)。

在此,图11示出基准图像中的舌头的区域a1~a3。如该图所示那样,在将在舌头的左右方向的中央沿上下方向形成带状的区域从下按顺序划分为3个区域a1~a3时,这些区域a1~a3基于以舌头的轮廓线围起的区域的左右方向的宽度w、上下方向的长度h,例如以该图所示的尺寸规定。因此,信息提供装置60的比较图像制作部61能够通过以与基于健康度输出装置1的运算部14的轮廓线的提取相同的方法从基准图像提取舌头的轮廓线,来基于提取出的轮廓线的宽度w以及长度h设定区域a1~a3。

应予说明,在汉方医学中使用的舌诊中,舌头的颜色一般在没有舌苔的舌头的左右端部或舌头的中心下部(舌尖附近)诊断。但是,舌头的左右端部因表面的凹凸而导致照明光的照射方法发生变化而容易产生浓淡,图像数据容易从表示原本的舌头的颜色的值起发生变动。因此,在本实施方式中,使舌头的颜色的变化在舌头的中心下部的区域a1变化,制作多个比较图像。

(与舌头的形状相关的比较图像)

图12示出关于舌头的形状(齿痕),基于本人的健康时的基准图像制作成的多个比较图像的一个例子,从左示出舌头没有齿痕(等级1;正常)、齿痕少(等级2;异常)、较多齿痕(等级3;异常)、多齿痕(等级4;异常)的情况。

由齿痕引起的舌头的形状的变化由于舌头的侧面被牙齿的内侧按压而产生。因此,在舌头的侧面,作为齿痕,形成数mm间距的凹凸。因此,比较图像制作部61使用计算机图形的技术使如上述那样检测出的舌头的轮廓线左右移动,使凹凸的程度变化来制作多个比较图像。由于由齿痕引起的阶梯差,换句话说,舌头侧面的凹凸的阶梯差即使最大也为2mm左右,例如,能够通过使凹凸的阶梯差变化为0mm、1.2mm、1.6mm、2mm,制作使齿痕如上述那样变化为等级1~4的4个阶段的比较图像2-1~2-4。

(与舌苔的颜色相关的比较图像)

图13示出关于舌苔的颜色,基于本人的健康时的图像(基准图像)制作成的多个比较图像的一个例子,从左示出舌苔的颜色为淡白色(等级1;正常)、白色(等级2;异常)、黄色(等级3;异常)、茶色(等级4;异常)的情况。舌苔的颜色在舌头的中心上部的舌根或者其附近的区域a3,在淡白色至茶色之间变化。因此,在将r以及g作为2个变量的色度坐标中,舌头的颜色大体沿以下的式子变化。

g=c′r…(2)

其中,r表示舌头的区域a3中的相对于rgb的图像数据的总和的r的图像数据的比例(r/(r+g+b)),g表示舌头的区域a3中的相对于rgb的图像数据的总和的g的图像数据的比例(g/(r+g+b)),c′为常量。图14是以rg色度坐标表示式(2)的曲线图。

基准图像是在本人健康时拍摄而得的图像,此时的区域a3中的r比例以及g比例根据区域a3的图像数据求出。因此,能够通过将求出的r比例以及g比例代入至式(2),求出本人固有的常量c′的值,由此能够确定出式(2)。

因而,能够通过使基准图像中的舌头的区域a3的颜色变换为式(2)的曲线图上的点y1~y4的颜色(r以及g的组合分别为y1=(r1,g1),y2=(r2,g2),y3=(r3,g3),y4=(r4,g4)),来制作健康度不同的4个比较图像3-1~3-4。其中,点y1~y4中包括与健康时的舌苔的颜色对应的点(在上述的例子中为点y1)。

应予说明,舌苔是舌头粘膜的乳头状突起组织角化而成的,存在于从舌头的上部至中央,特别上部较多。因此,在本实施方式中,使舌苔的颜色的变化在舌头的中心上部的区域a3变化,来制作多个比较图像。

(与舌苔的厚度相关的比较图像)

图15示出关于舌苔的厚度,基于本人的健康时的图像(基准图像)制作成的多个比较图像的一个例子,从左示出舌苔的厚度少(等级1;异常)、适度(等级2;正常)、多(等级3;异常)的情况。应予说明,在图15中,难以图示舌苔的厚度,因此为方便起见,以“薄”、“适度”、“厚”表现舌苔的厚度。

舌苔的厚度的变化能够根据舌头的中心的区域a2的颜色的变化来判断。换句话说,舌苔如上述那样多存在于舌头的中心上部的区域a3,因此,中央的区域a2的颜色越接近上部的区域a3的颜色,能够判断为舌苔越厚。因而,舌苔的颜色的变化与表示舌头的颜色的变化的式(1)相同,若r比例较大,则舌苔较薄,若g比例较大,则舌苔较厚。

因而,通过根据本人健康时拍摄的基准图像中的舌头的区域a2的图像数据求出区域a2的r比例以及g比例并代入至式(1),能够求出本人固有的常量c的值,由此能够确定出式(1)。然后,通过使基准图像中的舌头的区域a2的颜色变化为式(1)的曲线图上的3点的颜色,能够制作健康度不同的3个比较图像4-1~4-3。其中,上述3点包括与健康时的舌苔的颜色对应的点(与比较图像4-2对应的点)。

〔关于基于色温度的修正〕

接下来,对基于色温度的比较图像的修正进行说明。图16示意性地示出分别使用相机的闪光灯、荧光灯、白炽灯作为照明光源拍摄舌头时的基准图像。在基准图像的获取时照明光不同的情况下,基准图像的图像整体的色度(饱和度、色调)根据照明光而不同。因此,根据基准图像制作的多个比较图像的图像整体的色度也根据基准图像的获取时的照明光而不同。另外,在利用健康度输出装置1的拍摄图像的获取时(拍摄时)和基准图像的获取时(拍摄时)照明光不同的情况下,也与上述相同,在拍摄图像和多个比较图像中,图像整体的颜色不同。

因此,在本实施方式中,信息提供装置60的图像修正部62在拍摄图像的获取时的照明光(周围光)的色温度和基准图像的获取时的照明光(周围光)的色温度不同的情况下,修正拍摄图像以及多个比较图像中的至少一方,以使得制作成的各个比较图像的图像整体的色度相对接近于拍摄图像的图像整体的色度。应予说明,图像修正部62能够基于从健康度输出装置1发送的信息来把握拍摄图像的获取时的色温度,能够基于从基准图像输出装置50发送的信息来把握基准图像的获取时的色温度。

若对修正方法的一个例子具体地进行说明,则图像修正部62在拍摄图像的获取时的照明光的色温度和基准图像的获取时的照明光的色温度存在差的情况下,求出拍摄图像的图像整体的r的图像数据的平均值rave、g的图像数据的平均值gave、b的图像数据的平均值bave,并且分别对于制作成的各个比较图像求出比较图像的图像整体的r的图像数据的平均值r′ave、g的图像数据的平均值g′ave、b的图像数据的平均值b′ave。然后,图像修正部62对各个比较图像求出r的修正系数(rave/r′ave)、g的修正系数(gave/g′ave)、b的修正系数(bave/b′ave),将各个比较图像的图像整体的各像素的rgb的图像数据分别乘以上述的修正系数,来修正各个比较图像。

应予说明,可以针对拍摄图像进行与上述相同的修正处理,也可以针对拍摄图像和多个比较图像双方进行。在前者的情况下,修正系数的分母和分子与修正比较图像的上述的例子相反。在后者的情况下,例如也可以通过使拍摄图像的各像素的图像数据(像素值)通过修正系数的相乘来增加,另一方面,使比较图像的各像素的图像数据(像素值)通过修正系数的相乘来减少,来使两者的rgb的图像数据的平均值接近。

图17示意性地示出在基准图像的获取时使用荧光灯作为照明光源、在拍摄图像的获取时使用闪光灯光源作为照明光源的情况下的修正前后的比较图像。由图像修正部62修正后的多个比较图像尽管基于通过荧光灯下的拍摄而得到的基准图像来制作,但图像整体与通过闪光灯点亮下的拍摄而得到的拍摄图像(参照图9)的颜色接近。这样修正后的多个比较图像的数据通过通信部65被发送至健康度输出装置1。由此,在健康度输出装置1中,用户能够观察到与拍摄图像的颜色接近的多个比较图像,并从中容易地选择出与拍摄图像所包括的舌头的状态接近的比较图像。换句话说,即使在使用健康度输出装置1在周围光的色温度与基准图像的获取时不同的各种场所拍摄舌头而获取拍摄图像的情况下,也能够示出具有与拍摄图像接近的适当的颜色的多个比较图像,使用户容易选择其中的一个。

应予说明,在拍摄图像的获取时的照明光与基准图像获取时的照明光相同的情况下(色温度相互相同的情况下),也能够省略基于图像修正部62的比较图像的修正处理。

〔控制流程〕

接下来,对本实施方式的健康度输出系统100中的处理的流程进行说明。上述处理大致分为比较图像的制作处理和健康度的判断处理。以下,对它们进行说明。

(比较图像的制作处理)

图18是表示比较图像的制作处理的流程的流程图。首先,在利用基准图像输出装置50的基准图像的拍摄前,使周围的照明部(例如荧光灯)点亮(s1),利用传感器(未图示)检测此时的色温度(s2)。应予说明,在s2中,也可以代替基于上述传感器的色温度检测,而利用基准图像拍摄部53拍摄白色的纸并获取rgb的图像数据,将其作为色温度的信息。然后,利用基准图像拍摄部53拍摄生物体的脸(s3)。此时的生物体的状态为健康的状态(正常的状态)。

接着,图像处理部54从拍摄到的脸的rgb的图像数据识别出在生物体中状态根据健康度发生变化的部位(例如舌头),并切出包括该部位的图像作为基准图像(s4)。切出的图像(基准图像)的数据存储于存储部55(s5)。此时,在s2中测定出的色温度的信息也存储于存储部55。

然后,存储于存储部55的信息(基准图像的数据、色温度的信息)通过通信部56被发送至信息提供装置60(s6)。由此,在信息提供装置60中,利用比较图像制作部61根据所发送的信息所包括的基准图像通过图像处理制作多个比较图像(s7)。在此,对于舌头的颜色、舌头的形状(齿痕)、舌苔的颜色、舌苔的厚度这4个诊断项目分别制作多个比较图像,但也可以仅对一个诊断项目制作多个比较图像。制作成的各诊断项目的多个比较图像的数据存储于存储部63(s8)。

(健康度的判断处理)

接下来,对健康度的判断处理进行说明。图19是表示健康度的判断处理的流程的流程图。首先,在利用健康度输出装置1的图像的拍摄前,使周围的照明部(例如闪光灯光源)点亮(s11),并利用检测部6检测此时的色温度(s12)。应予说明,在s12中,也可以代替基于检测部6的色温度检测,而利用拍摄部3拍摄白色的纸并获取rgb的图像数据,将其作为色温度的信息。

接着,利用拍摄部3对于与基准图像的拍摄时同一生物体拍摄舌头的静态图像(s13)。例如,利用拍摄部3动态拍摄用户的舌头,并使该动态图像显示于显示部4,用户一边观察显示于显示部4的自己的舌头的动态图像,一边在适当的时机按压操作部5的ok按钮5a,从而能够得到舌头的静态图像。此时,也可以使显示部4显示表示舌头的拍摄位置的框线,来引导舌头的拍摄位置。然后,将在s12中检测出的拍摄图像的获取时的周围光的色温度的信息以及在s13中获取到的拍摄图像的数据经由通信部7发送至信息提供装置60(s14)。

接下来,信息提供装置60的图像修正部62判断从健康度输出装置1发送的拍摄图像的获取时的色温度和从基准图像输出装置50发送的基准图像的获取时的色温度是否不同(s15),在不同的情况下(例如色温度的差为100k以上的情况下),针对多个比较图像(存储于存储部63的比较图像的数据)以及拍摄图像(从健康度输出装置1发送的拍摄图像的数据)中的至少一方进行上述的修正处理,使两者的颜色接近(s16)。然后,通信部65将由图像修正部62修正后的图像的数据发送至健康度输出装置1(s17)。另一方面,在s15中,拍摄图像的获取时的色温度和基准图像的获取时的色温度几乎相同(例如色温度的差小于100k)的情况下,跳过s16的处理。然后,在s17中,通信部65将存储于存储部63的多个比较图像的数据发送至健康度输出装置1。

在健康度输出装置1中,由显示部4一并显示拍摄图像和多个比较图像(s18)。此时,在显示部4中,即能够基于利用操作部5的操作,对各诊断项目切换显示多个比较图像,也能够同时显示各诊断项目的多个比较图像。图20示意性地示出对于作为诊断项目之一的舌苔的颜色,使拍摄图像和多个比较图像一并显示于显示部4的状态,图21示意性地示出对于作为诊断项目之一的舌头的形状,使拍摄图像和多个比较图像一并显示于显示部4的状态。通过这样的显示,用户能够观察显示部4,按各诊断项目对拍摄图像和多个比较图像进行比较,通过操作部5(触摸面板显示装置41)的按压从多个比较图像中选择出舌头的颜色接近于拍摄图像的比较图像。

若操作部5按各诊断项目受理用户的比较图像的选择(s19),则按照各诊断项目选择出的比较图像的信息(例如比较图像的编号)经由通信部7被发送至信息提供装置60(s20)。在信息提供装置60中,健康度判断部64参照存储于存储部63的表格,按各诊断项目提取出与选择出的比较图像对应的健康度。换句话说,健康度判断部64基于选择出的比较图像,像关于舌苔的颜色为“等级1”,关于舌头的形状为“等级3”这样,按照各诊断项目进行健康度的判断(见解判断)(s21)。

接着,健康度判断部64基于按各诊断项目判断出的见解,按照汉方诊断的知识判断本人的身体状况(s22)。例如,关于舌苔的颜色,在健康度为“等级1”的情况下,判断为正常,但关于舌头的形状,在健康度为“等级3”的情况下,判断为“水分代谢异常”。这些判断结果作为与健康度相关的信息存储于存储部63(s23),并且从通信部65发送至健康度输出装置1(s24)。由此,在健康度输出装置1中,利用显示部4输出与健康度相关的信息(水分代谢异常等)(s25)。应予说明,在s25中,也可以从声音输出部8通过声音输出与健康度相关的信息,也可以同时进行利用显示部4的显示和利用声音输出部8的声音输出。

如上述那样,在显示部4显示在生物体中状态根据健康度发生变化的部位(在上述的例子中为舌头)的拍摄图像和健康度不同的多个比较图像(参照图20、图21)。由于拍摄图像和多个比较图像是与同一生物体相关的图像,因此,由输出部5输出的健康度的信息排除了由与其他的生物体的个体差带来的影响。由此,用户能够正确地把握生物体的健康度。并且,多个比较图像通过图像处理而制作成,对于超过了本人的过去的健康状态的变动幅度的状态,也能够作为比较图像而示出,因此,即使在诊断时的本人的健康状态超过过去的健康状态的变动幅度的情况,也能够通过比较图像的选择以及基于该选择的健康度的输出来正确地把握本人的健康度。

另外,在本实施方式中,上述的基准图像是对于同一生物体在健康时拍摄而得的图像。在该情况下,由于根据基准图像而制作的多个比较图像是以健康时的状态为基准而制作成的,因此,用户利用显示部4比较拍摄图像和多个比较图像,能够容易地把握距健康时的身体状况的微妙的变化(是否是在疾病的初期)。

另外,多个比较图像是对于至少一个诊断项目,使基准图像变化至健康度不同的多个阶段而成的图像。通过对于至少一个诊断项目使多个比较图像显示,并利用操作部5选择出其中的一个,由此能够基于选择出的比较图像,对于至少一个诊断项目输出与生物体的健康度相关的信息。

另外,状态根据健康度发生变化的部位是生物体的舌头,上述诊断项目包括舌头的颜色、舌头的形状、舌苔的颜色、舌苔的厚度。由此,能够基于对于它们中的至少任意一个诊断项目选择出的比较图像,输出与生物体的健康度相关的信息。

另外,显示部4与各诊断项目对应地显示对于多个诊断项目制作成的多个比较图像,基于利用操作部5按照各诊断项目选择出的比较图像,输出与生物体的健康度相关的信息。在该情况下,用户能够基于输出的信息把握与各诊断项目对应的健康度。

另外,信息提供装置60具备根据基准图像通过图像处理制作多个比较图像的比较图像制作部61以及将多个比较图像的数据输出至健康度输出装置1的通信部65。由此,健康度输出装置1接收由信息提供装置60制作的多个比较图像的数据,并由显示部4显示多个比较图像,使用户能够利用操作部5选择出任意一个比较图像。因此,无需在健康度输出装置1侧设置比较图像的制作部(电路),能够将健康度输出装置1的构成简化。

另外,即使在拍摄图像的获取时和基准图像的获取时,照明光的种类不同,从而图像整体的颜色在拍摄图像和多个比较图像中不同的情况下,信息提供装置60的图像修正部62也修正拍摄图像以及多个比较图像中的至少一方,来使得各个比较图像的图像整体的色度相对接近于拍摄图像的图像整体的色度。由此,即使在拍摄图像的获取时和基准图像的获取时,照明光的种类不同的情况下,也能够在拍摄图像和多个比较图像中,使图像整体的颜色相互接近。因此,通过将修正后的图像的数据经由通信部65发送至健康度输出装置1,利用健康度输出装置1,用户容易从多个比较图像中选择与拍摄图像接近的适当的比较图像。

尤其是,图像修正部62通过修正拍摄图像以及多个比较图像中的至少一方,以使得各个比较图像中的各种颜色(rgb)的图像数据的平均值相对接近于拍摄图像的各种颜色的图像数据的平均值,来即使在拍摄图像的获取时和基准图像的获取时,照明光的种类不同的情况下,也能够在拍摄图像和多个比较图像中使图像整体的颜色可靠地接近。

另外,信息提供装置的健康度判断部64基于由健康度输出装置1的操作部5选择出的比较图像,判断生物体的健康度,通信部65将由健康度判断部64判断出的健康度的信息发送至健康度输出装置1。由此,健康度输出装置1能够接收所发送的健康度的信息,并由输出部输出(例如由显示部4显示)。因此,无需在健康度输出装置1侧设置健康度的判断部(电路),能够将健康度输出装置1的构成简化。

另外,也可以在图19的s19(比较图像的选择受理)后,进行以下那样的处理。图22是表示其他的健康度的判断处理的流程的流程图。在s19中,若操作部5受理比较图像的选择,则显示部4显示生物体的问诊项目(s19-1)。图23示出在使显示部4显示问诊项目时的显示画面例。作为上述的问诊项目,例如有体温、异常的自觉症状的有无(头痛、恶心、头晕、身体倦怠)、自觉症状的产生时期等。

在像这样,在显示部4显示生物体的问诊项目时,操作部5作为受理针对显示于显示部4的问诊项目的回答的输入的输入部发挥作用。例如,通过利用触摸面板显示装置41与上述问诊项目一同显示软键(数字、文字等输入键),软键作为输入部,由此用户能够通过上述软键的按压来输入针对问诊项目的回答。若操作部5受理针对问诊项目的回答的输入(s19-2),则在s19中选择出的比较图像的信息(选择出的比较图像的编号)、在s19-2中输入的针对问诊项目的回答的信息经由通信部7被发送至信息提供装置60(s20′)。

在信息提供装置60中,健康度判断部64参照存储于存储部63的表格,按照各诊断项目提取与选择出的比较图像对应的健康度,按照各诊断项目进行健康度的判断(见解判断)(s21)。接着,健康度判断部64基于按各诊断项目判断出的见解,根据汉方诊断的知识判断本人的身体状况(健康度),并且,判断与该判断结果和针对问诊项目的回答对应的应对方法(s22′)。例如,在根据汉方医学的知识知道在血流较差且有头痛的自觉症状时,优选服用汉方药a,在水分代谢异常且身体长时间持续倦怠时,优选服用汉方药b的情况下,健康度判断部64根据那样的知识判断应对方法(例如优选服用的汉方药)。应予说明,基于身体状况和问诊回答,除了汉方药、医药品之外,也可以判断、提示饮食、生活习惯的改善方法。

本人的身体状况(与健康度相关的信息)以及应对方法存储于存储部63(s23′),并且从通信部65发送至健康度输出装置1(s24′)。由此,在健康度输出装置1中,通过显示部4,除了输出与健康度相关的信息(血流较差、水分代谢异常等)之外,也输出应对方法(s25′)。

由于针对问诊项目的回答反映成为诊断对象的生物体本人的自觉症状,因此,通过考虑那样的本人的自觉症状,能够提示适当的应对方法。另外,通过显示部4显示生物体的问诊项目,并将与生物体的健康度和通过操作部5输入的针对问诊项目的回答相应的应对方法同与健康度相关的信息一并输出(显示),用户不仅容易把握输出的健康度,也容易基于输出的应对方法来努力改善健康度。

另外,在利用健康度输出装置1输入针对生物体的问诊项目的回答,且该信息被发送至信息提供装置60的情况下,信息提供装置60的健康度判断部64判断与判断出的生物体的健康度和针对问诊项目的回答相应的应对方法,通信部65将由健康度判断部64判断出的健康度以及应对方法的信息发送至健康度输出装置1。由此,能够成为由健康度输出装置1接收健康度以及应对方法的信息并由输出部输出的构成,与无需在健康度输出装置1侧设置应对方法的判断部相应地,能够将健康度输出装置1的构成简化。

另外,在信息提供装置60具有上述的比较图像制作部61和存储部63,在存储部63存储有由比较图像制作部61制作成的多个比较图像、和表示这些多个比较图像的各个同与健康度相关的信息之间的对应关系的表格的情况下,图19的s17和s18也可以为以下那样的处理。在s17中,通信部65将存储于存储部63的多个比较图像的数据和与比较图像的各比较图像对应的生物体的健康度的信息发送至健康度输出装置1。在健康度输出装置1中,由显示部4一并显示拍摄图像、多个比较图像、以及与比较图像的各比较图像对应的生物体的健康度的信息(s18)。图24示出s18中的显示部4的显示画面的一个例子。像这样,在一并显示多个比较图像和与比较图像的各比较图像对应的生物体的健康度的信息的情况下,能够省略s19以后的处理。

如上述那样,在显示部4显示在生物体中状态根据健康度发生变化的部位(在上述的例子中为舌头)的拍摄图像、健康度不同的多个比较图像、与比较图像的各比较图像对应的生物体的健康度的信息(参照图24)。由此,用户观察当前的生物体的拍摄图像和与最接近该图像的比较图像对应地显示的健康度的信息,能够正确且容易地把握本人的健康度。

根据上述,能够说本实施方式的健康度输出装置1也可以具备显示部4,该显示部4显示对在生物体中状态根据健康度发生变化的部位进行拍摄而得到的拍摄图像,并且显示基于对于同一生物体在上述拍摄图像的获取时之前拍摄上述部位得到的基准图像而得到(根据基准图像通过图像处理而制作成)的、健康度不同的多个比较图像、以及与上述多个比较图像的各比较图像对应的与上述生物体的健康度相关的信息。

另外,能够说本实施方式的健康度输出系统100包括上述健康度输出装置1和信息提供装置60,信息提供装置60也可以具备根据上述基准图像通过图像处理来制作上述多个比较图像的比较图像制作部61、存储表示上述比较图像的各个同与上述健康度相关的信息之间的对应关系的表格的存储部63、将上述多个比较图像的数据和与上述多个比较图像的各个对应的与上述健康度相关的信息输出至健康度输出装置1的通信部65。

〔健康度输出系统的其他的构成〕

图25是表示健康度输出系统100的其他的构成的说明图。在该健康度输出系统100中,成为上述的健康度输出装置1兼具信息提供装置60的功能的构成。

图26是表示作为图25的健康度输出系统100中的健康度输出装置1的器官图像拍摄装置1b的概要构成的框图。器官图像拍摄装置1b除了图3所示的器官图像拍摄装置1a的构成外,还具备图像处理部18以及判断部19。图像处理部18根据基准图像通过图像处理制作多个比较图像,与图7的信息提供装置60的比较图像制作部61对应。因此,图像处理部18能够通过与比较图像制作部61相同的方法制作多个比较图像。

另外,图像处理部18也作为在由检测部6检测出的拍摄图像的获取时的色温度和从信息提供装置50发送的基准图像的获取时的色温度不同的情况下,修正拍摄图像以及多个比较图像中的至少一方,以使得各个比较图像的图像整体的色度相对接近于拍摄图像的图像整体的色度的修正部发挥作用。作为该修正部的图像处理部18与图7的信息提供装置60的图像修正部62对应。因此,图像处理部18能够通过与图像修正部62相同的方法修正拍摄图像以及多个比较图像中的至少一方。

判断部19基于从显示于显示部4的多个比较图像中通过操作部5选择出的比较图像来判断生物体的健康度,与图7的信息提供装置60的健康度判断部64对应。通过在存储部15中预先存储表示多个比较图像与健康度之间的关系的表格,由此判断部19能够参照存储于存储部15的表格,按照各诊断项目提取并判断与选择出的比较图像对应的健康度。

图27是表示上述的健康度输出系统100中,比较图像的制作处理的流程的流程图。s31~s35的处理与图18的s1~s5的处理完全相同。s36在通过s35存储的基准图像的图像数据以及色温度的信息的发送目的地为健康度输出装置1(器官图像拍摄装置1b)的点上与图18的s6不同。s37~s38为健康度输出装置1侧的处理。即,在s37中,利用健康度输出装置1的图像处理部18,根据从基准图像输出装置50发送的信息所包括的基准图像通过图像处理按照各诊断项目制作多个比较图像。制作成的各诊断项目的多个比较图像的数据存储于存储部15(s38)。

图28是表示上述的健康度输出系统100中,健康度的判断处理的流程的流程图。图28所示的处理除了没有在健康度输出装置1与信息提供装置60之间收发信息的工序且处理的主体全部为健康度输出装置1的点外,与图22所示的处理基本相同。在图28和图22中,各工序的对应关系如下。

即,图28的s41~s43的处理与图22的s11~s13的处理完全相同,s44~s45的处理与上述的s15~s16的处理完全相同。但是,s44~s45的图像的修正处理的主体是图像处理部18。

s46~s49的处理与上述的s18、s19、s19-1、s19-2的处理完全相同,s50~s52的处理与上述的s21、s22′、s23′完全相同。但是,s50~s51的判断的主体是判断部19,在s52中存储判断结果的是存储部15。s53的处理与上述的s25′的处理完全相同。

如上述那样,健康度输出装置1具备根据基准图像通过图像处理制作多个比较图像的图像处理部18和基于由操作部5选择出的比较图像判断生物体的健康度的判断部19。然后,输出部(例如显示部4)输出与由判断部19判断出的健康度相关的信息。通过像这样,使健康度输出装置1具有信息提供装置60所具有的功能(比较图像制作以及健康度等的判断的功能),能够将基准图像输出装置50和健康度输出装置1以能够直接通信的方式连接,来进行健康度的判断以及输出。因此,能够与无需使信息提供装置60介于中间相应地,将健康度输出系统100的构成简化。另外,由于不需要与信息提供装置60的通信连接,因此,在健康度输出装置1的通信费根据数据通信时的数据包量变动的情况下,也节约通信费。

另外,健康度输出装置1的图像处理部18也与信息提供装置60的图像修正部62相同地,作为在拍摄图像的获取时的色温度与基准图像的获取时的色温度不同的情况下,修正拍摄图像以及多个比较图像中的至少一方来使各个比较图像的图像整体的色度相对接近于拍摄图像的图像整体的色度的修正部发挥作用。由此,即使在拍摄图像的获取时和基准图像的获取时照明光不同的情况下,也能够使图像整体的颜色在拍摄图像和多个比较图像中接近,从而使用户容易从多个比较图像中选择出与拍摄图像接近的适当的比较图像。尤其是,图像处理部18能够通过修正拍摄图像以及多个比较图像中的至少一方来使得各个比较图像中的各种颜色的图像数据的平均值相对接近于拍摄图像的各种颜色的图像数据的平均值,来使图像整体的颜色在拍摄图像和多个比较图像中可靠地接近。

应予说明,图26所示的健康度输出装置1也能够作为图1的健康度输出系统100的健康度输出装置1来使用。

〔其它〕

以上,对生物体为人的情况进行了说明,但也可以是人以外的动物。例如,即使是宠物、家畜等动物的舌头,也能够应用本实施方式的方法输出健康度。在该情况下,用户能够迅速并且准确地判断不能够进行意思的传递的动物的身体状况不良。

以上,作为成为制作多个比较图像的基础的基准图像,使用在生物体本人健康时拍摄的图像,但也可以使用在本人非健康时(疾病时)拍摄的图像。即使是该情况,也能够从以疾病时为基准制作成的多个比较图像中选择出与在当前的拍摄图像中示出的部位的状态接近的图像,把握健康度。另外,作为基准图像,也可以使用健康时拍摄的图像和疾病时拍摄的图像这两方,将它们包括于比较图像。由于舌头的见解的表现方法(健康度的变化法)存在个体差,因此,通过把握健康、疾病的两端的状态,能够根据各个生物体提示更加正确的比较图像。

以上,作为在生物体中状态根据健康度发生变化的部位,以舌头为例进行了说明,但除了舌头以外,若是内脏的各器官(例如大肠的内壁)、体表的各部位(例如脸、眼睑)等状态(颜色、形状)根据健康度发生变化的部位,则也能够应用本实施方式的方法把握健康度。

例如,图29示意地表示通过内窥镜观察作为人的体内组织的大肠的内壁71而得到的图像。在该图中,在大肠的内壁71出现由溃疡引起的突起72。也可以提取该突起72的轮廓,如图30所示那样,与齿痕相同地使形状从大变化至小来制作多个比较图像5-1~5-3。即使在该情况下,也能够通过使当前通过内窥镜观察、拍摄到的拍摄图像和制作成的多个比较图像一并显示于显示部4,用户(在该情况下为医师)选择适当的比较图像,基于选择出的比较图像输出健康度的信息,从而用户以输出的信息为参考把握生物体的健康度,进行诊断。

以上,形成为利用基准图像输出装置50获取成为多个比较图像的制作的基础的基准图像,并将该数据发送至信息提供装置60的构成,但也可以形成为健康度输出装置1通过拍摄部3获取上述基准图像,并将该数据发送至信息提供装置60的构成。

以上,本实施方式的健康度输出装置1以及健康度输出系统100当然成为经验较少的医师、护士、看护师、药剂师等医疗从事者的帮助,对于体表的皮肤、粘膜等,患者本人也能够使用健康度输出装置1简单地进行诊断,也期待对每天的身体状况管理、疾病的早期发现发挥作用。

以上说明的本实施方式的健康度输出装置具备:显示部,其显示对在生物体中状态根据健康度发生变化的部位进行拍摄而得到的拍摄图像,并且显示基于对于同一生物体在上述拍摄图像的获取时之前拍摄上述部位而得到的基准图像来得到(根据基准图像通过图像处理制作(获取))的、健康度不同的多个比较图像;操作部,其用于选择上述显示部所显示的上述多个比较图像之一;以及输出部,其基于通过上述操作部选择出的比较图像来输出与上述生物体的健康度相关的信息。

根据上述的构成,在显示部显示同一生物体的规定的部位(例如舌头)的拍摄图像、通过图像处理制作成的健康度(疾病等级)不同的多个比较图像。应予说明,多个比较图像既可以由该健康度输出装置制作,也可以由外部的装置(例如服务器)制作并发送至该健康度输出装置。由此,用户能够容易地把握以拍摄图像示出的部位的状态与健康度不同的多个比较图像中的哪一个状态接近,能够通过操作部选择出最接近的比较图像。若通过操作部选择出比较图像,则基于该选择出的比较图像,由输出部输出(例如显示、声音输出)与生物体的健康度相关的信息。

像这样,同拍摄图像进行比较的对象(多个比较图像)涉及同一生物体,因此,输出的健康度排除了由与其他的生物体的个体差带来的影响。由此,用户能够正确地把握生物体的健康度(疾病等级)。并且,多个比较图像是基于基准图像得到的(通过图像处理制作成),即使对于超过了本人的过去的健康状态的变动幅度的状态,也能够作为比较图像来示出,因此,即使在诊断时的本人的健康状态超过过去的健康状态的变动幅度的情况下,也能够通过比较图像的选择以及基于该选择的健康度的输出,正确地把握本人的健康度。

上述基准图像也可以是对于上述同一生物体在健康时拍摄而得的图像。由于健康度不同的多个比较图像以健康时的状态为基准而制作成,因此,用户通过利用显示部比较拍摄图像和多个比较图像,能够容易地把握距健康时的身体状况的微妙的变化(是否是疾病的初期)。

上述多个比较图像也可以是对于成为判断生物体的健康度时的指标的至少一个诊断项目,使上述基准图像变换至健康度不同的多个阶段而得到的图像。在该情况下,能够基于在一个诊断项目中选择出的比较图像或者按照各诊断项目选择出的比较图像,由输出部输出与生物体的健康度相关的信息。

上述部位可以是生物体的舌头,上述诊断项目可以包括舌头的颜色、舌头的形状、舌苔的颜色、舌苔的厚度中的至少一个。在该情况下,能够基于对于舌头的颜色、舌头的形状、舌苔的颜色、舌苔的厚度中的至少任意一个选择出的比较图像,使与生物体的健康度相关的信息由输出部输出。

也可以:上述显示部将对于多个上述诊断项目得到(制作成)的上述多个比较图像与各诊断项目对应地显示,上述输出部基于通过上述操作部按照各上述诊断项目选择出的比较图像,输出与上述生物体的健康度相关的信息。在该情况下,用户能够基于输出的信息把握与各诊断项目对应的健康度。

也可以:上述显示部还显示上述生物体的问诊项目,该健康度输出装置还具备受理针对显示于上述显示部的上述问诊项目的回答的输入的输入部,上述输出部将与输出的上述生物体的健康度和通过上述输入部输入的回答对应的应对方法同与上述健康度相关的信息一并输出。

由于针对问诊项目的回答反映成为诊断对象的生物体的自觉症状(例如头痛、身体倦怠等),因此,能够也考虑那样的自觉症状,例如提示适当的汉方药、饮食疗法等,提示适当的应对方法。由此,用户不仅容易把握输出的健康度,也容易基于输出的应对方法努力改善健康度。

也可以:上述的健康度输出装置还具备根据上述基准图像通过图像处理制作上述多个比较图像的图像处理部。在健康度输出装置本身具备制作多个比较图像的图像处理部的构成中,能够得到上述的效果。

也可以:上述的健康度输出装置还具备基于通过上述操作部选择出的比较图像来判断上述生物体的健康度的判断部,上述输出部输出与由上述判断部判断出的健康度相关的信息。在健康度输出装置本身判断并输出生物体的健康度的构成中,能够得到上述的效果。

以上说明的本实施方式的程序是用于使计算机执行如下处理的程序,即,使显示部显示对在生物体中状态根据健康度发生变化的部位进行拍摄而得到的拍摄图像、和基于对于同一生物体在上述拍摄图像的获取时之前拍摄上述部位而得到的基准图像来得到(根据基准图像通过图像处理而制作成)的、健康度不同的多个比较图像的处理;在通过操作部选择了上述显示部所显示的上述多个比较图像之一时,使输出部基于选择出的比较图像输出与上述生物体的健康度相关的信息的处理。通过计算机执行上述程序,能够使计算机作为上述的健康度输出装置发挥作用。

也可以:以上说明的本实施方式的健康度输出系统包括上述的健康度输出装置和信息提供装置,上述信息提供装置具备根据上述基准图像通过图像处理制作上述多个比较图像的比较图像制作部、以及将上述多个比较图像的数据输出至上述健康度输出装置的通信部。

根据上述的系统,健康度输出装置能够接收由信息提供装置制作成的多个比较图像的数据,并由显示部显示上述多个比较图像,由操作部选择任意一个比较图像。因此,能够减轻健康度输出装置中的比较图像的制作的处理负担。应予说明,上述的基准图像的数据可以被从健康度输出装置发送至信息提供装置,还可以被从其他的装置(例如个人计算机)发送至信息提供装置。

也可以:该健康度输出系统还包括将上述基准图像的数据和与上述基准图像的获取时的周围光的色温度相关的信息发送至上述信息提供装置的基准图像输出装置,上述健康度输出装置包括拍摄上述生物体的上述部位来获取上述拍摄图像的拍摄部、在上述拍摄部的拍摄时照明上述生物体的上述部位的照明部、检测由上述照明部照明的上述部位的周围的光的色温度的检测部、将由上述拍摄部获取到的上述拍摄图像的图像数据以及由上述检测部检测出的上述色温度的信息发送至上述信息提供装置的通信部,上述信息提供装置还具备在从上述健康度输出装置发送的上述拍摄图像的获取时的色温度和从上述基准图像输出装置发送的上述基准图像的获取时的色温度不同的情况下,修正上述拍摄图像以及上述多个比较图像中的至少一方来使得各个比较图像的图像整体的色度相对接近于上述拍摄图像的图像整体的色度的图像修正部,上述信息提供装置的上述通信部将由上述图像修正部修正后的图像的数据发送至上述健康度输出装置。

若在拍摄图像的获取时和在成为制作多个比较图像时的基础的基准图像的获取时,照明光的种类(荧光灯的光、白炽灯的光、相机的频闪灯光(闪光灯光)等)不同,则也存在图像整体的色度(颜色)在拍摄图像和多个比较图像中不同,难以在健康度输出装置中通过操作部选择出生物体的部位的状态接近于拍摄图像的比较图像的情况。通过利用信息提供装置的图像修正部如上述那样修正拍摄图像以及多个比较图像中的至少一方,能够使图像整体的颜色在拍摄图像和多个比较图像中接近。由此,通过将修正后的图像的数据从信息提供装置发送至健康度输出装置,从而在健康度输出装置中,即使在照明光在拍摄图像的获取时和基准图像的获取时不同的情况下,用户也容易从多个比较图像中选择出与拍摄图像接近的适当的比较图像。

也可以:上述信息提供装置的上述图像修正部修正上述拍摄图像以及上述多个比较图像中的至少一方,以使得各个比较图像中的各种颜色的图像数据的平均值相对接近于上述拍摄图像的各种颜色的图像数据的平均值。通过这样的修正,能够使图像整体的颜色在拍摄图像和多个比较图像中可靠地接近。

也可以:该健康度输出系统还包括将上述基准图像的数据和与上述基准图像的获取时的周围光的色温度相关的信息发送至上述信息提供装置的基准图像输出装置,上述信息提供装置的上述通信部将从上述基准图像输出装置发送的上述基准图像的获取时的色温度的信息与上述多个比较图像的数据一同发送至上述健康度输出装置,上述健康度输出装置还具备:拍摄部,其拍摄上述生物体的上述部位来获取上述拍摄图像;照明部,其在上述拍摄部的拍摄时,对上述生物体的上述部位进行照明;检测部,其检测由上述照明部照明的上述部位的周围的光的色温度;以及修正部,其在由上述检测部检测出的上述拍摄图像的获取时的色温度和从上述信息提供装置发送的上述基准图像的获取时的色温度不同的情况下,修正上述拍摄图像以及上述多个比较图像中的至少一方,以使得各个比较图像的图像整体的色度相对接近于上述拍摄图像的图像整体的色度。

若在拍摄图像的获取时和在成为制作多个比较图像时的基础的基准图像的获取时,照明光的种类(荧光灯的光、白炽灯的光、相机的频闪灯光(闪光灯光)等)不同,则也存在图像整体的色度(颜色)在拍摄图像和多个比较图像中不同,难以在健康度输出装置中通过操作部选择出生物体的部位的状态接近于拍摄图像的比较图像的情况。通过利用健康度输出装置的修正部如上述那样修正拍摄图像以及多个比较图像中的至少一方,能够使图像整体的颜色在拍摄图像和多个比较图像中接近。由此,即使在照明光在拍摄图像的获取时和基准图像的获取时不同的情况下,用户也容易从多个比较图像中选择出与拍摄图像接近的适当的比较图像。

也可以:上述健康度输出装置的上述修正部修正上述拍摄图像以及上述多个比较图像中的至少一方,以使得各个比较图像中的各种颜色的图像数据的平均值相对接近于上述拍摄图像的各种颜色的图像数据的平均值。通过这样的修正,能够使图像整体的颜色在拍摄图像和多个比较图像中可靠地接近。

也可以:上述信息提供装置还具备基于通过上述健康度输出装置的上述操作部选择出的比较图像来判断上述生物体的健康度的健康度判断部,上述通信部将由上述健康度判断部判断出的上述健康度的信息发送至上述健康度输出装置。

健康度输出装置能够接收由信息提供装置判断出的生物体的健康度的信息,并由输出部输出。因此,能够减轻健康度输出装置中的健康度的判断的处理负担。

也可以:上述健康度判断部在通过上述健康度输出装置输入针对上述生物体的问诊项目的回答且该信息被发送至该信息提供装置的情况下,判断与判断出的上述生物体的健康度和针对上述问诊项目的回答对应的应对方法,上述通信部将由上述健康度判断部判断出的上述健康度以及上述应对方法的信息发送至上述健康度输出装置。

健康度输出装置能够接收由信息提供装置判断出的应对方法的信息,并由输出部输出。因此,能够减轻健康度输出装置中的应对方法的判断的处理负担。

以上说明的本实施方式的健康度输出装置具备显示部,该显示部显示对在生物体中状态根据健康度发生变化的部位进行拍摄而得到的拍摄图像,并且显示基于对于同一生物体在上述拍摄图像的获取时之前拍摄上述部位而得到的基准图像来得到(根据基准图像通过图像处理而制作成)的、健康度不同的多个比较图像、和与上述多个比较图像的各比较图像对应的与上述生物体的健康度相关的信息。

由于拍摄图像和比较对象(多个比较图像)涉及同一生物体,因此,输出的健康度排除了由与其他的生物体的个体差带来的影响。由此,用户能够正确地把握生物体的健康度(疾病等级)。并且,多个比较图像是基于基准图像得到(通过图像处理制作成)的图像,对于超过了本人的过去的健康状态的变动幅度的状态,也能够作为比较图像来示出,因此,即使在诊断时的本人的健康状态超过过去的健康状态的变动幅度的情况下,也能够正确地把握本人的健康度。并且,由于与比较图像对应地显示生物体的健康度的信息,因此,能够一目了然地知晓本人的健康度。

以上说明的本实施方式的健康度输出系统包括上述健康度输出装置和信息提供装置,上述信息提供装置具备根据上述基准图像通过图像处理制作上述多个比较图像的比较图像制作部、存储表示上述多个比较图像的各比较图像同与上述健康度相关的信息之间的对应关系的表格的存储部、将上述多个比较图像的数据和与上述多个比较图像的各比较图像对应的与上述健康度相关的信息发送至上述健康度输出装置的通信部。

根据上述的系统,健康度输出装置接收由信息提供装置制作成的多个比较图像的数据和与健康度相关的信息,并由显示部显示,能够使用户立即知晓健康度。

产业上的可利用性

本发明能够利用于辅助生物体的健康状态的诊断的系统。

附图标记说明:1…健康度输出装置;1a…器官图像拍摄装置(健康度输出装置);1b…器官图像拍摄装置(健康度输出装置);2…照明部;3…拍摄部;4…显示部(输出部);5…操作部(输入部);6…检测部;7…通信部;8…声音输出部(输出部);18…图像处理部(修正部);19…判断部;50…基准图像输出装置;60…信息提供装置;61…比较图像制作部;62…图像修正部;64…健康度判断部;65…通信部;100…健康度输出系统;nw…通信线路。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1