本发明涉及图像形成系统和图像形成装置。
背景技术：
一种系统具备操作显示装置和头戴式显示器(hmd)。在该系统中，为了与操作显示装置上所显示的操作画面重叠而可见，在hmd装置中增强现实地显示用于进行要求安全的设定输入的虚拟操作画面。
技术实现要素：
存在在可供多个用户使用的打印机、复合机等图像形成装置的输入装置中具有灵活键(flexiblekey)的情况。灵活键是用户能够重新分配功能(即，被按下时的动作)、或用户能够变更被重新分配的功能的键。
但是，在用户希望使用灵活键的情况下，若不是在下述(a)或(b)的情况之后，便无法将该灵活键用于上述功能，其中，(a)情况是指登录图像形成装置，该登陆的用户确定了分配于灵活键的功能，(b)情况是指按下该灵活键后登录了图像形成装置。即，用户在有效使用灵活键时，需要登录图像形成装置，对用户要求复杂的操作。
本发明是鉴于上述问题而完成的，其目的在于得到用户能够通过简单的操作调出分配于操作键的该用户固有的功能的图像形成系统、以及能够使用于该图像形成系统的图像形成装置。
本发明涉及的图像形成系统具备图像形成装置和能够与所述图像形成装置通信的便携式终端装置。所述图像形成装置具备：具有操作键的操作面板、控制器及键指令处理部。所述便携式终端装置具备拍摄装置、显示装置、触摸面板、键检测部及键指令发送部。所述键检测部将所述拍摄装置所拍摄的拍摄图像显示于所述显示装置，在所述拍摄图像内检测所述操作键的操作键图像，并确定所述操作键图像在所述显示装置中的的显示位置，当通过所述触摸面板检测针对所述操作键图像的显示位置的用户操作时，所述键指令发送部将与所述操作键对应而设定于所述便携式终端装置中的隐私功能的指令发送给所述图像形成装置。所述键指令处理部从所述便携式终端装置接收到所述指令时，使所述控制器执行所述隐私功能。
本发明涉及的图像形成装置具备：具有操作键的操作面板、控制器及键指令处理部。所述键指令处理部从所述便携式终端装置接收到与所述操作键对应而设定于所述便携式终端装置中的隐私功能的指令时，使所述控制器执行所述隐私功能。
(发明效果)
根据本发明，用户能够通过简单的操作调出分配于图像形成装置的操作键的该用户固有的功能。
本发明的上述或其他目的、特征及优点通过附图及以下的详细说明将更加清楚。
附图说明
图1是表示本发明实施方式涉及的图像形成系统的构成的图。
图2是表示图1中的便携式终端装置1的构成的框图。
图3是表示图1中的图像形成装置2的构成的框图。
图4是表示图1及图3中的图像形成装置2的操作面板32的一例的图。
图5是表示显示有图4所示操作面板32的拍摄图像的便携式终端装置1的一例的图。
图6是表示实施方式二中显示有图4所示操作面板32的拍摄图像的便携式终端装置1的一例的图。
具体实施方式
以下，根据附图对本发明的实施方式进行说明。
实施方式一.
图1是表示本发明实施方式涉及的图像形成系统的构成的图。在图1所示的系统中，由使用图像形成装置2的用户携带智能手机、平板pc等的便携式终端装置1。便携式终端装置1与图像形成装置2之间能够通过无线通信等方式相互进行通信。另外，在该系统中，多个便携式终端装置1分别由多个用户所携带，并且，能够通过便携式终端装置1来使用图像形成装置2。
图2是表示图1中的便携式终端装置1的构成的框图。
便携式终端装置1具备无线通信装置11、显示装置12、输入装置13、gps装置14、方向检测装置15、存储装置16、运算处理装置17以及拍摄装置18。
无线通信装置11是规定的无线通信标准的通信电路。无线通信装置11为无线lan接口和/或便携式电话网的接口(rf接口、基带部等)。
显示装置12是配置于便携式终端装置1的框体上的液晶显示器等的装置，其向用户显示各种画面。
输入装置13是检测用户操作的装置，包括配置于显示装置12上的触摸面板、硬键等装置。
gps装置14是利用gps(globalpositioningsystem：全球定位系统)确定该gps装置14、即便携式终端装置1的绝对位置(纬度、经度及高度)的装置。
方向检测装置15具有陀螺传感器、电子罗盘等，是检测便携式终端装置1的姿态(朝向)的装置。
存储装置16是闪存器等的非易失性存储装置，其存储程序及数据。存储装置16中存储有作为应用程序的键重写(keyoverride)程序16a和键设定数据16b。
运算处理装置17是具有cpu(centralprocessingunit：中央处理器)、rom(readonlymemory：只读存储器)、ram(randomaccessmemory：随机存取存储器)等的计算机，并且，运算处理装置17通过将程序从存储装置16或rom加载至ram并由cpu执行该程序，从而作为各种处理部进行工作。
在该实施方式中，运算处理装置17通过执行键重写程序16a，从而作为键检测部21、键指令发送部22以及键重写显示控制部23进行工作。
键检测部21将拍摄装置18所拍摄的拍摄图像显示于显示装置12，在该拍摄图像内检测图像形成装置2的特定操作键的操作键图像，并确定操作键图像在显示装置12中的显示位置。另外，在图像形成装置2中，该操作键可以为硬键也可以为软键。另外，该操作键可以为灵活键，也可以为固定功能的操作键。
例如，图像形成装置2的操作面板上的包含操作键在内的该操作键周边图像的图像数据被事先登记在键设定数据16b内，键检测部21根据该图像数据所表示的操作键及该操作键周边的特征量(边缘形状等)，在拍摄图像内检索相同的特征量，从而检测操作键图像。此时，例如，也可以将拍摄图像内的操作面板的形状数据事先存储于存储装置16中，根据该形状数据，确定拍摄图像内的操作面板的倾斜角度，对拍摄图像内的操作面板的图像进行坐标变换，使其变为直立状态(erectedstate)且为基准尺寸，然后，在拍摄图像内检索具有相同特征量的部分。
当通过输入装置13的触摸面板检测针对被检测出的操作键图像的显示位置的用户操作时，键指令发送部22通过无线通信装置11将与该操作键对应而设定于便携式终端装置1中的隐私功能的指令发送给图像形成装置2。
另外，键指令发送部22也可以构成为：当检测针对操作键图像的显示位置的用户操作时，通过输入装置13的触摸面板确定用户操作的按下压力，从设定于便携式终端装置1中的与操作键对应的隐私功能的多个任选设定值中，选择与被确定的按下压力相对应的任选设定值，并将带有所选择的任选设定值的隐私功能的指令发送给图像形成装置2，使图像形成装置2利用由该任选设定值指定的设定而执行该隐私功能。
例如，当检测针对复印功能的操作键图像的用户操作时，通过输入装置13的触摸面板实时确定该用户操作的按下压力，随着被确定的按下压力变大，以“二合一打印”、“四合一打印”、“四合一打印且双面打印”、以及“四合一打印且双面打印且环保打印”的顺序指定任选设定值，当前指定的任选设定值通过例如弹出式窗口显示等而被显示，最终选择与用户操作即将结束时的按下压力对应的任选设定值。即，越强力地按下，越能够多地抑制调色剂及印刷用纸等的易耗品的消耗。接着，将带有所选择的任选设定值的指令(在此为带登录功能的复印功能的指令)发送给图像形成装置2，以由该任选设定值指定的设定执行复印功能。
另外，例如，当检测针对发送(send)功能的操作键图像的用户操作时，通过输入装置13的触摸面板实时确定该用户操作的按下压力，随着被确定的按下压力变大，以扫描至电子邮件(scantoemail)时的自己的电子邮件地址、扫描至smb(servermessageblock)时的自己的终端设备的文件夹、扫描至ftp(filetransferprotocol：文件传输协议)时的自己的终端设备、扫描至电子邮件时的地址群的顺序指定任选设定值，当前指定的任选设定值通过例如弹出式窗口显示等而被显示，最终选择与用户操作即将结束时的按下压力对应的任选设定值。接着，将带有所选择的任选设定值的指令(在此为带登录功能的发送功能的指令)发送给图像形成装置2，以由该任选设定值指定的设定执行发送功能。
键设定数据16b中记述有由该便携式终端装置1的用户指定的隐私功能，键指令发送部22读出键设定数据16b而确定隐私功能，并发送该指令。
另外，在该操作键为软键的情况下，也可以如下操作。对于图像形成装置2的每个操作画面的画面id，将该操作画面内的软键的id及表示位置的操作画面数据预先存储于存储装置16中，键检测部21从图像形成装置2的控制器41获取当前显示的操作画面的画面id，并根据操作画面数据对所获取的画面id的操作画面的软键的位置进行确定。接着，当通过输入装置13的触摸面板检测针对被确定的操作键图像(即，该软键)的显示位置的用户操作时，键指令发送部22通过无线通信装置11将与该软键的id对应而设定于便携式终端装置1中的隐私功能的指令发送给图像形成装置2。
键重写显示控制部23根据由键检测部21确定的操作键图像的显示位置，在显示装置12上，于该操作键图像上或者与其周围相邻的位置上显示表示上述隐私功能的标题。
图3是表示图1中的图像形成装置2的构成的框图。
图1所示的图像形成装置2具备存储装置31、操作面板32、运算处理装置33、印刷装置34、图像读取装置35、传真装置36、通信装置37等。
存储装置31是闪存器等可重写的非易失性存储装置。
操作面板32配置于框体的上面前侧，且具备液晶显示器等显示装置32a以及硬键、触摸面板等输入装置32b。显示装置32a向用户显示各种画面。通过显示装置32a中所显示的键图像和触摸面板，实现软键。输入装置32b接收由用户输入的针对硬键或软键的用户操作。
运算处理装置33是具有cpu、rom及ram的计算机，并且，运算处理装置33通过将存储于rom或未图示的存储装置中的程序加载至ram并由cpu执行该程序，从而作为各种处理部进行工作。运算处理装置33作为控制器41和键指令处理部42进行工作。
印刷装置34根据图像数据将原稿图像等印刷于印刷用纸上。具体而言，印刷装置34印刷由用户的印刷要求所指定的原稿图像并将据此得到的印刷物输出。另外，图像读取装置35从原稿光学性地读取原稿图像，并生成该原稿图像的图像数据。传真装置36基于图像数据生成原稿图像等的传真信号并发送该传真信号，并且，从外部接收传真信号并根据该传真信号生成图像数据。通信装置37是无线或有线网络的接口等，其与外部装置(便携式终端装置1、个人计算机等的其他主机设备等)之间进行数据通信。
控制器41控制印刷装置34、图像读取装置35、传真装置36、通信装置37等内部装置执行各种处理。例如，当接收到印刷要求时，控制器41使印刷装置34印刷由该印刷要求所指定的原稿图像。
键指令处理部42使用通信装置37从便携式终端装置1接收到上述指令时，使控制器41执行由该指令指定的隐私功能。
另外，控制器41在检测针对操作面板32的输入装置32b的用户操作时，执行图像形成装置2中所设定的默认功能。上述隐私功能为在该默认功能上追加了规定功能的功能。
接着，对上述图像形成系统的动作进行说明。
在便携式终端装置1中，当执行键重写程序16a时，键检测部21将拍摄装置18的拍摄图像显示于显示装置12，并在拍摄图像内搜索已登记于键设定数据16b中的操作键的操作键图像。在该状态下，当该操作键进入拍摄装置18的视场内时，键检测部21在拍摄图像内检测该操作键图像。
图4是表示图1及图3中的图像形成装置2的操作面板32的一例的图。图5是表示显示有图4所示操作面板32的拍摄图像的便携式终端装置1的一例的图。
例如，在图4所示的操作面板32中，三个操作键32c被登记于键设定数据16b中，三个操作键32c的默认功能为复印功能(具体为复印功能的操作画面的显示)、发送功能(发送功能的操作画面的显示)、以及传真功能(传真功能的操作画面的显示)，在隐私功能分别为于其默认功能上追加有登录功能的功能时，键检测部21对上述操作键32c的操作键图像在拍摄图像内的显示位置进行确定，并且，例如如图5所示，键重写显示控制部23将表示上述隐私功能的标题与各操作键图像邻接而显示于显示装置12上。
接着，当通过输入装置13的触摸面板检测针对被确定的操作键图像的显示位置的用户操作时，键指令发送部22根据键设定数据16b对与该操作键对应而设定于便携式终端装置1中的隐私功能进行确定，并通过无线通信装置11将该隐私功能的指令发送给图像形成装置2。
在图像形成装置2中，当键指令处理部42接收到该指令时，使控制器41执行由该指令所指定的隐私功能。
例如，在图5所示的例子的情况下，便携式终端装置1的用户的用户认证信息(例如用户id、或者成对的用户id和密码)与指令一同被发送给图像形成装置2，作为隐私功能，执行了登录功能(即，基于该用户认证信息的自动登录)之后，执行复印功能、发送功能或传真功能。
如上所述，根据上述实施方式一，在便携式终端装置1中，键检测部21将拍摄装置18所拍摄的拍摄图像显示于显示装置12，在拍摄图像内检测操作键32c的操作键图像，并确定操作键图像在显示装置12中的显示位置，当通过输入装置13的触摸面板检测针对该操作键图像的显示位置的用户操作时，键指令发送部22将与该操作键对应而设定于便携式终端装置1中的隐私功能的指令发送给图像形成装置2。在图像形成装置2中，键指令处理部42从便携式终端装置1接收到该指令时，使控制器41执行由该指令所指定的隐私功能。
由此，通过使用便携式终端装置1，用户能够通过简单的操作调出被分配于图像形成装置2的操作键32c的该用户固有的功能。
实施方式二.
图6是表示实施方式二中显示有图4所示操作面板32的拍摄图像的便携式终端装置1的一例的图。
在实施方式二中，例如如图6所示，便携式终端装置1的键检测部21将追加键图像51与上述操作键图像建立关联而显示于显示装置12。另外，与追加键图像51对应的键是不存在于图像形成装置2的操作面板32上的虚拟键(即，便携式终端装置1的软键)。
当通过输入装置13的触摸面板检测针对操作键32c的操作键图像显示位置的用户操作、或者针对追加键图像51的显示位置的用户操作时，键指令发送部22确定该用户操作的按下压力，从与追加键图像51对应而设定于便携式终端装置1中的的隐私功能的多个任选设定值中，选择与该按下压力相对应的任选设定值，并将带有所选择的任选设定值的隐私功能的指令发送给图像形成装置2，使图像形成装置2以由该任选设定值指定的设定执行隐私功能。
例如，在图6所示的例子中，显示了针对复印功能的操作键32c的追加键图像51，追加键图像51中包含有复印功能的任选设定值的列表(“二合一打印”、“四合一打印”、“四合一打印且双面打印”、以及“四合一打印且双面打印且环保打印”)。接着，当检测针对复印功能的操作键图像或追加键图像51的用户操作时，通过输入装置13的触摸面板实时确定该用户操作的按下压力，随着被确定的按下压力变大，以“二合一打印”、“四合一打印”、“四合一打印且双面打印”、以及“四合一打印且双面打印且环保打印”的顺序指定任选设定值，当前指定的任选设定值被强调显示(例如显示色的变更、翻转显示等)，最终选择与用户操作即将结束时的按下压力对应的任选设定值。即，越强力地按下，越能够多地抑制调色剂及印刷用纸等的易耗品的消耗。接着，将带有所选择的任选设定值的指令(在此为带登录功能的复印功能的指令)发送给图像形成装置2，以由该任选设定值指定的设定执行复印功能。
另外，例如也可以显示针对发送功能的操作键32c的追加键图像。该情况下，该追加键图像51中例如包含发送功能的协议及地址的任选设定值的列表(扫描至电子邮件时的自己的电子邮件地址、扫描至smb时的自己的终端设备的文件夹、扫描至ftp时的自己的终端设备、以及扫描至电子邮件时的地址群)。接着，当检测针对发送功能的操作键图像或追加键图像的用户操作时，通过输入装置13的触摸面板实时确定该用户操作的按下压力，随着被确定的按下压力变大，以扫描至电子邮件时的自己的电子邮件地址、扫描至smb时的自己的终端设备的文件夹、扫描至ftp时的自己的终端设备、扫描至电子邮件时的地址群的顺序指定任选设定值，当前指定的任选设定值被强调显示，最终选择与用户操作即将结束时的按下压力对应的任选设定值。接着，将带有所选择的任选设定值的指令(在此为带登录功能的发送功能的指令)发送给图像形成装置2，以由该任选设定值指定的设定(协议及地址)执行发送功能。
另外，实施方式二涉及的图像形成系统的其他结构及动作与实施方式一相同，故省略说明。
如上所述，根据上述实施方式二，由于显示追加键图像51，因此能够简单地一并进行追加的详细设定。
实施方式三.
在实施方式三中，当通过输入装置13的触摸面板检测针对操作键图像的显示位置的用户操作时，便携式终端装置1的键指令发送部22利用方向检测装置15确定便携式终端装置1的朝向，从与操作键32c对应而设定于便携式终端装置1中的隐私功能的多个任选设定值中，选择与所确定的朝向相对应的任选设定值，并将带有所选择的任选设定值的隐私功能的指令发送给图像形成装置2，使图像形成装置2以由该任选设定值指定的设定执行该隐私功能。
例如，当检测针对复印功能的操作键图像的用户操作时，确定此时的便携式终端装置1的朝向，在朝向(即，偏离直立状态的倾斜角)为向左90度的情况下，任选设定值设为“无”，在朝向为向左45度的情况下，任选设定值设为“二合一打印”，在朝向为直立(倾斜角为0度)的情况下，任选设定值设为“四合一打印”，在朝向为向右45度的情况下，任选设定值设为“四合一打印且双面打印”，在朝向为向右90度的情况下，任选设定值设为“四合一打印且双面打印且环保打印”。另外，也可以将以当前的倾斜度指定的任选设定值通过例如弹出式窗口显示等进行显示。
另外，实施方式三涉及的图像形成系统的其他结构及动作与实施方式一或实施方式二相同，故省略说明。
另外，也可以根据便携式终端装置1的朝向、以及如实施方式一或实施方式二所述的按下压力这两者选择任选设定值。
例如，(a)在检测了针对发送功能的操作键图像的用户操作后，在朝向为向左90度，并且按下压力是五个等级中的第二等级的情况下，选择二合一打印作为发送功能的任选设定值；(b)在检测了针对传真功能的操作键图像的用户操作后，在朝向为直立状态，并且按下压力是五个等级中的第三等级的情况下，选择四合一打印作为传真功能的任选设定值；(c)在检测了针对复印功能的操作键图像的用户操作后，在朝向为向右90度，并且按下压力是五个等级中的第五等级的情况下，选择四合一打印且双面打印作为复印功能的任选设定值。
如上所述，根据上述实施方式三，通过调整便携式终端装置1的朝向，能够简单地一并进行追加的详细设定。
需要说明的是，关于上述实施方式，也可以在不脱离其主旨和范围且不减弱其所意图的优点的范围内进行各种变更和修改，由于这些变更和修改对于本领域技术人员而言是显而易见的，因而这些变更和修改也应该包含在本申请权利要求的范围内。
例如，在上述实施方式中，键重写程序16a也可以存储于计算机可读的记录介质中。该情况下，将键重写程序16a从该记录介质安装至存储装置16中。
另外，在上述实施方式中，也可以在便携式终端装置1中将说明隐私功能及选择功能的帮助或提示(guidance)与上述操作键图像或追加键图像建立关联而进行显示。
另外，在上述实施方式中，图像形成装置2也可以以一定的时间间隔发送信标电波，用户携带便携式终端装置1进入可接收该信标电波的区域(即，接近图像形成装置2)，便携式终端装置1接收到该信标电波时，便自动地启动上述键重写程序16a。由此，用户无需进行以手动方式启动键重写程序16a的操作。
(工业上的可利用性)
本发明例如可适用于图像形成装置。