显示信息的方法和使用该方法的移动终端的制作方法

专利名称：显示信息的方法和使用该方法的移动终端的制作方法
技术领域：
本发明的实施方式可以涉及移动终端，更具体地，涉及一种显示信息的方法和/ 或使用该方法的移动终端。
背景技术：
终端可以包括移动/便携式终端和固定终端。并且根据是否可由用户直接携带而可以将移动终端分成手持终端或车载终端。终端可以拍摄静止图像或运动图像、播放音乐或视频文件、玩游戏、接收广播等， 从而被实现为集成的多媒体播放器。为了支持和实现这些复杂的功能，已经通过硬件或软件对终端进行了各种尝试。根据一种示例方案的终端可以通过利用增强现实(AR Augmented reality)技术向用户提供关于真实对象的各种信息。可以应用AR技术，使得当终端向服务器提供GSP信息和/或地面信息时，服务器可以基于所提供的信息来确定移动终端的位置和/或方向，并且可以提供与终端的相机正在拍摄的图像的主体相关的向导信息(即，AR信息)。根据示例方案的终端可以发送文本消息或传输拍摄的照片图像作为向对方传递各种信息的方式。终端用户可以通过按键(键区)、虚拟键区等输入字符，并且可以将字符发送给对方以传送详细的信息。字符输入方法可以包括应用了汉加字母(Hangul)的原理的输入方法，汉加字母是一种在键区上布置键盘和输入汉加字母的辅音与元音等的输入方法。例如，可以这样来执行在键区上设置键盘的输入方法，即，可以向多个汉加字母的辅音和元音分配键区的相应数量个键，发现键区上需要输入的汉加字符的键位置，并且根据汉加字母的辅音和元音的设置顺序将数字键输入多次。

发明内容
实施方式可以提供显示信息并允许用户容易地识别他或她所期望的增强现实 (AR)信息并有效地发送关于用户正在观看的对象或该用户周围的对象的信息的方法、发送信息的方法、和/或使用这些方法的移动终端。根据一种实施方式，可以提供一种显示信息的方法。该方法可以包括以下步骤显示与增强现实(AR)信息相关的对象；确定是否显示针对该对象的AR信息；以及根据所述确定来显示(或不显示)针对该对象的AR信息。根据一种实施方式，可以提供一种移动终端，该移动终端包括显示单元，其显示与增强现实(AR)信息相关的对象；和控制器，其确定是否显示针对该对象的AR信息并且根据所述确定来显示(或不显示)针对该对象的AR信息。根据一种实施方式，可以提供一种发送移动终端的信息的方法。该方法可以包括以下步骤拍摄目标对象的图像；获取与被拍摄了图像的目标对象相关的增强现实(AR)信息或用于访问该AR信息的AR生成信息；以及将AR信息或AR生成信息发送到不同的移动终端。根据一种实施方式，提供了一种发送移动终端的信息的方法。该方法可以包括以下步骤拍摄目标对象的图像；识别在所拍摄的目标对象的图像上显示的字符、数字、符号或图形；以及将识别结果发送到不同的移动终端。根据一种实施方式，可以提供一种发送移动终端的信息的方法。该方法可以包括以下步骤拍摄目标对象的图像；获取与被拍摄了图像的目标对象相关的增强现实(AR)信息或用于访问该AR信息的AR生成信息，或者识别在所拍摄的目标对象的图像上显示的字符、数字、符号或图形；以及将该AR信息、AR生成信息、以及识别结果中的至少一个发送到不同的移动终端。根据一种实施方式，可以提供一种移动终端，该移动终端包括照相机，其拍摄目标对象的图像；控制器，其获取与被拍摄了图像的目标对象相关的增强现实(AR)信息或用于访问该AR信息的AR生成信息；以及无线通信单元，其将AR信息或AR生成信息发送到不同的移动终端。根据一种实施方式，可以提供一种移动终端，该移动终端包括照相机，其拍摄目标对象的图像；控制器，其识别在所拍摄的目标对象的图像上显示的字符、数字、符号或图形；以及无线通信单元，其将识别结果发送到不同的移动终端。根据一种实施方式，可以提供一种移动终端，该移动终端包括照相机，其拍摄目标对象的图像；控制器，其获取与被拍摄了图像的目标对象相关的增强现实(AR)信息或用于访问该AR信息的AR生成信息，或者识别在所拍摄的目标对象的图像上显示的字符、数字、符号或图形；以及无线通信单元，其将AR信息、AR生成信息和识别结果中的至少一个发送到不同的移动终端。在显示信息的方法和使用该方法的移动终端中，当在画面上显示多种类型的AR 信息时，按照对象、画面区域和/或层来显示该多种类型的AR信息，以使得用户可以容易地只识别他或她期望的信息。在显示信息的方法和使用该方法的移动终端中，关于当前正在被移动终端拍摄的图像或已经被移动终端拍摄了图像的对象的信息可以以诸如文本、图像、AR生成信息、AR 信息等多种形式发送，因此用户可以向对方有效地发送关于用户正在观看的对象或用户周围的对象的信息。


方案和实施方式可以参照以下附图详细地进行描述，在附图中，相同的附图标记表示相同的要素，并且在附图中图1是根据本发明一种实施方式的移动终端的框图；图2例示了根据一种示例性实施方式的其中移动终端显示(或不显示)对象的增强现实(AR)信息的一种示例；图3例示了根据一种示例性实施方式的其中移动终端移动所显示的针对对象的 AR信息的一种示例；图4例示了根据一种示例性实施方式的其中移动终端显示针对在预定画面区域的选择区域中出现的对象的AR信息的一种示例；
图5例示了根据一种示例性实施方式的其中移动终端显示(或不显示)针对在接收到触摸输入的画面区域中出现的对象的AR信息的一种示例；图6是例示了根据一种示例性实施方式的其中移动终端显示针对在通过区域选择指定的画面区域中出现的对象的AR信息的一种示例；图7例示了根据一种示例性实施方式的其中移动终端显示(或不显示)针对在通过区域选择指定的画面区域中出现的对象的AR信息的一种示例；图8例示了根据一种示例性实施方式的其中移动终端不显示针对按层分类的对象的AR信息的一种示例；图9例示了根据一种示例性实施方式的其中移动终端显示针对按层分类的对象的AR信息的一种示例；图10例示了根据一种示例性实施方式的其中移动终端按画面区域和层来显示AR 信息的一种示例；图11是例示根据一种示例性实施方式的显示信息的方法的流程图；图12是例示根据一种示例性实施方式的显示信息的方法中在显示AR信息前预先设定显示画面区域的流程图；图13是例示根据一种示例性实施方式的在显示AR信息的方法中显示AR信息并接着设定显示画面区域的流程图；图14是例示根据一种示例性实施方式的在显示AR信息的方法中显示AR信息并接着设定非显示画面区域的流程图；图15例示了根据一种示例性实施方式的其中移动终端将关于目标对象的AR信息包括在短消息中的示例；图16例示了其中移动终端将从图像识别出的字符包括在短文本消息中的示例；图17是例示根据一种示例性实施方式的发送信息的方法的流程图；图18是例示根据一种示例性实施方式的发送信息的方法的流程图；以及图19是例示根据一种示例性实施方式的发送信息的方法的流程图。
具体实施例方式下面，本发明的实施方式可以参照附图来详细地描述，不管图序号如何，相同的标号表示相同或相关的组件，并且可以略去多余的说明。在描述本发明的过程中，如果在下面的详细说明中，对相关的已知功能或构造的详细解释被认为不必要地转移了本发明的要点，则略去这样的说明，但本领域中的技术人员应当理解。在下面的描述中，仅为了便于对本发明的说明，可以使用用于表示要素的后置用语“模块”、“部件”或“单元”，这些后置用语本身并不具有任何重要含义。本发明的附图旨在便于理解本发明，并且不应将本发明理解为受到附图的限制。移动终端的整体构造移动终端可以包括移动电话、智能电话、笔记本计算机、数字广播接收器、PDA(个人数字助理)、PMP(便携式多媒体播放器)和导航装置等。本领域中的人员应当理解，除了专门针对移动功能而构造的任何组件以外，根据本发明实施方式的构造还可以应用于固定类型的终端(例如数字电视机、台式计算机等)。
图1是根据本发明的一种实施方式的移动终端的框图。也可以提供其它的实施方式和构造。移动终端100可以包括无线通信单元110、音频/视频(A/V)输入单元120、用户输入单元130、感测单元140、输出单元150、存储单元160、接口单元170、控制器180以及电源单元190等。图1示出了具有各种组件的移动终端100，但是并不需要实现所有示出的组件。另选的是，可以实现更多或较少的组件。无线通信单元110可以包括允许移动终端100与移动终端100所在的无线通信系统和/或网络之间的无线通信的一个或更多个组件。例如，无线通信单元110可以包括广播接收模块111、移动通信模块112、无线因特网模块113、短距离通信模块114以及定位模块 115。广播接收模块111可以通过广播信道从外部的广播管理服务器(或其它网络实体)接收广播信号和/或广播相关信息。广播相关信息可以是指与广播信道、广播节目和/ 或广播服务提供商相关联的信息。也可以经由移动通信网络来提供广播相关信息，在此示例中，可以由移动通信模块112接收该广播相关信息。通过广播接收模块111接收到的广播信号和/或广播相关信息可以存储在存储器160(或其他类型的存储介质)中。移动通信模块112可以向基站(例如，接入点、Node B等)、外部终端(例如，其它用户设备)和服务器(或其它网络实体)中的至少一个发送无线信号和/或从基站(例如， 接入点、Node B等)、外部终端(例如，其它用户设备)和服务器(或其它网络实体)中的至少一个接收无线信号。根据文本和/或多媒体消息的接收和/或发送，这些无线信号可以包括语音呼叫信号、视频呼叫信号和/或各种类型的数据。无线因特网模块113可以支持移动终端100的无线因特网接入。无线因特网模块113可以在内部或外部连接到移动终端100。所实现的无线因特网接入技术可以包括WLAN (无线局域网)(Wi-Fi)、Wibro (无线宽带)、Wimax (全球微波接入互操作性)、 HSDPA (高速下行链路分组接入)、LTE (长期演进)、LTE-A (长期演进_高级)等。短距离通信模块114可以是用于支持短距离通信的模块。短距离通信模块的一些示例可以包括蓝牙 、射频识别(RFID:radio frequency identification)、红外数据协会 (IrDA Infrared data association)、超宽带(UffB :ultra_wideband)禾口 / 或 ZigBee 等。定位模块115可以是用于检查或获得移动终端100的定位(或位置)的模块。定位模块115的一个示例是GPS (全球定位系统)。参考图1，A/V输入单元120可以接收音频或图像信号。A/V输入单元120可以包括照相机121(或其他图像拍摄装置)或麦克风122(或其它声音采集装置)。照相机121 可以对由处于视频拍摄模式或图像拍摄模式中的图像拍摄装置所获得的静止图像或视频的图像帧进行处理。可以在显示单元151(或显示单元)或其它视觉输出装置上显示处理后的图像帧。经过照相机121处理的图像帧可以存储在存储器160(或其它存储介质)中，或者可以通过无线通信单元110发送。根据移动终端100的构造，可以设置两个或更多个照相机 121。在电话呼叫模式、记录模式和/或语音识别模式等中，麦克风122可以经由麦克风和/或其他装置接收声音，并将该声音处理为音频数据。可以转换经过处理的音频(语音)数据以输出为能够在电话呼叫模式的情况下经由移动通信模块112发送到移动通信基站(或其它网络实体)的格式。麦克风122可以执行各种类型的噪声去除(或抑制)算法以去除(或抑制)在接收和发送音频信号的过程中产生的噪声或干扰。用户输入单元130(或其他用户输入装置)可以根据用户输入的命令而产生输入数据，以控制移动终端100的各种操作。用户输入单元130可以包括键区、薄膜开关(dome switch)、触摸板(例如，检测由于接触而产生的电阻、压力、电容等的变化的触敏构件)、滚轮(jog wheel)和/或拨动开关(jog switch)等。感测单元140 (或其它检测装置)可以检查移动终端100的当前状况(或状态)， 诸如移动终端100的打开/闭合状态、移动终端100的位置、用户是否与移动终端100接触、 移动终端100的取向、和/或移动终端100的加速或减速移动和方向等，并可以生产用于控制移动终端100的操纵的命令或信号。例如，当把移动终端100实现为滑盖式移动电话时， 感测单元140可以感测该滑盖式电话是打开的还是闭合的。另外，感测单元140可以检测感测电源单元190是否提供电力、或接口单元170是否与外部设备耦接。感测单元140可以包括接近单元141。输出单元150可以以视觉、听觉和/或触觉方式(例如，音频信号、图像信号、告警信号、振动信号等)提供输出。输出单元150可以包括显示器151、音频输出模块152、告警器(或告警单元)153、和/或触觉模块IM等。显示器151可以显示(输出)在移动终端100中经过处理的信息。例如，当移动终端100处于电话呼叫模式中时，显示器151可以显示与呼叫或其它通信(诸如文本消息收发、和/或多媒体文件下载等)相关联的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频呼叫模式或图像拍摄模式时，显示器151可以显示拍摄的图像和/或接收到的图像、和/或示出了视频或图像以及与该视频或图像相关的功能的UI或GUI等。显示器151可以包括液晶显示器(IXD)、薄膜晶体管液晶显示器(TFT-IXD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器、和/或电子墨(e-ink)显示器等中的至少一种。这些不同类型的显示器中的某些显示器可以使得能够看到外部的透明或透光显示器，因此可以被称为透明显示器。透明显示器例如可以是TOLED(透明有机发光二极管) 显示器等。通过这样的构造，用户可以通过由终端机体的显示器151占据的区域看到位于终端机体后侧的物体。根据移动终端100的尤其优选的实施方式，移动终端100可以包括两个或更多个显示器(或其它显示装置)。例如，多个显示器可以分开或一体地布置在移动终端100的一个表面上，或者可以分开地布置在彼此不同的表面上。当显示器151与检测触摸操作的传感器(此后称为触摸传感器)以分层的方式交叠以形成触摸屏时，显示器151可以既用作输入装置又用作输出装置。触摸传感器可以具有触摸膜、触摸片和/或触摸板等形式。触摸传感器可以将施加到显示器151的特定部分的压力或在显示器151的特定部分产生的电容和/或其他参数的变化转换成电输入信号。触摸传感器可以检测施加触摸时的压力以及触摸的位置或面积。当存在对触摸传感器的触摸输入时，相对应的一个信号(多个信号)可以被发送到触摸控制器。触摸控制器处理该信号并将相对应的数据发送到控制器180。因此，控制器 180能够识别出显示器151的哪个部分被触摸。接近单元141可以被设置在触摸屏内或触摸屏附近。接近单元141是在没有物理接触的情况下利用电磁力或红外线来检测是否存在相对于特定检测表面的物体或位于特定检测表面附近的物体的传感器。因此，与接触式传感器相比，接近单元141可以具有长得多的寿命，并且接近单元141可以用于各种用途。接近单元141的示例可以包括透射型光电传感器、直接反射型光电传感器、镜面反射型光电传感器、RF振荡型接近传感器、电容式接近传感器、磁接近传感器、和/或红外接近传感器等。如果触摸屏是电容式接近传感器，则可以根据指针的接近利用磁场的变化来检测指针的接近。在此示例中，可以将触摸屏(触摸传感器)归类为接近单元。音频输出模块152可以在呼叫信号接收模式、呼叫模式、录制模式、语音识别模式、和/或广播接收模式等中转换并输出从无线通信单元110接收到的和/或存储在存储器160中的声音音频数据。音频输出模块152可以提供与移动终端100所执行的特定功能相关的音频输出(例如，呼叫信号接收音、消息接收音等)。音频输出模块152可以包括接收器、扬声器、蜂鸣器和/或其它声音产生装置。告警器153(或其它类型的用户通知装置)可以提供输出以通知移动终端100的事件的发生。事件可以包括呼叫接收、消息接收、按键信号输入、触摸输入等。除了音频或视频输出外，告警器153可以按照不同的方式来提供输出，以通知事件的发生。例如，告警器 153可以以振动的形式提供输出(或者其它触觉或感觉输出)。当接收到呼叫、消息和/或一些其它的入局通信时，告警器153可以提供触觉输出(即，振动)以通知用户。通过提供这样的触觉输出，即使用户的移动电话放在衣袋中，用户也能够识别出各种事件的发生。通知事件的发生的输出也可以通过显示器151和/或音频输出模块152来提供。显示器151 与音频输出模块152可以被分类成告警器153的一部分。触觉模块IM可以产生用户可以感觉到的各种触觉效果。触觉模块产生的触觉效果的一种示例可以是振动。可以对触觉模块154的强度和模式进行控制。例如，不同的振动可以组合地输出或顺序输出。除了振动以外，触觉模块巧4可以产生如刺激效果的多种其它触觉效果，诸如由针列对接触皮肤表面垂直移动、空气通过喷射孔或吸入孔的喷射力和/或吸力、与皮肤的接触、与电极的接触、静电力、和/或利用能够吸收或产生热的组件来再现冷或热的感觉而产生的效果。触觉模块IM可以使用户能够通过诸如用户的手指或手臂等的肌觉来感觉触觉效果，并且通过直接接触来传递触觉效果。根据移动终端100的构造，可以设置两个或更多个触觉模块154。存储器160可以存储用于由控制器180执行的处理和控制操作的软件程序，和/ 或可以临时地存储输入或输出的数据(例如，电话薄、消息、静态图像等)。存储器160还可以存储关于当向触摸屏输入触摸时输出的各种模式的振动和音频信号的数据。存储器160可以包括以下类型的存储介质中的至少一种闪存、硬盘、多媒体卡式微型存储器、卡式存储器(例如，SD或》)存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘和/或光盘。移动终端100可以与在因特网上执行存储器160 的存储功能的网络存储器相关地工作。接口单元170可以充当与连接到该移动终端的外部设备的接口。例如，接口单元可以向外部设备发送数据，接收并向移动终端100的各个组件传输电力，和/或将移动终端 100的内部数据发送到外部设备。例如，接口单元170可以包括有线/无线耳机端口、外部电源端口、有线/无线数据端口、存储卡端口、用于连接具有身份模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、和/或耳机端口等。身份模块可以是存储用于对使用移动终端100的权限进行认证的多种信息的芯片，并且可以包括用户身份模块(UIM :user identity module)、订户身份模块(SIM subscriber identity module)禾口 / 或通用订户身份模块(USIM :universal subscriber identify module)等。另外，具有身份模块的装置(此后将其称为“身份装置”)可以采用智能卡的形式。因此，身份装置可以通过端口与移动终端100连接起来。当移动终端100与外部支架连接时，接口单元170可以充当允许从支架通过该接口单元向移动终端100提供电力的通道，和/或充当允许将用户从支架输入的各种命令传输到移动终端100的通道。从支架输入的各种命令信号或电力都可以起到识别移动终端 100被正确地固定在支架上的信号的作用。控制器180可以控制移动终端的总体操作。例如，控制器180可以执行与语音呼叫、数据通信和/或视频呼叫等相关的控制和处理。控制器180可以包括用于再现多媒体数据的多媒体模块181。多媒体模块181可以被构造在控制器180内，和/或可以被构造为与控制器180分立。控制器180可以执行图案识别处理，以分别将在触摸屏上执行的手写输入或绘图输入识别为字符或图像。电源单元190可以接收外部电力或内部电力，并且可以在控制器180的控制下提供用于操作各个元件和组件所需的适当电力。本文中所述的实施方式可以利用例如软件、硬件或它们的任意组合而在计算机可读介质和/或类似介质中实现。对于硬件实现来说，本文中所述的实施方式可以利用以下器件中的至少一个来实现专用集成电路(ASIC Application specific integrated circuits)、数字信号处理器(DSP :digital signal processor)、数字信号处理装置(DSPD :digital signal processing device)、可编程逻辑器件(PLD :programmable logic device)、现场可编程门阵列(FPGA:field programmable gate arrays)、处理器、控制器、微控制器、微处理器、和 /或被设计为执行本文中所述的功能的其它电子单元。这些实施方式可以由控制器180本身来实现。对于软件实现来说，本文所描述的诸如过程和功能的实施方式可以使用单独的软件模块来实现。每一个软件模块都可以执行本文所述的一个或更多个功能或操作。软件代码可以使用以任意适当的编程语言编写的软件应用来实现。软件代码可以存储在存储器 160中并由控制器180执行。处理移动终端的用户输入的方法用户输入单元130可以被操作为接收用于控制移动终端100的操作的命令，并且可以包括多个操作单元。操作单元可以被称为操作部，并且可以针对操作部采用多种方法和技术，只要用户能够以触觉的方式操作该操作部即可。显示器151可以显示多种类型的可视信息。该信息可以以字符、数字、符号、图形和/或图标的形式显示出来。为了输入这样的信息，可以以键区的形式按照预定的排列显示字符、数字、符号、图形和/或图标中的至少一种。键区可以被称为软键。显示器151可以作为整个区域而工作，或者可以分成多个区域工作。多个区域可以彼此关联的工作。例如，输出窗口和输入窗口可以显示在显示器151的上部和下部。输出窗口和输入窗口是被分别分配给输出或输入信息的区域。以数字标记的用于输入电话号码和/或其他信息的软键可以输出到输入窗口。当触摸软键时，可以在输出窗口上显示与被触摸的软键相对应的数字和/或其他信息。当操作操作单元时，可以尝试对输出窗口上显示的电话号码的呼叫连接，或者将在输出窗口上显示的文本可以输入给应用。显示器151或触摸板可以被配置成接收滚动触摸。用户可以通过触摸板上的滚动操作来移动在显示器151上显示的实体(例如，位于图标等上的光标或指针)。另外，当用户在显示器151或触摸板上移动其手指时，可以在显示器151上可视地显示出用户的手指移动的路径。这在编辑显示器151上显示的图像时是有用的。当在特定时间范围内一起触摸了显示器151(或触摸屏)和触摸板时，可以执行终端的特定功能。例如，当用户利用其拇指和食指夹住终端机体时，可以一起触摸到显示器 151和触摸板。特定功能可以是对显示器151或触摸板的启用或禁用。示例性实施方式可以涉及一种能够在如上所述地构造的终端中实现的控制方法。 现在将参照附图来描述实施方式。将予以描述的示例性实施方式可以单独使用或者可以组合使用。将予以描述的示例性实施方式可以与前述的用户界面(UI)结合以供使用。增强现实信息增强现实(AR)是虚拟现实的领域，增强现实是指用于将虚拟对象(或信息)合成到真实环境或真实对象以使虚拟对象(或信息)看起来像是存在于原来的环境中的对象或信息的计算机图形技术。 AR信息可以是指关于目标对象的向导信息，可以根据基于定位的(基于GPS的) 方法、基于标记识别的方法和/或其他方法来获得AR信息。其上可以显示AR信息的对象可以包括诸如商品、货物、建筑物、路线地图、和/或公共运输等可能具有向导信息的每一个对象。以基于定位的方法为例，移动终端可以利用GPS信息和/或地磁传感器信息(方向、倾斜信息)来获取关于移动终端观察到的对象(例如，移动终端的照相机拍摄到其图像的对象)的AR信息，并且可以以重叠的方式在实际图像上显示所获得的AR信息以提供关于该对象的向导信息。与此相比，以基于标记识别的方法为例，移动终端可以搜索在图像上出现的标记并且识别该标记的尺寸和到移动终端的距离，以确定由该标记标出的对象的三维位置和/ 或距离。移动终端可以直接从相应的AR标记获得AR信息，或从服务器获得与相应的AR标记相关联的AR信息，并且移动终端可以在图像上或在标记的位置处显示所获得的AR信息。AR标记可以包括图像、二维码和/或其他形式的AR信息本身，并且可以包括诸如字符、数字、符号、控制码和/或其他的多种数据。移动终端可以通过对已将AR信息编码的 AR标记的图像、二维码和/或其他进行解码来获得AR信息。由于可以与已知的二维码(例如，QR码、PDF417、DataMatrix, MaxiCode等)类似的方式理解以二维码形式构造AR标记的方法，因此可以略去对该方法的详细描述。AR标记可以包括用于获取或访问AR信息本身的信息(即，将要描述的AR生成信息)，或只可以提供该信息。例如，该信息可以是对每个AR信息指定的特定数字(如不同数字的组合)或字符、允许访问AR信息的URL信息和/或其他信息。移动终端可以通过对已将AR信息编码的AR标记的图像、二维码和/或其他信息进行解码来获得AR信息。移动终端可以通过参考这些信息来从服务器获取相应的AR信息。AR信息牛成信息AR生成信息可以是用于提取、获得、访问前述的AR信息的信息。AR生成信息可以被称为或理解为AR标签、AR元数据、AR源信息、AR取得信息和/或其他信息。移动终端可以向服务器发送AR生成信息，并且可以从服务器接收与该AR生成信息相对应的AR信息。例如，AR生成信息可以是移动终端的GPS信息和地磁传感器信息(方向、倾斜信息)。AR生成信息也可以是对每个AR信息指定的特定数字(如不同数字的组合)或字符、和/或允许访问AR信息的URL信息。当把不同类型的AR信息与不同的AR标记匹配时，AR生成信息可以是区分不同AR标记的标识信息(例如，AR标记的序列号和/或其他信息)。移动终端可以从单个AR信息服务器和/或多个AR信息服务器获取AR信息。^mm^mmmi^mmmm随着AR信息数据库提供的信息的类型或数量增加并且建立了多种AR信息数据库，可能在终端的画面上以重叠的方式显示多种类型的AR信息，因此根据不利的安排，用户可能不容易使用终端发现他或她需要的信息。在根据一种示例性实施方式的显示信息的方法中，可以在画面上显示多种类型的 AR信息。可以按对象、画面区域和/或分层来显示(或不显示)AR信息，因此用户能够容易地识别出其需要的信息。当在画面上显示了与被移动终端100的照相机121拍摄了其图像的对象相关的多种类型的AR信息时，可以根据用户的选择或用户的输入而仅在用户期望的对象、画面区域和/或分层处显示AR信息，使得用户不需要的AR信息不覆盖画面，用户藉此可以容易地仅识别出他或她期望的AR信息。移动终端100可以通过触摸输入、键区输入、虚拟键区输入、手势输入、运动输入和/或其他输入来显示(或可以不显示)AR信息。例如，移动终端100可以根据对显示对象的触摸输入、在画面区域上的触摸输入和/或区域指定、对分层的键区输入、触摸输入、 滑动(fileking)、水平摇动和/或其他方式来显示(或不显示)AR信息。现在可以通过如下方式来描述根据一种示例性实施方式的移动终端的操作将操作分成与AR信息相关联的对象显示；决定是否显示对象(或目标)的AR信息；以及根据该决定来显示(或不显示)AR信息。现在可以描述移动终端100的显示与AR信息相关联的对象(或目标)的操作。显示与AR信息相关的目标
显示器151可以显示至少一个与AR信息相关的对象(或目标)。显示器151可以显示包括至少一个与AR信息相关的对象(或目标)的图像。例如，当照相机121拍摄与AR信息相关的对象的图像时，显示器151可以显示包括了与AR信息相关的建筑物的街道的图像作为预览画面图像，或者可以显示展示了与AR信息相关的商品或货物的购物商场的图像作为预览图像。对象与AR信息的关联意味着可以针对该对象提供AR信息。例如，移动终端100 可以从附加到或标记在对象上的AR标记直接接收关于该对象的AR信息。移动终端100可以向服务器提供AR信息并且从服务器接收关于该对象的AR信息。移动终端100可以向服务器提供对象的位置和方向信息并且接收由服务器区分出的对象的AR信息。在确定是否显示AR信息前，控制器180可以获得关于在图像中出现的对象中与AR 信息相关的每一个对象的AR信息。控制器180可以显示与分配有AR信息的每一个对象相关的AR信息，并且接着根据用户输入或用户选择来显示(或不显示)该AR信息。现在可以描述移动终端100的确定是否显示关于对象的AR信息的操作。石角韩挪絲刊寸細AR{言肩、控制器180可以确定是否显示关于对象的AR信息。控制器180可以按照对象来确定是否显示AR信息。例如，只要在显示器151 (触摸屏)上对单独的对象执行了触摸输入，则控制器180就可以确定通过切换显示(或不显示)关于各个对象的AR信息。图2例示了根据一种示例性实施方式的其中移动终端按照对象来显示(或不显示)增强现实(AR)信息的一个示例。如图2所示，移动终端100可以显示展示了美术馆的内部的全景的每一个图像上的每一幅绘画的AR信息(S卩，图2中的名称、画家、作品年份)。当用户如画面210所示那样触摸针对‘The Dance Class'而显示的AR信息时，移动终端100可以如画面220所示那样移除针对‘The Dance Class’而显示的AR信息。当用户再次触摸绘画‘The Dance Class’ 时，移动终端100可以如画面240所示那样再次显示‘The Dance Class’的AR信息。图3例示了根据一种示例性实施方式的移动终端移动所显示的关于对象的AR信息的一个示例。也可以提供其它实施方式和配置。如图3所示，移动终端100可以显示展示了美术馆的内部的全景的每一个图像上的每一幅绘画的AR信息(即，图3中的名称、画家、作品年份)。当用户以拖拽方式移动针对‘The Starry Night’而显示的AR信息时，移动终端100可以在停止拖拽的位置处显示关于 ‘The Starry Night，的 AR 信息。控制器180可以按照对象所在的画面区域来确定是否显示AR信息。也就是说，控制器180可以只显示在确定画面区域中出现的对象的AR信息。结果，可以不显示在被确定为不显示AR信息的画面区域中出现的对象的AR信息。控制器180可以在显示AR信息前指定画面区域，和/或控制器180可以在显示了 AR信息后指定画面区域。只在最初被确定为显示AR信息的画面区域中显示AR信息。也可以在显示了与AR信息相关联的每一个对象的AR信息后再指定画面区域。例如，控制器180可以确定显示(或不显示)用户从之前指定的部分区域中选出的或输入的区域的AR信息。之前指定的部分区域可以是通过按照两行和两列划分成四份或按照三行和三列划分成九分、和/或其他划分方式而获得的区域。控制器180可以确定在已接收到用户的触摸输入的区域上或者在由触摸输入指定的区域和/或其他区域上显示(或不显示)AR信息。控制器180可以指定被摩擦或滑动的区域、通过画图而输入的图形的内部区域和/或其他区域作为显示器151 (触摸屏)上的区域。只要对显示器151 (触摸屏)上的特定画面区域进行了触摸，则控制器180就可以通过切换来确定显示(或不显示)在画面区域上出现的对象的AR信息。例如，控制器180可以根据显示器151上的不同的摩擦方向或不同的滑动方向来切换是否显示针对在画面区域上出现的对象的AR信息。只要在显示器151 (触摸屏)上的同一区域输入图形，则控制器180就可以切换是否显示针对对应的画面区域的AR信息。图4例示了根据一种能够示例性实施方式的其中移动终端显示针对在预定画面区域的选择区域中出现的对象的AR信息的一个示例。也可以提供其它实施方式和配置。如图4所述，当移动终端100显示九个划分出的画面区域并且用户如画面410所示那样摩擦(或触摸)了与最右侧的列相对应的三个区域时，移动终端100可以如画面420 所示那样显示在该三个区域中出现的图片的AR信息。图4示出了基于指针的移动而对所显示图像的区域的确定和对是否在所确定的区域中提供对象的确定。当确定在所确定的区域中提供对象时，则得到AR信息并与该对象一起显示。指针的移动可以包括指针在显示器的多个预定区域上的移动以及基于指针的移动来识别区域。尽管图4中没有示出，但是AR信息和图像的显示可以包括将AR信息显示为使得所显示的AR信息与图像的另一个对象的AR信息的前端位置交迭。图5例示了根据一种示例性实施方式的其中移动终端显示(或不显示)针对在已接收到触摸输入的画面区域中出现的对象的AR信息的一个示例。也可以提供其它实施方式和配置。如图5所示，移动终端100可以显示展示了美术馆的内部的全景的每一个图像上的每一幅绘画的AR信息(即，图5中的名称、画家、作品年份)。当用户如画面510所示那样从上到下地摩擦(或触摸)图像的右侧画面区域时，移动终端100可以如画面520所示那样移除针对在被触摸的画面区域上出现的绘画‘The Starry Night，、‘The Dance Class， 和‘Hail Mary’而显示的AR信息。当用户如画面530所示那样从上到下地摩擦(或触摸)图像的右侧画面区域时，移动终端100可以如画面540所示那样再次显示‘The Starry Night，、‘The Dance Class，和 ‘Hail Mary，的 AR 信息。图5示出了其中显示图像且该图像包括第一对象、与第一对象相关联的第一 AR信息、第二对象和与第二对象相关联的第二AR信息的一个示例。也可以提供其它实施方式和配置。响应于接收关于指针相对于所显示图像的移动的信息，可以识别例如与第二对象相关联的AR信息。因此，当基于接收到的关于指针的移动的信息而识别出与第二对象相关联的AR信息时，移动终端的显示器可以显示具有第一对象、第二对象和与第一对象相关联的第一 AR信息且不具有与第二对象相关联的第二 AR信息的图像。图6例示了根据一种示例性实施方式的其中移动终端显示针对在由区域选择指定的画面区域中出现的对象的AR信息的一个示例。也可以提供其它实施方式和配置。
如图6所示，当用户如画面610所示那样指定了包括图像的右侧部分的四边形区域时，移动终端100可以如画面620所示那样显示在该四边形区域上出现的绘画 iTheStarry Night，、‘The Dance Class，和 ‘Hail Mary，的 AR 信息。图7例示了根据一种示例性实施方式的其中移动终端显示(或不显示)在由区域选择指定的画面区域中出现的对象的AR信息。也可以提供其它实施方式和配置。如图7所示，移动终端100可以显示展示了美术馆的内部的全景的每一个图像上的每一幅绘画的AR信息(即，图7中的名称、画家、作品年份)。当用户如画面710所示那样指定图像的一部分右侧画面上的四边形区域时，移动终端100可以如画面720所示那样移除针对在被指定的画面区域中出现的绘画‘The Starry Night’、‘The Dance Class’和 ‘Hail Mary’而显示的AR信息。当用户如画面730所示那样指定同一部分右侧画面的四边形区域时，移动终端100可以如画面740所示那样显示绘画‘The Starry Night，、‘The Dance Class，禾口 ‘Hail Mary，的 AR 信息。控制器180可以按照对象所在的画面区域来确定是否识别AR标记。控制器180 可以只识别针对在被确定为识别AR标记的画面区域上出现的对象的AR标记。结果，可以不显示在被确定为不识别AR标记的画面区域上出现的AR信息。其中是否按画面区域来识别AR标记并且只要存在对特定画面区域的触摸输入就切换是否在画面区域上显示AR信息的示例可以按照与其中是否按画面区域来显示AR信息并且只有存在对特定画面的触摸输入就切换是否在画面区域上显示AR信息的示例相似的方式来理解，因此可以略去对该示例的详细说明。控制器180可以按照将对象分类的层来确定是否显示AR信息。控制器180可以只显示针对在被确定为显示AR信息的层中包括的对象而显示AR信息。结果，可以不显示针对被确定为不显示AR信息的层中包括的对象的AR信息。可以根据层的标签、类型(类别)和/或用户对各个对象指定的分类来对层进行限定。可以根据当用户放大或缩小图像的同时对各个对象指定的距离信息来对层进行限定。层可以自动分类以由控制器180根据各个对象的类型(类别)和各个对象与移动终端100之间的距离进行限定。只要存在对显示器151 (触摸屏)上的特定层的触摸输入，控制器180就可以通过切换来确定是显示(还是不显示)关于包括在该层中的对象的AR信息。例如，控制器180根据用户不同的滑动方向(即，垂直滑动方向、水平滑动方向和 /或其他操作)或用户在显示器151(触摸屏)上的不同手势，该控制器可以切换是否显示关于包括在相应层中的对象的AR信息。控制器180在确定是否显示AR信息后，该控制器可以获取关于在图像上出现的对象中的、被确定将显示AR信息的对象的AR信息。控制器180可以仅获取被确定显示AR信息的对象的AR信息，从而减少获取AR信息所需要的资源。图8例示了根据一种示例性实施方式的其中移动终端不显示按层分类的对象的 AR信息的一个示例。如图8所示，移动终端100可以显示展示了美术馆的内部的全景的每一个图像上的每一幅绘画的AR信息(S卩，图8中的名称、画家、作品年份)。当用户在画面810上从左到右划过时，移动终端100可以移除针对在一层上最接近的绘画‘The Starry Night’、‘Hail Mary，、‘Girls at the Piano，、‘The Fifer，和 ‘Sunset at Ivry，而显示的 AR 信息，如画面820所示。当用户在画面830上从左到右再次划过时，移动终端100可以显示在一层上其次接近的绘画‘The Dance Class’和‘Nympheas，的AR信息，如画面840所示。图9例示了根据一种示例性实施方式的其中移动终端显示针对按层分类的对象的AR信息的一个示例。也可以提供其它实施方式和配置。如图9所示，移动终端100可以显示展示了美术馆的内部的全景的每一个图像上的每一幅绘画的AR信息(即，图9中的名称、画家、作品年份)。当用户在画面910上从右到左划过时，移动终端100可以显示作为在一层上的、比当前正在显示AR信息的另一层上的绘画更接近的绘画的‘The Dance Class’和‘Nympheas，的AR信息，如画面920所示。 当用户在画面930上从右到左再次划过时，移动终端100可以显示作为在一层上最接近的绘画 ‘The Starry Night，、‘Hail Mary，、‘Girls at the Piano，、‘The Fifer，和 ‘Sunset at Ivry，的AR信息，如画面940所示。图10例示了根据一种示例性实施方式的其中移动终端按画面区域和层显示AR信息的一个示例。也可以提供其它实施方式和配置。如图10所示，移动终端100可以显示展示了美术馆的内部的全景的每一个图像上的每一幅绘画的AR信息(S卩，图10中的名称、画家、作品年份)。当用户如在画面1010上所示那样指定图像的一部分右侧画面上的四边形区域时，移动终端100可以移除针对作为指定的画面区域中出现的绘画‘The Starry Night，、‘The Dance Class，和‘Hail Mary， 而显示的AR信息，如画面1020所示。当用户在画面1030上从左到右划过时，移动终端100 可以移除作为在一层上最接近的绘画‘Girls at the Piano，、‘The Fifer，和‘Sunset at Ivry，的AR信息，如画面1040所示。 现在可以描述根据关于移动终端100是否显示AR信息的决定而显示(或不显示) AR信息的操作。根据是否显示的决定而显示或不显示AR信息控制器180可以根据关于是否将要显示特定对象的AR信息的决定来显示(或可以不显示)该特定对象的AR信息。如上所述，控制器180可以根据如拖拽和/或其他操作的用户输入来调整针对各个对象的AR信息的位置和/或方向。控制器180可以在存储器160中存储与对象、画面区域或层相关的标识信息以及与是否显示针对该对象的AR信息、该画面区域和/或该层相关的信息。关于对象的标识信息可以是能够指定该对象的位置和方向信息(例如，GPS信息、 地磁传感器信息等)和/或能够在AR信息数据库中指定该对象的唯一的标识号。当对象从画面上消失并接着被显示时，控制器180可以根据基于该对象的标识信息和关于是否显示AR信息的信息来显示(或可以不显示)该对象的AR信息。画面区域可以利用画面上的X轴像素坐标和Y轴像素坐标来限定。例如，当指定画面区域具有多边形形状时，该画面区域的标识信息可以包括该多边形形状的至少一个顶点的X轴像素坐标和Y轴像素坐标。尽管显示器151显示的画面由于移动终端100的位置和方向的变化而不同，但是控制器180可以基于关于画面区域的标识信息而只在相对应的画面区域中显示(或可以不显示)AR信息。
关于层的标识信息可以以一组关于前述对象的标识信息的形式来限定。关于层的标识信息可以包括关于至少一个对象的标识信息。图11是例示了根据一种示例性实施方式的显示信息的方法的流程图。也可以提供其它实施方式、操作和配置。如图11所示，移动终端100可以显示与AR信息相关的对象(SlllO)。移动终端可以接着确定是否显示该对象的AR信息(Si 120)。移动终端100可以按对象(即，针对各个对象)来确定是否显示AR信息。移动终端100可以根据关于各个对象的触摸输入来切换是否显示AR信息。移动终端100可以按对象所在的画面区域来确定是否显示AR信息，或者可以按对象所在的画面区域来确定是否识别AR标记。移动终端100可以根据关于画面区域的触摸输入或区域指定来切换是否显示AR信息。移动终端100可以按照将对象分类的层(即，针对每一层)来确定是否显示AR信息。可以将层限定成根据对象的类型、对于对象指定的标签和/或对象与移动终端100之间的距离来将对象分类。移动终端100可以根据在图像(画面)上的划动方向来切换是否显示AR信息。移动终端100可以在确定了是否显示AR信息后获得关于被确定为显示AR信息的对象的AR信息，和/或可以在确定是否显示AR信息前获得关于该对象的AR信息。可以基于移动终端100识别出的AR标记来获得AR信息，和/或可以基于移动终端100的位置和方向而从服务器获得AR信息。移动终端100可以根据该确定来显示(或可以不显示)关于对象的AR信息 (S1130)。移动终端100可以存储关于对象的标识信息和关于是否显示AR信息的信息。当对象从画面上消失并接着被再次显示在画面上时，移动终端100可以基于关于该对象的标识信息和关于是否显示AR信息的信息来显示(或可以不显示)关于该对象的AR信息。图12是例示了在根据一种示例性实施方式的显示信息的方法中在显示AR信息前预先设定显示画面区域的流程图。也可以提供其它实施方式、操作和配置。如图12所示，移动终端100可以设定显示AR信息的画面区域(S1210)。移动终端 100可以接着在画面上显示拍摄到的对象的图像(S1220)。移动终端100可以只显示关于被包括在设定的画面区域中的对象的AR信息(S1230)。图13是例示了在根据一种示例性实施方式的显示AR信息的方法中显示AR信息并接着设定显示画面区域的流程图。也可以提供其它实施方式、操作和配置。如图13所示，移动终端100可以在画面上显示拍摄到的对象的图像(S1310)。移动终端100可以设定显示AR信息的画面区域(S1320)。移动终端100可以接着只显示关于被包括在设定的画面区域中的对象的AR信息(S1330)。图14是在根据一种示例性实施方式的显示信息的方法中显示AR信息并接着设定非显示画面区域的流程图。也可以提供其它实施方式、操作和配置。如图14所示，移动终端100可以在画面上显示拍摄到的对象的图像和与该对象相对应的AR信息(S1410)。移动终端100可以设定将不显示AR信息的画面区域(S1420)。移动终端100可以移除关于被包括在设定的画面区域中的对象的AR信息(即，不显示AR信息)(S1430)。根据如上参考图1到图10针对移动终端的描述，可以相似地理解根据示例性实施方式的显示信息的方法，因此可以略去对该方法的详细描述。已经描述了显示信息的方法和使用该方法的移动终端。现在可以描述发送信息的方法和使用该方法的移动终端。根据不利方案的终端在发送如文本的简单信息方面可能没有问题，但是可能具有为了创建如句子的更加详细或复杂的信息而必须操作键区的按键很多次的缺点。在根据一种示例性实施方式的发送信息的方法中，可以按照诸如文本、图像、AR生成信息、AR信息和/或其他信息等多种形式发送关于当前正在被拍摄图像或已经被拍摄了图像的对象的信息，从而有效地向对方传送用户正在观看的对象或用户周围的对象的信肩、ο在根据一种示例性实施方式的发送信息的方法中，可以将说明目标对象的文本、 通过拍摄目标对象而获得的图像、关于该目标对象的AR信息或AR生成信息发送给对方，以使得用户可以将期望发送给对方的更加详细、准确的信息发送给对方。相应地，对方可以检查接收到的文本、图像和/或AR信息，和/或可以检查来自服务器的AR生成信息以获取AR fn息ο在根据一种示例性实施方式的发送信息的方法中，可以对在照相机拍摄的图像上显示出的字符、数字、符号和/或图形、被包括在AR信息中的字符、数字、符号和/或图形进行识别以将其用于字符输入，藉此可以减少用户在输入字符过程中执行键区(按钮)输入、 虚拟键盘输入、手势输入和/或其他输入的不便。在下文中，移动终端100当前拍摄了对象的图像。但是，移动终端100当前拍摄了目标对象的图像的示例仅仅说明了一种示例性实施方式，技术思想并不限于这样的示例性实施方式。移动终端可以向不同的移动终端发送关于被包括在之前拍摄并存储的图像中的目标对象的信息。存储的图像的元数据可以包括移动终端100的位置信息、方向信息和/ 或其他信息，或者可以包括用于获取或访问关于该目标对象的AR信息的信息。当各个不同的AR信息与各个不同的AR标记相匹配时，所存储的图像的元数据可以包括对该目标对象标记或附加的AR标记的标识信息(例如，AR标记的序列号等)。移动终端100可以利用元数据来识别出该目标对象，或者可以获取与该目标对象相关联的AR信息。现在可以描述移动终端100的操作，该操作被分为发送AR相关信息和发送从图像识别出的信息。现在可以描述移动终端100的发送AR相关信息的操作。发送AR相关信息照相机121可以拍摄目标对象的图像。目标对象可以包括诸如商品、货物、建筑物、路线地图、公共运输和/或其他的可能具有向导信息的每一个对象。控制器180可以获得与所拍摄的目标对象相关联的AR信息或用于访问AR信息的 AR生成信息。AR生成信息可以是移动终端100的位置信息和/或方向信息。控制器180可以向服务器发送移动终端100的位置信息和/或方向信息，并且从服务器接收关于与移动终端 100的位置信息和/或方向信息相对应的目标对象的AR信息。当照相机121拍摄到目标对象的图像时，显示器151可以显示拍摄到的该目标对象的图像。定位模块115可以获得拍摄该目标对象的图像的移动终端100的全球定位系统 (GPS)信息，并且感测单元140可以检测拍摄了该目标对象的图像的移动终端100的地磁传感器信息(方向、倾斜信息)。当控制器180向AR信息服务器发送GPS信息和检测到的地磁传感器信息(方向、 倾斜信息)时，AR信息服务器可以根据接收到的GPS信息和地磁传感器信息(方向、倾斜信息)而识别出该目标对象。控制器180可以从AR信息服务器接收关于识别出的目标对象的AR信息，并且控制显示器151显示接收到的AR信息。AR生成信息可以包括关于照相机121的视场的信息、目标对象的高度信息、目标对象的深度信息、目标对象的楼层信息和目标对象的图像拍摄时间信息以及移动终端100 的位置信息和方向信息。可以将关于视场的信息添加到位置信息和方向信息以将其用于准确地确定画面上显示的拍摄图像的范围或准确地指定目标对象。目标对象的高度信息或深度信息可以按照高度或深度来更加详细地划分目标对象(如建筑物等)，以将该高度信息或深度信息用于提供AR信息。目标对象的图像拍摄时间可以用于提供目标对象的变更历史和/或目标对象的AR信息的变更历史。尽管这里AR生成信息是移动终端100的位置信息和/或方向信息，但是AR信息或AR生成信息可以是移动终端100识别对目标对象标记或附加的AR标记而得到的结果。移动终端100识别AR标记而得到的结果可以是移动终端100基于二维或三维显示方案或AR标记的外观而获得的AR信息或AR生成信息，或者可以是移动终端100可以通过无线传输和/或其他方式根据AR标记接收到的AR信息或AR生成信息。例如，当在AR标记本身中对AR信息进行编码时，控制器180可以通过对在已识别出的AR标记中编码的AR信息进行解码来获得AR信息。当在AR标记中对AR生成信息进行编码时，控制器180可以对在AR标记的图像中、 二维码等中编码的AR生成信息进行解码，并且向服务器发送解码后的AR生成信息以从服务器接收相对应的AR信息。例如，当不同的AR信息与每一个不同的AR标记相匹配时，已在AR标记中编码的AR生成信息可以是AR标记标识信息。当照相机121拍摄了目标对象的图像时，显示器151可以显示所拍摄到的目标对象的图像。控制器180可以识别出被包括在所拍摄的目标对象的图像中的AR标记，以发现与该AR标记相关联的AR生成信息(或该AR标记的标识信息)。AR生成信息(或AR标记的标识信息)可以以纯文本的形式或以编码的形式包括在AR标记的可视地显示的内容中。为了获得信息，控制器180可以对AR标记的可视显示内容采用视觉识别、图案识别、二维码识别等。当AR标记以无线方式发送AR生成信息(或AR标记的标识信息)时，短距离通信模块114或感测模块140可以进行检测以获得该信息。短距离通信模块114或感测模块 140以无线的方式识别AR标记的技术配置可以应用于以泛在传感器网络(USN ubiquitous sensor network)的方式设置AR标记的示例。
控制器180可以识别AR标记并将识别结果(AR生成信息)发送到AR服务器。AR 服务器可以基于接收到的信息来检索关于目标对象的AR信息。控制器180可以从AR服务器接收关于目标对象的AR信息并控制显示器151显示接收到的AR信息。当如上所述地获得了 AR信息或AR生成信息时，无线通信单元110可以将AR信息或AR生成信息发送到不同的移动终端。该不同的移动终端可以直接根据AR信息来获得关于目标对象的信息，或者可以通过利用AR生成信息而访问存储在服务器中的AR信息来获得关于目标对象的信息。无线通信单元110可以通过利用各种可用类型的消息、文本、图像、和/或二进制文件传输方法等来向不同的移动终端发送AR信息、AR生成信息、所拍摄的目标对象的图像、和通过识别字符、数字、符号和/或图形(稍后描述)而得到的结果。例如，无线通信单元110可以通过利用短消息服务(SMS)或多媒体消息服务(MMS) 来向不同的移动终端发送AR信息或AR生成信息。无线通信单元110可以将AR信息或AR 生成信息包括在消息中，并且可以将该消息发送到不同的移动终端。显示器151可以以分屏等形式同时显示与目标对象相关的AR信息和消息创建窗口。当用户利用键区输入、触摸输入、和/或手势输入等将AR信息包括在消息文本(正文) 中时，无线通信单元110可以将包括AR信息的消息发送到不同的移动终端。键区输入可以是通过区分各个AR信息而指定的数字输入、和/或选择键(例如， 回车键)输入等。触摸输入可以是诸如点击将要被插入消息文本(正文)中的AR信息或拖拽AR信息并将其放到消息文本(正文)的输入。手势输入可以是根据左右摇动而选择将要被插入到消息文本(正文)中的AR信息的输入。图15例示了根据一种示例性实施方式的其中移动终端将关于目标对象的AR信息包括在短消息中的一个示例。也可以提供其它实施方式和配置。如图15所示，当用户如画面1510所示那样将关于在美术馆中显示的特定绘画的 AR信息拖放到短消息的消息文本(正文)时，移动终端100可以将对应的AR信息以文本的形式插入短消息的消息文本(正文)中，如画面1520所示。尽管在图15中没有示出，但是显示器151可以在消息创建窗口上显示用于将AR 生成信息插入消息文本(正文)中的功能菜单。当用户利用键区输入、触摸输入、和/或手势输入等选择了 AR信息并选择了用于插入针对所选的AR信息的AR生成信息的功能菜单时，控制器180可以将AR生成信息包括到消息文本(正文)中，并且无线通信单元110可以将包括AR生成信息的消息发送到不同的移动终端。无线通信单元110可以将所拍摄的目标对象的图像与AR信息或AR生成信息一起发送到不同的移动终端。无线通信单元Iio可以以文本、和/或图像等形式只发送AR信息或AR生成信息，尽管无线通信单元110也可以附加地将所拍摄的目标对象的图像发送到不同的移动终端。无线通信单元110可以向不同的移动终端发送通过在视觉上将AR信息覆盖于所拍摄的目标对象的图像之上而得到的图像。例如，当显示器151显示以覆盖的方式显示关于所拍摄的目标对象的图像的AR信息时，控制器180可以生成以覆盖的方式显示的画面拍摄图案，并且无线通信单元110可以将该画面拍摄图案发送到不同的移动终端。控制器180可以识别以覆盖方式显示的AR信息的字符、数字、符号、和/或图形等，并且无线通信单元110可以将识别结果发送到不同的移动终端。例如，当用户通过从虚拟四边形的左上方的点开始并且在右下方的点处停止的触摸输入(拖拽)、和/或通过在画面上摩擦而进行的触摸输入等而指定了画面区域时，控制器180可以识别所指定的画面区域内的字符(和/或类似物)。控制器180可以先识别所拍摄的目标对象的图像的字符(和/或类似物)并可区分地显示识别了字符(和/或类似物)的画面区域(例如，框架(即，绘图边界)、突出显示、反色显示、阴影显示、闪动显示、和/或图标显示等)，以使得用户可以获得所选区域中识别的字符等。例如，无线通信单元110可以将通过从AR信息中识别出字符、数字、符号和/或图形而得到的结果包括在消息中，并且将该消息发送到不同的移动终端。显示器151可以以分屏等形式和/或其他形式同时显示关于目标对象的AR信息和消息创建窗口。在以类似于前述的识别方法的方式识别出AR信息的字符、数字、符号和/ 或图形后，用户可以利用键区输入、触摸输入、和/或手势输入等将识别结果包括在消息文本(正文)中。无线通信单元110可以将识别结果发送到不同的移动终端。当无线通信单元110向不同的移动终端发送AR生成信息时，该不同的移动终端可以基于接收到的AR生成信息来获得与存在于所拍摄的最初的目标对象的图像的范围以外的对象相关的AR信息。例如，假定无线通信单元110将移动终端100的位置信息和方向信息与所拍摄的目标对象的图像一起发送。接收到拍摄的图像、位置信息和方向信息的不同的移动终端的用户可以输入水平拖拽或水平划动以观看存在于在画面上显示的拍摄到的图像的范围外的对象或关于该对象的AR信息。该不同的移动终端可以向服务器发送已根据用户输入而修正过的位置信息和方向信息，并且可以接收相应的图像或关于出现在该相应图像中的对象的AR信息。尽管已经描述了移动终端100的发送AR相关信息的操作，但是移动终端100还可以执行发送从图像中识别出的信息的操作。发送从图像中识别出的信息照相机121可以拍摄目标对象的图像。控制器180可以识别在所拍摄的目标对象的图像上显示的字符、数字、符号和/或图形。无线通信单元110可以将识别结果发送到不同的移动终端。图16例示了移动终端将从图像中识别出的字符包括在短文本消息中的一个示例。如图16所示，当用户如画面1610所示那样指定字符识别区域并且将在指定区域中识别出的字符拖放到短消息的消息文本(正文)时，移动终端100可以以文本的形式将相应的AR信息插入到该短消息的消息文本(正文)中，如画面1630所示。移动终端可以在图像上执行预先字符识别，将能够识别字符的区域框住，并且选择具有要由用户插入的措辞的区域。移动终端100可以以文本的形式将相应的AR信息插入到短消息的消息文本(正文)中，如画面1630所示。移动终端100发送从图像中识别出的信息的操作可以与移动终端100发送AR相关信息的操作相似的方式来理解，因此可以略其详细描述。
图17是例示了根据另一个示例性实施方式的发送信息的方法的流程图。也可以提供其它实施方式、操作和配置。如图17所示，移动终端100可以拍摄目标对象的图像(S1710)。移动终端100可以获得与所拍摄的目标对象的图像相关联的AR信息或用于访问该AR信息的AR生成信息(S 1730)。可以从服务器获取针对与移动终端100的位置和方向相对应的目标对象的AR信息，和/或可以基于识别在目标对象上标记的AR标记的结果来获取AR信息。AR标记的识别结果可以是指通过对以图像、和/或二维码等形式在AR标记中编码的信息进行解码而获得的结果。AR生成信息可以包括移动终端100的位置信息和方向信息，可以包括AR信息的标识信息或AR信息的访问地址，或者可以包括标记在目标对象上的AR标记的标识信息。AR 信息的标识信息或AR信息的访问地址可以是指允许存储或提供AR信息的AR信息服务器指定或访问AR信息的信息。当AR生成信息包括移动终端100的位置信息和方向信息时，AR生成信息还可以包括关于照相机121的视场的信息、目标对象的高度信息、目标对象的深度信息和/或目标对象的图像拍摄时间信息。移动终端100可以将AR信息或AR生成信息发送到不同的移动终端(S1750)。移动终端可以将所拍摄的目标对象的图像与AR信息或AR生成信息一起发送到不同的移动终端。移动终端100可以向不同的移动终端发送通过可视地将AR信息覆盖在所拍摄的目标对象的图像上而获得的图像。移动终端100可以在画面上显示所拍摄的目标对象的图像(S1720)。移动终端100 可以以覆盖的方式在所拍摄的目标对象的图像上显示AR信息(S1740)。移动终端100可以向不同的移动终端发送通过识别针对以覆盖的方式显示的AR 信息的字符、数字、符号和/或图形而得到的结果。对字符、数字、符号和/或图形的识别可以在由用户输入的画面区域内或者在根据预先识别结果识别出了字符、数字、符号或图形的画面区域内执行。移动终端100可以显示消息创建窗口，并且可以通过利用键区输入、触摸输入和/ 或手势输入将通过识别针对以覆盖的方式显示的AR信息的字符、数字、符号或图形而得到的结果包括在消息文本(正文)中，并且可以将该消息发送到不同的移动终端。图18是例示了根据另一个示例性实施方式的发送信息的方法的流程图。也可以提供其它实施方式、操作和配置。如图18所示，移动终端100可以拍摄目标对象的图像(S1810)。移动终端100可以识别在所拍摄的目标对象的图像上显示的字符、数字、符号和/ 或图形(S1830)。移动终端可以识别由用户输入的画面区域内或者在根据预先识别结果而识别出字符、数字、符号和/或图形的画面区域内的字符、数字、符号和/或图形。移动终端可以将识别结果发送到不同的移动终端(S1850)。移动终端100可以显示消息创建窗口，可以利用键区输入、触摸输入或手势输入将识别出的字符、数字、符号和/或图形包括在消息文本(正文)中，并且可以将该信息发送到不同的移动终端。图19是例示了根据另一个示例性实施方式的发送信息的方法的流程图。也可以提供其它实施方式、操作和配置。如图19所示，移动终端100可以拍摄目标对象的图像(S1910)。移动终端100可以获得与所拍摄的目标对象的图像相关联的AR信息或用于访问该AR信息的AR生成信息，和/或识别在所拍摄的目标对象的图像中显示的字符、数字、符号和/或图形(S1920)。移动终端100可以获得AR信息和/或AR生成信息，识别在所拍摄的目标对象的图像上显示的字符，和/或获取AR信息和/或AR生成信息并且识别在所拍摄的目标对象的图像上显示的字符和/或其他信息。之后，移动终端100可以将AR信息、AR生成信息和识别结果中的至少一个发送到不同的移动终端(S1930)。移动终端100可以将AR信息和/或AR生成信息发送到不同的移动终端，可以将显示在所拍摄的目标对象的图像上的字符和/或其他信息发送到不同的移动终端，和/或可以将AR信息和/或AR生成信息与显示在所拍摄的目标对象的图像上的字符发送到不同的移动终端。在实施方式中，上述方法可以实现为程序记录介质中能够由计算机读取的代码。 计算机可读介质包括其中存储了由计算机系统读取的数据的多种类型的记录装置。计算机可读介质可以包括R0M、RAM、CD_R0M、磁带、软盘、和/或光数据存储装置等。计算机可读介质也可以包括载波或信号形式的实现(例如，经由因特网的传输)。本说明书中对于“一个实施方式”、“实施方式”、“示例实施方式”等的引用是指与该实施方式相关地描述的具体特征、结构、或特性包括在本发明的至少一个实施方式中。这些词语在说明书中不同位置的出现不一定全部指代相同的实施方式。另外，当与任何实施方式相关地描述具体特征、结构、或特性时，认为本领域技术人员能够想到结合其它实施方式来实现该特征、结构、或特性。尽管参照多个示例性实施方式描述了实施方式，但是应理解的是本领域技术人员可设计出落入本发明的原理的精神和范围内的许多其它修改例和实施方式。更具体地，在本说明书、附图以及所附的权利要求的范围内，可以对主体组合排列的组成部分和/或排列方式进行各种变型和修改。除了组成部分和/或排列方式的变型和修改之外，另选的用途对于本领域技术人员也是明显的。
权利要求
1.一种移动终端上的信息控制方法，该方法包括以下步骤在所述移动终端的显示器上显示图像，所述图像包括至少一个对象；接收与指针相对于在所述显示器上显示的图像的移动相关的信息；基于接收到的与所述指针的移动相关的信息来获得与所述对象相关的增强现实(AR) 信息；以及在所述移动终端的所述显示器上显示所述图像和与所述至少一个对象相关的增强现实(AR)信息。
2.根据权利要求1所述的方法，其中，获得所述增强现实信息的步骤包括以下步骤基于所述指针的移动来确定所显示的图像的区域，并且确定在所确定的区域内是否提供了对象。
3.根据权利要求2所述的方法，其中，获得所述增强现实信息的步骤还包括以下步骤 当确定在所确定的区域内提供了所述对象时，获得所确定的对象的所述增强现实信息。
4.根据权利要求2所述的方法，其中，所述指针的移动包括所述指针在所述显示器的多个预定区域上的移动，并且基于所述指针的移动对所述区域进行识别。
5.根据权利要求1所述的方法，其中，显示所述图像和所述增强现实信息的步骤包括以下步骤按照如下方式显示所述增强现实信息，即，使得所显示的增强现实信息覆盖所述图像的另一个对象的一部分增强现实信息的前端位置。
6.根据权利要求1所述的方法，该方法还包括以下步骤存储与所述对象相关的标识信息和与是否显示所述增强现实信息相关的信息，其中，当从所述显示器上移除所述对象并在所述显示器上再次显示所述对象时，基于所存储的与所述对象相关的标识信息和所存储的与是否显示所述增强现实信息相关的信息来显示或不显示与所述对象相关的增强现实信息。
7.根据权利要求1所述的方法，其中，获得所述增强现实信息的步骤包括以下步骤获得所述移动终端的位置信息、所述增强现实信息的访问地址、或与所述对象相关的增强现实标记的标识信息。
8.根据权利要求1所述的方法，该方法还包括以下步骤将所述图像、所述增强现实信息和所述增强现实信息的访问地址或与所述对象相关的增强现实标记的标识信息中的至少一个发送到另一个移动终端。
9.一种移动终端上的信息控制方法，该方法包括以下步骤在所述移动终端的显示器上显示图像，所述图像包括第一对象、与所述第一对象相关的第一增强现实(AR)信息、第二对象和与所述第二对象相关的第二增强现实信息；接收与指针相对于所述显示器上显示的图像的移动相关的信息；基于接收到的与所述指针的移动相关的信息来识别与所述第二对象相关的所述增强现实信息；以及当基于接收到的与所述指针的移动相关的信息而识别了与所述第二对象相关的所述增强现实信息时，在所述移动终端的所述显示器上显示具有所述第一对象、所述第二对象和与所述第一对象相关的所述第一增强现实信息且不具有与所述第二对象相关的增强现实信息的图像。
10.根据权利要求9所述的方法，其中，识别所述增强现实信息的步骤包括以下步骤基于所述指针的移动来确定所显示的图像的区域；并且确定在所确定的区域内是否提供了对象。
11.根据权利要求10所述的方法，其中，识别所述增强现实信息的步骤还包括以下步骤当确定在所确定的区域内提供了所述对象时，识别所确定的对象的所述增强现实信息。
12.根据权利要求10所述的方法，其中，所述指针的移动包括所述指针在所述显示器的多个预定区域上的移动，并且基于所述指针的移动对所述区域进行识别。
13.根据权利要求9所述的方法，其中，所显示的第二增强现实信息覆盖所述第一增强现实信息的前端位置的至少一部分。
14.根据权利要求9所述的方法，该方法还包括以下步骤存储与所述第二对象相关的标识信息和与是否显示所述第二增强现实信息相关的信息？其中，当所述第二对象从所述显示器上消失并在所述显示器上再次显示时，基于所存储的与所述第二对象相关的标识信息和所存储的与是否显示已存储的第二增强现实信息相关的信息来显示或不显示与所述第二对象相关的所述第二增强现实信息。
15.根据权利要求9所述的方法，该方法还包括以下步骤将具有所述第一对象、所述第二对象和所述第一增强现实信息的图像发送到另一个移动终端，而不发送所述第二增强现实信息。
16.一种移动终端，该移动终端包括显示器，其显示图像，所述图像包括至少一个对象；和控制器，其用于接收与指针相对于在所述显示器上显示的图像的移动相关的信息，所述控制器基于接收到的与所述指针的移动相关的信息来获得与所述对象相关的增强现实 (AR)信息，并且所述显示器在所述显示器上显示所述图像和与所述至少一个对象相关的增强现实(AR)信息。
17.根据权利要求16所述的移动终端，其中，所述控制器通过基于所述指针的移动对所显示的图像的区域进行确定并通过对在所确定的区域内是否提供了对象进行确定来获得所述增强现实信息。
18.根据权利要求17所述的移动终端，其中，当确定在所确定的区域内提供了所述对象时，所述控制器通过进一步获得所确定的对象的所述增强现实信息来获得所述增强现实信息。
19.根据权利要求17所述的移动终端，其中，所述指针的移动包括所述指针在所述显示器的多个预定区域上的移动，并且所述控制器基于所述指针在所述多个预定区域上的移动来识别所述区域。
20.根据权利要求16所述的移动终端，其中，所述显示器按照如下方式显示所述图像和所述增强现实信息，即，将所述增强现实信息显示为使得所显示的增强现实信息覆盖所述图像的另一个对象的增强现实信息的前端位置的一部分。
21.根据权利要求16所述的移动终端，该移动终端还包括存储器，其存储与所述对象相关的标识信息和与是否显示所述增强现实信息相关的信息？其中，当从所述显示器上移除所述对象并在所述显示器上再次显示所述对象时，所述控制器基于所存储的与所述对象相关的标识信息和所存储的与是否显示所述增强现实信息相关的信息来确定是显示还是不显示与所述对象相关的所述增强现实信息。
22.根据权利要求16所述的移动终端，其中，所述控制器通过获得所述移动终端的位置信息、所述增强现实信息的访问地址、或与所述对象相关的增强现实标记的标识信息来获得所述增强现实信息。
23.根据权利要求16所述的移动终端，该移动终端还包括通信单元，其将所述图像、所述增强现实信息和与所述对象相关的增强现实标记的所述增强现实信息的访问地址中的至少一个发送到另一个移动终端。
24.—种移动终端，该移动终端包括显示器，其显示图像，所显示的图像包括第一对象和第二对象，所述显示器还显示与所述第一对象相关的第一增强现实(AR)信息和与所述第二对象相关的第二增强现实信息； 禾口控制器，其接收与指针相对于所述显示器上显示的图像的移动相关的信息，所述控制器基于接收到的与所述指针的移动相关的信息来识别与所述第二对象相关的所述第二增强现实信息，并且当基于接收到的与所述指针的移动相关的信息而识别了与所述第二对象相关的所述第二增强现实信息时，所述控制器控制所述显示器显示具有所述第一对象、所述第二对象和与所述第一对象相关的所述第一增强现实信息且不具有与所述第二对象相关的第二增强现实信息的图像。
25.根据权利要求M所述的移动终端，其中，所述控制器通过基于所述指针的移动确定所显示的图像的区域来识别所述第二增强现实信息，并且所述控制器确定在所确定的区域内是否提供了对象。
26.根据权利要求25所述的移动终端，其中，当确定在所确定的区域内提供了所述对象时，所述控制器进一步通过识别所确定的对象的所述第二增强现实信息来识别所述第二增强现实信息。
27.根据权利要求25所述的移动终端，其中，所述指针的移动包括所述指针在所述显示器的多个预定区域上的移动，并且所述控制器基于所述指针在所述多个预定区域上的移动来对所述区 域进行识别。
28.根据权利要求M所述的移动终端，其中，所述显示器通过如下方式来显示所述第二增强现实信息，即，将所述第二增强现实信息显示为使得所述第二增强现实信息覆盖所显示的第一增强现实信息的前端位置的一部分。
29.根据权利要求M所述的移动终端，该移动终端还包括存储器，其存储与所述第二对象相关的标识信息和与是否显示所述第二增强现实信息相关的信息，其中，当所述第二对象从所述显示器上消失并在所述显示器上再次显示时，所述控制器基于所存储的与所述第二对象相关的标识信息和所存储的与是否显示所述第二增强现实信息相关的信息来确定是显示还是不显示与所述第二对象相关的所述第二增强现实信肩、ο
30.根据权利要求M所述的移动终端，该移动终端还包括通信单元，其将具有所述第一对象、所述第二对象、和所述第一增强现实信息的图像发送到另一个移动终端，而不发送所述第二增强现实信息。
全文摘要
本发明涉及一种显示信息的方法和使用该方法的移动终端。可以提供一种移动终端上的信息控制方法。该方法可以包括以下步骤在移动终端的显示器上显示图像(至少一个对象)；接收与指针相对于在所述显示器上显示的图像的移动相关的信息；基于接收到的与指针的移动相关的信息来获得关于所述对象的增强现实(AR)信息；以及在移动终端的显示器上显示图像和与至少一个对象相关的增强现实(AR)信息。
文档编号G06F3/048GK102377873SQ20111005759
公开日2012年3月14日 申请日期2011年3月10日 优先权日2010年8月16日
发明者洪渊哲, 金民禹 申请人:Lg电子株式会社