用于显示图像的电子设备和计算机可读记录介质的制作方法

文档序号:17747218发布日期:2019-05-24 20:43阅读:219来源:国知局
用于显示图像的电子设备和计算机可读记录介质的制作方法

本公开涉及用于显示图像的电子设备。



背景技术:

最近的电子设备正在发展为能够全面地执行各种功能。例如,电子设备可以执行多种功能,例如拍照片或录像、播放音乐、视频或游戏、或实时接收和播放广播。

电子设备还可以显示在各个方向上捕获的图像,而不是仅在单个方向上捕获的图像。相对于在单个方向上捕获的图像,在多个方向上捕获的图像提供用户周围更宽的视野,从而为用户提供更逼真的图像。

提出以上信息作为背景信息仅是为了辅助理解本公开。并未确定和断言上述任何内容是否可应用作关于本公开的现有技术。



技术实现要素:

技术问题

因此,本公开的一个方面提供了一种电子设备,其可以向其用户提供360度全向图像作为更逼真的图像。可以通过在若干方向上捕获的至少一个图像来创建这样的图像,并且这样的图像可以在所有方向上以360度表示整个空间。用户可以使用电子设备观看图像,同时在用户的期望方向上自由移动。同时,用户有时观看图像的一部分,而不是整个图像。因此,除了用户当前正在观看的图像的该部分之外,用户不能容易地识别可能从图像的其余部分发生的事件。为了查看图像的发生事件的部分,用户自身需要搜索该部分,这是繁重的。

技术方案

根据本公开的各种实施例,可以提供用于显示图像以解决前述或其他问题的电子设备。

根据本公开的实施例,提供了一种电子设备。该电子设备包括:显示器;存储器;以及至少一个处理器,被配置为:控制显示器显示图像的第一局部图像,如果接收到用于指定第一对象的第一输入,则指定第一局部图像中包括的第一对象,将与第一对象相关联的第一信息存储在存储器中,如果显示器上显示的图像从第一局部图像切换为图像的第二局部图像,则在显示器上显示与第一对象相关联的第一图形对象,并且如果接收到用于选择第一图形对象的第二输入,则使用第一信息将显示器上显示的图像从第二局部图像切换为图像的包括第一对象在内的第三局部图像。

根据本公开的实施例,提供了一种电子设备。该电子设备包括:显示器;存储器;以及至少一个处理器,被配置为:控制显示器显示图像的第一局部图像,如果接收到用于指定第一局部图像的第一输入,则指定第一局部图像,将与第一局部图像相关联的第一信息存储在存储器中,如果显示器上显示的图像从第一局部图像切换为图像的第二局部图像,则在显示器上显示与第一局部图像相关联的第一图形对象,并且如果接收到用于选择第一图形对象的第二输入,则根据第一信息将显示器上显示的图像从第二局部图像切换为第一局部图像。

根据本公开的实施例,提供了一种非暂时性计算机可读记录介质。该非暂时性计算机可读记录介质包括保存在计算机上执行的程序,其中,所述程序包括可执行命令,当由至少一个处理器执行时,所述可执行命令使得所述至少一个处理器能够:显示图像的第一局部图像;如果接收到用于指定第一对象的第一输入,则指定第一局部图像中包括的第一对象;存储与第一对象相关联的第一信息;如果显示器上显示的图像从第一局部图像切换为图像的第二局部图像,则显示与第一对象相关联的第一图形对象;并且如果接收到用于选择第一图形对象的第二输入,则使用第一信息将显示器上显示的图像从第二局部图像切换为图像的包括第一对象在内的第三局部图像。

根据本公开的实施例,提供了一种电子设备。该电子设备包括:显示器;存储器;通信电路;以及至少一个处理器,被配置为:控制显示器显示用于控制外部电子设备的用户界面,如果接收到用于指定第一对象的第一输入,则指定在外部电子设备上显示的图像的第一局部图像中包括的第一对象,将与第一对象相关联的第一信息存储在存储器中,基于第一信息在用户界面上显示与第一对象相对应的第一图形对象,并且如果接收到用于选择第一图形对象的第二输入,则通过通信电路向外部电子设备发送第一控制信号,第一控制信号用于根据第一信息将外部电子设备上显示的图像切换为图像的包括第一对象在内的第二局部图像。

根据结合附图公开了本公开各种实施例的以下详细描述,本公开的其他方面、优点和突出特征对于本领域技术人员将变得清楚明白。

发明的有益效果

根据前面的描述清楚的是,根据本公开的实施例,电子设备可以根据用户输入指定包括在360度全向图像中的对象,并且使显示在显示器上的图像能够根据用于选择与对象相关联的图形对象的输入而切换为包括指定对象在内的局部图像。此外,当发生与指定对象相关联的事件时,电子设备可以向用户提供指示事件发生的通知。因此,用户可以识别与指定对象相关联的事件的发生,并将显示在显示器上的图像切换为已发生事件的局部图像。

根据结合附图公开了本公开各种实施例的以下详细描述,本公开的其他方面、优点和突出特征对于本领域技术人员将变得清楚明白。

附图说明

根据结合附图的以下描述,本公开的特定实施例的上述和其他方面、特征以及优点将更清楚,在附图中:

图1是示出根据本公开的实施例的包括电子设备在内的网络环境的视图;

图2是示出根据本公开的实施例的程序模块的框图;

图3是示出根据本公开的实施例的电子设备的框图;

图4a和图4b是示出根据本公开的各种实施例的用于切换由电子设备显示的图像的方法的流程图;

图5a和图5b是示出根据本公开的各种实施例的由电子设备显示的屏幕的视图;

图6a和图6b是示出根据本公开的各种实施例的用于由电子设备指定局部图像或局部图像中包括的对象的方法的视图;

图7是示出根据本公开的实施例的与局部图像相对应的坐标信息的视图;

图8a、图8b和图8c是示出根据本公开的各种实施例的与局部图像中包括的对象相关联的信息的视图;

图9a和图9b是示出根据本公开的各种实施例的用于显示与由电子设备指定的对象或局部图像相关联的图形对象的方法的视图;

图10a和图10b是示出根据本公开的各种实施例的用于按照由电子设备指定的对象的大小来确定图形对象的大小的方法的视图;

图11a、图11b和图11c是示出根据本公开的各种实施例的用于按照指定的局部图像与电子设备正显示的局部图像之间的距离来确定图形对象的大小的方法的视图;

图12a和图12b是示出根据本公开的各种实施例的用于根据电子设备是否识别出对象来改变图形对象的透明度的方法的流程图。

图13a和图13b是示出根据本公开的各种实施例的用于根据电子设备是否在图像中识别出对象来改变图形对象的透明度的方法的视图;

图14a和图14b是示出根据本公开的各种实施例的用于由电子设备显示多个图形对象的方法的视图;

图15a和图15b是示出根据本公开的实施例的用于由各种电子设备释放对对象或局部图像的指定的方法的视图;

图16a和图16b是示出根据本公开的各种实施例的用于由电子设备显示多个图形对象的方法的视图;

图17a、图17b和图17c是示出根据本公开的各种实施例的用于由电子设备显示多个图形对象的方法的视图;

图18a、图18b、图18c、图18d、图18e、图18f、图18g、图18h和图18i是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图;

图19a、图19b、图19c、图19d、图19e和图19f是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图;

图20a、图20b、图20c、图20d、图20e、图20f和图20g是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图;

图21a、图21b、图21c、图21d、图21e、图21f、图21g、图21h和图21i是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图;

图22a和图22b是示出根据本公开的各种实施例的用于在发生事件时由电子设备提供通知的方法的流程图;

图23a、图23b和图23c是示出根据本公开的各种实施例的用于由电子设备确定发生事件的方法的视图;

图24a、图24b和图24c是示出根据本公开的各种实施例的用于由电子设备确定发生对象移动的方法的视图;

图25a、图25b和图25c是示出根据本公开的各种实施例的用于在发生事件时由电子设备显示图形对象的方法的视图;

图26a、图26b、图26c、图26d、图26e和图26f是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图;

图27a、图27b、图27c、图27d、图27e和图27f是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图;

图28a、图28b、图28c、图28d、图28e和图28f是示出根据本公开的各种实施例的用于由电子设备输入对局部图像的偏好的方法的视图;

图29a、图29b、图29c、图29d和图29e是示出根据本公开的各种实施例的用于由电子设备显示与图像的局部图像相关联的消息或表情符号的方法的视图;

图30a、图30b、图30c、图30d、图30e、图30f、图30g、图30h、图30i和图30j是示出根据本公开的各种实施例的用于由电子设备输入消息的方法的视图;

图31a、图31b、图31c、图31d和图31e是示出根据本公开的各种实施例的用于由电子设备显示消息的方法的视图;

图32是示出根据本公开的实施例的用于由电子设备控制外部电子设备显示图像的方法的流程图;

图33a、图33b、图33c、图33d和图33e是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图;

图34a、图34b、图34c和图34d是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图;

图35a、图35b、图35c和图35d是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图;

图36a、图36b、图36c和图36d是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图;

图37a、图37b和图37c是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图;以及

图38a、图38b、图38c、图38d、图38e、图38f和图38g是示出根据本公开的各种实施例的外部电子设备的操作的视图。

贯穿附图,相似的附图标记将被理解为指代相似的部件、组件和结构。

具体实施方式

提供以下参考附图的描述以帮助全面理解由权利要求及其等同物限定的本公开的各实施例。以下描述包括各种具体细节以帮助理解,但这些具体细节应被视为仅是示例性的。因此,本领域普通技术人员将认识到:在不脱离本公开的范围和精神的情况下,可以对本文所描述的各种实施例进行各种改变和修改。另外,为了清楚和简洁起见,可以省略对已知功能和结构的描述。

以下描述和权利要求中使用的术语和词语不限于其书面含义,而是仅被发明人用来实现对本公开清楚一致的理解。因此,对于本领域技术人员来说应当清楚明白的是,提供对本公开的各种实施例的以下描述以仅用于说明的目的,而不是用于限制由所附权利要求及其等同物限定的本公开的目的。

应当理解的是,除非上下文中另有清楚指示,否则单数形式“一”、“一个”和“该”包括复数指示物。因此,例如,对“组件表面”的引用包括对这样的表面中的一个或多个的引用。

如本文所使用的,在上下文中,术语“被配置为”可以在硬件或软件方面与诸如“适合于”、“能够”、“修改为”、“被制作用于”、“适用于”、“可以”或“设计为”之类的其他术语互换使用。更确切地说,术语“被配置为”可以意指一设备能够与另一设备或部件一起执行操作。例如,术语“被配置(或设置)为执行a、b和c的处理器”可以意指可通过执行存储器设备中存储的一个或多个软件程序来执行操作的通用处理器(例如,中央处理单元(cpu)或应用处理器(ap))、或者用于执行操作的专用处理器(例如,嵌入式处理器)。

例如,根据本公开的各种实施例的电子设备的示例可以包括以下至少一项:智能电话、平板个人计算机(pc)、移动电话、视频电话、电子书阅读器、台式pc、膝上型计算机、上网本计算机、工作站、服务器、个人数字助理(pda)、便携多媒体播放器(pmp)、运动图像专家组阶段1或阶段2(mpeg-1或mpeg-2)音频层3(mp3)播放器、医疗设备、相机或可穿戴设备。可穿戴设备可以包括以下至少一项:饰品式设备(例如,手表、戒指、手链、脚链、项链、眼镜、隐形眼镜或头戴式设备(hmd))、衣料或服饰集成设备(例如,电子服饰)、身体附着式设备(例如,皮肤贴或纹身)或身体植入式设备。在一些实施例中,智能家用电器的示例可以包括以下至少一项:电视、数字多功能盘(dvd)播放器、音频播放器、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、烘干机、空气净化器、机项盒、家庭自动控制面板、安全控制面板、电视(tv)盒(例如,samsunghomesynctm、appletvtm或googletvtm)、游戏机(xboxtm、playstationtm)、电子词典、电子钥匙、便携式摄像机或电子相框。

根据本公开的实施例,电子设备可以包括以下至少一项:各种医疗设备(例如,多种多样的便携式医疗测量设备(血糖测量设备、心跳测量设备或体温测量设备)、磁共振血管造影(mpa)设备、磁共振成像(mri)设备、计算机断层扫描(ct)设备、成像设备或超声设备)、导航设备、全球导航卫星系统(gnss)接收器、事件数据记录仪(edr)、飞行数据记录仪(fdr)、汽车信息娱乐设备、航海电子设备(例如,海航导航设备或陀螺罗盘)、航空电子设备、安全设备、车辆头单元、工业或家庭机器人、无人飞机、自动柜员机(atm)、销售点(pos)设备或物联网(iot)设备(例如,灯泡、各种传感器、洒水器、火警、恒温调节器、街灯、烤面包机、健身器材、热水箱、加热器或烧水壶)。根据本公开的各种实施例,电子设备的示例可以包括以下至少一项:家具、建筑物/结构或车辆的一部分、电子板、电子签名接收设备、投影仪或各种测量设备(例如,用于测量水、电、燃气或电磁波的设备)。根据本公开的各种实施例,电子设备可以是柔性的或可以是以上列举的电子设备的组合。根据本公开的实施例,电子设备不限于上述设备。如本文所使用的,术语“用户”可以表示使用电子设备的人或另一设备(例如,人工智能电子设备)。

图1是示出根据本公开的实施例的包括电子设备在内的网络环境的视图。

参考图1,根据本公开的实施例,电子设备101包括在网络环境100中。电子设备101可以包括总线110、处理器120、存储器130、输入/输出接口150、显示器160和通信接口170。在一些实施例中,电子设备101可以不包括这些组件中的至少一个,或者可以添加另一组件。总线110可以包括用于将组件110至170相互连接并在这些组件之间传送通信(例如,控制消息或数据)的电路。处理模块120可以包括cpu、ap或通信处理器(cp)中的一个或多个。处理器120可以对电子设备101的至少一个其他组件执行控制,和/或执行与通信相关的操作或数据处理。

存储器130可以包括易失性和/或非易失性存储器。例如,存储器130可以存储与电子设备101的至少一个其他组件相关的命令或数据。根据本公开的实施例,存储器130可以存储软件和/或程序140。程序140可以包括例如内核141、中间件143、应用编程接口(api)145和/或应用程序(或“应用”)147。内核141、中间件143或api145中的至少一部分可以被表示为操作系统(os)。例如,内核141可以控制或管理执行在其他程序(例如,中间件143、api145或应用程序147)中实现的操作或功能所使用的系统资源(例如,总线110、处理器120或存储器130等)。内核141可以提供允许中间件143、api145或应用147访问电子设备101的各个组件以控制或管理系统资源的接口。

例如,中间件143可以作为中继器,以允许api145或应用147与内核141进行数据通信。此外,中间件143可以按照优先级次序处理从应用程序147接收到的一个或多个任务请求。例如,中间件143可以向应用程序147中的至少一个分配使用电子设备101的系统资源(例如,总线110、处理器120或存储器130)的优先级,并处理一个或多个任务请求。api145是允许应用147控制从内核141或中间件143提供的功能的接口。例如,api133可以包括用于归档控制、窗口控制、图像处理或文本控制的至少一个接口或功能(例如,命令)。例如,输入/输出接口150可以将从用户或其他外部设备输入的命令或数据传送到电子设备101的其他组件,或可以将从电子设备101的其他组件接收的命令或数据输出给用户或其他外部设备。

显示器160可以包括例如液晶显示器(lcd)、发光二极管(led)显示器、有机led(oled)显示器或微机电系统(mems)显示器或电子纸显示器。显示器160可以向用户显示例如各种内容(例如,文本、图像、视频、图标或符号)。显示器160可以包括触摸屏,并可以接收例如通过使用电子笔或用户的身体部位进行的触摸、手势、接近或悬停输入。例如,通信接口170可以建立电子设备101与外部设备(例如,第一电子设备102、第二电子设备104或服务器106)之间的通信。例如,通信接口170可以通过无线通信或有线通信与网络162连接,并可以与外部设备(例如,第二外部电子设备104或服务器106)进行通信。例如,通信接口170可以与有线或无线连接164连接,并可以与外部设备(例如,第一外部电子设备102)进行通信。

无线通信可以包括使用以下项中的至少一个的蜂窝通信:例如,长期演进(lte)、高级lte(lte-a)、码分多址(cdma)、宽带cdma(wcdma)、通用移动电信系统(umts)、无线宽带(wibro)或全球移动通信系统(gsm)。根据本公开的实施例,无线通信可以包括以下项中的至少一个:例如,无线保真(wi-fi)、蓝牙(bt)、蓝牙低功率(ble)、zigbee、近场通信(nfc)、磁安全传输(mst)、射频或体域网(ban)。根据本公开的实施例,无线通信可以包括全球导航卫星系统(gnss)。gnss可以是例如全球定位系统(gps)、全球导航卫星系统(glonass)、北斗导航卫星系统(在下文中称为“北斗”)或伽利略或欧洲基于全球卫星的导航系统。在下文中,术语“gps”和“gnss”在本文中可以互换使用。有线通信可以包括以下项中的至少一个:例如,通用串行总线(usb)、高清多媒体接口(hdmi)、推荐标准(rs)-232、电力线通信(plc)或普通老式电话业务(pots)。网络162可以包括电信网络中的至少一个,例如,计算机网络(例如,局域网(lan)或广域网(wan))、互联网或电话网络。

第一和第二外部电子设备102和104均可以是与电子设备101相同或不同类型的设备。根据本公开的实施例,在电子设备101上执行的操作中的全部或一些可以在另一其他电子设备或多个其他电子设备(例如,电子设备102和104或服务器106)上执行。根据本公开的实施例,当电子设备101应自动地或者根据请求执行一些功能或服务时,作为其自己执行该功能或服务的替代或者附加,电子设备101可以请求另一设备(例如,电子设备102和104或服务器106)执行与其相关联的至少一些功能。其他电子设备(例如,电子设备102和104或服务器106)可以执行所请求的功能或附加功能,并向电子设备101传送执行的结果。电子设备101可以通过按原样或附加地处理接收的结果来提供请求的功能或服务。为此,例如,可以使用云计算、分布式计算或客户端-服务器计算技术。

根据本公开的实施例,显示器160可以显示360度全向图像。该图像可以使用通过如下相机模块所获得的至少一个图像而被生成,其中该相机模块能够进行360度全方向图像捕获。该相机模块可以包括至少一个相机以在360度全方向上捕获图像。

电子设备101可以从外部服务器接收图像并将图像存储在存储器130中,并且处理器120可以通过显示器160显示存储在存储器130中的图像的局部图像。处理器120可以通过显示器160实时显示从外部服务器实时接收的图像的局部图像。由于图像表示360度全方向,因此电子设备101可以通过显示器160显示图像的局部图像,而不是整个图像。

图像可以包括用于左眼的图像和用于右眼的图像,以向用户提供三维(3d)效果。显示器160可以通过将用于左眼的图像和用于右眼的图像分别显示到显示器160的左手部分和右手部分,来向用户提供3d效果。

根据本公开的实施例,处理器120可以在显示器160上显示图像的第一局部图像,其中第一局部图像与通过传感器感测的电子设备101的第一侧表面相对应。处理器120可以根据用户输入或设置在显示器160上显示图像的第一局部图像。处理器120可以根据由电子设备101的传感器感测到的电子设备101的移动或者所接收的用户输入来切换显示器160上显示的图像。例如,处理器120可以在显示器160上当前正显示图像的第一局部图像时,将第一局部图像切换为图像的第二局部图像以对应于电子设备101的移动方向或所接收的用户输入,并且显示第二局部图像。第二局部图像可以是具有与第一局部图像不同的至少一部分的图像。

处理器120可以放大与第一局部图像相关联的第一语音信息,并且衰减与图像的除了第一局部图像之外的其余部分相关联的语音信息。因此,处理器120可以向用户提供逼真的语音效果。

根据本公开的实施例,处理器120可以接收第一输入,第一输入用于指定在显示器160上显示的第一局部图像中包括的第一对象。处理器120可以根据第一输入指定第一对象。例如,第一对象可以是在第一局部图像中可识别的对象,诸如包括在第一局部图像中的人物、建筑物或车辆。尽管为了便于描述,以下主要描述在一个局部图像中指定一个对象的示例,但是本公开的各种实施例不限于此,并且可以在一个局部图像中指定多个对象。

例如,处理器120可以根据第一输入在第一局部图像中识别和指定第一对象。处理器120可以在第一局部图像中识别与第一输入相对应的第一对象,并指定所识别的第一对象。处理器120可以在显示器160上显示第一对象的识别结果。例如,处理器120可以在显示器160上显示指示第一对象被识别出的消息、或关于所识别的第一对象的信息。电子设备101可以在存储器130或外部服务器中搜索关于所识别的第一对象的信息,并在显示器160上显示搜索结果。

根据本公开的实施例,处理器120可以将与指定的第一对象相关联的第一信息存储在存储器130中。与第一对象相关联的第一信息可以包括可用于指定或识别第一对象的各种信息。例如,第一信息可以包括与第一对象相对应的颜色信息、形状信息或坐标信息中的至少一个。在确定第一对象移动时,处理器120可以根据第一对象的移动实时更新与第一对象相对应的坐标信息。包括在第一信息中的多条信息仅是示例,并不限于此。可用于指定或识别第一对象的各种信息可以包括在第一信息中。

根据本公开的实施例,当在显示器160上显示的图像从图像的第一局部图像切换为第二局部图像时,处理器120可以在显示器160上显示与第一对象相关联的第一图形对象。处理器120可以根据由传感器感测到的电子设备101的移动或用户输入,将显示器160上显示的图像从第一局部图像切换为第二局部图像。

尽管没有从第一局部图像切换为第二局部图像,但是当第一对象从第一局部图像消失时,处理器120可以在显示器160上显示第一图形对象。尽管为了便于描述,下面主要描述当第一局部图像切换为第二局部图像时显示第一图形对象的示例,但是本公开的各种实施例不限于此。尽管未切换显示器160上显示的局部图像,但是当指定的第一对象未在显示器160上显示时,可以在显示器160上显示第一图形对象。

第一图形对象可以包括与指定的第一对象相关联的图标或缩略图像中的至少一个。例如,第一图形对象可以包括用于指示第一对象的图标或用于指示第一对象的缩略图像。

处理器120可以基于第一信息或与第二局部图像相关联的信息中的至少一个来确定第一图形对象的显示位置或大小中的至少一个。与第二局部图像相关联的信息可以包括与第二局部图像相对应的坐标信息、或可用于指定或识别包括在第二局部图像中的至少一个对象的信息中的至少一个。下面描述用于由处理器120确定第一图形对象的显示位置或大小中的至少一个的具体方法。

根据本公开的实施例,在接收到用于选择第一图形对象的第二输入时,处理器120可以使用第一信息,将显示器160上显示的图像从第二局部图像切换为图像的包括指定的第一对象在内的第三局部图像。根据用于切换显示器160上显示的图像的用户输入、或者由传感器感测到的电子设备101的移动,处理器120可以根据第二输入立即将显示器160上显示的图像从第二局部图像切换为包括第一对象在内的第三局部图像,而不是顺序地切换显示器160上显示的图像。

第三局部图像可以与第一局部图像相同,或者第三局部图像的至少一部分可以与第一局部图像不同。例如,在第二局部图像正显示在显示器160上的同时第一对象未移动的情况下,第三局部图像可以与第一局部图像相同。相反,在第二局部图像正显示在显示器160上的同时第一对象移动的情况下,第三局部图像可以至少部分地与第一局部图像不同。

根据本公开的实施例,处理器120可以确定在第一图形对象显示在显示器160上之后是否发生与第一对象相关的第一事件。例如,当指定的第一对象移动或者从存储器130或外部服务器中搜索到与指定的第一对象相关联的消息或表情符号时,处理器120可以确定发生第一事件。下面详细描述用于确定发生第一事件的具体方法。

在确定发生第一事件时,处理器120可以改变第一图形对象的显示位置、大小、颜色或形状中的至少一个,并在显示器160上显示。在确定发生第一事件时,处理器120可以输出振动或声音中的至少一个,以通知用户发生第一事件。因此,即使在没有通过显示器160观看包括第一对象在内的局部图像的情况下,用户也可以识别出与第一对象相关联的事件的发生。

根据本公开的实施例,处理器120可以接收用于指定显示器160上显示的第二局部图像中包括的第二对象的第三输入。处理器120可以根据第三输入来指定第二对象。用于指定第二对象的具体方法与如上所述的用于指定第一对象的方法相同,因此,下面不再给出其进一步的描述。

处理器120可以将与指定的第二对象相关联的第二信息存储在存储器130中。与上述第一信息类似,第二信息可以包括可用于指定或识别第二对象的各种信息。

当显示器160上显示的图像从第二局部图像切换为图像的第四局部图像时,处理器120可以在显示160上显示与第一对象相关联的第一图形对象和与第二对象相关联的第二图形对象。

处理器120可以基于第一信息、第二信息或与第四局部图像相关联的信息中的至少一个,来确定第一图形对象和第二图形对象中的每一个的显示位置或大小中的至少一个。与第四局部图像相关联的信息可以包括以下项中的至少一个:与第四局部图像相对应的坐标信息、或可用于指定或识别包括在第四局部图像中的至少一个对象的信息。下面描述用于由处理器120确定第一图形对象和第二图形对象中的每一个的显示位置或大小中的至少一个的具体方法。

根据本公开的实施例,处理器120可以接收用于释放对第一对象的指定的第四输入。处理器120可以根据第四输入释放对第一对象的指定。因此,尽管显示器160上显示的图像被切换为不包括第一对象的局部图像,但是处理器120可以放弃显示与第一对象相关联的第一图形对象。当在不包括第一对象的局部图像正显示在显示器160上的同时释放对第一对象的指定时,处理器120可以控制显示器160不显示第一图形对象。

根据本公开的实施例,处理器120可以在显示第一图形对象之后,使用与第一对象相关联的第一信息来确定是否从360度全向图像中识别出第一对象。尽管包括第一对象在内的局部图像没有显示在显示器160上,但是处理器120可以将整个图像存储在存储器130中,或者从外部服务器接收整个图像,因此,处理器120可以确定是否从整个图像中识别出第一对象。

除非从图像中识别出第一对象,否则处理器120可以改变第一图形对象的透明度。这里,透明度是指示显示器160上显示的图形对象的透明情况的指标。随着透明度的增加,第一图形对象可以更透明,而随着透明度的降低,第一图形对象可以更不透明。

例如,当第一对象持续不能从图像中识别出时,处理器120可以增加第一图形对象的透明度。处理器120可以与识别第一对象失败所持续的时间段成比例地逐渐增加第一图形对象的透明度。因此,用户可以直观地掌握从图像中识别第一对象失败。

当无法从图像中识别第一对象持续预设时间时,处理器120可以控制显示器160不显示第一图形对象。因此,用户可以直观地认识到用户自身指定的第一对象已从整个图像中消失。

当再次从图像中识别出第一对象时,处理器120可以将第一图形对象的透明度变回原始透明度。

根据本公开的实施例,处理器120可以根据用户输入指定局部图像自身,而不仅仅是局部图像中包括的对象。例如,处理器120可以从用户接收用于指定显示器160上正显示的图像的第一局部图像(而不是特定对象)的输入。电子设备101可以根据用于指定第一局部图像的输入来指定当前正在显示器160上显示的第一局部图像本身。

处理器120可以将与指定的第一局部图像相关联的第一信息存储在存储器130中。与第一局部图像相关联的第一信息可以包括可用于指定或识别第一局部图像的各种信息。例如,与第一局部图像相关联的第一信息可以包括以下项中的至少一个:与第一局部图像相对应的坐标信息、或可用于指定或识别包括在第一局部图像中的至少一个对象的信息。与第一局部图像相对应的坐标信息可以包括指示第一局部图像的中心的坐标信息、或指示第一局部图像的特定点的坐标信息。在与第一局部图像相关联的第一信息中包括的多条信息仅是示例,并不限于此。可用于指定或识别第一局部图像的各种信息可以包括在与第一局部图像相关联的第一信息中。

根据本公开的实施例,当显示器160上显示的图像从图像的第一局部图像切换为第二局部图像时,处理器120可以在显示器160上显示与第一局部图像相关联的第一图形对象。

第一图形对象可以包括与第一局部图像相关联的图标或缩略图像中的至少一个。例如,第一图形对象可以包括指示第一局部图像或第一局部图像中包括的至少一个对象的缩略图像或图标。

根据本公开的实施例,在接收到用于选择第一图形对象的第二输入时,处理器120可以根据第一信息将显示器160上显示的图像从第二局部图像切换为第一局部图像。根据用于切换显示器160上显示的图像的用户输入、或者由传感器感测到的电子设备101的移动,处理器120可以根据第二输入立即将显示器160上显示的图像从第二局部图像切换为第一局部图像,而不是顺序地切换显示器160上显示的图像。因此,用户可以在他/她期望的时间观看他/她已指定的局部图像。

根据本公开的实施例,处理器120可以确定在第一图形对象显示在显示器160上之后是否发生与指定的第一局部图像相关的第一事件。例如,当第一局部图像中包括的至少一个对象移动,或者从存储器130或外部服务器中搜索到与第一局部图像或者第一局部图像中包括的至少一个对象相关联的消息或表情符号时,处理器120可以确定发生第一事件。下面详细描述用于确定发生第一事件的具体方法。

在确定发生第一事件时,处理器120可以改变第一图形对象的显示位置、大小、颜色或形状中的至少一个,并在显示器160上显示。在确定发生第一事件时,处理器120可以输出振动或声音中的至少一个,以通知用户发生第一事件。因此,即使在没有通过显示器160观看第一局部图像的情况下,用户也可以识别与第一局部图像相关联的事件的发生。

根据本公开的实施例,在显示器160上显示的图像从第一局部图像切换为第二局部图像之后,处理器120可以在接收到用于指定第二局部图像的第三输入时指定第二局部图像。处理器120可以根据例如用户输入来指定多个局部图像以及一个局部图像。用于指定第二局部图像的方法与上述用于指定第一局部图像的方法相同,并且下面不再给出其进一步的描述。

当显示器160上显示的图像切换为图像的第三局部图像时,处理器120可以在显示器160上显示与指定的第一局部图像相关联的第一图形对象和与指定的第二局部图像相关联的第二图形对象。第三局部图像可以是与第一局部图像和第二局部图像至少部分不同的局部图像。

根据本公开的实施例,处理器120可以根据用于释放对局部图像的指定的输入来释放对局部图像的指定。例如,处理器120可以接收用于释放对指定的第一局部图像的指定的第四输入,并且可以根据第四输入释放对第一局部图像的指定。

根据本公开的实施例,处理器120可以在识别出第一局部图像中的第一对象时存储与第一对象相关联的信息。与第一对象相关联的信息可以包括用于识别或指定第一对象的各种信息。尽管第一局部图像没有显示在显示器160上,但是处理器120可以将整个图像存储在存储器130中,或者从外部服务器接收整个图像,因此,处理器120可以确定是否在第一局部图像中识别出第一对象。

除非在第一局部图像中识别出第一对象,否则处理器120可以改变第一图形对象的透明度。例如,当第一对象持续不能从第一局部图像中识别出时,处理器120可以增加第一图形对象的透明度。处理器120可以与识别第一对象失败所持续的时间段成比例地逐渐增加第一图形对象的透明度。因此,用户可以直观地掌握在他/她已指定的第一局部图像中识别第一对象失败。

当无法从第一局部图像识别第一对象持续预设时间时,处理器120可以控制显示器160不显示第一图形对象。因此,用户可以直观地认识到第一对象已从第一局部图像中消失。

根据本公开的实施例,电子设备101可以通过显示器160显示360度全向图像,或者可以替代地控制外部电子设备显示图像。显示器160可以显示用于控制外部电子设备的用户界面。

例如,处理器120可以从用户接收用于切换在外部电子设备的显示器上显示的图像的输入。处理器120可以基于该输入通过通信接口170向外部电子设备发送控制信号,该控制信号用于切换外部电子设备上显示的图像。外部电子设备可以根据该控制信号切换所显示的图像。这样,用户可以通过显示器160上显示的用户界面来控制外部电子设备。

根据本公开的实施例,处理器120可以在接收到用于指定第一对象的第一输入时,指定在外部电子设备上显示的第一局部图像中包括的第一对象。例如,处理器120可以从外部电子设备接收关于第一局部图像的信息,并从第一局部图像中识别和指定第一对象。处理器120可以将与指定的第一对象相关联的第一信息存储在存储器130中。

处理器120还可以通过通信接口170向外部电子设备发送指示第一对象已被指定的至少一个信号、或第一信息。外部电子设备可以通过指示第一对象已被指定的信号或第一信息来识别第一对象的指定,并输出对第一对象的指定加以指示的消息。

处理器120可以基于第一信息在用户界面上显示与第一对象相对应的第一图形对象。第一图形对象可以是用于指示第一对象已被指定的图形对象,并且可以包括各种图形对象或消息。

在接收到用于选择第一图形对象的第二输入时,处理器120可以通过通信接口170向外部电子设备发送第一控制信号,第一控制信号用于根据第一信息将外部电子设备上显示的图像切换为图像的包括第一对象在内的第二局部图像。外部电子设备可以接收第一控制信号,并根据第一控制信号将显示的图像从第一对象切换为包括第一对象在内的第二局部图像。例如,在第一控制信号包括用于指定或识别第二局部图像的信息的情况下,外部电子设备可以根据该信息显示第二局部图像。

除非第一控制信号包括该信息,否则外部电子设备可以根据第一控制信号从整个图像中识别包括第一对象在内的第二局部图像,并显示识别的第二局部图像。

根据本公开的实施例,当外部电子设备上显示的图像被切换为图像的第三局部图像时,处理器120可以通过通信接口170向外部电子设备发送第二控制信号,第二控制信号用于显示与第一对象相关联的第二图形对象。外部电子设备可以根据第二控制信号在显示器上显示第二图形对象。第二图形对象可以包括与第一对象相关联的图标或缩略图像中的至少一个。

处理器120可以确定在第二图形对象显示在外部电子设备上之后是否发生与第一对象相关联的第一事件。在确定发生第一事件时,处理器120可以通过通信接口170向外部电子设备发送第三控制信号,第三控制信号用于改变外部电子设备上显示的第二图形对象的位置、大小、颜色或形状中的至少一个。外部电子设备可以根据第三控制信号改变第二图形对象的位置、大小、颜色或形状中的至少一个。

根据本公开的实施例,处理器120可以接收用于释放对第一对象的指定的第四输入,并且根据第四输入释放对第一对象的指定。处理器120还可以执行控制以防止第一图形对象被显示在用户界面上。当通过外部电子设备正显示第二图形对象时,处理器120可以通过通信接口170向外部电子设备发送第四控制信号,第四控制信号用于从显示器中移除第二图形对象。外部电子设备可以根据第四控制信号从显示器中移除第二图形对象。

图2是示出根据本公开的实施例的电子设备201的框图。电子设备201可以包括例如图1所示的电子设备101的配置的整体或一部分。电子设备201可以包括一个或多个处理器(例如,ap)210、通信模块220、用户识别模块(sim)224、存储器230、传感器模块240、输入设备250、显示器260、接口270、音频模块280、相机模块291、电力管理模块295、电池296、指示器297和电机298。处理器210可以通过运行例如os或应用程序来控制连接到处理器210的多个硬件和软件组件,并且处理器210可以处理和计算各种数据。处理器210可以用例如片上系统(soc)实现。根据本公开的实施例,处理器210还可以包括图形处理单元(gpu)和/或isp。处理器210可以包括图2所示的组件中的至少一些(例如,蜂窝模块221)。处理器210可以将从至少一个其他组件(例如,非易失性存储器)接收的命令或数据加载到易失性存储器上,处理所述命令或数据,并且将结果数据存储在非易失性存储器中。

通信模块220可以具有与通信接口170相同或相似的配置。通信模块220可以包括例如蜂窝模块221、wi-fi模块223、bt模块225、gnss模块227、nfc模块228和rf模块229。蜂窝模块221可以通过例如通信网络提供语音呼叫、视频呼叫、文本或互联网服务。蜂窝模块221可以使用sim224(例如,sim卡)在通信网络中对电子设备201执行识别或认证。根据本公开的实施例,蜂窝模块221可以执行可由处理器210提供的功能中的至少一些。根据本公开的实施例,蜂窝模块221可以包括cp。根据本公开的实施例,蜂窝模块221、wi-fi模块223、bt模块225、gnss模块227或nfc模块228中的至少一些(例如,两个或更多个)可以被包括在单个集成电路(ic)或ic封装中。rf模块229可以传输例如通信信号(例如,rf信号)的数据。rf模块229可以包括例如收发器、功率放大器模块(pam)、频率滤波器、低噪声放大器(lna)或天线。根据本公开的实施例,蜂窝模块221、wi-fi模块223、bt模块225、gnss模块227或nfc模块228中的至少一个可以通过单独的rf模块传输rf信号。用户识别模块224可以包括例如含有sim的卡或嵌入式sim,并且可以包含唯一识别信息(例如,ic卡标识符(iccid))或用户信息(例如,国际移动用户身份(imsi))。

存储器230(例如,存储器130)可以包括例如内部存储器232或外部存储器234。内部存储器232可以包括以下至少一项:例如,易失性存储器(例如,动态随机存取存储器(dram)、静态ram(sram)、同步dram(sdram)等)或非易失性存储器(例如,一次性可编程rom(otprom)、可编程rom(prom)、可擦除prom(eprom)、电可擦除prom(eeprom)、掩膜rom、闪存rom、闪存(例如,nand闪存或nor闪存)、硬盘驱动器或固态驱动器(ssd)。外部存储器234可以包括闪存驱动器,例如,紧凑闪存(cf)存储器、安全数字(sd)存储器、微型sd存储器、迷你型sd存储器、极限数字(xd)存储器、多媒体卡(mmc)或存储棒tm。外部存储器234可以经由各种接口与电子设备201功能地或物理地连接。

例如,传感器模块240可以测量物理量或检测电子设备201的操作状态,并且传感器模块240可以将测量的或检测的信息转换为电信号。传感器模块240可以包括以下至少一项:例如,手势传感器240a、陀螺仪传感器240b、大气压力传感器240c、磁性传感器240d、加速度传感器240e、握持传感器240f、接近传感器240g、颜色传感器240h(例如,红绿蓝(rgb)传感器)、生物(或生物特征)传感器240i、温度/湿度传感器240j、照度传感器240k或紫外(uv)传感器240m。附加地或备选地,感测模块240可以包括例如电子鼻传感器、肌电图(emg)传感器、脑电图(eeg)传感器、心电图(ecg)传感器、红外(ir)传感器、虹膜传感器或指纹传感器。传感器模块240还可以包括用于控制感测模块中包括的至少一个或多个传感器的控制电路。根据本公开的实施例,电子设备201还可以包括被配置为控制传感器模块240的处理器,作为处理器210的一部分或与处理器210分离,并且当处理器1810处于睡眠模式时,电子设备1801可以控制传感器模块240。

输入设备250可以包括例如触摸面板252、(数字)笔传感器254、按键256或超声输入设备258。触摸面板252可以使用电容式、电阻式、ir或超声方法中的至少一种。触摸面板252还可以包括控制电路。触摸面板252还可以包括触觉层,并可以向用户提供触觉反应。(数字)笔传感器254可以包括例如触摸面板的一部分或用于识别的单独片。按键256可以包括例如物理按钮、光学按键或键区。超声输入设备258可以通过麦克风(例如,麦克风288)感测从输入工具产生的超声波,以识别与所感测的超声波相对应的数据。

显示器260(例如,显示器160)可以包括面板262、全息设备264、投影仪266和/或用于对它们进行控制的控制电路。面板262可以被实现为柔性的、透明的或可穿戴的。面板262可与触摸面板252一起被配置在一个或多个模块中。根据本公开的实施例,面板262可以包括可以测量由用户触摸引起的压力的强度的压力传感器(或姿态传感器)。压力传感器可以与触摸面板252一起实现在单个主体中,或可以实现在与触摸面板252分离的一个或多个传感器中。全息设备264可以通过使用光的干涉在空气中形成三维(3d)图像(全息图)。投影仪266可以通过将光投影到屏幕上来显示图像。该屏幕可以位于例如电子设备201的内部或外部。接口270可以包括例如hdmi272、usb274、光学接口276或d-超小型(d-sub)278。接口270可以被包括在例如图1所示的通信接口170中。附加地或备选地,接口270可以包括移动高清链路(mhl)接口、sd卡/多媒体卡(mmc)接口或tr数据协会(irda)标准接口。

音频模块280可以例如将声音信号转换为电信号,反之亦然。音频模块280的至少一部分可以被包括在例如如图1所示的输入/输出接口150中。音频模块280可以处理通过例如扬声器282、接收器284、耳机286或麦克风288输入或输出的声音信息。例如,相机模块291可以是用于捕获静态图像和视频的设备,并且根据本公开的实施例,可以包括一个或多个图像传感器(例如,前置传感器和后置传感器)、镜头、isp或闪光灯(比如,led或氙灯)。例如,电力管理模块295可以管理电子设备201的电力。根据本公开的实施例,电力管理模块295可以包括电力管理ic(pmic)、充电器ic或电池表或燃料表。pmic可以具有有线和/或无线再充电方案。无线充电方案可以包括例如磁谐振方案、磁感应方案或基于电磁波的方案,并且可以添加用于无线充电的附加电路(例如,线圈回路、谐振电路、整流器等)。电池表可以测量电池296的剩余电量、在电池296被充电时的电压、电流或温度。电池296可以包括例如可再充电电池或太阳能电池。

指示器297可以指示电子设备201或者电子设备的一部分(例如,处理器210)的特定状态,包括例如启动状态、消息状态或再充电状态。电机298可以将电信号转换为机械振动,并可以产生振动或触觉效果。电子设备201可以包括移动tv支持设备(例如,gpu),所述移动tv支持设备可以按照例如数字多媒体广播(dmb)、数字视频广播(dvb)或mediaflotm标准处理媒体数据。电子设备的上述组件中的每一个可以包括一个或多个部件,并且部件的名称可以随着电子设备的类型而变化。根据各种实施例,电子设备(例如,电子设备201)可以排除一部分元件或包括更多元件,或可以将一部分元件组合为可以执行这些元件在被组合之前所执行的相同功能的单个实体。

图3是示出根据本公开的实施例的程序模块的框图。根据本公开的实施例,程序模块310(例如,程序140)可以包括控制与电子设备(例如,电子设备101)相关的资源的os和/或在os上驱动的各种应用(例如,ap147)。所述os可以包括例如androidtm、iostm、windowstm、symbiantm、tizentm或badatm

参考图3,程序模块310可以包括内核320(例如,内核141)、中间件330(例如,中间件143)、api360(例如,api145)和/或应用370(例如,应用程序147)。程序模块310的至少一部分可以预先加载到电子设备上,或者可以从外部电子设备(例如,电子设备102和104或服务器106)下载。

内核320可以包括例如系统资源管理器321或设备驱动器323。系统资源管理器321可以执行对系统资源的控制、分配或者恢复。根据本公开的实施例,系统资源管理器321可以包括进程管理单元、存储器管理单元或文件系统管理单元。设备驱动器323可以包括例如显示器驱动器、相机驱动器、bt驱动器、共享存储器驱动器、usb驱动器、键区驱动器、wi-fi驱动器、音频驱动器或进程间通信(ipc)驱动器。中间件330可以通过api360向应用370提供各种功能,使得应用370可以使用电子设备中的有限系统资源,或提供应用370所共同需要的功能。根据本公开的实施例,中间件330可以包括以下至少一项:运行时间库335、应用管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电力管理器345、数据库管理器346、包管理器347、连接管理器348、通知管理器349、位置管理器350、图形管理器351或安全管理器352。

运行时间库335可以包括由编译器使用的库模块,以便在例如执行应用370的同时通过编程语言添加新的功能。运行时间库335可以执行输入/输出管理、存储器管理或算数功能处理。应用管理器341可以管理例如应用370的生命周期。窗口管理器342可以管理在屏幕上使用的gui资源。多媒体管理器343可以掌握播放媒体文件所必需的格式,并使用适于格式的编解码器对媒体文件执行编码或解码。资源管理器344可以管理应用370的源代码或存储空间。电力管理器345可以管理例如电池容量或电力,并提供操作电子设备所需的电力信息。根据本公开的实施例,电力管理器345可以与基础输入/输出系统(bios)相互合作。数据库管理器346可以产生、搜索或改变要在应用370中使用的数据库。包管理器347可以管理以包文件形式分发的应用的安装或更新。

连接管理器348可以管理例如无线连接性。通知管理器349可以向用户提供事件,例如,到达消息、预约或接近提醒。位置管理器350可以管理例如关于电子设备的位置信息。图形管理器351可以管理例如将向用户提供的图形效果以及与图形效果相关的用户界面。例如,安全管理器352可以提供系统安全性或用户认证。根据本公开的实施例,中间件330可以包括用于管理电子设备的语音或视频呼叫功能的电话管理器、或能够形成上述元件的功能的组合的中间件模块。根据本公开的实施例,中间件330可以提供根据os的类型而指定的模块。中间件330可以动态省略一些现有组件或添加新组件。api360可以是例如api编程函数的集合,并可以根据os具有不同配置。例如,在安卓或ios的情况下,可以针对每个平台提供一个api集,在tizen的情况下,可以针对每个平台提供两个或更多个api集。

应用370可以包括可提供如下功能的应用:例如,主页371、拨号器372、短消息服务(sms)/多媒体消息服务(mms)373、即时消息(im)374、浏览器375、相机376、闹钟377、联系人378、语音拨号379、电子邮件380、日历381、媒体播放器382、相册383或时钟384、健康护理(例如,测量运动程度或血糖)或提供环境信息(例如,提供气压、湿度或温度信息)。根据本公开的实施例,应用370可以包括支持在电子设备和外部电子设备之间的信息交换的信息交换应用。信息交换应用的示例可以包括但不限于:用于向外部电子设备传送特定信息的通知中继应用或者用于管理外部电子设备的设备管理应用。例如,通知中继应用可以将由电子设备的其他应用产生的通知信息传送到外部电子设备,或从外部电子设备接收通知信息并向用户提供所接收的通知信息。例如,设备管理应用可以安装、删除或更新与该电子设备通信的外部电子设备的功能(例如,接通/关闭外部电子设备(或一部分元件)或调整显示器的亮度(或分辨率))或在外部电子设备上运行的应用。根据本公开的实施例,应用370可以包括根据外部电子设备的属性指定的应用(例如,移动医疗设备的健康护理应用)。根据本公开的实施例,应用370可以包括从外部电子设备接收的应用。程序模块310的至少一部分可以被实现(例如,执行)为软件、固件、硬件(例如,处理器210)或其至少两个或更多个的组合,且可以包括用于执行一个或多个功能的模块、程序、例程、命令集或处理。

图4a和图4b是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的流程图。

图4a是示出根据本公开的实施例的用于当指定对象时由电子设备101切换图像的方法的流程图。

在操作411中,电子设备101可以显示360度全向图像的第一局部图像。电子设备101可以根据用户输入或设置来显示图像的第一局部图像。

在操作412中,电子设备101可以在接收到第一输入时指定第一对象,其中第一输入用于指定在所显示的第一局部图像中包括的第一对象。电子设备101可以识别第一局部图像中与第一输入相对应的第一对象,并指定所识别的第一对象。

在操作413中,电子设备101可以存储与指定的第一对象相关联的第一信息。与第一对象相关联的第一信息可以包括可用于指定或识别第一对象的各种信息。

在操作414中,当显示的图像从第一局部图像切换为图像的第二局部图像时,电子设备101可以显示与第一对象相关联的第一图形对象。第一图形对象可以包括与第一对象相关联的图标或缩略图像中的至少一个。

在操作415中,在接收到用于选择第一图形对象的第二输入时,电子设备101可以使用第一信息,将电子设备101上显示的图像从第二局部图像切换为图像的包括第一对象在内的第三局部图像。电子设备101可以根据第二输入立即将电子设备101上显示的图像切换为第三局部图像,而不是顺序地切换。

图4b是示出根据本公开的实施例的用于当指定局部图像时由电子设备101切换图像的方法的流程图。

在操作421中,电子设备101可以显示图像的第一局部图像。

在操作422中,电子设备101可以在接收到用于指定第一局部图像的第一输入时指定第一局部图像。

在操作423中,电子设备101可以存储与第一局部图像相关联的第一信息。与第一局部图像相关联的第一信息可以包括可用于指定或识别图像中的第一局部图像的各种信息。

在操作424中,当显示的图像从第一局部图像切换为图像的第二局部图像时,电子设备101可以显示与第一局部图像相关联的第一图形对象。第一图形对象可以包括与第一局部图像相关联的图标或缩略图像中的至少一个。

在操作425中,在接收到用于选择第一图形对象的第二输入时,电子设备101可以根据第一信息将显示的图像从第二局部图像切换为第一局部图像。电子设备101可以根据第二输入立即将显示的图像从第二局部图像切换为第一局部图像,而不是顺序地切换。

图5a和图5b是示出根据本公开的各种实施例的由电子设备显示的屏幕的视图。

参考图5a,电子设备101可以显示360度全向图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示:用于执行指定对象或图像的功能的第一图标501、用于执行捕获图像的功能的第二图标502、用于执行显示关于图像的信息的功能的第三图标503、用于执行显示与图像相关的频道信息的功能的第四图标504、以及用于执行镜像功能的第五图标505。

在接收到用于选择第一图标501的第一输入时,电子设备101可以指定第一局部图像或第一局部图像中包括的第一对象,并存储与第一对象或第一局部图像相关联的第一信息。第一信息可以包括可用于指定或识别第一局部图像或第一对象511的各种信息。

参考图5b,在根据第一输入指定第一对象511或第一局部图像之后,电子设备101可以根据用户输入或者由传感器感测到的电子设备的移动将显示器上显示的图像切换为图像的第二局部图像。电子设备101上显示的第二局部图像可以包括与第一局部图像中包括的第一对象511相同的第一对象511,如图5b所示。然而,第二局部图像中的第一对象511可以以与图5a的第一局部图像的角度不同的角度显示。

电子设备101可以显示与指定的第一局部图像或指定的第一对象511相关的第一图形对象510,如图5b所示。第一图形对象510可以显示为指示指定的第一对象511或第一局部图像的图标。在指定第一局部图像的情况下,第一图形对象510可以显示为与整个第一局部图像相关的图标。这样,第一图形对象510可以以用于指示指定的第一对象511或指定的第一局部图像的各种方式显示。

在从用户接收到用于选择第一图形对象510的第二输入时,电子设备101可以在第一对象511被指定时将显示器上显示的图像切换为包括第一对象在内的第三局部图像,或者在第一局部图像被指定时将显示器上显示的图像切换为图5a的第一局部图像。

例如,在图像中包括的多个局部图像中的两个或更多个包括指定的第一对象511的情况下,电子设备101可以确定包括第一对象511的两个或更多个局部图像中的任何一个是第三局部图像。电子设备101可以基于与第一对象511相关的第一信息从多个局部图像之中确定第三局部图像。

例如,电子设备101可以将各个局部图像中包括的与第一对象511相关的多条信息中的每一条和与指定的第一对象511相关的第一信息进行比较,并且根据比较结果确定:多个局部图像之中、包括与第一对象511相关的信息(与第一对象511相关的该信息对应于第一信息)的局部图像是第三局部图像。

即使当各个局部图像中包括的与第一对象511相关的多条信息无法与第一信息精确匹配时,电子设备101也可以确定:在其局部图像中包括的与第一对象511相关的多条信息之中,与第一信息最密切匹配的关于第一对象511的信息对应于第一信息。因此,电子设备101可以确定:多个局部图像之中、包括与第一信息最密切匹配的关于第一对象511的信息在内的局部图像是第三局部图像。

例如,由于尽管图5a的第一局部图像和图5b的第二局部图像两者都包括第一对象511,但是相比于第二局部图像中包括的与第一对象511相关的信息,第一局部图像中包括的与第一对象511相关的信息与第一信息更密切匹配,所以电子设备101可以确定第一局部图像是第三局部图像。

这样,电子设备101能够显示包括由用户指定的对象在内的局部图像或由用户仅通过选择第一图形对象510而指定的局部图像,从而允许用户以更容易的方式切换和查看他/她想要的图像。

图6a和图6b是示出根据本公开的各种实施例的用于由电子设备指定局部图像或局部图像中包括的对象的方法的视图。

参考图6a,电子设备101可以根据用于指定第一对象601的输入来存储在通过显示器显示的第一局部图像中包括的第一对象601,并存储与第一对象601相关联的信息。

电子设备101可以显示用于执行指定在显示的局部图像中包括的对象的功能的图标,并且在接收到用于选择图标611的第一输入时,电子设备101可以指定在电子设备101上显示的第一局部图像中包括的第一对象601。电子设备101可以识别第一局部图像中的第一对象601,并指定第一对象601。在指定第一对象601之后,电子设备101可以在屏幕的拐角中显示图形对象612,图形对象612指示第一对象601已被指定。

当根据电子设备101的移动或用户输入将电子设备101上显示的图像从包括第一对象601在内的第一局部图像切换为图像的不包括第一对象601的第二局部图像时,电子设备101可以显示与指定的第一对象601相关联的第一图形对象621。

电子设备101还可以指定所显示的第一局部图像,如图6b所示。例如,电子设备101可以显示用于执行指定所显示的第一局部图像的功能的图标631,并且在接收到用于选择图标631的第一输入时,电子设备101可以指定所显示的第一局部图像。在指定第一局部图像之后,电子设备101可以在屏幕的拐角中显示图形对象632,图形对象632指示第一局部图像已被指定。

电子设备101可以指定显示的第一局部图像,并存储与第一局部图像相关联的第一信息。与第一局部图像相关联的第一信息可以包括可用于从整个图像中指定或识别第一局部图像的各种信息。

当根据电子设备101的移动或用户输入将电子设备101上显示的图像从第一局部图像切换为第二局部图像时,电子设备101可以显示与第一局部图像相关联的第一图形对象641。

图7是示出根据本公开的实施例的与局部图像相对应的坐标信息的视图。

根据本公开的实施例,可以将与360度全向图像的局部图像相对应的坐标信息设置为能够指定或识别局部图像在图像中的相对位置以指定或识别该局部图像。

例如,由于可以生成图像以表示所有360度方向,因此可以将图像表示为如图7所示的球体。

可以相对于球体的中心点700设置与电子设备101上显示的第一局部图像710相对应的坐标信息。可以将第一局部图像710中设置的坐标信息存储为与第一局部图像710相关联的第一信息。因此,电子设备101可以使用与第一局部图像710相关联的第一信息在图像中指定或识别第一局部图像710。

图8a、图8b和图8c是示出根据本公开的各种实施例的与局部图像中包括的对象相关联的信息的视图。

根据本公开的实施例,电子设备101可以指定在第一局部图像中包括的第一对象,并存储与第一对象相关联的第一信息。

例如,与第一对象相关联的第一信息可以包括用于指定或识别第一对象的各种信息。例如,与第一对象相关联的第一信息可以包括与第一对象相对应的颜色信息、形状信息或坐标信息中的至少一个。在确定第一对象移动时,电子设备101可以根据第一对象的移动实时更新与第一对象相对应的坐标信息。

例如,电子设备101可以根据用于指定在第一局部图像中包括的第一对象811的输入810来指定第一对象811,如图8a所示。电子设备101可以根据输入810识别包括在第一局部图像中的第一对象811,并存储与第一对象811相关联的第一信息。例如,电子设备101可以存储与第一对象811穿戴的衬衫上所示的形状820或者形状820的颜色有关的信息(如图8b所示),作为与第一对象811相关联的信息。电子设备101可以存储关于第一对象811的坐标信息,并根据第一对象811的移动更新关于第一对象811的坐标信息。

尽管电子设备101上显示的图像被切换为如图8c所示的局部图像,但是电子设备101可以基于与第一对象811相对应的信息从切换的局部图像中指定、识别和辨识第一对象811。尽管未示出,但是可以存储用于指定或识别第一对象811的各种信息作为与第一对象811相对应的第一信息。电子设备101可以通过使用与第一对象811相对应的第一信息跟踪整个360度全向图像来指定、识别和辨识第一对象811。因此,即使当通过显示器显示的图像被切换为不包括第一对象811的局部图像时,电子设备101也可以从整个图像中识别第一对象811,并识别包括第一对象811在内的局部图像。

图9a和图9b是示出根据本公开的各种实施例的用于显示与由电子设备指定的对象或局部图像相关联的图形对象的方法的视图。

参考图9a,电子设备101可以根据指定的局部图像的位置来确定与指定的局部图像相关联的图形对象的显示位置。

参考图9a,电子设备101可以指定第一局部图像911和第二局部图像912,并且显示至少部分地与第一局部图像911和第二局部图像912不同的第三局部图像913。

电子设备101可以在显示第三局部图像913的同时显示分别与指定的第一局部图像911和第二局部图像912相关联的第一图形对象921和第二图形对象922。

可以根据第一局部图像911和第二局部图像912相对于第三局部图像913的相对位置来确定第一图形对象921和第二图形对象922的显示位置。

例如,如图9a所示,第一局部图像911相对于第三局部图像913的虚轴位于第一象限(+x方向,+y方向)中,第二局部图像912相对于第三局部图像913的虚轴位于第三象限(-x方向,-y方向)中。

在这种情况下,与第一局部图像911相关联的第一图形对象921可以显示在显示器的右上部,第二图形对象922可以显示在显示器的左下部。这样,电子设备101可以根据指定的局部图像相对于当前正显示的局部图像的各个相对位置来显示与各个指定的局部图像相关联的图形对象。因此,用户可以直观地识别出每个指定的局部图像相对于当前正显示的局部图像所处的位置。

参考图9b,电子设备101可以根据指定对象的位置来确定与指定对象相关联的图形对象的显示位置。

参考图9b,电子设备101可以指定第一对象931和第二对象941,并显示不包括第一对象931和第二对象941的局部图像。

电子设备101可以显示分别与第一对象931和第二对象941相关联的第一图形对象932和第二图形对象942。

可以根据第一对象931和第二对象941相对于电子设备101上显示的局部图像的中心点951的相对位置来确定第一图形对象932和第二图形对象942的显示位置。

例如,参考图9b,第一对象931相对于中心点951位于第四象限(+x方向,-y方向)中,第二对象941相对于中心点951位于第二象限(-x方向,+y方向)中。

在这种情况下,第一图形对象932可以显示在显示器的右下部,第二图形对象942可以显示在显示器的左上部。这样,电子设备101可以根据指定对象相对于当前正显示的局部图像的中心点的各个相对位置来显示与各个指定对象相关联的图形对象。

图10a和图10b是示出根据本公开的实施例的用于按照由电子设备指定的对象的大小来确定图形对象的大小的方法的视图。

根据本公开的实施例,电子设备101可以根据指定操作的大小来确定与指定对象相关联的图形对象的大小。参考图10a和图10b,电子设备101可以在指定了第一对象1011和第二对象1021的情况下显示不包括第一对象1011和第二对象1021的局部图像。电子设备101可以显示与第一对象1011相关联的第一图形对象1012和与第二对象1021相关联的第二图形对象1022。

参考图10a,电子设备101可以根据第一对象1011的大小来确定第一图形对象1021的大小。同样地,电子设备101可以根据第二对象1021的大小来确定第二图形对象1022的大小,如图10b所示。例如,电子设备101可以根据图形对象的大小与存储在存储器中的对象的大小之间的映射信息来确定图形对象的大小。

例如,在第一对象1011的大小大于第二对象1021的大小的情况下,如图10a和图10b所示,电子设备101可以以比第二图形对象1022大的尺寸显示第一图形对象1012。通常,在由相机拍摄的目标的图像中包括的对象的大小可以根据相机和目标之间的距离而变化。例如,当相机和目标之间的距离减小时,图像中的对象可以显示得更大,而当相机和目标之间的距离增加时,对象可以显示得更小。为了允许用户直观地识别出给定这种性质的对象的大小,电子设备101可以根据图像中对象的大小来确定图形对象的大小。

当由于对象在局部图像中移动而在图像中调整对象的大小时,电子设备101可以根据经调整大小的对象来调整图形对象的大小并显示图形对象。

图11a、图11b和图11c是示出根据本公开的各种实施例的用于按照指定的局部图像与电子设备正显示的局部图像之间的距离来确定图形对象的大小的方法的视图。

参考图11a,电子设备101可以在指定了第一局部图像1121和第二局部图像1122的情况下显示至少部分地与第一局部图像1121和第二局部图像1122不同的第三局部图像1123。

电子设备101可以以不同的大小显示与第一局部图像1121相关联的第一图形对象1111和与第二局部图像1122相关联的第二图形对象1112。电子设备101可以根据第三局部图像1123与第一局部图像1121之间以及第三局部图像1123与第二局部图像1122之间的相对距离以不同的大小显示第一图形对象1111和第二图形对象1112。

假设第三局部图像1123与第一局部图像1121之间的距离(下文称为“第一距离”)短于第三局部图像1123与第二局部图像1122之间的距离(下文称为“第二距离”),如图11a、图11b和图11c所示。

在这种情况下,由于第一距离短于第二距离,电子设备101可以显示比第二图形对象1112大的第一图形对象1111。因此,用户可以直观地识别当前正显示的局部图像与指定的每个局部图像之间的距离。

根据本公开的实施例,电子设备101可以使用与第一局部图像1121、第二局部图像1122和第三局部图像1123中的每一个相对应的坐标信息来计算第一距离和第二距离。例如,电子设备101可以识别与第一局部图像1121的中心点1131、第二局部图像1122的中心点1132和第三局部图像1123的中心点1133中的每一个相对应的坐标信息,并根据所识别的坐标信息来计算第一距离d1和第二距离d2,如图11b所示。

电子设备101还可以计算从第一局部图像1121的中心点1131到第三局部图像1123的中心点1133的弧的长度作为第一距离d1,并计算从第二局部图像1122的中心点1132到第三局部图像1123的中心点1133的弧的长度作为第二距离d2,如图11c所示。

这样,电子设备101可以根据当前正显示的局部图像与每个指定的局部图像之间的距离来确定所显示的图形对象的大小。上述用于计算距离的方法仅是示例,并且不应限于此,而是可以采用其他各种方法来计算所述距离。

以与以上结合图11a至图11c描述的用于确定图形对象的大小的方法相同的方式,可以根据电子设备101上正显示的局部图像与每个指定对象之间的距离来确定图形对象的大小。例如,可以计算当前正显示的局部图像与每个指定对象之间的距离,并且可以确定与各个指定对象相对应的图形对象的大小。

图12a和图12b是示出根据本公开的各种实施例的用于根据电子设备是否识别出对象来改变图形对象的透明度的方法的流程图。

图12a是示出根据本公开的实施例的用于在指定了对象时由电子设备101改变图形对象的透明度的方法的流程图。

在操作1211中,电子设备101可以在显示与指定的第一对象相关联的第一图形对象之后确定是否从整个图像中识别出第一对象。

例如,电子设备101可以根据预设周期确定是否从整个图像中识别出第一对象。在确定从图像中识别出第一对象时,电子设备101可以根据预设周期重复地确定是否从图像中识别出第一对象。

在操作1212中,在从图像中识别第一对象失败时,电子设备101可以增加第一图形对象的透明度。例如,当第一对象持续不能从图像中识别出时,电子设备101可以增加第一图形对象的透明度。

在操作1213中,电子设备101可以确定无法从图像中识别出第一对象是否持续预设时间。

在操作1214中,当确定无法从图像中识别出第一对象持续预设时间时,电子设备101可以从显示器中移除第一图形对象。

在操作1215中,当在预设时间内从图像中再次识别出第一对象时,电子设备101可以降低第一图形对象的透明度。例如,当第一对象持续从图像中识别出时,电子设备101可以降低第一图形对象的透明度。

图12b是示出根据本公开的实施例的用于在指定了局部图像时由电子设备101改变图形对象的透明度的方法的流程图。

在操作1221中,电子设备101可以在显示与指定的第一局部图像相关联的第一图形对象之后确定是否从第一局部图像中识别出第一对象。这里,第一对象可以包括:在指定第一局部图像时从第一局部图像中识别的对象。

例如,电子设备101可以根据预设周期确定是否从第一局部图像中识别出第一对象。在确定从第一局部图像中识别出第一对象时,电子设备101可以根据预设周期重复地确定是否从第一局部图像中识别出第一对象。

在操作1222中,在从第一局部图像中识别第一对象失败时,电子设备101可以增加第一图形对象的透明度。例如,当第一对象持续不能从第一局部图像中识别出时,电子设备101可以增加第一图形对象的透明度。

在操作1223中,电子设备101可以确定无法从第一局部图像中识别出第一对象是否持续预设时间。

在操作1224中,当确定无法从第一局部图像中识别出第一对象持续预设时间时,电子设备101可以从显示器中移除第一图形对象。

在操作1225中,当在预设时间内从第一局部图像中再次识别出第一对象时,电子设备101可以降低第一图形对象的透明度。例如,当第一对象持续从第一局部图像中识别出时,电子设备101可以降低第一图形对象的透明度。

图13a和图13b是示出根据本公开的各种实施例的用于根据电子设备是否在图像中识别出对象来改变图形对象的透明度的方法的视图。

电子设备101可以指定第一对象1311,并存储与第一对象1311相关联的信息。电子设备101可以显示不包括第一对象1311的局部图像,并显示与指定的第一对象1311相关联的第一图形对象1321。

在显示第一图形对象1321之后,电子设备101可以确定是否从整个图像中识别出第一对象1311。在从整个图像中识别第一对象1311失败时,电子设备101可以增加第一图形对象1321的透明度,如图13a所示。电子设备101可以在识别第一对象1311的至少一部分(而不只是第一对象1311的整体)失败时增加第一图形对象1321的接近度。

如图13b所示,当无法从图像中识别出第一对象1311持续预设时间时,电子设备101可以移除第一图形对象1321。因此,用户可以直观地认识到从整个图像中识别第一对象1311失败。

图14a和图14b是示出根据本公开的各种实施例的用于由电子设备显示多个图形对象的方法的视图。

参考图14a,电子设备101可以显示与各个对象或局部图像相关联的多个图形对象1411、1412、1413和1414。

在接收到使多个图形对象1411、1412、1413和1414居中并进行查看的输入1401时,电子设备101可以在显示器上使曾经显示在显示器的边缘处的多个图形对象1411、1412、1413和1414居中。

电子设备101还可以显示图形对象1421以允许用户识别出多个指定对象或指定局部图像相对于用户当前正查看的局部图像的相对位置。由于图像表示所有360度方向,因此图形对象1421可以以圆圈示出,如图14b所示。电子设备101还可以显示图形对象1431以指示用户当前正查看的局部图像对应于哪个部分。多个图形对象1411、1412、1413和1414可以根据与所指定的它们各自的对应局部图像相关联的信息排列在图形对象1421上。

因此,用户可以直观地识别出多个指定的局部图像相对于用户现在正查看的局部图像的相对位置。

图15a和图15b是示出根据本公开的各种实施例的用于由电子设备释放对操作或局部图像的指定的方法的视图。

参考图15a,电子设备101可以显示与各个指定对象或局部图像相关联的多个图形对象1511、1512、1513和1514。

在接收到用于释放对与第一图形对象1511相关联的第一对象或第一局部图像的指定的输入1501时,电子设备101可以释放对第一对象或第一局部图像的指定。例如,如图1sa所示,用户可以输入输入1501,输入1501用于将第一图形对象1511向左拖动以释放对第一局部图像或第一对象的指定。

参考图15b,电子设备101可以根据输入1501将第一图形对象1511向左移动,显示图形对象1521,并释放对与第一图形对象1511相关联的第一局部图像或第一对象的指定,其中图形对象1521呈现如同第一图形对象1511与显示器的边缘之间的线被断开的效果。因此,用户可以通过简单输入来释放对对象或局部图像的指定。

图16a和图16b是示出根据本公开的各种实施例的用于由电子设备显示多个图形对象的方法的视图。

参考图16a,电子设备101可以显示与各个指定对象或局部图像相关联的多个图形对象1611、1612、1613、1614、1615和1616。电子设备101可以根据多个指定对象或指定局部图像相对于当前正显示的局部图像的各自相对位置来确定图形对象的显示位置。因此,多个图形对象1611、1612、1613和1614可能彼此重叠地显示,如图16a所示。

在多个图形对象1611、1612、1613和1614彼此重叠的情况下,可以接收用于区分显示多个图形对象1611、1612、1613和1614的输入1601。根据输入1601,电子设备101可以在显示器的上部使曾经彼此重叠的多个图形对象1611、1612、1613和1614显示为彼此分开,以不彼此重叠,如图16b所示。因此,用户可以容易地识别曾经彼此重叠的多个图形对象1611、1612、1613和1614。

图17a、图17b和图17c是示出根据本公开的各种实施例的用于由电子设备显示多个图形对象的方法的视图。

参考图17a,电子设备101可以显示与各个指定对象或局部图像相关联的多个图形对象。当多个图形对象在特定区域1711中重叠时,电子设备101可以与图形对象的数量成比例地调整多个图形对象中的每个图形对象的大小。例如,在特定区域中显示的图形对象的数量是预设数量或更多的情况下,电子设备101可以以相同的比率缩小在特定区域中显示的每个图形对象。

在多个图形对象在特定区域1711中彼此重叠显示的情况下,电子设备101可以改变与从用户接收的输入1701相对应的第一图形对象1712的大小或颜色中的至少一个,从而允许用户更容易选择。例如,电子设备101可以在特定区域1711中彼此重叠显示的多个图形对象之中选择与输入1701的位置或方向相对应的第一图形对象1712,并且改变第一图形对象1712的大小或颜色中的至少一个。当电子设备101在输入1701被维持的情况下移动时,电子设备101可以改变其大小或颜色中的至少一个将被改变的第一图形对象1712。

当随着特定区域1711中显示的多个图形对象的数量增加,多个图形对象的大小减小到预设大小或更小时,电子设备101可以显示集成图形对象1721以将多个图形对象中的一些图形对象集成显示。如图17b所示,电子设备101可以显示集成图形对象1721以将多个图形对象中除了一些图形对象(例如,图形对象1722)之外的其他图形对象集成显示。如图17c所示,在接收到选择集成图形对象1721的输入时,电子设备101可以在集成图形对象1721周围的区域中显示集成图形对象中包括的图形对象1731、1732和1733。

图18a、图18b、图18c、图18d、图18e、图18f、图18g、图18h和图18i是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图。

参考图18a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示用于执行输入对对象或局部图像的消息的功能的第一图标1801、用于执行输入对对象或局部图像的偏好程度的功能的第二图标1802、用于执行指定图像的功能的第三图标1803、以及用于执行指定对象的功能的第四图标1804。尽管在图18a的示例中单独地示出了第三图标1803和第四图标1804,但是本公开的各种实施例不限于此,并且第三图标1803和第四图标1804可以集成为单个图标。在这种情况下,选择集成的图标使得能够同时指定局部图像和对象两者。

参考图18b,电子设备101可以接收用于选择第三图标1803的输入。电子设备101可以输出消息以引导用户根据接收到用于选择第三图标1803的输入来指定正在显示的第一局部图像。

参考图18c,当在输出消息之后从用户接收到用于指定第一局部图像的输入1810时,电子设备101可以显示图形对象1821以指示第一局部图像已被指定。

可以省略以下操作:接收用于指定第一局部图像的输入1810以指定第一局部图像。例如,电子设备101可以在接收到用于选择第三图标1803的输入时立即指定第一局部图像。

参考图18d,当在显示图形对象1821之后接收到用于切换在电子设备101上显示的图像的输入1831时,电子设备101可以根据输入1831将所显示的图像切换为图像的第二局部图像。电子设备101还可以显示与指定的第一局部图像相关联的第一图形对象1841。

参考图18e,在从用户接收到用于选择第三图标1803的输入1851时,电子设备101可以输出消息以引导对所显示的第二局部图像的指定。

参考图18f,当在输出消息之后从用户接收到用于指定第二局部图像的输入1852时,电子设备101可以显示图形对象1861以指示第二局部图像已被指定。

参考图18g,在从用户接收到用于选择第一图形对象1841的输入时,电子设备101可以立即将显示的图像切换为第一局部图像。电子设备101还可以显示与指定的第二局部图像相关联的第二图形对象1871。

参考图18h,当用户选择指示第一局部图像已被指定的图形对象1821时,电子设备101可以显示图形对象1881以释放对第一局部图像的指定。

参考图18i,当用户选择图形对象1881以释放对第一局部图像的指定时,电子设备101可以释放对第一局部图像的指定,并且防止在显示器上显示用于指示第一局部图像已被指定的图形对象1821、和用于释放对第一局部图像的指定的图形对象1881。

图19a、图19b、图19c、图19d、图19e和图19f是示出根据本公开的实施例的用于由电子设备切换图像的方法的视图。

参考图19a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示用于执行输入对对象或局部图像的消息的功能的第一图标1901、用于执行输入对对象或局部图像的偏好程度的功能的第二图标1902、用于执行指定图像的功能的第三图标1903、以及用于执行指定对象的功能的第四图标1904。尽管在图19a的示例中单独地示出了第三图标1903和第四图标1904,但是本公开的各种实施例不限于此,并且第三图标1903和第四图标1904可以集成为单个图标。在这种情况下,选择集成的图标使得能够同时指定局部图像和对象两者。

参考图19b,电子设备101可以接收用于选择第四图标1904的输入。电子设备101可以输出消息以引导用户根据接收到用于选择第四图标1904的输入来指定在第一局部图像中包括的第一对象。

参考图19c,当在输出消息之后从用户接收到用于指定第一对象1911的输入1921时,电子设备101可以指定第一对象1911,并且显示图形对象1922以指示第一对象1911已被指定。

可以省略以下操作:接收用于指定第一对象的输入1921以指定第一对象1911。例如,电子设备101可以在接收到用于选择第四图标1904的输入时立即指定第一对象1911。

参考图19d,当在显示图形对象1922之后接收到用于切换在电子设备101上显示的图像的输入1923时,电子设备101可以根据输入1923将所显示的图像切换为第二局部图像。电子设备101可以显示与指定的第一对象1911相关联的第一图形对象1941。

参考图19d,在从用户接收到用于选择第四图标1904的输入1931时,电子设备101可以输出消息以引导对第二局部图像中包括的第二对象1912的指定。

参考图19e,当在输出消息之后从用户接收到用于指定第二对象1912的输入1932时,电子设备101可以指定第二对象1912,并且显示图形对象1942以指示第二对象1912已被指定。

参考图19f,在从用户接收到用于选择第一图形对象1941的输入时,电子设备101可以立即将电子设备101上显示的图像切换为包括第一对象1911在内的第三局部图像。电子设备101还可以显示与指定的第二对象1912相关联的第二图形对象1951。

图20a、图20b、图20c、图20d、图20e、图20f和图20g是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图。

参考图20a,电子设备101可以显示图像的局部图像。电子设备101还可以显示与指定的第一对象相关联的第一缩略图像2001。

参考图20a,当没有显示用于执行指定对象的功能的单独图标时,用户可以通过输入与预设手势相对应的输入来指定对象。

电子设备101还可以指定局部图像中包括的第二对象2011。电子设备101可以在指定第二对象2011并存储与第二对象2011相关联的信息的同时,显示图形对象2002、和指示第二对象2011正被指定的消息。

当完成第二对象2011的指定时,电子设备101可以显示图形对象2021以指示对第二对象2011的指定。

参考图20b,电子设备101可以在显示局部图像的同时显示与多个指定对象相关联的多个缩略图像2001、2002、2003和2004。电子设备101还可以显示第二图标2023以执行隐藏多个缩略图像2001、2002、2003和2004的功能。电子设备101还可以显示第一图标2022,以执行将多个缩略图像2001、2002、2003和2004转换为图标的功能,并且电子设备101可以显示这些图标。

参考图20c,在从用户接收到用于选择第四缩略图像2004的输入2030时,电子设备101可以立即将电子设备101上显示的图像切换为包括与第四缩略图像2004相对应的第四对象2012在内的图像。

参考图20d,在从用户接收到用于选择第二图标2023的输入2031时,电子设备101可以隐藏多个缩略图像2001、2002、2003和2004。电子设备101还可以显示第三图标2024来替代第二图标2023,以执行显示多个缩略图像2001、2002、2003和2004的功能。

参考图20e,在接收到用于切换所显示图像的输入2025时,电子设备101可以根据输入2025切换在电子设备101上显示的图像。

参考图20f,在接收到用于选择第三图标2024的输入时,电子设备101可以显示回多个缩略图像2001、2002、2003和2004。

在接收到用于指定局部图像中包括的第五对象2013的输入时,电子设备101可以指定第五对象2013并存储与第五对象2013相关联的信息。电子设备101还可以在指定第五对象2013的同时显示对第五对象2013正被指定加以指示的消息。电子设备101还可以显示图形对象2021以指示对第五对象2013的指定。

参考图20g,当完成第五对象2013的指定时,电子设备101可以进一步显示与第五对象2013相关联的第五缩略图像2005。

图21a、图21b、图21c、图21d、图21e、图21f、图21g、图21h和图21i是示出根据本公开的实施例的用于由电子设备切换图像的方法的视图。

参考图21a,电子设备101可以显示图像的第一局部图像。在无法从用户接收输入持续预设时间时,电子设备101可以仅显示第一局部图像,同时隐藏用于执行各种功能的多个图标。

参考图21b,在从用户接收到输入2111时,电子设备101可以显示用于执行各种功能的多个图标。例如,电子设备101可以显示:用于执行指定对象的功能的第一图标2121、用于执行转换与多个指定对象相关联的多个缩略图像2101、2102、2103、2104和2105并显示图标的功能的第二图标2122、以及用于执行显示多个缩略图像2101、2102、2103、2104和2105的功能的第三图标2123。

参考图21c,在接收到用于选择第二图标2122的输入时,即使第三图标2123未被选择,电子设备101也可以显示多个缩略图像2101、2102、2103、2104和2105。当显示多个缩略图像2101、2102、2103、2104和2105时,电子设备101可以显示第四图标2124来替代第三图标2123,以执行隐藏多个缩略图像2101、2102、2103、2104和2105的功能。

参考图21d,电子设备101可以接收用于从多个缩略图像2101、2102、2103、2104和2105之中选择至少一个缩略图像(例如,第三缩略图像2103和第五缩略图像2105)的输入。电子设备101还可以显示用于执行完成和取消选择的功能的第五图标2125和第六图标2126。

参考图21e,在选择第三缩略图像2103和第五缩略图像2105之后,电子设备101可以接收用于选择第五图标2125的输入。

参考图21f,当接收到用于选择第五图标2125的输入时,即使没有进行用于选择第四图标2124的输入,电子设备101也可以隐藏多个缩略图像2101、2102、2103、2104和2105。

参考图21g,电子设备101可以显示与对应于所选择的第三缩略图像2103的第三对象相关联的第七图标2131、和与对应于所选择的第五缩略图像2105的第五对象相关联的第八图标2132。

参考图21h,电子设备101可以接收用于选择第八图标2132的输入。在接收到用于选择第八图标2132的输入时,电子设备101可以立即将电子设备101上显示的图像切换为包括与第八图标2132相对应的第五对象在内的局部图像,如图21i所示。

图22a和图22b是示出根据本公开的各种实施例的用于在发生事件时由电子设备提供通知的方法的流程图。

图22a是示出用于在发生事件时由电子设备101提供通知的方法的流程图。

在操作2211中,电子设备101可以确定在显示与指定的第一对象相关联的第一图形对象之后是否发生与指定的第一对象相关联的第一事件。例如,当指定的第一对象移动或者从电子设备101的存储器130或外部服务器搜索到与指定的第一对象相关联的消息或表情符号时,电子设备101可以确定发生第一事件。

图23a、图23b和图23c是示出根据本公开的各种实施例的用于由电子设备确定发生事件的方法的视图。

例如,如图23a所示,电子设备101可以识别指定的第一对象的面部和第一对象的嘴的形状,并且当确定所识别的第一对象的嘴形状移动时,电子设备101可以确定发生与第一对象相关联的第一事件。

电子设备101还可以使用与图像相关联的语音信息来确定是否发生第一事件。例如,电子设备101可以根据与第一对象相关联的第一语音信息来确定是否发生第一事件。在通过第一语音信息确定发生与第一对象相关联的语音时(例如,在确定对象说话时),电子设备101可以确定发生第一事件。

在确定第一对象的嘴形状移动并且使用第一对象的移动和第一语音信息生成与第一对象相关联的语音时,电子设备101可以确定发生第一事件。

参考图23b,电子设备101可以识别指定的第一对象的大小,并且当第一对象被调整大小时,电子设备101可以确定第一对象移动。

例如,当从电子设备101的存储器130或外部服务器搜索到与指定的第一对象相关联的消息或表情符号时,处理器101可以确定发生第一事件,如图23c所示。这里,表情符号可以包括表达与第一对象相关联的用户偏好或情绪的表情符号。

例如,在电子设备101从外部服务器接收图像,将图像存储在存储器中,并播放图像的情况下,还可以从外部服务器接收与图像中包括的第一对象相关联的消息或表情符号,并将该消息或表情符号与图像相关联地存储在存储器中。因此,当电子设备101显示图像时,可以从存储器中搜索与第一对象相关联的所存储的消息或表情符号,并将消息或表情符号显示在显示器上。

当电子设备101从外部服务器接收实时广播的图像并在显示器上显示时,还可以与图像一起接收由观看图像的另一用户输入的与第一对象相关的消息或表情符号。因此,电子设备101可以显示第一对象以及与图像一起接收的消息或表情符号。

因此,当从存储器130或外部服务器搜索到与第一对象相关联的消息或表情符号时,电子设备101可以确定发生第一事件。

在操作2212中,在确定发生第一事件时,电子设备101可以改变与第一对象相关联的第一图形对象的显示位置、大小、颜色或形状中的至少一个并进行显示,以向用户通知第一事件的发生。

在确定发生第一事件时,电子设备101可以输出振动或声音中的至少一个以通知用户发生第一事件。

图25a、图25b和图25c是示出根据本公开的各种实施例的用于在发生事件时由电子设备显示图形对象的方法的视图。

例如,电子设备101可以显示与指定的第一对象相关联的第一图形对象2510,如图25a所示。在确定第一对象移动时,电子设备101可以确定在第一局部图像中发生事件。因此,电子设备101可以突出显示第一图形对象2510,或者上下移动第一图形对象2510。

参考图25b,电子设备101还可以显示与指定的第二对象相关联的第二图形对象2520。在确定第二对象的嘴形状移动时,电子设备101可以确定发生与第二对象相关联的第二事件。因此,电子设备101可以突出显示第二图形对象2510,或者上下移动第二图形对象2510。

参考图25c,电子设备101还可以显示与指定的第三对象相关联的第三图形对象2530。当从电子设备101的存储器或外部服务器搜索到与第三对象相关联的消息或表情符号时,电子设备101可以确定发生与第三对象相关联的第三事件。因此,电子设备101可以突出显示第三图形对象2530,或者上下移动第三图形对象2530。

出于描述目的,如上所述突出显示图形对象或上下移动图形对象仅是示例,并且本公开的各种实施例不限于此。可以以各种方式改变和显示第一图形对象2510,以向用户通知在第一局部图像中发生事件。

图22b是示出用于在指定局部图像时由电子设备101改变图形对象的透明度的方法的流程图。

在操作2221中,电子设备101可以确定在显示与指定的第一局部图像相关联的第一图形对象之后是否发生与指定的第一局部图像相关联的第一事件。

例如,当第一局部图像中包括的至少一个对象移动,或者从存储器130或外部服务器搜索到与第一局部图像或者第一局部图像中包括的至少一个对象相关联的消息或表情符号时,电子设备101可以确定发生第一事件。

图24a、图24b和图24c是示出根据本公开的各种实施例的用于由电子设备确定发生对象移动的方法的视图。

参考图24a,电子设备101可以在图像开始播放之后的2分9秒处指定第一局部图像,同时为包括至少一个对象在内的第一局部图像设置代表性图像2401。可以基于用于指定第一局部图像的用户输入的位置来设置代表性图像2401。电子设备101可以任意地设置代表性图像2401以在第一局部图像中包括至少一个对象。

电子设备101可以找到与代表性图像2401最密切匹配的部分,以在播放图像时确定在第一局部图像中包括的至少一个对象的移动。例如,电子设备101可以在图像开始播放之后的2分10秒处找到第一图像2402,作为与第一局部图像中的代表性图像2401最密切匹配的部分,如图24b所示。例如,电子设备101可以在图像开始播放之后的2分11秒处找到第二图像2403和第三图像2404,作为与第一局部图像中的代表性图像2401最密切匹配的部分,如图24c所示。

电子设备101可以通过将代表性图像2401与第一图像2402、第二图像2403和第三图像2404中的每一个进行比较来确定在第一局部图像中包括的至少一个对象是否移动。例如,在确定代表性图像2401和第一图像2402之间的差异是预设差异或更大差异时,电子设备101可以确定:在第一局部图像中包括的至少一个对象在图像开始播放之后的2分10秒处移动。相反,在确定代表性图像2401和第一图像2402之间的差异小于预设差异时,电子设备101可以确定:在第一局部图像中包括的至少一个对象在图像开始播放之后的2分10秒处未移动。以类似的方式,电子设备101可以确定在第一局部图像中包括的至少一个对象在图像开始播放之后的2分11秒处是否移动。

然而,出于描述目的,如上所述的用于确定第一局部图像中的至少一个对象的移动的方法仅是示例,并且不限于此。可以应用其他各种方法来确定图像中的至少一个对象是否移动。

电子设备101还可以使用与图像相关联的语音信息来确定是否发生第一事件。例如,电子设备101可以根据与第一局部图像相关联的第一语音信息来确定是否发生第一事件。在确定在显示第二局部图像的同时通过第一语音信息生成与第一局部图像中包括的至少一个对象相关联的语音时,电子设备101可以确定发生第一事件。

电子设备101还可以使用第一语音信息和第一局部图像中包括的至少一个对象的移动,来确定是否发生第一事件。

例如,当从存储器130或外部服务器搜索到与第一信息或者第一局部图像中包括的至少一个对象相关联的消息或表情符号时,电子设备101可以确定发生第一事件。

在操作2222中,在确定发生第一事件时,电子设备101可以改变与第一局部图像相关联的第一图形对象的显示位置、大小、颜色或形状中的至少一个并进行显示,以向用户通知第一事件的发生。

图26a、图26b、图26c、图26d、图26e和图26f是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图。

参考图26a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示用于执行输入对对象或局部图像的消息的功能的第一图标2601、用于执行输入对对象或局部图像的偏好程度的功能的第二图标2602、用于执行指定图像的功能的第三图标2603、以及用于执行指定对象的功能的第四图标2604。

参考图26b,电子设备101可以输出消息以引导用户根据接收到用于选择第四图标2604的输入来指定第一局部图像中包括的第一对象2611。

参考图26c,当在输出消息之后从用户接收到用于识别第一对象2611的输入2621时,电子设备101可以指定第一对象2611,并且显示图形对象2622以指示第一对象2611已被指定。

参考图26d,在显示图形对象2622之后接收到用于切换在电子设备101上显示的图像的输入2623时,电子设备101可以根据输入2623将所显示的图像切换为图像的第二局部图像。电子设备101可以显示与指定的第一对象2611相关联的第一图形对象2641。

电子设备101还可以在显示第二局部图像的同时确定是否发生与第一对象相关联的第一事件。参考图26e,在确定发生第一事件时,电子设备101可以突出显示第一图形对象2641或者上下移动第一图形对象2641。因此,用户可以直观地识别出与第一对象相关联的第一事件的发生。

参考图26f,在从用户接收到用于选择第一图形对象2641的输入时,电子设备101可以立即将电子设备101上显示的图像切换为包括第一对象2611在内的局部图像。

图27a、图27b、图27c、图27d、图27e和图27f是示出根据本公开的各种实施例的用于由电子设备切换图像的方法的视图。

参考图27a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示用于执行输入对对象或局部图像的消息的功能的第一图标2701、用于执行输入对对象或局部图像的偏好程度的功能的第二图标2702、用于执行指定图像的功能的第三图标2703、以及用于执行指定对象的功能的第四图标2704。

参考图27b,电子设备101可以接收用于选择第四图标2604的输入,并且从用户接收用于指定第一对象2711的输入2721。电子设备101还可以存储与第一对象2711相关联的第一信息。

参考图27c,当根据输入2721指定了第一对象2711时,电子设备101可以显示图形对象2722以指示第一对象2711已被指定。

参考图27d,在显示图形对象2722之后接收到用于切换在电子设备101上显示的图像的输入2723时,电子设备101可以根据输入2723将所显示的图像切换为图像的第二局部图像。电子设备101可以显示与指定的第一对象2711相关联的第一图形对象2741。

电子设备101还可以在显示第二局部图像的同时确定是否发生与第一对象相关联的第一事件。参考图27e,在确定发生第一事件时,电子设备101可以突出显示第一图形对象2741或者上下移动第一图形对象2741。因此,用户可以直观地识别出与第一对象相关联的第一事件的发生。

参考图27f,在从用户接收到用于选择第一图形对象2741的输入时,电子设备101可以使用与第一对象2711相关联的信息立即将电子设备101上显示的图像切换为包括第一对象2711在内的局部图像。

图28a、图28b、图28c、图28d、图28e至图28f是示出根据本公开的各种实施例的用于由电子设备输入对局部图像的偏好的方法的视图。

参考图28a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示用于执行输入对对象或局部图像的消息的功能的第一图标2801、用于执行输入对对象或局部图像的偏好程度的功能的第二图标2802、用于执行指定图像的功能的第三图标2803、以及用于执行指定对象的功能的第四图标2804。

参考图28b,在接收到用于选择第二图标2802的输入时,电子设备101可以从第一局部图像中识别第一对象2811。电子设备101还可以显示图形对象2831,图形对象2831指示对第一对象2811输入的偏好程度的数量。

参考图28c,在接收到用于增加对第一对象2811的偏好程度的输入2821时,电子设备101可以在第一对象2811周围显示心形图形对象2833并在显示器的右上部显示图形对象2832,图形对象2832指示已经输入了偏好程度。

参考图28d,在接收到用于切换图像的输入2834时,电子设备101可以根据输入2834将所显示的图像切换为图像的第二局部图像。

参考图28d,在接收到用于选择第二图标2802的输入时,电子设备202可以从第二局部图像中识别第二对象2812。电子设备101还可以显示图形对象2851,图形对象2851指示对第二对象2812输入的偏好程度的数量。

参考图28e,在接收到用于增加对第二对象2812的偏好程度的输入2841时,电子设备101可以在第二对象2812周围显示(多个)心形图形对象2853并在显示器的右上部显示图形对象2852,图形对象2852指示已经输入了偏好程度。

即使在显示第二局部图像之后,电子设备101也可以识别对第一对象2811输入的偏好程度的数量的变化。当对第一对象2811输入的偏好程度的数量改变时,电子设备101可以突出显示与第一对象2811相关联的第一图形对象2861,或者上下移动第一图形对象2821。因此,用户可以直观地识别出与第一对象2811相关的偏好程度的数量已经改变。

图29a、图29b、图29c、图29d和图29e是示出根据本公开的各种实施例的用于由电子设备显示与图像的局部图像相关联的消息或表情符号的方法的视图。

参考图29a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示:用于执行输入与对象或局部图像相关的消息的功能的第一图标2901、用于执行输入对对象或局部图像的偏好程度的功能的第二图标2902、和用于执行指定图像的功能的第三图标2903。

参考图29b,在从用户接收到用于选择第一图标2901的输入时,电子设备101可以显示用于输入消息的键盘。当从存储器或外部服务器搜索到与第一局部图像相关的消息时,电子设备101可以显示图形对象2911,图形对象2911用于指示存在与第一局部图像相关的消息。

参考图29b,当第一图标2901被选择时,电子设备101可以显示与第一局部图像相关的消息2921。这样,电子设备101可以显示与局部图像相关的消息2921。

参考图29c,电子设备101可以根据用户输入2951识别和指定所显示的图像的第一局部图像中包括的第一对象2941。参考图29d,电子设备101还可以在第一对象2941周围显示与指定的第一对象2941相关联的表情符号。

参考图29e,电子设备101还可以显示由另一用户输入的消息或表情符号2961,以对应于与消息或表情符号2961相关联的对象。这样,电子设备101可以以各种方式与对象相关联地显示由用户输入的消息或表情符号、以及由另一用户输入的消息或表情符号2961。

图30a、图30b、图30c、图30d、图30e、图30f、图30g、图30h、图30i和图30j是示出根据本公开的各种实施例的用于由电子设备输入消息的方法的视图。

参考图30a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示用于执行输入对对象或局部图像的消息的功能的第一图标3001、用于执行输入对对象或局部图像的偏好程度的功能的第二图标3002、用于执行指定图像的功能的第三图标3003、以及用于执行指定对象的功能的第四图标3004。

参考图30b,在接收到用于选择第一图标3001的输入时,电子设备101可以接收输入3011,输入3011用于选择在第一局部图像中包括的多个对象之中要输入消息的对象。

参考图30c,当根据输入3011从多个对象之中选择了第一对象时,电子设备101可以显示用于显示对第一对象的消息的弹出框3021、和用于输入消息的键盘。可以根据由输入3011选择的对象的位置灵活地确定弹出框3021的位置。

参考图30d,当用户通过键盘输入消息并且选择了用于执行发送输入消息的功能的第五图标3031时,电子设备101在弹出框3021中显示用户输入的消息。

参考图30e,当消息的输入完成时,电子设备101可以移除键盘。当搜索到与图像中包括的第二对象相关联的消息时,电子设备101可以显示与第二对象相关联的第一图形对象3041。此外,电子设备101可以确定发生与第二对象相关联的事件,并突出显示或上下移动第一图形对象3041以向用户通知事件的发生。

参考图30f,在接收到用于选择第一图形对象3041的输入时,电子设备101可以将通过显示器显示的图像切换为包括第二对象在内的第二局部图像,并显示第二局部图像。电子设备101可以显示第二局部图像并且通过弹出框3042显示对第二局部图像中包括的第二对象的消息。当搜索到由另一用户输入的与图像中包括的第三对象相关联的消息时,电子设备101可以显示与第三对象相关联的第二图形对象3051,并且当搜索到与图像中包括的第四对象相关联的消息时,电子设备101可以显示与第四对象相关联的第三图形对象3052。

参考图30g,在接收到用于选择第二图形对象3051的输入时,电子设备101可以将通过显示器显示的图像切换为包括第三对象在内的局部图像,并显示该局部图像。电子设备101可以显示第一局部图像并且通过弹出框3061显示由其他用户输入的与第三对象相关联的消息。电子设备101可以使得显示与第一对象相关联的消息的弹出框3021能够在预定时间过去之后消失。

参考图30h,在接收到用于选择弹出框3061的输入3071时,电子设备101可以放大弹出框3061并显示用于输入消息的键盘。

参考图30i,当用户通过键盘输入消息并且选择了用于执行发送输入消息的功能的第五图标3031时,电子设备101在弹出框3061中显示用户输入的消息。

当消息的输入完成时,电子设备101可以移除键盘,如图30j所示。这样,电子设备101可以随后在显示由其他用户输入的消息的弹出框3061中显示由用户输入的消息。

图31a、图31b、图31c、图31d和图31e是示出根据本公开的各种实施例的用于由电子设备显示消息的方法的视图。

参考图31a,电子设备101可以显示图像的第一局部图像。电子设备101可以与第一局部图像一起显示用于执行各种功能的图标。例如,电子设备101可以显示用于执行输入对对象或局部图像的消息的功能的第一图标3101、用于执行输入对对象或局部图像的偏好程度的功能的第二图标3102、用于执行指定图像的功能的第三图标3103、以及用于执行指定对象的功能的第四图标3104。

参考图31b,在接收到用于选择第一图标3101的输入时,电子设备101可以在第一局部图像中包括的第一对象3111周围显示用于显示由另一用户输入的与第一对象3111相关联的消息的弹出框3121。

参考图31c,当第一对象3111移动时,电子设备101可以灵活地改变弹出框3121的位置或形状。

参考图31d,在接收到用于选择弹出框3121的输入3131时,电子设备101可以显示用于输入消息的键盘。参考图31e,在接收到用于选择键盘以外的部分的输入3141时,电子设备101可以移除键盘。

图32是示出根据本公开的实施例的用于由电子设备控制外部电子设备显示图像的方法的流程图。

在操作3210中,在接收到用于指定在外部电子设备上显示的第一局部图像或第一局部图像中包括的第一对象的第一输入时,电子设备101可以指定第一对象或第一局部图像。外部电子设备可以显示图像的第一局部图像。外部电子设备可以根据用户输入或设置、或在电子设备101的控制下,显示图像的第一局部图像。

在操作3220中,电子设备101可以存储与第一局部图像或第一对象相关联的第一信息。与第一局部图像或第一对象相关联的第一信息可以包括可用于指定或识别第一局部图像或第一对象的各种信息。

电子设备101还可以向外部电子设备发送用于存储与第一局部图像或第一对象相关联的第一信息的控制信号。在这种情况下,外部电子设备可以根据控制信号存储与第一局部图像或第一对象相关联的第一信息。

在操作3230中,电子设备101可以基于第一信息通过用户界面显示与第一局部图像或第一对象相对应的第一图形对象。电子设备101可以显示用于控制外部电子设备的用户界面,并通过用户界面显示第一图形对象。

在操作3240中,在接收到用于选择第一图形对象的第二输入时,电子设备101可以通过电子设备101的通信电路向外部电子设备发送第一控制信号,第一控制信号用于根据第一信息将外部电子设备上显示的图像切换为第一局部图像或包括第一对象在内的第二局部图像。外部电子设备可以根据第一控制信号立即将所显示的图像切换为第一局部图像或包括第一对象在内的第二局部图像。第二局部图像可以与第一局部图像相同,或者第二局部图像的至少一部分可以与第一局部图像不同。

例如,在第一对象不移动的情况下,第二局部图像可以与第一局部图像相同。相反,在第一对象移动的情况下,第二局部图像可以至少部分地与第一局部图像不同。

图33a、图33b、图33c、图33d至图33e是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图。

参考图33a,电子设备101可以显示用于控制显示图像的外部电子设备的用户界面。用户界面可以包括与整个图像相对应的第一图形对象3310。用户界面还可以包括第二图形对象3311,第二图形对象3311用于指示与外部电子设备上显示的第一局部图像相对应的相对于中心点3312的视图范围。用户界面可以显示多个图形对象3302、3303、3304和3305,其中多个图形对象3302、3303、3304和3305与当前指定的它们各自的对象或局部图像相关联。因此,用户可以直观地识别出多个指定对象或局部图像中的每一个在图像中所在的位置。

参考图33b,在接收到用于指定在外部电子设备上显示的第一局部图像或第一局部图像中包括的第一对象的输入3321时,电子设备101可以将第二图形对象3311的第一边界线3314和第二边界线3315移动到虚拟参考线3313。可以通过电子设备101的显示器显示移动第二图形对象3311的第一边界线3314和第二边界线3315的过程。参考线3313可以被设置为与第一对象的位置、第二图形对象3311的中心线或第二图形对象3311中的线相对应。

参考图33c,当第一边界线3314和第二边界线3315与参考线3313之间的距离对应于预设值时,电子设备101可以显示第一图标3331,第一图标3331用于执行指定第一局部图像或第一对象的功能。

参考图33d,在接收到用于选择第一图标3331的输入时,电子设备101可以显示与第一局部图像或第一对象相对应的图形对象3301,以指示:已在第一图形对象3310的与参考线3313相对应的位置中指定了第一对象或第一局部图像。因此,用户可以识别出第一对象或第一局部图像已被指定。

参考图33e,当第一对象或第一局部图像的指定完成时,电子设备101可以将第二图形对象3311的大小调整回到其原始大小。

图34a、图34b、图34c和图34d是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图。

参考图34a,电子设备101可以显示用于控制显示图像的外部电子设备3400的用户界面。用户界面可以包括与整个图像相对应的第一图形对象3410。用户界面还可以包括第二图形对象3411,第二图形对象3411用于指示与外部电子设备3400上显示的第一局部图像相对应的相对于中心点3412的视图范围。用户界面可以显示多个图形对象3401、3402、3403和3404以指示当前指定的多个对象或局部图像。因此,用户可以直观地识别出多个指定对象或局部图像中的每一个在图像中所在的位置。

在接收到用于切换外部电子设备3400上显示的图像的左方向上的输入3421时,电子设备101可以向外部电子设备3400发送用于根据输入3421在左方向上切换外部电子设备3400上显示的图像的控制信号。

外部电子设备3400可以根据控制信号在作为输入的方向的左方向上切换显示的图像。

参考图34b,电子设备101还可以根据输入3421移动第二图形对象3411的位置。因此,用户可以识别出当前正在外部电子设备3400上显示的局部图像在整个图像中的位置。

参考图34c,在接收到用于切换在外部电子设备3400上显示的图像的下方向上的输入3422时,电子设备101可以向外部电子设备3400发送用于根据输入3422在下方向上切换外部电子设备3400上显示的图像的控制信号。

外部电子设备3400可以根据控制信号在作为输入的方向的下方向上切换显示的图像。

当根据输入3422仅在下方向上切换正在外部电子设备3400上显示的图像时,电子设备101可以避免移动第二图形对象3411的位置,如图34d所示。

图35a、图35b、图35c和图35d是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图。

参考图35a,电子设备101可以显示用于控制显示图像的外部电子设备3500的用户界面。用户界面可以包括与整个图像相对应的第一图形对象3510。用户界面还可以包括第二图形对象3511,第二图形对象3511用于指示与外部电子设备3500上显示的第一局部图像相对应的相对于中心点3512的视图范围。用户界面可以显示多个图形对象3501、3502、3503和3504以指示当前指定的多个对象或局部图像。因此,用户可以直观地识别出多个指定对象或局部图像中的每一个在图像中所在的位置。

参考图35a,电子设备101可以接收输入3521,输入3521用于选择与第一局部图像相对应的图形对象3501。在这种情况下,电子设备101可以与输入3521相对应地移动第二图形对象3511,以对应于与第一局部图像相对应的图形对象3501,如图35b所示。

当第二图形对象3511被移动以对应于与第一局部图像相对应的图形对象3501时,电子设备101可以通过电子设备101的通信电路向外部电子设备3500发送用于显示第一局部图像的控制信号。外部电子设备3500可以根据控制信号将通过外部电子设备3500的显示器显示的图像切换为第一局部图像。

参考图35c,电子设备101可以接收输入3522,输入3522用于选择与第二局部图像相对应的图形对象3502。在这种情况下,电子设备101可以与输入3522相对应地移动第二图形对象3511,以对应于与第二局部图像相对应的图形对象3502,如图35d所示。

当第二图形对象3511被移动以对应于与第二局部图像相对应的图形对象3502时,电子设备101可以通过电子设备101的通信电路向外部电子设备3500发送用于显示第二局部图像的控制信号。外部电子设备3500可以根据控制信号将通过外部电子设备3500的显示器显示的图像切换为第二局部图像。

图36a、图36b、图36c和图36d是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图。

参考图36a,电子设备101可以显示用于控制显示图像的外部电子设备3600的用户界面。用户界面可以包括与整个图像相对应的第一图形对象3610。用户界面还可以包括第二图形对象3611,第二图形对象3611用于指示与第一局部图像相对应的相对于中心点3612的视图范围。用户界面可以显示多个图形对象3601、3602、3603和3604以指示当前指定的多个对象或局部图像。因此,用户可以直观地识别出多个指定对象或局部图像中的每一个在图像中所在的位置。

根据本公开的实施例,电子设备101可以包括形成在电子设备101的表面中的旋转体(例如,边框)。电子设备101的显示器可以形成在旋转体的侧表面上。电子设备101可以将旋转体的旋转识别为输入,并执行与输入相对应的操作。

例如,参考图36a,电子设备101可以接收旋转体的逆时针旋转的输入3621。参考图36b,在这种情况下,电子设备101可以与输入3621相对应地相对于中心点3612逆时针移动第二图形对象3611,直到第二图形对象3611对应于与第一局部图像相对应的图形对象3601。

当第二图形对象3611被移动直到第二图形对象3611对应于与第一局部图像相对应的图形对象3601时,电子设备101可以通过电子设备101的通信电路向外部电子设备3600发送用于显示第一局部图像的控制信号。外部电子设备3600可以根据控制信号将通过外部电子设备3600的显示器显示的图像切换为第一局部图像。

参考图36c,电子设备101可以接收旋转体的逆时针旋转的输入3622。参考图36d,在这种情况下,电子设备101可以与输入3622相对应地相对于中心点3612逆时针移动第二图形对象3611,直到第二图形对象3611对应于与第二局部图像相对应的图形对象3602。

当第二图形对象3611被移动直到第二图形对象3611对应于与第二局部图像相对应的图形对象3602时,电子设备101可以通过电子设备101的通信电路向外部电子设备3600发送用于显示第二局部图像的控制信号。外部电子设备3600可以根据控制信号将通过外部电子设备3600的显示器显示的图像切换为第二局部图像。

图37a、图37b和图37c是示出根据本公开的各种实施例的用于操作控制外部电子设备的电子设备的方法的视图。

参考图37a,电子设备101可以显示用于控制显示图像的外部电子设备3700的用户界面。用户界面可以包括与整个图像相对应的第一图形对象3710。用户界面还可以包括第二图形对象3711,第二图形对象3711用于指示与第一局部图像相对应的相对于中心点3712的视图范围。用户界面可以显示多个图形对象3701、3702、3703和3704以指示当前指定的多个对象或局部图像。因此,用户可以直观地识别出多个指定对象或局部图像中的每一个对应于图像中的哪个部分。

电子设备101可以确定在多个指定对象或指定局部图像中的每一个中是否发生事件。用于确定是否发生事件的具体方法与上面描述的相同,并且不再给出其进一步的描述。

例如,参考图37b,在确定在指定的第二对象或指定的第二局部图像中发生事件时,电子设备101可以显示用于指示事件发生的第三图形对象3713,以对应于与第二局部图像相对应的图形对象3702。因此,用户可以识别出在第二对象或第二局部图像中已发生了事件。

参考图37c,在从用户接收到用于选择第三图形对象3713的输入3721时,电子设备101可以与输入3721相对应地移动第二图形对象3711以对应于与第二局部图像相对应的图形对象3702。

当第二图形对象3711被移动以对应于与第二局部图像相对应的图形对象3702时,电子设备101可以通过电子设备101的通信电路向外部电子设备3700发送用于显示第二局部图像的控制信号。外部电子设备3700可以根据控制信号将通过外部电子设备3700的显示器显示的图像切换为第二局部图像。

图38a、图38b、图38c、图38d、图38e、图38f和图38g是示出根据本公开的各种实施例的外部电子设备的操作的视图。

参考图38a,外部电子设备3800可以接收从外部服务器实时发送的图像,并通过显示器显示图像的第一局部图像。外部电子设备3800可以显示与所显示的第一局部图像相关联的多个表情符号3801、3802和3803。这里,表情符号可以包括用于表达用户的情绪、感觉或偏好的表情符号。

外部电子设备3800还可以显示包括多个图标的第一图形对象3811,所述多个图标用于执行用于控制所显示图像的多个功能。用户可以通过做出与第一图形对象3811相对应的输入来控制在外部电子设备3800上显示的图像。

例如,参考图38b,当外部电子设备3800接收到用于在图形对象3811中包括的用于执行在不同方向上移动图像的功能的多个图标之中选择用于执行在第一方向上移动图像的功能的第一图标的输入时,外部电子设备3800可以在第一方向上切换通过显示器显示的图像。

参考图38c,在接收到用于切换为表情符号输入模式的输入时,外部电子设备3800可以显示用于输入表情符号的第二图形对象3812,替代第一图形对象3811。

参考图38d,在接收到用于选择第二图形对象3812中包括的用于输入表情符号的多个图标之一的输入时,外部电子设备3800可以显示为所选图标设置的表情符号3821。

参考图38e,在接收到用于显示与通过显示器正显示的局部图像或对象相关的消息的输入时,外部电子设备3800可以搜索与对象或局部图像相关的消息并在预设区域3831中显示搜索到的消息。可以与对象或局部图像相关地从发送图像的外部服务器接收消息。

外部电子设备3800可以确定在未显示的对象或局部图像中是否发生事件。外部电子设备3800可以从电子设备101接收与在未显示的对象或局部图像中是否发生事件有关的信息。

参考图38f,在确定在未显示的对象或局部图像中发生事件时,外部电子设备3800可以输出消息3841以指示事件的发生,并提供如下方法,该方法用于切换为发生事件的局部图像、或包括发生事件的对象在内的局部图像。

参考图38g,在接收到用于切换为发生事件的局部图像或包括发生事件的对象在内的局部图像的输入时,外部电子设备3800可以将在外部电子设备3800上显示的图像切换为发生事件的局部图像或包括发生事件的对象在内的局部图像。

电子设备的上述组件中的每一个可以包括一个或多个部件,并且部件的名称可以随着电子设备的类型而变化。根据本公开各实施例的电子设备可以包括上述组件中的至少一个,省略它们中的一些,或者包括其他附加组件。一些组件可以组合为一个实体,但是该实体可以执行这些组件可执行的相同功能。

如本文所使用的,术语“模块”包括以硬件、软件或固件配置的单元,并且可以与其他术语(例如,“逻辑”、“逻辑块”、“部件”或“电路”)互换地使用。模块可以是执行一个或多个功能的单个集成部件或最小单元或部分。模块可以通过机械或电的方式实现,并且可以包括例如已知的或将来开发的用于执行某种操作的专用ic(asic)芯片、现场可编程门阵列(fpga)或可编程逻辑器件。

根据本公开的实施例,设备(例如,模块或其功能)或方法(例如,操作)的至少一部分可以被实现为例如以程序模块的形式存储在计算机可读存储介质(例如,存储器130)中的指令。当由处理器(例如,处理器120)执行时,指令可以使得处理器能够执行对应的功能。

计算机可读介质可以包括例如硬盘、软盘、磁介质(例如,磁带)、光学记录介质(例如,紧凑盘-只读存储器(cd-rom)、dvd)、磁光介质(例如,光磁软盘)或嵌入式存储器。指令可以包括由编译器创建的代码或可由解释器执行的代码。根据本公开各种实施例的模块或编程模块可以包括上述组件中的至少一个或多个,省略它们中的一些,或者还包括其他附加组件。由根据本公开各种实施例的模块、编程模块或其他组件执行的操作可以顺序地、并行地、重复地或启发式地执行,或者至少一些操作可以以不同的顺序执行或被省略,或者可以添加其他操作。

根据本公开的实施例,提供了一种保存在计算机上执行的程序的非暂时性计算机可读记录介质,其中,所述程序包括可执行命令,当由处理器执行时,所述可执行命令使得处理器能够:显示图像的第一局部图像;当接收到用于指定第一对象的第一输入时,指定第一局部图像中包括的第一对象;存储与指定的第一对象相关联的第一信息;当显示器上显示的图像从第一局部图像切换为图像的第二局部图像时,显示与第一对象相关联的第一图形对象;并且当接收到用于选择第一图形对象的第二输入时,使用第一信息将显示器上显示的图像从第二局部图像切换为图像的包括指定的第一对象在内的第三局部图像。

虽然参考本公开各实施例示出并描述了本公开,但是本领域技术人员将理解:在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的前提下,可以进行形式和细节上的各种改变。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1