信息处理装置和信息处理方法与流程

文档序号:16814331发布日期:2019-02-10 14:09阅读:167来源:国知局
信息处理装置和信息处理方法与流程

本技术涉及一种信息处理装置和信息处理方法,该信息处理装置和信息处理方法可以提高使用目的地的设施等时的便利性。



背景技术:

传统上,在屏幕上显示从当前位置到目的地的路线并且视觉上向用户提供信息的导航系统已经被广泛使用。此外,专利文献1公开了通过自动呼叫目的地的设施来实现预先确认或联系,并且可以在到达目的地之前获取必要的信息。

引用文献列表

专利文献

专利文献1:日本特许公开11-142174号专利申请



技术实现要素:

本发明要解决的问题

然而,在通过自动呼叫来执行预先确认或联系的方法中,会发生在没有建立与通信伙伴的通信的情况下,或者在从通信伙伴提供的信息没有指示最新状态的情况下,例如,用户可能在期望的设施处于拥挤状态时到达期望的设施并且不能有效使用期望的设施的情况。

因此,本技术提供一种信息处理装置和信息处理方法,该信息处理装置和信息处理方法可以提高使用目的地的设施等时的便利性。

问题的解决方案

本技术的第一方面在于一种信息处理装置,其包括:控制单元,其被配置为执行无人飞行体的飞行控制和与目的地相关联的移动控制,该移动控制是基于通过使用飞行控制使无人飞行体移动到目的地并使无人飞行体对目的地成像而获得的目的地或目的地周围区域的捕获图像。

在本技术中,信息处理装置设置在车辆中,并且信息处理装置的控制单元执行无人飞行体的飞行控制,使得无人飞行体移动到目的地并且对目的地或目的地的周围区域成像。此外,控制单元基于目的地或目的地周围区域的捕获的图像来确定目的地等设施的拥挤状况,基于拥挤状况的确定结果来执行控制车辆的移动路线或速度的移动控制,并且调整到达目的地的到达时间。

此外,在停车场被设置为目的地的情况下,控制单元基于停车场的捕获图像检索空停车位,并且例如通过使无人飞行体从车辆的位置移动到检测到的空停车位的位置来执行到检测到的空停车位的移动引导。

此外,控制单元使无人飞行体在目的地内移动并捕获图像,基于在目的地内的捕获的图像检索在目的地的移动路线,并且在用于在目的地内移动的移动体中设置检测到的移动路线。

此外,当乘客下车时,控制单元将无人飞行体的飞行控制的控制权限改变为下车的乘客的信息处理装置,并且例如通过在改变控制权限时向下车的乘客的信息处理装置提供已经用于无人飞行体的飞行控制的信息来执行继续的飞行控制。

此外,在信息处理装置中提供显示单元,并且控制单元根据显示单元的布置来设置无人飞行体的成像方向,或者根据显示单元上的图像显示尺寸来设置无人飞行体生成的捕获图像的图像尺寸。

本技术的第二方面在于一种信息处理方法,其包括:

使控制单元执行无人飞行体的飞行控制;以及

使控制单元执行与目的地相关联的移动控制,该移动控制是基于通过使用所述飞行控制使所述无人飞行体移动到所述目的地并使所述无人飞行体对所述目的地成像而获得的所述目的地或所述目的地的周围区域的捕获图像。

本发明的有益效果如下:

根据本技术,由控制单元执行无人飞行体的飞行控制和与目的地相关联的移动控制,该移动控制是基于通过使用飞行控制使无人飞行体移动到目的地并使用无人飞行体捕获图像而获得的目的地或目的地周围区域的捕获图像。因此,可以提高使用目的地的设施等时的便利性。顺便说一句,本说明书中描述的效果是示例,并不限于此,而是可以实现额外的效果。

附图说明

图1是示出信息处理系统的配置的图。

图2是示出信息处理装置的功能配置的图。

图3是示出无人飞行体的功能配置的图。

图4是示出第一操作示例的流程图。

图5是示出无人飞行体的飞行位置的显示示例的图。

图6是示出改变显示分辨率、无人飞行体的搜索范围等的操作的图。

图7是示出第二操作示例的流程图。

图8是示出用于停车场的用户指令输入屏幕的图。

图9是示出用于指定空停车位的操作的屏幕的图。

图10是示出小型移动体的图。

图11是示出车辆和小型移动体的图。

图12是示出第三操作示例的流程图。

图13是示出用于确定路线的用户指令输入屏幕的图。

图14是示出第四操作示例(车辆信息处理装置的操作示例)的流程图。

图15是示出无人飞行体的飞行位置的显示的图。

图16是示出控制权限变更指示屏幕的图。

图17是示出第四操作示例(便携信息处理装置的操作示例)的流程图。

图18是示出无人飞行体的飞行位置的显示的图。

具体实施方式

在下文中,将参考附图详细说明本说明书中公开的技术的实施例。顺便提一下,将按下面的顺序进行说明。

1.信息处理系统的整体配置

2.信息处理装置和无人飞行体的配置

3.信息处理系统的操作

3-1.第一操作示例

3-2.第二操作示例

3-3.第三操作示例

3-4.第四操作示例

<1.信息处理系统的整体配置>

在根据本技术的信息处理系统中,通过信息处理装置使无人飞行体如无人机移动到目的地。此外,通过使无人飞行体对目的地或目的地周围区域成像,并使信息处理装置基于无人飞行体捕获的捕获图像执行移动控制,可以提高使用目的地的设施等时的便利性。顺便提一下,信息处理装置可以与车辆成一体或者可以单独提供。

图1示出了信息处理系统的配置。信息处理系统10包括信息处理装置20、车辆40和诸如无人机的无人飞行体50。信息处理装置20可以与车辆40成一体(或者可以结合到车辆中),或者可以被配置为物理上独立于车辆40的装置。例如,通过使用用户可携带的信息终端装置作为信息处理装置20,即使在用户下车的状态下,用户也可以使用从无人飞行体50发送的信息。此外,信息处理装置也可以以这样的方式配置,其中一些功能模块由结合到车辆中的装置共享。顺便提一下,在稍后说明的第四操作示例中,与车辆成一体的信息处理装置被称为车辆信息处理装置20c,并且用户可携带的信息终端装置被称为便携式信息处理装置20p。

信息处理装置20向无人飞行体50发送目的地的位置信息和飞行控制信息,并使无人飞行体50移动到目的地或使无人飞行体50捕获图像。此外,信息处理装置20从无人飞行体50获取目的地或目的地周围区域的捕获图像,并且基于获取的捕获图像执行车辆40的控制、稍后将描述的小型移动体的设置等。

无人飞行体50设置在车辆40中或特定的基地中,与信息处理装置20通信,并且基于来自信息处理装置20的指令移动到目的地、捕获图像等。

<2.信息处理装置和无人飞行体的配置>

图2示出了根据本技术的信息处理装置的功能配置。信息处理装置20包括输入单元21、显示单元22、位置信息获取单元23、通信单元24和控制单元25。

信息处理装置20可以如上所述与车辆40成一体,或者可以使用物理上独立于车辆40的装置,例如用户携带的诸如智能手机的信息终端装置,作为信息处理装置20。

输入单元21是用于用户对信息处理装置20执行输入操作的单元。用户可以经由输入单元21向信息处理装置20输入目的地、目的地到达时间、移动目的以及用于选择移动路线或中转点的信息。

输入单元21可以包括例如触摸面板或语音输入功能。另外,信息终端装置可以由输入单元21共享。顺便提及,这里提到的用户包括驾驶员和除驾驶员以外的乘客。

例如,显示单元22显示由信息处理装置20从无人飞行体50获取的捕获图像或者用于目的地的位置信息、无人飞行体的控制信息等的设置屏幕。

显示单元22可以包括例如触摸面板,并且与输入单元21成一体。此外,诸如车载显示器、平视显示器或汽车导航装置的车载装置可以被共享作为显示单元22,或者用户携带的信息终端装置的屏幕可以被用作显示单元22。

位置信息获取单元23获取关于当前位置的信息。例如,位置信息获取单元23从gnss卫星接收全球导航卫星系统(gnss)信号(例如,从gps卫星接收全球定位系统(gps)信号),执行定位,并生成包括当前位置的纬度、经度和海拔的位置信息。备选地,位置信息获取单元23可以使用placeengine(注册商标)等基于来自无线接入点的信息来指定当前位置。另外,位置信息获取单元23可以从车辆的定位单元或用户携带的信息终端装置获取位置信息。

通信单元24包括例如诸如全球移动通信系统(gsm)(注册商标)、wimax、长期演进(lte)或lte-advanced(lte-a)之类的蜂窝通信协议、诸如wi-fi(注册商标)之类的无线lan以及诸如蓝牙(注册商标)之类的通用通信接口,并且可以访问网络(例如,互联网、云网络或提供商专用网络)上存在的装置(例如,应用服务器、控制服务器、管理服务器等)。另外,通信单元24与无人飞行体50通信,并且控制无人飞行体50或者从无人飞行体50获取捕获的图像。顺便提及,关于信息处理装置20和无人飞行体50之间的通信,可以在信息处理装置20和无人飞行体50之间执行无线通信,或者可以经由网络执行通信。例如,在无人飞行体50设置在车辆40中的情况下,信息处理装置20不通过网络与无人飞行体50执行无线通信。此外,在无人飞行体50设置在特定基地的情况下,信息处理装置20经由网络与无人飞行体50通信。

控制单元25全面控制信息处理装置20的整个操作。具体地,控制单元25基于经由输入单元21从用户输入的信息、用于方便用户的输入操作的图形用户界面(gui)处理、经由通信单元24与无人飞行体50的通信、飞行控制的执行、捕获图像的获取、传感器信息等来执行显示单元22的信息显示处理。此外,提供了语音输出单元26,并且控制单元25允许用户通过使用输入单元21或显示单元22和语音输出单元26通过显示或语音以对话方式执行目的地的选择、所选目的地的改变、或者到目的地的路线的选择或改变。另外,例如,控制单元25可以基于在沿着所选路线自动驾驶期间从无人飞行体50获取的捕获图像执行驾驶控制,或者可以基于在手动驾驶期间从无人飞行体50获取的捕获图像自动执行驾驶控制。另外,控制单元25可以基于从无人飞行体50获取的传感器信息执行车辆空调控制,使得在到达目的地时获得与环境状况相对应的光学空调环境。

在信息处理装置20设置在车辆中的情况下,信息处理装置20可以进一步包括车内状态检测单元27、车外信息检测单元28和车辆状态检测单元29。

车内状态检测单元27包括例如对车辆内部成像的车载相机(车内相机)、检测施加到驾驶员座椅或其他座椅(诸如乘客座椅和后排座椅)(无论人是否坐在座椅上)的重量或乘客舱的重量变化的重量传感器、诸如麦克风的语音传感器等。

例如,可以基于车内相机捕获的图像的识别结果或者来自重量传感器的座椅或乘客舱的重量变化来检查用户是否在场。此外,可以基于由车内相机捕获的图像的识别结果来估计乘客舱状况。此外,基于由车内相机捕获的图像的面部识别结果、由语音传感器收集的车内对话的细节、来自生物传感器的检测结果等来生成车内信息。

车外信息检测单元28包括例如检测当前天气或大气现象的环境传感器和检测附近车辆、障碍物、行人、车辆周围发生的事故状况等的周围信息检测传感器。

控制单元25可以基于车外信息检测单元28的检测结果适当地改变从车内提供的信息。控制单元可以经由显示单元22呈现目的地等的候选,例如,取决于天气、道路的拥挤状况等。

车辆状态检测单元29包括例如检测车身轴向旋转的角速度的陀螺仪传感器、检测车辆加速度的加速度传感器、或者检测加速踏板上的压下量、制动踏板上的压下量、方向盘的转向角、发动机转速、车轮转速等的传感器。

另外,信息存储单元30可以设置在信息处理装置20中以存储各种信息。例如,通过将地图信息存储在信息存储单元30中,控制单元25可以基于存储在信息存储单元30中的地图信息和由位置信息获取单元23获取的位置信息来执行到目的地的导航、到目的地的接近状态的确定等。另外,在使用无人飞行体50的情况下,控制单元25设置到目的地的计划飞行路线,并将设置的计划飞行路线、无人飞行体50飞行的路线的信息等存储在信息存储单元30中。

图3示出无人飞行体的功能配置。无人飞行体50包括通信单元51、位置信息获取单元52、飞行体控制单元53、驱动单元54、成像单元55和传感器单元56。

通信单元51与信息处理装置20通信,并将接收到的信息输出到飞行体控制单元53。另外,通信单元51将由成像单元55生成的捕获图像或由传感器单元56生成的传感器信息发送到信息处理装置20。

位置信息获取单元52获取关于无人飞行体50的当前位置的信息。类似于信息处理装置20的位置信息获取单元23,位置信息获取单元52接收gnss信号等,执行定位,并生成包括当前纬度、经度和海拔的位置信息。备选地,位置信息获取单元52可以基于来自无线接入点的信息来指定当前位置。

飞行体控制单元53通过基于由通信单元51接收的来自信息处理装置20的信息和由位置信息获取单元52获取的位置信息生成驱动信号,并将生成的驱动信号输出到驱动单元54,借此使得无人飞行体50移动到由来自信息处理装置20的信息指示的目的地。另外,飞行体控制单元53控制成像单元55的操作,以便对目的地或目的地的周围区域成像。另外,飞行体控制单元53执行将生成的捕获图像发送到信息处理装置20的处理。另外,飞行体控制单元53执行用于使无人飞行体50移动到容纳位置等的控制。

驱动单元54包括执行无人飞行体50的漂浮和移动的机构,例如螺旋桨和用于旋转螺旋桨的马达。驱动单元54基于来自飞行体控制单元53的驱动信号驱动马达等,使得无人飞行体50漂浮和移动。成像单元55基于来自飞行体控制单元53的控制信号执行成像操作,并且生成例如目的地、目的地周围区域和目的地内部的捕获图像。传感器单元56包括能够测量环境状况,例如温度、湿度和紫外线量的传感器,并且生成指示测量结果的传感器信息。

<3.信息提供系统的操作>

<3-1.第一操作示例>

接下来,下面将描述信息提供系统用于观光的情况下的示例作为第一操作示例。在第一操作示例中,通过基于无人飞行体捕获的目的地或目的地周围区域的捕获图像执行车辆到目的地的移动控制,提高了使用目的地设施等时的便利性。顺便提及,信息处理装置作为与车辆成一体的配置或由车辆乘客携带的配置被设置在车辆中。

图4是示出第一操作示例的流程图。在步骤st1中,信息处理装置设置目的地。信息处理装置20在无人飞行体50中设置由用户设置的目的地,并执行步骤st2。

在步骤st2中,信息处理装置开始使用无人飞行体。信息处理装置20通过与无人飞行体50通信来开始飞行控制,使无人飞行体50飞向目的地,然后执行步骤st3。

在步骤st3中,信息处理装置从无人飞行体获取位置信息,并显示获取的位置信息。信息处理装置20从无人飞行体50的位置信息获取单元52获取位置信息。另外,信息处理装置20基于获取的位置信息在显示单元22上显示无人飞行体50的飞行位置,然后执行步骤st4。

图5示出了无人飞行体的飞行位置的显示示例。在飞行位置的显示中,例如,在地图上显示目的地、无人飞行体50的位置、无人飞行体50飞行的路线、计划飞行路线和信息处理装置20(车辆)的位置。顺便提及,计划飞行路线的信息存储在信息存储单元30中。另外,用户可以改变计划的飞行路线,并且可以使无人飞行体50沿着用户期望的路线飞往目的地。

可以通过用户的操作来改变显示分辨率、无人飞行体的搜索范围等。图6是示出改变显示分辨率、无人飞行体的搜索范围等的操作的图,其中输入单元21和显示单元22被配置为例如触摸面板。例如,在用户对目的地位置的按压力强的情况下,信息处理装置将搜索范围设置为宽范围ara,并且在用户的按压力弱的情况下,将搜索范围设置为窄范围arb。此外,信息处理装置可以响应于用户的操作来调整无人飞行体50的成像单元55中的成像时间。

回到图4,在步骤st4中,信息处理装置确定无人飞行体是否已经到达目的地。信息处理装置20在从无人飞行体50获取的位置信息指示目的地的位置的情况下执行步骤st5,并且在位置信息不指示目的地的位置的情况下重复步骤st3。

在步骤st5中,信息处理装置从无人飞行体获取捕获图像,并显示获取的捕获图像。信息处理装置20获取由设置在无人飞行体50中的成像单元55捕获的包括目的地或目的地周围区域的捕获图像,然后执行步骤st6。

在步骤st6中,信息处理装置获取周围信息。信息处理装置20使用从无人飞行体50获取的捕获图像来执行对象识别,获取指示例如在目的地的设施中排队的人数或车辆等的周围信息,然后执行步骤st7。

在步骤st7中,信息处理装置确定目的地是否拥挤。信息处理装置20基于在步骤st6中获取的周围信息来确定例如目的地设施的拥挤情况,在确定目的地拥挤的情况下执行步骤st8,并且在确定目的地不拥挤的情况下执行步骤st9。

在步骤st8中,信息处理装置执行移动控制。信息处理装置20假设由于目的地拥挤,使用目的地设施等的等待时间变长。因此,信息处理装置执行行驶速度的调整、行驶路线的改变等,使得车辆避免拥挤状态并到达目的地,然后执行步骤st9。

在步骤st9中,信息处理装置确定无人飞行体的使用是否已经结束。信息处理装置20例如在目的地的拥挤状况的确认完成并且无人飞行体50的使用结束的情况下执行步骤st10,并且在目的地的拥挤状况的监视继续执行以确认拥挤状况的改变的情况下重复步骤st5。

在步骤st10中,信息处理装置执行结束无人飞行体的使用的处理。信息处理装置20控制无人飞行体50,使得无人飞行体50返回到容纳点。

根据该第一操作示例,由于可以在到达目的地之前确认目的地的拥挤情况,因此可以减少无用的等待时间等,并且提高使用目的地的设施等时的便利性。

另外,信息处理装置20可以在显示单元22上显示由无人飞行体50的成像单元55捕获的捕获图像,直到到达目的地。当以这种方式显示捕获的图像时,车辆的乘客可以顺序地观察目的地或目的地周围区域的状况。另外,信息处理装置20可以在显示单元22上显示关于目的地的引导信息。当以这种方式显示引导信息时,车辆的乘客可以事先获取关于目的地的信息。信息处理装置20执行这样的图像显示,使得乘客能够有效地使用到达目的地之前的时间。

另外,当使无人飞行体根据显示单元22的布置或显示尺寸生成捕获图像时,信息处理装置20可以最优地显示目的地或其周围区域的捕获图像。例如,在信息处理装置20设置在自行车中的情况下,信息处理装置20对应于设置在驾驶员前方的显示单元22,从无人飞行体50获取无人飞行体50的移动方向上的正视图的捕获图像,并且将获取的捕获图像显示在显示单元22上。另外,将信息处理装置20获取的捕获图像设置为根据显示单元22的显示像素的数量的图像大小。根据该配置,可以在显示单元22上最佳地显示无人飞行体50的移动方向上的捕获图像。另外,在信息处理装置20设置在车辆中的情况下,信息处理装置20从无人飞行体50获取通过对无人飞行体50的周围环境成像而获得的捕获图像,并且根据设置在车辆中的显示单元22的布置或显示尺寸,将获取的捕获图像显示在显示单元22上。例如,信息处理装置20在位于车辆前侧的显示单元22上显示无人飞行体50的移动方向上的捕获图像,并且在位于车辆右侧的显示单元22上显示无人飞行体50的移动方向上的右侧上的捕获图像。此外,在其他显示单元上显示在相应方向上捕获的图像。通过执行该显示,信息处理装置20可以最佳地显示图像,就像车辆的乘客登上无人飞行体50一样。

<3-2.第二操作示例>

接下来,下面将描述信息提供系统用于停车的情况下的示例作为第二操作示例。在第二操作示例中,通过基于无人飞行体捕获的停车场的捕获图像来检测空停车位,并且使用无人飞行体对检测到的空停车位执行移动引导,提高了使用停车场时的便利性。顺便提及,信息处理装置作为与车辆成一体的配置或由车辆乘客携带的配置被设置在车辆中。

图7是示出第二操作示例的流程图。在步骤st21中,信息处理装置确定车辆是否已经接近停车场。信息处理装置20基于位置信息和地图信息来确定车辆是否已经接近停车场。信息处理装置20在确定车辆已经接近停车场的情况下执行步骤st22,并且在确定车辆没有接近停车场的情况下重复步骤st21。

在步骤st22中,信息处理装置确定车辆是否将停放在停车场中。信息处理装置20在确定用户已经被指示将车辆停放在接近的停车场的情况下执行步骤st23,并且在确定用户没有被指示停放车辆的情况下重复步骤st21。

图8示出了用于停车场的用户指令输入屏幕。信息处理装置20在显示单元22上显示对话框dba。在对话框dba中,提供了车辆将停放在停车场的情况下的指示按钮“是”,以及车辆不将停放在停车场的情况下的指示按钮“否”。信息处理装置20检测用户(乘客)操作了哪个指令按钮,并基于检测结果确定是否已经给出了指示车辆将停放的用户指令。

回到图7,在步骤st23中,信息处理装置开始使用无人飞行体。信息处理装置20开始无人飞行体50的飞行控制,开始无人飞行体50向接近的停车场的飞行,然后执行步骤st24。

在步骤st24中,信息处理装置从无人飞行体获取位置信息和捕获图像,并且显示获取的位置信息和获取的捕获图像。信息处理装置20从无人飞行体50的位置信息获取单元52获取位置信息。另外,信息处理装置20从无人飞行体50的成像单元55获取捕获的图像。另外,信息处理装置20基于获取的位置信息在显示单元22上显示无人飞行体50的飞行位置,然后执行步骤st25。

在步骤st25中,信息处理装置搜索空停车位。信息处理装置20使用在步骤st24中获取的捕获图像执行图像处理,并且搜索没有车辆停放的空停车位。例如,信息处理装置20执行对象识别等以确定车辆和停车位,基于确定结果检测空停车位,然后执行步骤st26。

在步骤st26中,信息处理装置确定是否已经指定了空停车位。信息处理装置确定是否已经指定了车辆将停放的空停车位。信息处理装置20在由于没有检测到空停车位而没有指定空停车位的情况下以及在已经给出指示不使用检测到的空停车位的用户指令的情况下执行步骤st29。另外,信息处理装置20在指定了空停车位的情况下执行步骤st27。空停车位可以由用户指定,或者空停车位可以自动指定。在用户指定空停车位的情况下,信息处理装置20在显示单元22上显示检测到的空停车位,并且将响应于来自输入单元21的用户输入而选择的空停车位设置为指定的空停车位。另外,在自动指定空停车位的情况下,信息处理装置20将最宽的空停车位或靠近入口或出口的空停车位设置为指定的空停车位。

图9示出了用于指定空停车位的操作的屏幕。信息处理装置20在显示单元22上显示对话框dbb。在对话框dbb中,提供了车辆将停放在检测到的空停车位的情况下的指示按钮“是”,以及车辆不将停放在检测到的空停车位的情况下的指示按钮“否”。信息处理装置20检测用户操作了哪个指令按钮,并基于检测结果确定是否已经指定了要停放车辆的空停车位。顺便提及,信息处理装置20可以在屏幕上显示检测到的空停车位的捕获图像,用于指定空停车位的操作。当以这种方式显示检测到的空停车位的捕获图像时,用户可以基于该空停车位的捕获图像适当地确定车辆是否将停放在该空停车位中。

回到图7,在步骤st27中,信息处理装置使无人飞行体移动到引导开始位置。信息处理装置20使无人飞行体50移动到引导开始位置,例如车辆的位置或从车辆视觉上可识别的附近位置,然后执行步骤st28。

在步骤st28中,信息处理装置开始无人飞行体进行引导。信息处理装置20通过在无人飞行体50中设置指定的空停车位的位置,然后使无人飞行体50从引导开始位置移动到指定的空停车位的位置,将车辆引导到空停车位,然后执行步骤st29。

在步骤st29中,信息处理装置确定无人飞行体的使用是否已经结束。信息处理装置20在车辆已经移动到指定空停车位的位置的情况下或者在车辆已经完成在指定空停车位中的停放并且无人飞行体50的使用结束的情况下执行步骤st30,并且在继续使用无人飞行体50的情况下重复步骤st24。

在步骤st30中,信息处理装置执行结束无人飞行体的使用的处理。信息处理装置20控制无人飞行体50,使得无人飞行体50返回到容纳点。

根据该第二操作示例,可以使用由无人飞行体50获取的捕获图像容易地找到空停车位。此外,由于可以使用无人飞行体50来执行到指定空停车位的引导,所以可以快速停放车辆。因此,可以提高使用停车场时的便利性。

<3-3.第三操作示例>

接下来,将描述信息提供系统用于路线搜索的情况作为第三操作示例。在第三操作示例中,信息处理装置20基于通过使无人飞行体50移动并对目的地内部成像而获得的目的地内部的捕获图像来搜索目的地内部的移动路线。另外,信息处理装置20通过在用于在目的地移动的移动体中设置检测到的移动路线,开始小型移动体从车辆40沿着设置的移动路线移动。

图10示出了小型移动体。小型移动体45具有设置在座椅451前侧的遮篷452。遮篷452采用例如柔性显示器,并且被配置为向坐在座椅451上的人呈现各种信息。另外,遮篷452以收纳方式构造。行驶单元453附接到座椅451。在行驶单元453中,提供位置信息获取单元、行驶驱动单元、控制单元、电源单元等。位置信息获取单元获取小型移动体的当前位置。行驶驱动单元包括驱动马达、轮胎等,并使小型移动物体行驶。控制单元基于由位置信息获取单元获取的当前位置或地图信息来执行行驶驱动单元的驱动控制,使得小型移动物体沿着设置的移动路线行驶。此外,使用遮篷452接收遮篷452或显示信息。

图11示出了车辆和小型移动体,其中图11的(a)示出了小型移动体45储存在车辆40中的情况。在每个小型移动体45储存在车辆40中的情况下,小型移动体45用作车辆中的座椅,并且顶篷452处于收纳状态。此外,在小型移动体45开始从车辆40沿着设置的移动路线移动的情况下,顶篷452位于座椅451的前部位置,如图11的(b)所示,并且显示与移动路线、观光点等相关联的各种信息。顺便提及,图11的(b)示出了小型移动体45从车辆40的后部取出的情况,但是小型移动体45可以从车辆40的前部或侧部取出。

图12是示出第三操作示例的流程图,并且示出直到在小型移动体45中设置移动路线的处理例程。

在步骤st41中,信息处理装置设置目的地。信息处理装置20在无人飞行体50中设置由用户设置的目的地,并执行步骤st42。

在步骤st42中,信息处理装置开始使用无人飞行体。信息处理装置20通过与无人飞行体50通信来开始飞行控制,使无人飞行体50飞向设置的目的地,然后执行步骤st43。

在步骤st43中,信息处理装置从无人飞行体获取位置信息,并显示获取的位置信息。信息处理装置20从无人飞行体50的位置信息获取单元52获取位置信息。另外,信息处理装置20基于获取的位置信息在显示单元22上显示无人飞行体50的飞行位置,然后执行步骤st44。

在步骤st44中,信息处理装置确定无人飞行体是否已经到达目的地。信息处理装置20在从无人飞行体50获取的位置信息指示目的地的位置的情况下执行步骤st45,并且在位置信息不指示目的地的位置的情况下重复步骤st43。

在步骤st45中,信息处理装置从无人飞行体获取捕获图像,并显示获取的捕获图像。信息处理装置20使设置在无人飞行体50中的成像单元55对目的地成像。另外,信息处理装置20获取由无人飞行体50生成的捕获图像,然后执行步骤st46。

在步骤st46中,信息处理装置在目的地内部执行路线搜索。信息处理装置20使用通过使无人飞行体50从天空对目的地内部成像而获得的捕获图像来执行对象识别,并且确定目的地内部的建筑物的布置、通行状况、障碍物等。此外,信息处理装置20基于确定结果搜索稍后将描述的小型移动体可以通过的移动路线,然后执行步骤st47。顺便提及,在下雨的情况下,或者在根据来自车外信息检测单元28的检测结果预计会下雨的情况下,可以搜索诸如建筑物或树下的避雨点,并且可以搜索不太潮湿的移动路线。

在步骤st47中,信息处理装置确定是否已经确定了路线。信息处理装置20在目的地已经确定了小型移动体可以通过的移动路线的情况下执行步骤st48,并且在没有确定移动路线的情况下重复步骤st46。

图13示出了用于确定路线的用户指令输入屏幕。信息处理装置20在显示单元22上显示对话框dbc。在对话框dbc中,提供了在使用搜索路线的情况下的指示按钮“是”和在不使用搜索路线的情况下的指示按钮“否”。信息处理装置20检测用户操作了哪个指令按钮,并基于检测结果确定是否已经确定了路线。顺便提及,在用于确定路线的用户指令输入屏幕中,例如,指示待搜索路线的路线图像(虚线)被叠加在指示目的地设施内部的捕获图像上,并且小型移动体如何被安排在目的地设施内部移动被清楚地显示。

回到图12,在步骤st48中,信息处理装置执行结束无人飞行体的使用的处理。信息处理装置20控制无人飞行体50,使得无人飞行体50返回到容纳点,然后执行步骤st49。

在步骤st49中,信息处理装置在小型移动体中执行导航的设置。信息处理装置20设置小型移动体的导航,使得小型移动体可以沿着在步骤st47中确定的移动路线移动。

根据该第三操作示例,在用户使用小型移动体在目的地内部移动的情况下,预先确定移动路线,因此,可以提高使用目的地的设施等时的便利性。此外,与车辆40分离的小型移动体45沿着设置的移动路线执行自动驾驶,因此有可能方便观光等。顺便提及,在第三操作示例中,已经描述了使用小型移动体的情况,但是在用户步行移动的情况下,搜索用户可以步行移动的路线,并且向步行移动的用户携带的信息终端装置通知移动路线。

<3-3.第四操作示例>

接下来,将描述信息处理装置切换使用的情况作为第四操作示例。例如,将描述在乘客(用户)下车的情况下,结合到车辆中的信息处理装置执行无人飞行体的控制并且无人飞行体的控制权限切换到例如由乘客携带的信息终端装置的情况。顺便提及,在以下描述中,结合到车辆中的信息处理装置被称为车辆信息处理装置20c,并且例如,由乘客携带的用于控制无人飞行体的信息终端装置被称为便携式信息处理装置20p。

图14和图17是示出第四操作示例的流程图。顺便提及,图14示出了车辆信息处理装置的操作示例,并且图17示出了便携式信息处理装置的操作示例。在图14的步骤st61中,车辆信息处理装置开始使用无人飞行体。车辆信息处理装置20c通过与无人飞行体50通信来开始飞行控制,使无人飞行体50飞行,然后执行步骤st62。

在步骤st62中,车辆信息处理装置从无人飞行体获取位置信息,并显示获取的位置信息。车辆信息处理装置20c从无人飞行体50的位置信息获取单元52获取位置信息。另外,车辆信息处理装置20c基于获取的位置信息在显示单元22上显示无人飞行体50的飞行位置等,然后执行步骤st63。

图15示出了无人飞行体的飞行位置的显示。在飞行位置的显示中,例如,在地图上显示无人飞行体的容纳点和计划到达时间、无人飞行体50的位置、无人飞行体50飞行的路线、计划飞行路线和信息处理装置20(车辆)的位置。顺便提及,计划飞行路线的信息存储在信息存储单元30中。另外,通过允许用户改变计划的飞行路线,用户可以使无人飞行体50沿着用户期望的路线飞行到无人飞行体的容纳点。

回到图14,在步骤st63中,车辆信息处理装置确定是否已经执行了用户输入。车辆信息处理装置20c在确定已经执行了用户输入的情况下执行步骤st64,并且在确定没有执行用户输入的情况下执行步骤st65。

在步骤st64中,车辆信息处理装置响应于用户输入执行飞行控制。车辆信息处理装置20c生成控制信号,使得无人飞行体50执行基于用户输入的操作,将生成的控制信号发送到无人飞行体50,然后执行步骤st68。

当处理例程从步骤st63转换到步骤st65时,车辆信息处理装置确定是否要切换控制权限。车辆信息处理装置20c例如在车辆40停止并且检测到已经执行了门的打开、发动机的停止等的情况下,确定乘员将下车并显示控制权限切换指令屏幕。

图16示出了控制权限切换指令屏幕。信息处理装置20在显示单元22上显示对话框dbd。在对话框dbd中,提供了在飞行期间无人飞行体的控制被切换到便携式信息处理装置的情况下的指示按钮“是”,以及在控制未被切换的情况下的指示按钮“否”。车辆信息处理装置20c检测用户操作了哪个指令按钮,并基于检测结果确定是否要切换控制权限。

车辆信息处理装置20c在确定要切换控制权限的情况下执行步骤st66,并且在确定不切换控制权限的情况下执行步骤st68。

在步骤st66中,车辆信息处理装置执行控制权限切换处理。车辆信息处理装置20c与便携式信息处理装置20p通信,并且向便携式信息处理装置20p发送飞行控制的切换请求。顺便提及,飞行控制的切换请求包括继续执行飞行控制所需的信息。车辆信息处理装置20c响应于接收到响应于飞行控制的切换请求的许可通知而结束无人飞行体50的飞行控制,然后执行步骤st67。

在步骤st67中,车辆信息处理装置确定是否要获取控制权限。在已经从便携式信息处理装置20p发送了飞行控制切换请求的情况下,车辆信息处理装置20c确定要获取控制权限,响应于飞行控制切换请求向便携式信息处理装置20p发送许可通知,然后重复步骤st61。另外,车辆信息处理装置20c在没有发送飞行控制的切换请求的情况下重复步骤st67。另外,车辆信息处理装置20c可以响应于检测到用户上车而获取控制权限。在这种情况下,车辆信息处理装置20c向便携式信息处理装置20p请求控制权限,并且获取继续执行飞行控制所需的信息。

在步骤st68中,车辆信息处理装置确定无人飞行体的使用是否结束。车辆信息处理装置20c在无人飞行体50的使用由于使用无人飞行体50已经达到目的而结束的情况下执行步骤st69,并且在无人飞行体50将被继续使用的情况下重复步骤st62。

在步骤st69中,车辆信息处理装置执行结束无人飞行体的使用的处理。车辆信息处理装置20c控制无人飞行体50,将无人飞行体50返回到预定位置,并结束其操作。

图17示出了便携式信息处理装置的操作,其中便携式信息处理装置在步骤st71中确定是否已经接收到切换请求。便携式信息处理装置20p在已经从车辆信息处理装置20c接收到飞行控制的切换请求的情况下执行步骤st72,并且在没有接收到切换请求的情况下重复步骤st71。

在步骤st72中,便携式信息处理装置执行控制权限接收处理。便携式信息处理装置20p响应于飞行控制的切换请求向车辆信息处理装置20c发送许可通知。另外,便携式信息处理装置20p使用切换请求中包括的信息开始无人飞行体50的飞行控制。例如,便携式信息处理装置20p响应于来自车辆信息处理装置20c的飞行控制切换请求,启动用于执行无人飞行体50的飞行控制的应用,开始无人飞行体50的控制,然后执行步骤st73。

在步骤st73中,便携式信息处理装置从无人飞行体获取位置信息,并显示获取的位置信息。便携式信息处理装置20p从无人飞行体50的位置信息获取单元52获取位置信息。另外,便携式信息处理装置20p基于获取的位置信息在显示单元上显示无人飞行体50的飞行位置,然后执行步骤st74。

图18示出了无人飞行体的飞行位置的显示。在飞行位置的显示中,例如,在地图上显示无人飞行体的着陆点和计划到达时间、无人飞行体50的位置、无人飞行体50飞行的路线、计划飞行路线和信息处理装置20(车辆)的位置。顺便提及,计划飞行路线的信息存储在信息存储单元30中。另外,用户可以改变计划的飞行路线,并且可以使无人飞行体50沿着用户期望的路线飞行到无人飞行体的容纳点。在通过便携式信息处理装置以这种方式显示无人飞行体的飞行位置的情况下,无人飞行体50容纳在车辆40中的配置中的无人飞行体的容纳点是供便携式信息处理装置使用的无人飞行体的着陆点。因此,图15所示的无人飞行体的容纳点被显示为图18中无人飞行体的着陆点。

回到图17,在步骤st74中,便携式信息处理装置确定是否已经执行了用户输入。便携式信息处理装置20p在确定已经执行了用户输入的情况下执行步骤st75,并且在确定没有执行用户输入的情况下重复步骤st73。

在步骤st75中,便携式信息处理装置响应于用户输入执行飞行控制。便携式信息处理装置20p生成控制信号,使得无人飞行体50执行基于用户输入的操作,将生成的控制信号发送到无人飞行体50,然后执行步骤st76。

在步骤st76中,便携式信息处理装置确定是否要切换控制权限。便携式信息处理装置20p在已经基于用户输入执行了将控制权限切换到车辆信息处理装置20c的操作的情况下或者在已经从车辆信息处理装置20c发送了对控制权限的请求的情况下,确定要切换控制权限,然后执行步骤st77。另外,便携式信息处理装置20p在没有执行切换控制权限的操作或对控制权限的请求的情况下重复步骤st73。

在步骤st77中,便携式信息处理装置执行控制权限切换处理。便携式信息处理装置20p与车辆信息处理装置20c通信,并发送飞行控制的切换请求。顺便提及,飞行控制的切换请求包括继续执行飞行控制所需的信息。另外,便携式信息处理装置20p响应于来自车辆信息处理装置20c的对控制权限的请求,向车辆信息处理装置20c发送包括继续执行飞行控制所需的信息的请求许可通知。

根据该第四操作示例,即使当用户下车或者甚至当用户上车时,也可以执行无人飞行体的控制或者捕获图像的获取,因此可以提高使用目的地时的便利性。

本说明书中描述的一系列处理可以在硬件、软件或其组合中执行。在在软件中执行处理的情况下,上面记录有处理序列的程序被安装在计算机的存储器中,该存储器被带入专用硬件中并被执行。备选地,可以在能够执行各种处理的通用计算机中安装和执行程序。

例如,程序可以预先记录在硬盘、固态驱动器(ssd)或只读存储器(rom)中作为记录媒体。备选地,程序可以临时或永久地存储(记录)在可装卸记录媒体中,诸如软盘、光盘只读存储器(cd-rom)、磁光(mo)盘、数字多功能盘(dvd)、蓝光盘(注册商标)(bd)、磁盘或半导体存储卡。这种可装卸记录媒体可以作为所谓的封装软件提供。

另外,程序可以从可移除记录媒体安装到计算机,或者可以通过诸如局域网(lan)或互联网的网络以无线或有线方式从下载站点发送到计算机。计算机可以接收以上述方式发送的程序,并将该程序安装在诸如内置于其中的硬盘的记录媒体中。

顺便提及,本说明书中描述的效果仅仅是示例而非限制性的,并且可以提供上面没有描述的附加效果。此外,本技术不应被解释为局限于上述实施例。这些实施例以示例的形式公开了本技术,并且对于本领域技术人员来说显而易见的是,可以在不脱离本技术要点的情况下修改或替换这些实施例。也就是说,所附权利要求应该被引用来确定本技术的要点。

此外,根据本技术的信息处理装置可以采用以下配置。

(1)一种信息处理装置,其包括:控制单元,其被配置为执行无人飞行体的飞行控制和与目的地相关联的移动控制,该移动控制是基于通过使用飞行控制使无人飞行体移动到目的地并使无人飞行体对目的地成像而获得的目的地或目的地周围区域的捕获图像。

(2)根据(1)所述的信息处理装置,其中,所述信息处理装置设置在车辆中,并且

控制单元基于目的地或目的地的周围区域的捕获图像而执行车辆到目的地的移动控制。

(3)根据(2)所述的信息处理装置,其中,所述控制单元基于目的地或目的地周围区域的捕获图像来确定拥挤状况,并且基于拥挤状况的确定结果来执行到目的地的移动控制。

(4)根据(3)所述的信息处理装置,其中,所述控制单元基于所述拥挤状况的确定结果来控制车辆的移动路线或速度,以便调整到达目的地的到达时间。

(5)根据(1)至(4)中任一项所述的信息处理装置,其中,所述信息处理装置设置在车辆中,并且

控制单元将停车场设置为目的地,基于停车场的捕获图像检索空停车位,并且通过使无人飞行体移动到检测到的空停车位的位置来执行到检测到的空停车位的移动引导。

(6)根据(5)所述的信息处理装置,其中,所述控制单元将无人飞行体从车辆的位置移动到检测到的空停车位的位置。

(7)根据(1)至(6)中任一项所述的信息处理装置,其中,所述控制单元基于通过使无人飞行体在目的地内移动并对目的地内部成像而获得的目的地内部的捕获图像来检索在目的地内的移动路线。

(8)根据(7)所述的信息处理装置,其中,所述控制单元将通过检索而检测到的移动路线设定在用于在目的地内移动的移动体中。

(9)根据(1)至(8)中任一项所述的信息处理装置,其中,所述信息处理装置设置在车辆中,并且

当乘客下车时,控制单元将无人飞行体的飞行控制的控制权限改变为下车的乘客的信息处理装置。

(10)根据(9)所述的信息处理装置,其中,所述控制单元在控制权限的改变中向下车的乘客的信息处理装置提供用于无人飞行体的飞行控制的信息。

(11)根据(1)至(10)中任一项所述的信息处理装置,其中,所述信息处理装置设置在显示单元中,并且

控制单元在显示单元上显示捕获的图像。

(12)根据(11)所述的信息处理装置,其中,所述控制单元根据显示单元的布置来设置无人飞行体的成像方向。

(13)根据(11)或(12)所述的信息处理装置,其中,所述控制单元根据显示单元上的图像显示尺寸来设置由无人飞行体生成的捕获图像的图像尺寸。

行业适用性

在根据本技术的信息处理装置和信息处理方法中,控制单元执行无人飞行体的飞行控制和基于通过使用飞行控制使无人飞行体移动到目的地并使无人飞行体捕获图像而获得的目的地或目的地周围区域的捕获图像的与目的地相关联的移动控制。因此,可以提高使用目的地的设施等时的便利性。因此,本技术适用于导航系统。

参考符号列表

10信息处理系统

20信息处理装置

20c车辆信息处理装置

20p便携式信息处理装置

21输入单元

22显示单元

23位置信息获取单元

24通信单元

25控制单元

26语音输出单元

27车内状态检测单元

28车外信息检测单元

29车辆状态检测单元

30信息存储单元

40车辆

45小型移动体

50无人飞行体

51通信单元

52位置信息获取单元

53飞行体控制单元

54驱动单元

55成像单元

56传感器单元

451座椅

452遮篷

453行驶单元。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1