一种基于时间轴的3D可视化编辑器和编辑方法与流程

本发明涉及计算机技术的编辑工具领域，尤其涉及一种基于时间轴的3d可视化编辑器和编辑方法。

背景技术：

现有的编辑工具/软件，因为计算机显示器硬件的限制，往往呈现2d（二维）化的方式，纵然有3d编辑软件也是在2d显示器上进行的各种透视方式的显示，比如经典透视图分为一点透视,两点透视和三点透视。

热映的好莱坞大片《阿凡达》以其身临其境的3d(三维)效果赢得了全球影迷的好评，掀起了一股3d电影热潮，同时也让很多对3d技术持怀疑态度的人变成了3d技术的支持者，更让人们对3d家庭影视生活充满无限向往。一直徘徊在主流市场之外的3d技术终于奏响了进军家庭娱乐业的号角。

3d是three—dimension的缩写，就是三维立体图像。就实质而言，这项技术原理并不复杂。人是通过左眼和右眼观察到物体的细微差异、从而感知物体在三维空间中的存在状态。在屏幕上，只要左眼和右眼看到的画面不是一幅图像，整个画面就会立体起来。

3d技术在商业运用上已经有了较为快速的发展。越来越多的3d立体影院将投资建设，3d影片的数量也在大大增加。在3d技术迅速发展的同时，影视、音乐、动漫和网络游戏的相互渗透使得3d技术在电子消费领域显现出前所未有的强势，消费电子产品中使用3d技术的趋势已经非常明显。

vr全称virtualreality，即虚拟现实技术，又称灵境技术，具有沉浸性、交互性和构想性特征。vr技术集合了计算机图形学、仿真技术、多媒体技术、人工智能技术、计算机网络技术、并行处理技术和多传感器技术等多种技术，模拟人的视觉、听觉、触觉等感觉器官的功能，使人恍若身临其境，沉浸在计算机生成的虚拟世界中，并能通过语言、手势等进行实时交流，增强进入感和沉浸感。通过vr技术，让人在感受真实世界逼真的同时，还能突破时空等条件限制，感受到进入虚拟世界的奇妙体验。

ar全称augmentedreality，即增强现实技术。这项技术是利用电脑技术将虚拟的信息叠加到真实世界，通过手机、平板电脑等设备显示出来，被人们所感知，从而实现真实与虚拟的大融合，丰富现实世界。简而言之，就是将本身平面的内容“活起来”，赋予实物更多的信息，增强立体感，加强视觉效果和互动体验感。

mr全称mixedreality，即混合现实技术，是虚拟现实技术的进一步发展。它是通过在虚拟环境中引入现实场景信息，将虚拟世界、现实世界和用户之间搭起一个交互反馈信息的桥梁，从而增强用户体验的真实感。mr技术的关键点就是与现实世界进行交互和信息的及时获取，也因此它的实现需要在一个能与现实世界各事物相互交互的环境中。如果环境都是虚拟的，那就是vr；如果展现出来的虚拟信息只是与虚拟事物的简单叠加，那则是ar。mr和ar的区别，简单而言：ar只管叠加虚拟环境却不需理会现实，但mr能通过一个摄像头让你看到裸眼都看不到的现实。

上述vr、ar、mr被统称为xr。此外，3d数码相机、3d数码相框已实现产品化。3d数码相机可以通过双镜头叠加同一场景以产生立体影像，或是利用3d功能进行不同色彩模式的对比。而3d数码相框则是利用偏光原理，将不同图像同时折射到双眼，甚至可以充当3d眼镜，将普通照片立体化。近年，松下公司展出了全球第一款高清3d摄像机，其双镜头的设计可以说非常独特。松下将该机的透镜、摄像机前端和双存储卡存储器合为一体，从而使机身更加轻便，在用户进行手持式拍摄时更加灵活。同时，该机可自动对图像进行校正，不需使用任何附加设备就能直接记录3d影像。微软公司很早就开发出了双目ar（微软自称mr）头显设备。

申请号为cn201710348474.9的发明，本申请提供了三维形状数据的编辑设备、存储三维形状数据编辑程序的记录介质以及存储三维形状数据的数据结构的记录介质,所述设备包括:范围设置单元,其将由包括三维位置信息的三维形状数据表示的三维形状的保护对象范围和可编辑范围中的至少一个设置为编辑控制范围;以及控制条件设置单元,其设置用于控制所述可编辑范围内的编辑的控制条件,以便在可编辑范围被编辑时不编辑保护对象范围。

申请号为cn201910461221.1的发明，本发明公开了一种页面处理方法、装置及介质,所述方法包括:接收针对目标页面的编辑指令,确定所述目标页面的目标区域;获取所述目标区域对应的待编辑图像;根据所述目标页面对应的三维场景,确定所述待编辑图像在所述三维场景中对应的待编辑三维模型;获取所述待编辑三维模型在所述三维场景中对应的吸附区域信息;根据所述吸附区域信息和所述编辑指令携带的编辑信息,在所述三维场景中编辑所述待编辑三维模型,以得到目标图像。方便根据编辑需求在三维场景中移动待编辑三维模型。保证了用户基于页面对三维模型进行更细粒度的编辑的实现,提高了用户与三维模型进行交互的使用体验。

技术实现要素：

上述专利涉及的编辑也只是在2d显示状态下的3d编辑工作。进入3d时代，3d化带来了一系列的变革，3d化的显示，3d化的交互，3d化的编辑。基于时间轴的3d可视化编辑器可以有效提高空间立体地编辑的效率和效果，让原来只要少数人能在脑中呈现的沉浸式编辑状态，让更多人享受到沉浸性3d显示和编辑带来的便捷性和直观性。

申请号为cn201811594553.9的发明，提供一种头戴式计算机，便携性高，使用方便，隐私性好。同时本发明的目的之二是提供一种基于该头戴式计算机的信息输入方法，突破了常规的输入装置，能够随时进行信息输入和编辑。有助于在沉浸性3d显示下的信息输入方面提供解决方案。

本发明提供基于时间轴的3d可视化编辑器和编辑方法，目的在于提供一种新的在3d显示效果下的沉浸性编辑工具和编辑方式，让用户在基于xr技术的基础上，更方便、快捷地使用头戴式显示器（ar/vr/mr）进行基于时间轴的沉浸性编辑工作，且适合的人群较广泛。

本发明提供的技术方案如下。

本发明提供了一种基于时间轴的3d可视化编辑器，至少包括一vr/ar/mr眼镜（统称xr眼镜），所述xr眼镜，用于至少显示一条时间轴；在所述时间轴上，至少标记一个时间节点；在所述时间节点上，至少创建一个虚拟电子标签；在所述虚拟电子标签内，至少添加一个与所述时间节点相关的可编辑信息。

进一步，所述时间节点相关的可编辑信息至少包括文字信息、图片信息、视频信息、音频信息、人物信息、地点信息、时间信息、文件或超链接，所述文字信息，用于添加、删除、修改与所述该时间节点相关的文字内容；所述图片信息，用于添加、删除、修改与所述该时间节点相关的图片内容；所述视频信息，用于添加、删除、修改与所述该时间节点相关的视频内容；所述音频信息，用于添加、删除、修改与所述该时间节点相关的音频内容；所述人物信息包括人名、性别、年龄、籍贯、服饰和/或喜好；所述地点信息包括国家、地区、社区、街道、建筑物、楼层、房间号和/或经纬度；所述时间信息包括公元、年份、月份、日期、时间；所述文件包括文本格式、电子表格格式、图片格式、视频格式、音频格式、地图格式、邮件格式、cad格式或应用程序格式。

进一步，一条所述时间轴，根据指令，在所述时间节点处可分离显示成至少二条所述时间轴。

进一步，所述xr眼镜，至少用于显示二条所述时间轴，二条所述时间轴根据指令，显示为同面平行、同曲面平行、时而相近时而相远但不相交和/或至少一次相交。

进一步，所述xr眼镜的视场中横向显示的所述时间轴，供在空间中移动的佩戴所述xr眼镜的用户，在所述时间轴上标记所述时间节点，进而在所述时间节点上创建所述虚拟电子标签。

进一步，根据所述指令，整体/部分地抬升/下降所述横向显示的所述时间轴。

进一步，在所述时间轴周边，叠加显示小工具软件，所述小工具软件包括但不限于计算器、时钟、日历、天气、颜色标记或者地点标记。

进一步，所述时间节点设置在所述时间轴的下缘、上缘、左缘、右缘、后缘或前缘，对应地，所述虚拟电子标签设置在所述时间轴的上缘、下缘、右缘、左缘、前缘或后缘。

进一步，根据所述指令，多个所述虚拟电子标签近乎垂直于所述时间轴前后层叠显示，或者近乎平行于所述时间轴上下层叠显示；所述虚拟电子标签设置在对应一个所述时间节点的另一侧。

进一步，层叠显示的所述虚拟电子标签，根据所述指令，在所述xr眼镜的视场中的一个平面、曲面或扁平空间中不层叠地平铺显示，或者，在所述xr眼镜为中心的水平周边不层叠地平铺显示。

进一步，多个所述时间节点与对应的多个所述虚拟电子标签近乎垂直于所述时间轴，根据所述指令，对应的所述时间节点和所述虚拟电子标签朝向所述xr眼镜，并作出向性转动。

进一步，所述xr眼镜，至少包括空间定位传感器、信息输入装置、显示输出装置，所述空间定位传感器，用于定位所述xr眼镜在空间中的移动；述信息输入装置，用于收录输入信息，发出输入指令；所述显示输出装置，用于根据输入指令同步显示输出。

进一步，所述空间定位传感器，至少包括tof摄像头、鱼眼摄像头、imu传感器、陀螺仪、灯塔定位系统、wifi定位系统、lif定位系统、uwb定位系统、声音定位系统、激光雷达和/或毫米波雷达；所述信息输入装置，至少包括麦克风、控制手柄、手势识别器、动作捕捉器、数字手套、头瞄装置、眼动跟踪器、鼠标、轨迹球或者键盘；所述显示输出装置，为3d显示装置。

本发明还提供了一种基于时间轴的3d可视化编辑器的使用方法，在xr眼镜的视场中至少显示一条时间轴；在所述时间轴上至少标记一个时间节点；在所述时间节点上至少创建一个虚拟电子标签；在所述虚拟电子标签内至少添加一个与所述时间节点相关的可编辑信息。

进一步，在一条所述时间轴的所述时间节点处，根据指令分离显示成至少二条所述时间轴。

进一步，在xr眼镜的视场中至少显示二条所述时间轴，二条所述时间轴显示为同面平行、同曲面平行、时而相近时而相远但不相交和/或至少一次相交。

进一步，在所述xr眼镜的视场中横向显示的所述时间轴，供在所述时间轴上标记所述时间节点，进而在所述时间节点上创建所述虚拟电子标签。

进一步，整体/部分地抬升/下降所述横向显示的所述时间轴；或者，整体/部分地左移/右移所述竖向显示的所述时间轴。

进一步，在所述时间轴的下缘、上缘、左缘、右缘、后缘或前缘设置所述时间节点，对应地，在所述时间轴的上缘、下缘、右缘、左缘、前缘或后缘设置所述虚拟电子标签。

进一步，多个所述虚拟电子标签近乎垂直于所述时间轴前后层叠显示，或者近乎平行于所述时间轴上下层叠显示；所述虚拟电子标签设置在对应一个所述时间节点的另一侧。

进一步，层叠显示的所述虚拟电子标签，在所述xr眼镜的视场中的一个平面/扁平空间中不层叠地平铺显示，或者，在所述xr眼镜为中心的水平周边不层叠地平铺显示。

进一步，多个所述时间节点与对应的多个所述虚拟电子标签近乎垂直于所述时间轴，对应的所述时间节点和所述虚拟电子标签朝向所述xr眼镜，并作出向性转动。

进一步，所述xr眼镜，至少包括空间定位传感器、信息输入装置、显示输出装置，所述空间定位传感器定位所述xr眼镜在空间中的移动；所述信息输入装置收录输入信息，发出输入指令；述显示输出装置根据输入指令同步显示输出。

与现有技术相比，本发明在基于沉浸式3d显示技术，然后在被显示的3d时间轴之上进行编辑工作。进入3d时代，3d化带来了一系列的变革，3d化的显示，3d化的交互，3d化的编辑。基于时间轴的3d可视化编辑器可以有效提高空间立体地编辑的效率和效果，让原来只要少数人能在脑中呈现的沉浸式编辑状态，让更多人享受到沉浸性3d显示和编辑带来的便捷性和直观性。

附图说明

下面将以明确易懂的方式，结合附图说明优选实施方式，对一种的上述特性、技术特征、优点及其实现方式予以进一步说明。

图1是本发明通过xr眼镜看到的基于时间轴的编辑界面立体示意图。

图2是本发明基于时间轴的编辑界面俯视图示意图。

图3是本发明一根时间轴分支情况的3d结构示意图。

图4是本发明二根时间轴的3d结构示意图。

图5是本发明二根时间轴交叉情况的3d结构示意图。

图6为本发明一根时间轴的日常生活的流程图。

图7是本发明中使用到的vr眼镜的3d结构示意图。

图8是本发明中使用到的ar眼镜的3d结构示意图。

具体实施方式

下面结合附图与具体实施方式对本发明作进一步详细描述。

以下实施方式中，自始至终相同或类似的标号表示相同或类似的原件或具有相同或类似功能的原件，以下通过参考附图描述的实施方式是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。

本发明的描述中，需要理解的是，术语：中心、纵向、横向、长度、宽度、厚度、上、下、前、后、左、右、竖直、水平、顶、底、内、外、顺时针、逆时针等指示方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，因此不能理解为对本发明的限制。此外，术语：第一、第二等仅用于描述目的，而不能理解为指示或暗示相对重要性或隐含指明所示技术特征的数量。本发明的描述中，除非另有明确的规定和限定，术语：安装、相连、连接等应做广义理解，本领域的普通技术人员可以根据具体情况理解上述术语在本实用性中的具体含义。

实施例一

根据本发明的一个装置实施例中，如图1和图7、图8所示，一种基于时间轴的3d可视化编辑器（xr眼镜）100，至少包括：xr显示设备1/10，透过沉浸性xr显示设备1可以在（虚拟）空间中显示一条时间轴80，如图1所示，在该时间轴80上标记了4个时间节点70，4个时间节点70代码名称为（4个时间节点70分别是）1987年7月1日、1999年6月12日、2010年3月30日和2018年6月23日（具体时间没有任何具体意义，只是用于说明），而对应的是4个虚拟电子标签90，这4个事件分别标记在4个时间节点70之上，而填入的代码名称：事件a~事件d分别标记在4个虚拟电子标签90之中，

值得一提的是，虚拟电子标签90在时间节点70被创建后，也是可以被创建的，初始空白的虚拟电子标签90如图1中的左下角的图示内容。如果在时间节点70被创建前，虚拟电子标签90被创建的话，它只能悬浮在空间中，不对应时间轴80上的任一时间节点70。对应一个时间节点70上，可以被创建多个虚拟电子标签90。

在这个虚拟电子标签90之中还可以进一步添加（添加后可以修改编辑）该事件的具体内容等信息。如此这样，就可以方便穿戴xr设备1/10的用户在视觉直观上建立起上述时间的有机联系，如在警察破案或者事务梳理等工作上，非常便于用户直观地分析一件一件的孤立事件在时间上的关联性。

这条空间中的时间轴可以横向（延伸铺展）显示（如图1所示），也可以纵向（延伸）显示。时间轴80可以整体性地抬升/下降显示，也可以时间轴80的部分区段整体性地抬升/下降显示。

在所述时间轴80周边，在空间（任意）位置中，叠加显示小工具软件，所述小工具软件包括但不限于时钟、日历、通讯录、行程、地图、计算器、剪切版、天气、cpu/mem仪表盘、系统监控、浏览器、office工具、游戏大厅、虚拟键盘、颜色标记虚拟笔或者地点标记虚拟笔。

如图7所示，vr眼镜主体10包括外界环境摄像头30和手势输入装置20(如：手势摄像头)。该vr眼镜中，处理中心和存储模块可以集成到眼镜主体10中。

如图8所示，ar眼镜主体1包括ar显示眼镜片2，还包括：语音输入装置(如：麦克风5)、摄像头6(可以为rgb摄像头、深度摄像头、红外摄像头等)、手势输入装置(如：手势摄像头4)，可成对对称设置于ar眼镜的两侧、耳机3，其中，麦克风5通过连接件设于人面部附件，为常规的安装方式，摄像头6安装在眼镜片2的中心上端，手势摄像头4安装在ar眼镜主体的侧部。该ar眼镜中，处理中心和存储模块可以集成到眼镜主体1中。

实施例二

根据本发明的上述实施例，如图2所示，透过沉浸性xr显示设备1/2可以在虚拟空间中显示的时间轴80的任一时间节点70上，任意添加多个虚拟电子标签90，在虚拟电子标签90可以添加具体的内容信息，包括文字信息、图片信息、视频信息、音频信息、人物信息、地点信息、时间信息、文件或超链接。进一步，所述文件包括文本格式、电子表格格式、图片格式、视频格式、音频格式、地图格式、邮件格式、cad格式或应用程序格式。

多个所述时间节点70与对应的多个所述虚拟电子标签90近乎垂直于所述时间轴80，根据显示/编辑指令，在所述xr眼镜的视场中的一个平面、曲面或扁平空间中(不)层叠地平铺显示，或者，在所述xr眼镜为中心的水平周边(不)层叠地平铺显示。层叠为前后相叠有遮蔽，不层叠为不相叠无遮蔽。

根据显示/编辑指令，对应的所述时间节点70和所述虚拟电子标签90朝向所述xr眼镜1/10，并作出向性转动（类似向日葵的向阳性转动）。即如图7、图8所示，xr眼镜1/10中含有tof摄像头、鱼眼摄像头、imu传感器、陀螺仪、灯塔定位系统、wifi定位系统、lifi定位系统、uwb定位系统、声音定位系统、激光雷达和/或毫米波雷达等室内/外定位传感器，当用户带着xr眼镜1/10在空间中行走的时候，那些所述时间节点70和所述虚拟电子标签90，可以始终面向xr眼镜1/10的位置，做转向运动。

并且xr眼镜1/10中还设有信息输入装置（包括麦克风、控制手柄、手势识别器、动作捕捉器、数字手套、头瞄装置、眼动跟踪器、鼠标、轨迹球或者键盘）、显示输出装置（3d显示装置，vr显示或者ar显示）。

xr设备上的信息输入方式也是多种多样，包括头瞄（头盔瞄准器）、眼动跟踪、声音、智慧手套、控制手柄、徒手手势，都极大地丰富了xr设备的实现可能，以及应用范围。

实施例三

根据本发明上述二个装置/系统实施例，如图3所示，透过xr显示设备1/2可以在虚拟空间中显示的一条所述时间轴，根据显示/编辑指令，在所述时间节点70（2017年6月5日）处可分离显示成至少二条所述时间轴。

如图4、图5所示，透过沉浸性xr显示设备1/2可以在虚拟空间中显示的二条时间轴80。二条所述时间轴80根据显示/编辑指令，显示为同面平行、同曲面平行、时而相近时而相远但不相交和/或至少一次相交。交接的时间节点为2009年5月15日。

在一些特殊的事务梳理上，会遇到些特殊的情形发生，比如图3所示，以一个家庭为时间轴80，在该时间轴的某个时间节点70（2017年6月5日）上有孩子出生，然后父亲外出打工为时间轴81，母亲和孩子在家留守为时间轴82。

再比如图5所示，在某个时间节点70（2009年5月15日）上行为人a为时间轴85与行为人b为时间轴86相遇，然后各自自己生活轨迹。

实施例四

根据上述实施例的编辑器功能，如图6所示，可以私人订制地生成一条个人化的时间轴提醒器，用户透过xr显示设备1/10可以在虚拟空间中显示的一条私人时间轴，时间轴上有多个当日的时间节点和虚拟电子标签。根据xr显示设备1/10中的时钟，每到一个提醒时间，都会给到用户具体的内容提醒。

除了用于提醒，还可以用于基于时间的记录，并设置相关的记忆标签，在某个时间节点上在国际妇婴医院里有孩子出生，去年全家去伦敦旅游，这些时间节点上创建虚拟电子标签，在虚拟电子标签添加入文字或语音感受、照片或视频。这相当于给行为人、企业或家庭，勾勒个人的生活轨迹，以及家庭、企业的发生和发展轨迹。

需要注意的是，本专利说明书中各流程图中的步骤标识符，没有顺序限制，可以合理条件下调整先后顺序。

应当说明的是，上述实施例均可根据需要自由组合。以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。