视频流中的对象建模和替换的制作方法

本公开的实施例一般涉及视频流的自动图像分割。更具体地，但不作为限制，本公开提出了用于分割视频流以生成对象的模型并替换视频流内的对象的描绘的系统和方法。

背景技术：

1、电信应用和装置可以使用各种媒体(诸如文本、图像、声音记录和/或视频记录)来提供多个用户之间的通信。例如，视频会议允许两个或更多个人使用软件应用、电信装置和电信网络的组合彼此通信。电信装置还可以记录视频流以作为在电信网络之间的消息进行发送。

2、视频游戏通常使用户能够控制在显示装置上描绘的交互元素以与编程的交会内的预定对象交互。玩视频游戏的用户经常在游戏会话开始之前确定的游戏环境中控制预定的角色或者通常在包括一组预编程的事件或挑战的预定的游戏比赛中进行。

技术实现思路

技术特征：

1.一种方法，包括：

2.根据权利要求1所述的方法，其中，识别所述关注对象包括：

3.根据权利要求2所述的方法，其中，所述身体部分包括所述用户的手指。

4.根据权利要求1所述的方法，其中，修改所述视频流包括用与所识别的对象的所述方向对齐的所述图形元素替换所识别的对象的一部分。

5.根据权利要求1所述的方法，其中，修改所述视频流包括将所述图形元素添加到所识别的对象的一部分。

6.根据权利要求1所述的方法，其中，所述图形元素包括视频游戏中的武器，并且其中，所述武器指向与所识别的对象相关联的方向。

7.根据权利要求1所述的方法，进一步包括：

8.根据权利要求1所述的方法，进一步包括基于所识别的对象的所述方向，动态修改用于将像素识别为与所识别的对象相对应的直方图阈值。

9.一种系统，包括：

10.根据权利要求9所述的系统，其中，识别所述关注对象包括：

11.根据权利要求10所述的系统，其中，所述身体部分包括所述用户的手指。

12.根据权利要求9所述的系统，其中，修改所述视频流包括用与所识别的对象的所述方向对齐的所述图形元素替换所识别的对象的一部分。

13.根据权利要求9所述的系统，其中，修改所述视频流包括将所述图形元素添加到所识别的对象的一部分。

14.根据权利要求9所述的系统，其中，所述图形元素包括视频游戏中的武器，并且其中，所述武器指向与所识别的对象相关联的方向。

15.根据权利要求9所述的系统，其中，所述操作进一步包括：

16.根据权利要求9所述的系统，其中，所述操作进一步包括基于所识别的对象的所述方向，动态修改用于将像素识别为与所识别的对象相对应的直方图阈值。

17.一种非暂态处理器可读存储装置，其存储处理器可执行指令，当所述处理器可执行指令由机器的处理器执行时使所述机器执行操作，所述操作包括：

18.根据权利要求17所述的非暂态处理器可读存储装置，其中，识别所述关注对象包括：

19.一种方法，包括：

20.根据权利要求19所述的方法，其中，通过以下识别所述关注对象：

21.根据权利要求19所述的方法，其中，处理所述方向包括组合所述一组先前帧的所述方向以识别所述关注对象的聚合方向。

22.根据权利要求19所述的方法，进一步包括用与所述关注对象的所述方向对齐的所述图形元素替换所述关注对象的一部分。

23.根据权利要求19所述的方法，进一步包括将所述图形元素添加到所述关注对象的一部分。

24.根据权利要求19所述的方法，其中，所述图形元素包括视频游戏中的武器，并且其中，所述武器指向与所述关注对象相关联的方向。

25.根据权利要求19所述的方法，进一步包括检测所述关注对象在所述视频流的多个帧上的所述移动。

26.根据权利要求19所述的方法，进一步包括基于所述关注对象的所述方向，动态修改用于将像素识别为与所述关注对象相对应的直方图阈值。

27.一种系统，包括：

28.根据权利要求27所述的系统，其中，通过以下识别所述关注对象：

29.根据权利要求27所述的系统，其中，处理所述方向包括组合所述一组先前帧的所述方向以识别所述关注对象的聚合方向。

30.根据权利要求27所述的系统，其中，所述操作进一步包括用与所述关注对象的所述方向对齐的所述图形元素替换所述关注对象的一部分。

31.根据权利要求27所述的系统，其中所述操作进一步包括将所述图形元素添加到所述关注对象的一部分。

32.根据权利要求27所述的系统，其中，所述图形元素包括视频游戏中的武器，并且其中，所述武器指向与所述关注对象相关联的方向。

33.根据权利要求27所述的系统，其中，所述操作进一步包括检测所述关注对象在所述视频流的多个帧上的所述移动。

34.根据权利要求27所述的系统，其中，所述操作进一步包括基于所述关注对象的所述方向，动态修改用于将像素识别为与所述关注对象相对应的直方图阈值。

35.一种非暂态处理器可读存储装置，其存储处理器可执行指令，当所述处理器可执行指令由机器的处理器执行时使所述机器执行操作，所述操作包括：

36.根据权利要求35所述的非暂态处理器可读存储装置，其中，通过以下识别所述关注对象：

37.根据权利要求35所述的非暂态处理器可读存储装置，所述操作包括用与所述关注对象的所述方向对齐的所述图形元素替换所述关注对象的一部分。

38.根据权利要求35所述的非暂态处理器可读存储装置，其中，所述图形元素包括视频游戏中的武器，并且其中，所述武器指向与所述关注对象相关联的方向。

技术总结
提出了用于通过接收描绘关注对象的一个或多个图像并确定与关注对象对应的一个或多个图像内的像素来采用客户端装置分割视频流的图像的系统、装置和方法。系统、装置和方法识别关注对象的部分的位置并确定关注对象的部分的方向。基于关注对象的部分的方向，动态地修改直方图阈值以识别与关注对象的部分对应的像素。采用与关注对象的部分的方向对准的图形界面元素替换关注对象的部分。

技术研发人员：V·沙布罗夫,S·科库尔,Y·莫纳斯提尔申,O·皮施申科
受保护的技术使用者：斯纳普公司
技术研发日：
技术公布日：2024/1/12