以视频为中心的融媒体内容推荐方法及装置与流程

文档序号:25586919发布日期:2021-06-22 17:02阅读:来源:国知局

技术特征:

1.一种以视频为中心的融媒体内容推荐方法,其特征在于,包括:

整合多格式多媒体的内容数据库,聚合内容元数据信息构建内容元数据库;

将所述内容元数据库中的每个所述内容元数据信息进行标签,基于所述内容元数据信息及所述标签形成融合媒体知识图谱;

实时捕获视频播放时当前关键帧中的实体元素和风格要素,从所述融合媒体知识图谱搜索出用户关注的目标元素信息;

根据所述目标元素信息从商品库中筛选出候选商品,并向用户推荐。

2.根据权利要求1所述的方法,其特征在于,整合多格式多媒体的内容数据库,聚合内容元数据信息构建内容元数据库的方法包括:

将视频格式的多媒体内容数据库、图片格式的多媒体内容数据库以及文章格式的多媒体内容数据库中的内容元数据信息进行聚合,构建内容元数据库;

所述内容元数据信息包括视频数据、图片数据以及文章数据的内容标题及内容描述。

3.根据权利要求2所述的方法,其特征在于,将所述内容元数据库中的每个所述内容元数据信息进行标签的方法包括:

针对所述内容元数据库中的各内容元数据信息进行分类、分词和词性标注,保留其中的关键信息词;

将全部所述内容元数据信息对应的关键信息词随机分配成多组数据;

取其中一组数据采用预设的标签体系人工标签后作为初始训练数据集,并设置初始训练模型;

针对所述初始训练数据集中的每个标签进行训练得到标签分类模型;

利用所述标签分类模型训练其他组数据,直至标签准确率达到准确率阈值输出所述标签分类模型,否则针对所述标签分类模型持续优化;

采用输出的所述标签分类模型对所述内容元数据库中的各内容元数据信息进行标签。

4.根据权利要求3所述的方法,其特征在于,针对所述标签分类模型持续优化的方法包括:

通过扩充所述初始训练数据集,和/或,调整所述初始训练模型对所述标签分类模型进行优化。

5.根据权利要求1所述的方法,其特征在于,在实时捕获视频播放时当前关键帧中的实体元素和风格要素之前还包括以下中的一种或多种:

分析多媒体内容数据库中的视频数据,识别出关键帧图像的实体元素信息和风格要素信息扩充入融合媒体知识图谱;

分析多媒体内容数据库中的图片数据,识别出图片的实体元素信息和风格要素信息扩充入融合媒体知识图谱;

分析多媒体内容数据库中的文章数据,识别出其中的关键文字实体信息扩充入融合媒体知识图谱。

6.根据权利要求5所述的方法,其特征在于,所述关键帧图像和所述图片中实体元素信息和风格要素信息的识别方法包括:

针对所述关键帧图像和所述图片中的人脸和人体姿态进行检测,识别出人脸和躯干四肢;

基于人脸识别结果搜索演员数据库得到演员的身份信息,以及基于躯干四肢识别结果识别演员的服饰风格得到演员的服装信息;

针对所述关键帧图像和所述图片中除人脸和人体姿态之外的物体进行识别,得到物体的商品信息;

针对所述关键帧图像和所述图片中的文字进行识别,得到文字信息;

将所述身份信息、所述服装信息、所述商品信息、所述文字信息中的一种或多种扩充入融合媒体知识图谱。

7.根据权利要求6所述的方法,其特征在于,所述文章数据中关键文字实体信息的识别方法包括:

将所述文章数据按照句子的分隔符分句,并对每个分句进行唯一id的分句标识;

将每个句子的对象数据及其前后两个分句的分句标识进行关联,扩充入融合媒体知识图谱;

将每个句子进行分词,去除噪声词后针对每个分词进行唯一id的分词标识,扩充入融合媒体知识图谱;

根据所述文章数据的内容属性进行唯一id的文章标识,将所述文章数据的对象数据、所述文章数据与分句的关联关系以及所述分句与分词的关联关系,扩充入融合媒体知识图谱。

8.根据权利要求1所述的方法,其特征在于,从所述融合媒体知识图谱搜索出用户关注的目标元素信息的方法包括:

将所述实体元素和所述风格要素转换为特征向量,从所述融合媒体知识图谱检索出相关的元素信息;

基于预设关键帧间隔数内元素信息出现的次数,动态调整元素信息的强度值;

当所述元素信息的强度值达到强度阈值时,将对应的所述元素信息作为目标元素信息输出。

9.根据权利要求1所述的方法,其特征在于,根据所述目标元素信息从商品库中筛选出候选商品,并向用户推荐的方法包括:

若所述目标元素信息包括演员信息,从商品库搜索与所述演员信息相关的商品作为候选商品放入候选商品列表;

若所述目标元素信息包括服装信息,从商品库搜索与所述服装信息相关的商品作为候选商品放入候选商品列表;

若所述目标元素信息包括物体的商品信息,从商品库搜索与所述商品信息相关的商品作为候选商品放入候选商品列表;

针对所述候选商品列表中的候选商品进行相关性评分,筛选出评分最高的候选商品推荐给用户。

10.根据权利要求8所述的方法,其特征在于,在向用户推荐候选商品之后还包括:

根据用户针对推荐的候选商品的交互数据,动态调整元素信息的强度值。

11.一种以视频为中心的融媒体内容推荐装置,其特征在于,包括:

聚合单元,用于整合多格式多媒体的内容数据库,聚合内容元数据信息构建内容元数据库;

图谱单元,用于将所述内容元数据库中的每个所述内容元数据信息进行标签,基于所述内容元数据信息及所述标签形成融合媒体知识图谱;

检索单元,用于实时捕获视频播放时当前关键帧中的实体元素和风格要素,从所述融合媒体知识图谱搜索出用户关注的目标元素信息;

推荐单元,用于根据所述目标元素信息从商品库中筛选出目标商品信息,并向用户推荐。


技术总结
本发明公开一种以视频为中心的融媒体内容推荐方法及装置,涉及互联网技术领域,能够以视频媒体中心向用户高效率地传播各种形式的综合性内容,并通过人工智能的手段分析和挖掘出视频内容中包含的实体元素和风格要素,通过动态关联可销售的商品完成对用户精准的商品推荐。该方法包括:整合多格式多媒体的内容数据库,聚合内容元数据信息构建内容元数据库;将内容元数据库中的每个内容元数据信息进行标签,基于内容元数据信息及标签形成融合媒体知识图谱;实时捕获视频播放时当前关键帧中的实体元素和风格要素,从融合媒体知识图谱搜索出用户关注的目标元素信息;根据目标元素信息从商品库中筛选出候选商品,并向用户推荐。

技术研发人员:郑叔亮
受保护的技术使用者:北京四达时代软件技术股份有限公司
技术研发日:2021.02.25
技术公布日:2021.06.22
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1