(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210279107.9 (22)申请日 2022.03.21 (71)申请人 北京字跳网络技 术有限公司 地址 100190 北京市海淀区紫金 数码园4号 楼2层0207 (72)发明人 南天骄　程晗　 (74)专利代理 机构 北京中知法苑知识产权代理 有限公司 1 1226 专利代理师 李明 (51)Int.Cl. G06F 9/451(2018.01) G06T 19/00(2011.01) G06F 3/01(2006.01) (54)发明名称 增强现实画面的展示方法、 装置、 计算机设 备及存储介质 (57)摘要 本公开提供了一种增强现实画面的展示方 法、 装置、 计算机设备及存储介质， 其中， 该方法 包括： 获取多个AR拍摄设备分别在不同的拍摄位 姿下拍摄目标现实场景得到的现实场景画面， 以 及虚拟角色控制对象对虚拟角色的控制信息； 基 于所述控制信息、 各个所述现实场景画面、 以及 各所述AR拍摄设备分别对应的位姿信息， 生成与 各个现实场景画面分别对应的增强现实AR画面 数据； 其中， 所述AR画面数据包含基于所述控制 信息生成的虚拟角色的行为数据； 响应于目标展 示需求， 从所述各个现实场景画面分别对应的所 述AR画面数据中确定目标AR画面数据， 并基于 所 述目标AR画面数据进行AR画面展示。 权利要求书2页 说明书14页 附图4页 CN 114625468 A 2022.06.14 CN 114625468 A 1.一种增强现实画面的展示方法， 其特 征在于， 包括： 获取多个AR拍摄设备分别在不同的拍摄位姿下拍摄目标现实场景得到的现实场景画 面， 以及虚拟角色控制对象对虚拟角色的控制信息； 基于所述控制信息、 各个所述现实场景画面、 以及各所述AR拍摄设备分别对应的位姿 信息， 生成与各个现实场景画 面分别对应的增强现实AR画 面数据； 其中， 所述AR画 面数据包 含基于所述控制信息生成的虚拟角色的行为数据； 响应于目标展示需求， 从所述各个现实场景画面分别对应的所述AR画面数据中确定目 标AR画面数据， 并基于所述目标AR画面数据进行AR画面展示。 2.根据权利要求1所述的方法， 其特征在于， 在获取多个AR拍摄设备分别在不同的拍摄 视角下拍摄目标现实场景 得到的现实场景画面之前， 所述方法还 包括： 响应针对各所述AR拍摄设备的坐标系对齐指令， 对各所述AR拍摄设备进行坐标系对 齐， 以使各所述AR拍摄设备拍摄的现实场景画 面中各场景元素的坐标数据均位于预设的标 定坐标系； 所述基于所述控制信息、 各个所述现实场景画面、 以及各所述AR拍摄设备分别对应的 位姿信息， 生成与各个现实场景画面分别对应的增强现实AR画面数据， 包括： 针对进行坐标系对齐后的所述AR拍摄设备， 基于所述AR拍摄设备对应的位姿信息和所 述控制信息， 确定虚拟角色在所述AR拍摄设备拍摄的现实场景画面中的第一AR画面数据； 基于所述第一AR画面数据和所述A R拍摄设备拍摄的现实场景画面， 生成所述AR拍摄设 备对应的增强现实AR画面数据。 3.根据权利要求1所述的方法， 其特征在于， 所述基于所述控制信息、 各个所述现实场 景画面、 以及各所述AR拍摄设备分别对应的位姿信息， 生成与各个现实场景画面分别对应 的增强现实AR画面数据， 包括： 针对每个所述AR拍摄设备， 基于所述AR拍摄设备对应的位姿信息和所述控制信息， 确 定虚拟角色在所述AR拍摄设备拍摄的现实场景画面中的第二AR画面数据； 以及， 确定所述 AR拍摄设备的相机坐标系与预设的标定坐标系之间的坐标系转换关系； 基于所述第 二AR画面数据、 所述坐标系转换关系以及所述AR拍摄设备拍摄的现实场景 画面， 生成所述AR拍摄设备对应的增强现实AR画面数据。 4.根据权利要求1所述的方法， 其特征在于， 所述目标展示需求包括重点展示虚拟角色 的需求； 所述从所述各个现实场景画面分别对应的所述AR画面数据中确定目标AR画面数 据， 包括： 确定虚拟角色分别在所述各个现实场景画面对应的AR画面数据中的位姿数据； 所述位 姿数据用于指示所述虚拟角色在AR画面中的展示 位姿； 从各个所述位姿数据中， 选取满足预设条件的目标位姿数据， 将所述目标位姿数据对 应的AR画面数据作为所述目标AR画面数据。 5.根据权利要求4所述的方法， 其特征在于， 所述从各个所述位姿数据中， 选取满足预 设条件的目标位姿数据， 包括： 从各个所述位姿数据中， 选取对应的位置位于AR画面的预设位置区域内、 且朝向与面 向镜头的方向之间的夹角小于设定角度阈值的目标位姿数据。 6.根据权利要求4所述的方法， 其特征在于， 所述从各个所述位姿数据中， 选取满足预权　利　要　求　书 1/2 页 2 CN 114625468 A 2设条件的目标位姿数据， 包括： 从各个所述位姿数据中， 选取位姿差异性满足预设条件的多个目标位姿数据； 其中， 所 述多个目标位姿数据用于从多个视角展示所述虚拟角色。 7.根据权利要求1所述的方法， 其特征在于， 所述目标展示需求包括当前对拍摄视角的 选择需求； 所述响应于目标展示需求， 从所述各个现实场景画面分别对应的所述AR画面数 据中确定目标AR画面数据， 包括： 响应于用户从多个拍摄视角中选择的目标拍摄视角， 从所述各个现实场景画面分别对 应的所述AR画面数据中， 确定与所述目标拍摄视角分别对应的目标AR画面数据。 8.根据权利要求1所述的方法， 其特征在于， 所述从所述各个现实场景画面分别对应的 所述AR画面数据中确 定目标AR画面数据， 并基于所述目标AR画面数据进行AR画面展示， 包 括： 在确定的目标AR画面数据包括多个现实场景画面分别对应的AR画面数据的情况下， 将 多个所述目标AR画面数据进行合成， 得到合成AR画面数据； 所述合成AR画面数据用于从多 个视角展示所述虚拟角色； 展示所述 合成AR画面数据。 9.根据权利要求1所述的方法， 其特征在于， 针对任一所述AR拍摄设备， 在生成与该AR 拍摄设备拍摄的现实场景画面对应的增强现实AR画面数据之后， 所述方法还 包括： 将与该AR拍摄设备拍摄的现实场景画面对应的增 强现实AR画面数据发送至该AR拍摄 设备， 以指示该AR拍摄设备展示接收到的增强现实AR画面数据。 10.根据权利要求1所述的方法， 其特征在于， 所述基于所述目标AR画面数据进行AR画 面展示， 包括： 将所述目标AR画面数据发送至直播服务器， 以基于所述直播服务器将所述目标AR画面 数据推流至直 播客户端， 并在所述 直播客户端进行AR画面展示。 11.一种增强现实画面的展示装置， 其特 征在于， 包括： 获取模块， 用于获取多个AR拍摄设备分别在不同的拍摄位姿下拍摄目标现实场景得到 的现实场景画面， 以及虚拟角色控制对象对虚拟角色的控制信息； 生成模块， 用于基于所述控制信息、 各个所述现实场景画面、 以及各所述AR拍摄设备分 别对应的位姿信息， 生成与各个现实场景画 面分别对应的增强现实AR画 面数据； 其中， 所述 AR画面数据包 含基于所述控制信息生成的虚拟角色的行为数据； 展示模块， 用于响应于目标展示需求， 从所述各个现实场景画面分别对应的所述AR画 面数据中确定目标AR画面数据， 并基于所述目标AR画面数据进行AR画面展示。 12.一种计算机设备， 其特征在于， 包括： 处理器、 存储器和总线， 所述存储器存储有所 述处理器可执行 的机器可读指令， 当计算机设备运行时， 所述处理器与所述存储器之间通 过总线通信， 所述机器可读指令被所述处理器执行时执行如权利要求1至10任一所述的增 强现实画面的展示方法的步骤。 13.一种计算机可读存储介质， 其特征在于， 该计算机可读存储介质上存储有计算机程 序， 该计算机程序被处理器运行时执行如权利要求1至10任一所述的增强现实画面的展示 方法的步骤。权　利　要　求　书 2/2 页 3 CN 114625468 A 3