金融界2024年3月16日消息,据国家知识产权局公告,贝壳找房(北京)科技有限公司申请一项名为“数字人视频生成方法、电子设备及存储介质“,公开号CN117714625A,申请日期为2023年12月。
专利摘要显示,本公开提供了一种数字人视频生成方法、电子设备及可读存储介质。本公开的数字人视频生成方法包括:获取目标图像数据和目标音频数据;根据目标图像数据和注意力网络对预训练参数中的关键参数进行调整,获取调整参数;根据调整参数执行人像重建,获取目标唇读脸模;以及根据目标唇读脸模和目标音频数据执行音视频合成,获取数字人视频;其中,注意力网络用于提高图像数据的人脸关键点权重。