露齿笑脸自动换牙方法、系统、电子设备及存储介质与流程

    专利2026-08-17  11


    本申请涉及人工智能,尤其涉及一种露齿笑脸自动换牙方法、系统、电子设备及存储介质。


    背景技术:

    1、人脸图像编辑技术是指通过算法自动编辑人脸图像或视频的部分区域,使其呈现出似乎真实存在的效果。

    2、传统的人脸图像编辑方法有很多,例如:依赖于低级线索来替换用于表情的补丁,这些图像替换算法擅长填充包含相似纹理的背景,但在特定图像对象(如面部)方面并不擅长;其次,表情修正网络的隐藏特征图容易受到面部角度的影响,使得替换表示无法具备自然的连贯性;基于cnn的图像修正方法采用对抗训练策略,虽然显著提升了图像修正性能,但是由于人脸具有独特的几何分布,无法修改牙齿附近区域的面部属性,导致存在进行人脸图像编辑时牙齿区域失真严重,嘴部区域变化与其他区域不协调的问题。


    技术实现思路

    1、本申请提供一种露齿笑脸自动换牙方法、系统、电子设备及存储介质,其主要目的在于解决进行人脸图像编辑时牙齿区域失真严重,嘴部区域变化与其他区域不协调的问题。

    2、为实现上述目的,本申请提供的一种露齿笑脸自动换牙方法,包括:生成露齿笑脸图像的掩码笑脸图像;将掩码笑脸图像输入至预先训练的特征提取模型,得到掩码笑脸图像的人脸变化特征;提取露齿笑脸图像的笑脸关键点;对人脸变化特征和笑脸关键点进行光流表情驱动,得到露齿笑脸图像的换牙图像。

    3、为实现上述目的,本申请提供的一种露齿笑脸自动换牙系统,该系统包括:掩码笑脸图像生成模块,用于生成露齿笑脸图像的掩码笑脸图像;人脸变化特征提取模块,用于将掩码笑脸图像输入至预先训练的特征提取模型,得到掩码笑脸图像的人脸变化特征;笑脸关键点提取模块,用于提取露齿笑脸图像的笑脸关键点;光流表情驱动模块,用于对人脸变化特征和笑脸关键点进行光流表情驱动,得到露齿笑脸图像的换牙图像。

    4、本申请还提供一种电子设备,该电子设备包括:

    5、至少一个处理器;以及,

    6、与至少一个处理器通信连接的存储器;其中,

    7、存储器存储有可被至少一个处理器执行的计算机程序,计算机程序被至少一个处理器执行,以使至少一个处理器能够执行如上述的露齿笑脸自动换牙方法。

    8、本申请还提供一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时以实现上述的露齿笑脸自动换牙方法。

    9、本发明通过人脸关键点检测技术对脸部的下半区域添加掩码,并利用注意力机制生成掩码笑脸图像的人脸变化特征,最后通过深度光流估计,对人脸变化特征和笑脸关键点进行光流表情驱动,得到露齿笑脸图像的换牙图像,使得换牙前后人脸特征变化减少,因此基于本申请提出的露齿笑脸自动换牙方法、系统、电子设备及存储介质,有效地解决了人脸图像编辑中牙齿区域的失真问题以及在视频中人脸变化的不自然的问题。



    技术特征:

    1.一种露齿笑脸自动换牙方法,其特征在于,所述方法包括:

    2.如权利要求1所述的露齿笑脸自动换牙方法,其特征在于,所述生成露齿笑脸图像的掩码笑脸图像,包括:

    3.如权利要求1所述的露齿笑脸自动换牙方法,其特征在于,在所述将所述掩码笑脸图像输入至预先训练的特征提取模型,得到所述掩码笑脸图像的人脸变化特征之前,还包括:

    4.如权利要求3所述的露齿笑脸自动换牙方法,其特征在于,所述根据所述正样本概率对所述编码器进行参数更新,得到预先训练的特征提取模型,包括:

    5.如权利要求1所述的露齿笑脸自动换牙方法,其特征在于,所述将所述掩码笑脸图像输入至预先训练的特征提取模型,得到所述掩码笑脸图像的人脸变化特征,包括:

    6.如权利要求1所述的露齿笑脸自动换牙方法,其特征在于,所述提取所述露齿笑脸图像的笑脸关键点,包括:

    7.如权利要求1至6中任一项所述的露齿笑脸自动换牙方法,其特征在于,所述对所述人脸变化特征和所述笑脸关键点进行光流表情驱动,得到所述露齿笑脸图像的换牙图像,包括:

    8.一种露齿笑脸自动换牙系统,其特征在于,所述系统包括:

    9.一种电子设备,其特征在于,所述电子设备包括:

    10.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任意一项所述的露齿笑脸自动换牙方法。


    技术总结
    本申请涉及人工智能技术领域,揭露了一种露齿笑脸自动换牙方法、系统、电子设备以及存储介质,包括:生成露齿笑脸图像的掩码笑脸图像;将掩码笑脸图像输入至预先训练的特征提取模型,得到掩码笑脸图像的人脸变化特征;提取露齿笑脸图像的笑脸关键点;对人脸变化特征和笑脸关键点进行光流表情驱动,得到露齿笑脸图像的换牙图像。通过引入注意力机制与深度光流估计方法,有效地解决了人脸图像编辑中牙齿区域的失真问题以及在视频中人脸变化的不自然的问题。

    技术研发人员:姜蓝督,张滇
    受保护的技术使用者:广州市元环科技有限公司
    技术研发日:
    技术公布日:2024/4/29
    转载请注明原文地址:https://wp.8miu.com/read-100690.html

    最新回复(0)