设备控制方法、装置、介质及智能穿戴设备与流程

    专利2025-07-15  20


    本申请涉及图像识别及语音识别,尤其涉及一种设备控制方法、装置、介质及智能穿戴设备。


    背景技术:

    1、现阶段市场上的电子设备,包括手机,电脑,平板以及智能电视的控制方法一般分为手指触控,遥控器,鼠标,键盘,游戏手柄等等。一些智能手机和电脑操作系统都集成了语音助手,电子设备可以识别并响应用户的语音指令。涉及的技术主要有语音识别,自然语言处理技术等。每一款设备和操作系统都需要搭载语音识别技术,部分设备的硬件配置不同,需要为每个设备、系统训练专属的自然语言处理技术或指令识别算法,才能满足语音识别技术运行条件。因此,如何将语音识别技术与图像识别技术相结合进而提高控制电子设备的通用性成为了亟待解决的技术问题。


    技术实现思路

    1、本申请提供了一种设备控制方法、装置、介质及智能穿戴设备,解决了如何将语音识别技术与图像识别技术相结合进而提高控制电子设备的通用性成为了亟待解决的技术问题。

    2、第一方面,本申请提供了一种设备控制方法,所述方法包括:

    3、识别用户指令,从受控设备的预设ui控件库中确定目标ui控件,并确定所述目标ui控件在显示模块中的目标位置坐标,其中,所述显示模块属于所述受控设备;

    4、将所述用户指令转换为控制指令,并将所述控制指令下发至所述受控设备,以使所述受控设备在所述目标位置坐标对应的位置执行所述控制指令。

    5、第二方面,本申请还提供了一种设备控制装置,所述装置包括:

    6、目标ui控件确定模块,用于识别用户指令,从受控设备的预设ui控件库中确定目标ui控件,并确定所述目标ui控件在显示模块中的目标位置坐标,其中,所述显示模块属于所述受控设备;

    7、控制指令转换模块,用于将所述用户指令转换为控制指令,并将所述控制指令下发至所述受控设备,以使所述受控设备在所述目标位置坐标对应的位置执行所述控制指令。

    8、第三方面,本申请还提供了一种智能穿戴设备,所述智能穿戴设备包括存储器和处理器;所述存储器用于存储计算机程序;所述处理器,用于执行所述计算机程序并在执行所述计算机程序时实现如上述的设备控制方法。

    9、第四方面,本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时使所述处理器实现如上述的设备控制方法。

    10、本申请公开了一种设备控制方法、装置、介质及智能穿戴设备,所述设备控制方法包括识别用户指令,从受控设备的预设ui控件库中确定目标ui控件,并确定所述目标ui控件在显示模块中的目标位置坐标,其中,所述显示模块属于所述受控设备;将所述用户指令转换为控制指令,并将所述控制指令下发至所述受控设备,以使所述受控设备在所述目标位置坐标对应的位置执行所述控制指令。通过上述方式,本申请通过对用户的用户指令进行解析,从预设ui控件库中确定目标ui控件以及获取目标ui控件的位置坐标,在明确了目标位置坐标后,将用户指令转换为控制指令,并由受控设备在目标位置坐标执行该控制指令,实现了将语音识别技术与图像识别技术相结合进而提高控制电子设备的通用性。



    技术特征:

    1.一种设备控制方法,其特征在于,包括:

    2.根据权利要求1所述的设备控制方法,其特征在于,所述识别用户指令,从受控设备的预设ui控件库中确定目标ui控件,并确定所述目标ui控件在显示模块中的目标位置坐标之前,包括:

    3.根据权利要求2所述的设备控制方法,其特征在于,所述基于所述显示模块的预设显示模块参数、预设文字识别模型和/或预设图像识别模型,确定各待选ui控件及各所述待选ui控件在所述显示模块中对应的待选位置坐标,包括:

    4.根据权利要求3所述的设备控制方法,其特征在于,所述基于预设坐标算法与所述预设显示模块参数,确定所述显示模块的第一三维坐标之前,包括:

    5.根据权利要求3所述的设备控制方法,其特征在于,所述基于预设坐标算法与预设显示模块参数,确定所述受控设备中显示模块的第一三维坐标,包括:

    6.根据权利要求3所述的设备控制方法,其特征在于,所述根据所述第一三维坐标、预设文字识别模型和/或预设图像识别模型,确定各待选ui控件的第二三维坐标,包括:

    7.根据权利要求1所述的设备控制方法,其特征在于,所述用户指令包括用户语音指令;所述设备控制方法还包括:

    8.根据权利要求1至7中任一项所述的设备控制方法,其特征在于,所述识别用户指令,从受控设备的预设ui控件库中确定目标ui控件,并确定所述目标ui控件在显示模块中的目标位置坐标,包括:

    9.一种设备控制装置,其特征在于,包括:

    10.一种智能穿戴设备,其特征在于,所述智能穿戴设备包括存储器和处理器;

    11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时使所述处理器实现如权利要求1至8中任一项所述的设备控制方法。


    技术总结
    本申请涉及图像识别及语音识别技术领域,公开了一种设备控制方法、装置、介质及智能穿戴设备,所述方法包括识别用户指令,从预设U I控件库中确定目标U I控件,并确定目标U I控件在显示模块中的目标位置坐标;将用户指令转换为控制指令,并将控制指令下发至受控设备,以使受控设备在目标位置坐标对应的位置执行控制指令。通过上述方式,本申请通过对用户的用户指令进行解析,从预设U I控件库中确定目标U I控件以及获取目标U I控件的位置坐标,在明确了目标位置坐标后,将用户指令转换为控制指令,并由受控设备在目标位置坐标执行该控制指令,实现了将语音识别技术与图像识别技术相结合进而提高控制电子设备的通用性。

    技术研发人员:曾凡进,谢迅
    受保护的技术使用者:珠海莫界科技有限公司
    技术研发日:
    技术公布日:2024/4/29
    转载请注明原文地址:https://wp.8miu.com/read-89478.html

    最新回复(0)