基于智能语音交互的智慧屏操作方法及其系统与流程

    专利2022-07-07  85


    本发明属于智慧屏技术领域,具体涉及基于智能语音交互的智慧屏操作方法及其系统。



    背景技术:

    智慧屏幕是电视机的一种,不过需要注意的是,智慧屏幕又不止是电视,而是可以连接更多生活场景的“智慧入口”,也就是说,智慧屏可以是智慧家居的控制中心,通过电视就可以控制家里的智能家居,虽然现有智慧屏操作方法及其系统正在日渐完善,但仍有部分不足待改进。

    现有技术存在以下问题:现有智慧屏操作方法及其系统的结构简单,无论是手动操作还是语音操作方面,都无法进行更深层次的处理,实用性较差。



    技术实现要素:

    为解决上述背景技术中提出的问题。本发明提供了基于智能语音交互的智慧屏操作方法,具有实用性强,避免儿童过度沉迷电视节目影响学习以及能够实现智慧屏的自动断电,节能环保的特点。

    本发明的另一目的是提供基于智能语音交互的智慧屏操作系统。

    为实现上述目的,本发明提供如下技术方案:基于智能语音交互的智慧屏操作方法,包括以下步骤:

    s1:连接智慧屏电源,启动智慧屏;

    s2:语音操作智慧屏时,语音采集模块实时采集用户的语音信息,并将采集到的语音信息反馈至第一分控制模块,第一分控制模块将语音信息先反馈至无效语音剔除模块,无效语音剔除模块剔除无效的语音信息,剔除后将有用的语音信息反馈回第一分控制模块,第一分控制模块将有用的语音信息再反馈至语音语义识别模块,语音语义识别模块对语音信息进行识别,将识别出的语音信息反馈回第一分控制模块,第一分控制模块将识别出的语音信息反馈至总控制模块,总控制模块将识别出的语音信息反馈至操作执行模块,操作执行模块对操作信息进行执行;

    s3:手动操作智慧屏时,操作面板信息采集模块实时采集用户操作智慧屏面板时的信息,将采集到的信息反馈至第二分控制模块,第二分控制模块将信息反馈至再次确认模块,再次确认模块将再次确认的信息反馈至智慧屏的操作面板上,若操作面板信息采集模块未采集到确认信息,则第二分控制模块不做任何指示,若操作面板信息采集模块采集到确认信息,则第二分控制模块将操作信息反馈至总控制模块中,总控制模块将信息反馈至操作执行模块,操作执行模块对操作信息进行执行;

    s4:智慧屏使用过程中,人脸检测模块对用户的脸部进行识别,并将识别的脸部信息反馈至第三分控制模块,第三分控制模块将识别的脸部信息反馈至脸部信息对比模块,脸部信息对比模块提取脸部信息存储模块中的脸部信息进行对比,并将对比的结果反馈回第三分控制模块,第三分控制模块将对比结果反馈至断电方案分析模块,断电方案分析模块根据脸部对比结果提取断电方案存储模块中对应的断电方案进行对比分析,并将分析结果反馈回第三分控制模块,若无需断电操作,第三分控制模块不做任何指示,若需要断电操作,第三分控制模块根据分析结果发送指令给计时模块,计时模块计时时间到,将信号反馈至第三分控制模块,第三分控制模块将信息反馈至总控制模块中,总控制模块将信息反馈至断电执行模块,断电执行模块对断电信息进行执行;

    s5:智慧屏使用过程中,距离检测模块同时对用户与智慧屏间的距离进行检测,距离检测模块检测到智慧屏十米距离或到设置距离内没有任何人活动迹象时,将信息反馈至第三分控制模块,第三分控制模块发送指令给计时模块,计时模块开始计时,计时模块计时二十分钟或到设置分钟时,将信息反馈至第三分控制模块,第三分控制模块将数据反馈至总控制模块,总控制模块将信息反馈至断电执行模块,断电执行模块对断电信息进行执行;

    s6:若需要修改断电方案,可通过断电方案修改模块进行修改;

    s7:使用完成,关闭智慧屏电源。

    本发明中进一步的,所述步骤s4中,断电方案存储模块中的断电方案分为三种,第一种当脸部识别信息为成人家庭成员,则断电方案为不断电,第二种当脸部识别信息为儿童家庭成员,则断电方案为隔一小时自动断电,第三种当脸部识别信息为成人以及儿童家庭成员,则断电方案为不断电。

    所述的基于智能语音交互的智慧屏操作方法的操作系统,包括语音操作模块、总控制模块、手动操作模块、操作执行模块、断电执行模块和检测模块,其特征在于:所述总控制模块的一侧从上到下依次连接有手动操作模块和语音操作模块,所述总控制模块的另一侧从上到下依次连接有操作执行模块、断电执行模块和检测模块。

    本发明中进一步的,所述语音操作模块包括无效语音剔除模块、语音采集模块、第一分控制模块和语音语义识别模块,所述第一分控制模块的上方连接有语音采集模块,所述第一分控制模块的一侧连接有无效语音剔除模块,所述第一分控制模块的另一侧连接有语音语义识别模块,所述第一分控制模块与总控制模块连接。

    本发明中进一步的,所述手动操作模块包括再次确认模块、操作面板信息采集模块和第二分控制模块,所述第二分控制模块的上方连接有操作面板信息采集模块,所述第二分控制模块的一侧连接有再次确认模块,所述再次确认模块与操作面板信息采集模块连接,所述第二分控制模块与总控制模块连接。

    本发明中进一步的,所述检测模块包括计时模块、第三分控制模块、人脸检测模块、脸部信息对比模块、断电方案分析模块、断电方案存储模块和脸部信息存储模块,所述第三分控制模块的上方连接有人脸检测模块,所述第三分控制模块的一侧连接有计时模块,所述第三分控制模块的另一侧从上到下依次连接有脸部信息对比模块和断电方案分析模块,所述脸部信息对比模块远离第三分控制模块的一侧连接有脸部信息存储模块,所述断电方案分析模块的下方连接有断电方案存储模块,所述第三分控制模块与总控制模块连接。

    本发明中进一步的,所述第三分控制模块的上方且远离人脸检测模块的一侧连接有距离检测模块。

    本发明中进一步的,所述断电方案存储模块远离第三分控制模块的一侧连接有断电方案修改模块。

    与现有技术相比,本发明的有益效果是:

    1、本发明设置语音操作模块和手动操作模块,使智慧屏同时具有手动控制以及语音交互控制的功能,而且语音操作模块设置无效语音剔除模块,能够对采集到的语音进行预处理,剔除无效的语音信息,降低第一分控制模块的处理强度,手动操作模块设置再次确认模块,能够有效避免用户手误操作的问题发生,结构间的相互配合,能够对手动操作以及语音操作进行更深层次的处理,实用性强。

    2、本发明设置人脸检测模块、第三分控制模块、脸部信息对比模块、脸部信息存储模块、断电方案分析模块、断电方案存储模块、计时模块、总控制模块和断电执行模块,结构间的相互配合,能够有效控制儿童看电视的时间,避免儿童过度沉迷电视节目影响学习。

    3、本发明设置断电方案修改模块,能够根据实际情况对断电方案存储模块内的断电方案进行修改,具有人性化设计的功能。

    4、本发明设置距离检测模块、第三分控制模块、计时模块、总控制模块和断电执行模块,结构间的相互配合,能够根据用户离开的时间判断是否切断智慧屏的电源,从而能够实现智慧屏的自动断电,避免用户忘记关闭智慧屏而导致的电能浪费,节能环保。

    附图说明

    图1为本发明操作方法的流程图;

    图2为本发明操作系统的流程图;

    图3为本发明语音操作模块的流程图;

    图4为本发明手动操作模块的流程图;

    图5为本发明检测模块的流程图;

    图中:1、语音操作模块;11、无效语音剔除模块;12、语音采集模块;13、第一分控制模块;14、语音语义识别模块;2、总控制模块;3、手动操作模块;31、再次确认模块;32、操作面板信息采集模块;33、第二分控制模块;4、操作执行模块;5、断电执行模块;6、检测模块;61、计时模块;62、距离检测模块;63、第三分控制模块;64、人脸检测模块;65、脸部信息对比模块;66、断电方案分析模块;67、断电方案存储模块;68、脸部信息存储模块;69、断电方案修改模块。

    具体实施方式

    下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

    请参阅图1-5,本发明提供以下技术方案:基于智能语音交互的智慧屏操作方法,包括以下步骤:

    s1:连接智慧屏电源,启动智慧屏;

    s2:语音操作智慧屏时,语音采集模块12实时采集用户的语音信息,并将采集到的语音信息反馈至第一分控制模块13,第一分控制模块13将语音信息先反馈至无效语音剔除模块11,无效语音剔除模块11剔除无效的语音信息,剔除后将有用的语音信息反馈回第一分控制模块13,第一分控制模块13将有用的语音信息再反馈至语音语义识别模块14,语音语义识别模块14对语音信息进行识别,将识别出的语音信息反馈回第一分控制模块13,第一分控制模块13将识别出的语音信息反馈至总控制模块2,总控制模块2将识别出的语音信息反馈至操作执行模块4,操作执行模块4对操作信息进行执行;

    s3:手动操作智慧屏时,操作面板信息采集模块32实时采集用户操作智慧屏面板时的信息,将采集到的信息反馈至第二分控制模块33,第二分控制模块33将信息反馈至再次确认模块31,再次确认模块31将再次确认的信息反馈至智慧屏的操作面板上,若操作面板信息采集模块32未采集到确认信息,则第二分控制模块33不做任何指示,若操作面板信息采集模块32采集到确认信息,则第二分控制模块33将操作信息反馈至总控制模块2中,总控制模块2将信息反馈至操作执行模块4,操作执行模块4对操作信息进行执行;

    s4:智慧屏使用过程中,人脸检测模块64对用户的脸部进行识别,并将识别的脸部信息反馈至第三分控制模块63,第三分控制模块63将识别的脸部信息反馈至脸部信息对比模块65,脸部信息对比模块65提取脸部信息存储模块68中的脸部信息进行对比,并将对比的结果反馈回第三分控制模块63,第三分控制模块63将对比结果反馈至断电方案分析模块66,断电方案分析模块66根据脸部对比结果提取断电方案存储模块67中对应的断电方案进行对比分析,并将分析结果反馈回第三分控制模块63,若无需断电操作,第三分控制模块63不做任何指示,若需要断电操作,第三分控制模块63根据分析结果发送指令给计时模块61,计时模块61计时时间到,将信号反馈至第三分控制模块63,第三分控制模块63将信息反馈至总控制模块2中,总控制模块2将信息反馈至断电执行模块5,断电执行模块5对断电信息进行执行;

    s5:智慧屏使用过程中,距离检测模块62同时对用户与智慧屏间的距离进行检测,距离检测模块62检测到智慧屏十米距离或到设置距离内没有任何人活动迹象时,将信息反馈至第三分控制模块63,第三分控制模块63发送指令给计时模块61,计时模块61开始计时,计时模块61计时二十分钟或到设置分钟时,将信息反馈至第三分控制模块63,第三分控制模块63将数据反馈至总控制模块2,总控制模块2将信息反馈至断电执行模块5,断电执行模块5对断电信息进行执行;

    s6:若需要修改断电方案,可通过断电方案修改模块69进行修改;

    s7:使用完成,关闭智慧屏电源。

    具体的,步骤s4中,断电方案存储模块67中的断电方案分为三种,第一种当脸部识别信息为成人家庭成员,则断电方案为不断电,第二种当脸部识别信息为儿童家庭成员,则断电方案为隔一小时自动断电,第三种当脸部识别信息为成人以及儿童家庭成员,则断电方案为不断电。

    基于智能语音交互的智慧屏操作方法的操作系统,包括语音操作模块1、总控制模块2、手动操作模块3、操作执行模块4、断电执行模块5和检测模块6,其特征在于:总控制模块2的一侧从上到下依次连接有手动操作模块3和语音操作模块1,总控制模块2的另一侧从上到下依次连接有操作执行模块4、断电执行模块5和检测模块6。

    具体的,语音操作模块1包括无效语音剔除模块11、语音采集模块12、第一分控制模块13和语音语义识别模块14,第一分控制模块13的上方连接有语音采集模块12,第一分控制模块13的一侧连接有无效语音剔除模块11,第一分控制模块13的另一侧连接有语音语义识别模块14,第一分控制模块13与总控制模块2连接。

    具体的,手动操作模块3包括再次确认模块31、操作面板信息采集模块32和第二分控制模块33,第二分控制模块33的上方连接有操作面板信息采集模块32,第二分控制模块33的一侧连接有再次确认模块31,再次确认模块31与操作面板信息采集模块32连接,第二分控制模块33与总控制模块2连接。

    具体的,检测模块6包括计时模块61、第三分控制模块63、人脸检测模块64、脸部信息对比模块65、断电方案分析模块66、断电方案存储模块67和脸部信息存储模块68,第三分控制模块63的上方连接有人脸检测模块64,第三分控制模块63的一侧连接有计时模块61,第三分控制模块63的另一侧从上到下依次连接有脸部信息对比模块65和断电方案分析模块66,脸部信息对比模块65远离第三分控制模块63的一侧连接有脸部信息存储模块68,断电方案分析模块66的下方连接有断电方案存储模块67,第三分控制模块63与总控制模块2连接。

    具体的,第三分控制模块63的上方且远离人脸检测模块64的一侧连接有距离检测模块62。

    具体的,断电方案存储模块67远离第三分控制模块63的一侧连接有断电方案修改模块69。

    本发明的工作原理及使用流程:

    s1:连接智慧屏电源,启动智慧屏;

    s2:语音操作智慧屏时,语音采集模块12实时采集用户的语音信息,并将采集到的语音信息反馈至第一分控制模块13,第一分控制模块13将语音信息先反馈至无效语音剔除模块11,无效语音剔除模块11剔除无效的语音信息,剔除后将有用的语音信息反馈回第一分控制模块13,第一分控制模块13将有用的语音信息再反馈至语音语义识别模块14,语音语义识别模块14对语音信息进行识别,将识别出的语音信息反馈回第一分控制模块13,第一分控制模块13将识别出的语音信息反馈至总控制模块2,总控制模块2将识别出的语音信息反馈至操作执行模块4,操作执行模块4对操作信息进行执行;

    s3:手动操作智慧屏时,操作面板信息采集模块32实时采集用户操作智慧屏面板时的信息,将采集到的信息反馈至第二分控制模块33,第二分控制模块33将信息反馈至再次确认模块31,再次确认模块31将再次确认的信息反馈至智慧屏的操作面板上,若操作面板信息采集模块32未采集到确认信息,则第二分控制模块33不做任何指示,若操作面板信息采集模块32采集到确认信息,则第二分控制模块33将操作信息反馈至总控制模块2中,总控制模块2将信息反馈至操作执行模块4,操作执行模块4对操作信息进行执行;

    s4:智慧屏使用过程中,人脸检测模块64对用户的脸部进行识别,并将识别的脸部信息反馈至第三分控制模块63,第三分控制模块63将识别的脸部信息反馈至脸部信息对比模块65,脸部信息对比模块65提取脸部信息存储模块68中的脸部信息进行对比,并将对比的结果反馈回第三分控制模块63,第三分控制模块63将对比结果反馈至断电方案分析模块66,断电方案分析模块66根据脸部对比结果提取断电方案存储模块67中对应的断电方案进行对比分析,并将分析结果反馈回第三分控制模块63,若无需断电操作,第三分控制模块63不做任何指示,若需要断电操作,第三分控制模块63根据分析结果发送指令给计时模块61,计时模块61计时时间到,将信号反馈至第三分控制模块63,第三分控制模块63将信息反馈至总控制模块2中,总控制模块2将信息反馈至断电执行模块5,断电执行模块5对断电信息进行执行;

    s5:智慧屏使用过程中,距离检测模块62同时对用户与智慧屏间的距离进行检测,距离检测模块62检测到智慧屏十米距离或到设置距离内没有任何人活动迹象时,将信息反馈至第三分控制模块63,第三分控制模块63发送指令给计时模块61,计时模块61开始计时,计时模块61计时二十分钟或到设置分钟时,将信息反馈至第三分控制模块63,第三分控制模块63将数据反馈至总控制模块2,总控制模块2将信息反馈至断电执行模块5,断电执行模块5对断电信息进行执行;

    s6:若需要修改断电方案,可通过断电方案修改模块69进行修改;

    s7:使用完成,关闭智慧屏电源。

    尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。


    技术特征:

    1.基于智能语音交互的智慧屏操作方法,其特征在于,包括以下步骤:

    s1:连接智慧屏电源,启动智慧屏;

    s2:语音操作智慧屏时,语音采集模块(12)实时采集用户的语音信息,并将采集到的语音信息反馈至第一分控制模块(13),第一分控制模块(13)将语音信息先反馈至无效语音剔除模块(11),无效语音剔除模块(11)剔除无效的语音信息,剔除后将有用的语音信息反馈回第一分控制模块(13),第一分控制模块(13)将有用的语音信息再反馈至语音语义识别模块(14),语音语义识别模块(14)对语音信息进行识别,将识别出的语音信息反馈回第一分控制模块(13),第一分控制模块(13)将识别出的语音信息反馈至总控制模块(2),总控制模块(2)将识别出的语音信息反馈至操作执行模块(4),操作执行模块(4)对操作信息进行执行;

    s3:手动操作智慧屏时,操作面板信息采集模块(32)实时采集用户操作智慧屏面板时的信息,将采集到的信息反馈至第二分控制模块(33),第二分控制模块(33)将信息反馈至再次确认模块(31),再次确认模块(31)将再次确认的信息反馈至智慧屏的操作面板上,若操作面板信息采集模块(32)未采集到确认信息,则第二分控制模块(33)不做任何指示,若操作面板信息采集模块(32)采集到确认信息,则第二分控制模块(33)将操作信息反馈至总控制模块(2)中,总控制模块(2)将信息反馈至操作执行模块(4),操作执行模块(4)对操作信息进行执行;

    s4:智慧屏使用过程中,人脸检测模块(64)对用户的脸部进行识别,并将识别的脸部信息反馈至第三分控制模块(63),第三分控制模块(63)将识别的脸部信息反馈至脸部信息对比模块(65),脸部信息对比模块(65)提取脸部信息存储模块(68)中的脸部信息进行对比,并将对比的结果反馈回第三分控制模块(63),第三分控制模块(63)将对比结果反馈至断电方案分析模块(66),断电方案分析模块(66)根据脸部对比结果提取断电方案存储模块(67)中对应的断电方案进行对比分析,并将分析结果反馈回第三分控制模块(63),若无需断电操作,第三分控制模块(63)不做任何指示,若需要断电操作,第三分控制模块(63)根据分析结果发送指令给计时模块(61),计时模块(61)计时时间到,将信号反馈至第三分控制模块(63),第三分控制模块(63)将信息反馈至总控制模块(2)中,总控制模块(2)将信息反馈至断电执行模块(5),断电执行模块(5)对断电信息进行执行;

    s5:智慧屏使用过程中,距离检测模块(62)同时对用户与智慧屏间的距离进行检测,距离检测模块(62)检测到智慧屏十米距离或到设置距离内没有任何人活动迹象时,将信息反馈至第三分控制模块(63),第三分控制模块(63)发送指令给计时模块(61),计时模块(61)开始计时,计时模块(61)计时二十分钟或到设置分钟时,将信息反馈至第三分控制模块(63),第三分控制模块(63)将数据反馈至总控制模块(2),总控制模块(2)将信息反馈至断电执行模块(5),断电执行模块(5)对断电信息进行执行;

    s6:若需要修改断电方案,可通过断电方案修改模块(69)进行修改;

    s7:使用完成,关闭智慧屏电源。

    2.根据权利要求1所述的基于智能语音交互的智慧屏操作方法,其特征在于:所述步骤s4中,断电方案存储模块(67)中的断电方案分为三种,第一种当脸部识别信息为成人家庭成员,则断电方案为不断电,第二种当脸部识别信息为儿童家庭成员,则断电方案为隔一小时自动断电,第三种当脸部识别信息为成人以及儿童家庭成员,则断电方案为不断电。

    3.根据权利要求1-2任一项所述的基于智能语音交互的智慧屏操作方法的操作系统,包括语音操作模块(1)、总控制模块(2)、手动操作模块(3)、操作执行模块(4)、断电执行模块(5)和检测模块(6),其特征在于:所述总控制模块(2)的一侧从上到下依次连接有手动操作模块(3)和语音操作模块(1),所述总控制模块(2)的另一侧从上到下依次连接有操作执行模块(4)、断电执行模块(5)和检测模块(6)。

    4.根据权利要求3所述的基于智能语音交互的智慧屏操作方法的操作系统,其特征在于:所述语音操作模块(1)包括无效语音剔除模块(11)、语音采集模块(12)、第一分控制模块(13)和语音语义识别模块(14),所述第一分控制模块(13)的上方连接有语音采集模块(12),所述第一分控制模块(13)的一侧连接有无效语音剔除模块(11),所述第一分控制模块(13)的另一侧连接有语音语义识别模块(14),所述第一分控制模块(13)与总控制模块(2)连接。

    5.根据权利要求3所述的基于智能语音交互的智慧屏操作方法的操作系统,其特征在于:所述手动操作模块(3)包括再次确认模块(31)、操作面板信息采集模块(32)和第二分控制模块(33),所述第二分控制模块(33)的上方连接有操作面板信息采集模块(32),所述第二分控制模块(33)的一侧连接有再次确认模块(31),所述再次确认模块(31)与操作面板信息采集模块(32)连接,所述第二分控制模块(33)与总控制模块(2)连接。

    6.根据权利要求3所述的基于智能语音交互的智慧屏操作方法的操作系统,其特征在于:所述检测模块(6)包括计时模块(61)、第三分控制模块(63)、人脸检测模块(64)、脸部信息对比模块(65)、断电方案分析模块(66)、断电方案存储模块(67)和脸部信息存储模块(68),所述第三分控制模块(63)的上方连接有人脸检测模块(64),所述第三分控制模块(63)的一侧连接有计时模块(61),所述第三分控制模块(63)的另一侧从上到下依次连接有脸部信息对比模块(65)和断电方案分析模块(66),所述脸部信息对比模块(65)远离第三分控制模块(63)的一侧连接有脸部信息存储模块(68),所述断电方案分析模块(66)的下方连接有断电方案存储模块(67),所述第三分控制模块(63)与总控制模块(2)连接。

    7.根据权利要求6所述的基于智能语音交互的智慧屏操作方法的操作系统,其特征在于:所述第三分控制模块(63)的上方且远离人脸检测模块(64)的一侧连接有距离检测模块(62)。

    8.根据权利要求6所述的基于智能语音交互的智慧屏操作方法的操作系统,其特征在于:所述断电方案存储模块(67)远离第三分控制模块(63)的一侧连接有断电方案修改模块(69)。

    技术总结
    本发明公开了基于智能语音交互的智慧屏操作方法,属于智慧屏技术领域,包括以下步骤:S1:启动智慧屏;S2:语音操作智慧屏;S3:手动操作智慧屏;S4:智慧屏使用时根据断电方案自动断电;S5:智慧屏使用时根据用户离开时间自动断电;S6:若需要修改断电方案,可通过断电方案修改模块进行修改;S7:关闭智慧屏电源;本发明还公开了基于智能语音交互的智慧屏操作系统,语音操作模块设置无效语音剔除模块,能够对采集到的语音进行预处理,剔除无效的语音信息,降低第一分控制模块的处理强度,手动操作模块设置再次确认模块,能够有效避免用户手误操作的问题发生,即能够对手动操作以及语音操作进行更深层次的处理,实用性强。

    技术研发人员:李广垒;陈祖涛
    受保护的技术使用者:安徽宝信信息科技有限公司
    技术研发日:2020.11.18
    技术公布日:2021.03.12

    转载请注明原文地址:https://wp.8miu.com/read-6368.html

    最新回复(0)