本申请属于通信技术领域,具体涉及一种视频通话方法及装置。
背景技术:
目前,用户在日常生活中与联系人的沟通方式多种多样,用户可以通过聊天类应用程序向联系人发送文字信息、语音信息、语音通话或视频通话等方式进行交流。
然而上述方法中,在用户通过视频通话的方式与联系人进行交流时,由于视频通话对网络质量要求较高,在网络出现卡顿的情况下,视频通话的画面会出现花屏或卡顿现象,因此导致电子设备进行视频通话的质量较差。
技术实现要素:
本申请实施例的目的是提供一种视频通话方法及装置,能够解决电子设备进行视频通话的质量较差的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种视频通话方法,该方法包括:在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,该目标视频数据包为视频通话过程中第二电子设备发送的至少一个视频数据包中的数据包,每个视频数据包分别对应视频画面中的一个对象;基于第二视频数据包和第三视频数据包,生成并显示目标视频画面,该第三视频数据包为至少一个视频数据包中除目标视频数据包之外的数据包。
第二方面,本申请实施例提供了一种视频通话装置,该装置包括:获取模块、生成模块和显示模块。其中,获取模块,用于在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,该目标视频数据包为视频通话过程中第二电子设备发送的至少一个视频数据包中的数据包,每个视频数据包分别对应视频画面中的一个对象。生成模块,用于基于第二视频数据包和第三视频数据包,生成目标视频画面。显示模块,用于显示目标视频画面,该第三视频数据包为至少一个视频数据包中除目标视频数据包之外的数据包。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
在本申请实施例中,在第一电子设备与第二电子设备进行视频通话时,若第一电子设备检测到视频通话过程中,第二电子设备发送的至少一个视频数据包中的目标视频数据包存在异常,则第一电子设备可以从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,从而可以基于获取的第二视频数据包和至少一个视频数据包中除目标视频数据包之外的数据包,生成并显示目标视频画面。由于在第一电子设备与第二电子设备进行视频通话时,第一电子设备可以检测视频通话过程中,第二电子设备发送的至少一个视频数据包,从而确定该至少一个视频数据包中的视频数据包是否存在异常,并且在检测到目标视频数据包存在异常时,第一电子设备可以获取与目标视频数据包对应的第二视频数据包,以替换至少一个视频数据包中的目标视频数据包,因此可以基于获取的第二视频数据包和至少一个视频数据包中除目标视频数据包之外的数据包,生成并显示目标视频画面,从而可以提高电子设备进行视频通话时的通话质量。
附图说明
图1是本申请实施例提供的一种视频通话方法的示意图之一;
图2是本申请实施例提供的一种视频通话方法的示意图之二;
图3是本申请实施例提供的一种视频通话方法的示意图之三;
图4是本申请实施例提供的一种视频通话方法的示意图之四;
图5是本申请实施例提供的一种视频通话装置的结构示意图之一;
图6是本申请实施例提供的一种视频通话装置的结构示意图之二;
图7是本申请实施例提供的一种视频通话装置的结构示意图之三;
图8是本申请实施例提供的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的视频通话方法进行详细地说明。
本申请实施例中,用户可以通过持有的第一电子设备中的聊天类应用程序,向目标联系人持有的第二电子设备发送视频通话请求,并在第一电子设备与第二电子设备进行视频通话的情况下(即视频通话成功接通),第一电子设备可以检测第二电子设备发送的至少一个视频数据包中的目标视频数据包是否存在异常(即数据包发生丢包情况或数据传输错误),从而可以在第一电子设备检测到目标视频数据包存在异常时,从已获取的至少一个第一视频数据包(该至少一个第一视频数据包是第一电子设备与第二电子设备在进行视频通话请求的过程中,第二电子设备显示的视频预览界面中的对象对应的数据包,并在视频通话成功接通时发送至第一电子设备)中确定与目标视频数据包对应的第二视频数据包,从而第一电子设备可以通过获取的第二视频数据包和接收的至少一个视频数据包中除目标视频数据包之外的数据包(即将视频通话过程中第二电子设备发送的至少一个视频数据包中的目标视频数据包替换为第二视频数据包),生成并显示目标视频画面。
本申请实施例提供一种视频通话方法,图1示出了本申请实施例提供的一种视频通话方法的流程图,该方法可以应用于电子设备。如图1所示,本申请实施例提供的视频通话方法可以包括下述的步骤201和步骤202。
步骤201、在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在异常,则第一电子设备从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包。
本申请实施例中,上述目标视频数据包为视频通话过程中第二电子设备发送的至少一个视频数据包中的数据包,每个视频数据包分别对应视频画面中的一个对象。
本申请实施例中,在第一电子设备与第二电子设备进行视频通话时,第一电子设备可以对视频通话过程中第二电子设备发送的至少一个视频数据包进行检测,若检测到至少一个视频数据包中的目标视频数据包存在异常,则第一电子设备可以从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,从而第一电子设备可以基于第二视频数据包和至少一个视频数据包中除目标视频数据包之外的视频数据包,生成并显示目标视频画面。
可选地,本申请实施例中,在第一电子设备与第二电子设备进行视频通话时,第一电子设备可以接收第二电子设备发送的至少一个视频数据包,该至少一个视频数据包为第二电子设备拍摄得到的视频对应的数据包,并且第一电子设备可以向第二电子设备发送第一电子设备拍摄得到的视频对应的数据包,从而第一电子设备和第二电子设备分别可以实时查看到对方的视频画面,即可以通过第一电子设备查看到第二电子设备拍摄的画面,通过第二电子设备查看到第一电子设备拍摄的画面。
可选地,本申请实施例中,上述目标视频数据包存在异常可以为以下任一项:目标视频数据包存在丢包的现象、目标视频数据包数据传输错误、目标视频数据包对应的视频画面存在花屏或卡顿现象等。
可选地,本申请实施例中,第一电子设备可以在视频通话成功接通时,接收到第二电子设备发送的至少一个第一视频数据包,并将该至少一个第一视频数据包存储至本地;或者,第一电子设备可以在视频通话成功接通时,从服务器获取至少一个第一视频数据包,并将该至少一个第一视频数据包存储至本地,在这种实现方式中,第二电子设备可以在视频通话成功接通之前,预先将至少一个第一视频数据包发送至服务器。
需要说明的是,第一电子设备与第二电子设备进行视频通话可以包括两个阶段:视频通话请求阶段和视频通话阶段,在视频通话成功接通时刻之前为视频通话请求阶段,在视频通话成功接通时刻之后为视频通话阶段。
可选地,本申请实施例中,上述至少一个视频数据包中的每个视频数据包均对应视频画面中的一个对象,并且上述至少一个第一视频数据包中的每个第一视频数据包均对应视频画面中的一个对象,该对象可以为以下任一项:人物、柜子、桌子、电脑、门窗等。
可选地,本申请实施例中,上述第二视频数据包与目标视频数据包对应(即第一电子设备从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包)可以理解为:第二视频数据包对应的画面信息与目标视频数据包对应的画面信息相匹配(即为同一个对象),即第二视频数据包对应的画面信息与目标视频数据包对应的画面信息的相似度大于或等于预设相似度。
步骤202、第一电子设备基于第二视频数据包和第三视频数据包,生成并显示目标视频画面。
本申请实施例中,上述第三视频数据包为至少一个视频数据包中除目标视频数据包之外的数据包。
可选地,本申请实施例中,第一电子设备可以根据获取的第二视频数据包和接收到的第二电子设备发送的至少一个视频数据包中除目标视频数据包之外的数据包,生成视频通话对应的目标视频画面。
可选地,本申请实施例中,第一电子设备可以将接收到的第二电子设备发送的至少一个视频数据包中的目标视频数据包替换为第二视频数据包,从而生成目标视频画面。
需要说明的是,由于网络环境较差的问题,第二电子设备发送的至少一个视频数据包中的目标视频数据包会存在丢包的现象或数据传输错误现象,若第一电子设备直接通过接收到的第二电子设备发送的至少一个视频数据包生成视频画面,则该视频画面会存在花屏或卡顿的情况;因此第一电子设备可以通过获取第二视频数据包替换至少一个视频数据包中的目标视频数据包,从而可以通过替换后的数据包生成目标视频画面,并且不会存在花屏或卡顿的情况。
本申请实施例提供一种视频通话方法,在第一电子设备与第二电子设备进行视频通话时,若第一电子设备检测到视频通话过程中,第二电子设备发送的至少一个视频数据包中的目标视频数据包存在异常,则第一电子设备可以从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,从而可以基于获取的第二视频数据包和至少一个视频数据包中除目标视频数据包之外的数据包,生成并显示目标视频画面。由于在第一电子设备与第二电子设备进行视频通话时,第一电子设备可以检测视频通话过程中,第二电子设备发送的至少一个视频数据包,从而确定该至少一个视频数据包中的视频数据包是否存在异常,并且在检测到目标视频数据包存在异常时,第一电子设备可以获取与目标视频数据包对应的第二视频数据包,以替换至少一个视频数据包中的目标视频数据包,因此可以基于获取的第二视频数据包和至少一个视频数据包中除目标视频数据包之外的数据包,生成并显示目标视频画面,从而可以提高电子设备进行视频通话时的通话质量。
可选地,本申请实施例中,结合图1,如图2所示,在上述步骤201中的“若检测到目标视频数据包存在异常,则第一电子设备从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包”之前,本申请实施例提供的视频通话方法还可以包括下述的步骤301和步骤302。
步骤301、在与第二电子设备进行视频通话的情况下,第一电子设备接收第二电子设备发送的n个第四视频数据包。
本申请实施例中,上述n个第四视频数据包中的每个第四视频数据包对应一个图像信息,该n个第四视频数据包对应的n个图像信息为在第二电子设备显示视频通话的预览界面的情况下,该预览界面中包括的对象的信息,n为正整数。
可选地,本申请实施例中,在第一电子设备与第二电子设备之间的视频通话成功接通之后(即第一电子设备与第二电子设备进行视频通话阶段),第一电子设备可以接收到第二电子设备发送的n个第四视频数据包。
可选地,本申请实施例中,第二电子设备可以在视频通话请求阶段(即显示视频预览界面时)获取多个对象对应的图像信息,以得到每个图像信息对应的第四视频数据包,并将得到的n个第四视频数据包发送至第一电子设备,从而第一电子设备可以接收到第二电子设备发送的n个第四视频数据包。
可选地,本申请实施例中,第二电子设备可以将得到的n个第四视频数据包发送至服务器,从而第一电子设备可以从服务器获取n个第四视频数据包。
需要说明的是,上述第一电子设备接收第二电子设备发送的n个第四视频数据包可以理解为:第二电子设备直接发送n个第四视频数据包给第一电子设备,或者,第一电子设备从服务器获取第二电子设备发送的n个第四视频数据包。
可以理解,本申请实施例中,仅以第一电子设备接收第二电子设备发送的n个第四视频数据包为例进行说明,在实际的应用场景中,第二电子设备也可以接收第一电子设备发送的多个数据包,即在进行视频通话的过程中,第一电子设备与第二电子设备是相互发送数据包的。
示例性地,在第一电子设备向第二电子设备发送视频请求,且第二电子设备未接通视频请求时,第一电子设备和第二电子设备均可以查看到自己一侧获取的视频信息,并且第二电子设备可以从显示的视频预览界面中获取多个对象对应的图像信息(例如人脸对应的图像信息、衣服对应的图像信息、柜子对应的图像信息),并将这些图像信息对应的数据包发送至第一电子设备。
步骤302、第一电子设备对n个第四视频数据包进行筛选,得到k个第四视频数据包,并将k个第四视频数据包确定为至少一个第一视频数据包中的数据包。
本申请实施例中,k为小于或等于n的正整数。
可选地,本申请实施例中,第一电子设备在接收到n个第四视频数据包之后,可以对该n个第四视频数据包进行筛选,以筛选出该n个第四视频数据包中有效的数据包,可以理解,有效的数据包为包括有重要图像信息的数据包。
可选地,本申请实施例中,第二电子设备可以在对n个第四视频数据包进行筛选之后,再将得到的k个第四视频数据包发送至第一电子设备,或发送至服务器。
需要说明的是,对n个第四视频数据包进行筛选这一步骤可以为第一电子设备执行的步骤,或者可以为第二电子设备执行的步骤,此处不做限定,即,第二电子设备可以先对n个第四视频数据包进行筛选之后,再将得到的k个第四视频数据包发送至第一电子设备;或者,第二电子设备可以直接将n个第四视频数据包发送至第一电子设备,然后第一电子设备对该n个第四视频数据包进行筛选得到k个第四视频数据包。
本申请实施例中,第一电子设备可以接收第二电子设备发送的n个第四视频数据包,并对该n个第四视频数据包进行筛选,得到k个第四视频数据包,以将得到的k个第四视频数据包确定为至少一个第一视频数据包中的数据包,从而在检测到目标视频数据包存在异常,可以从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,因此可以有效的预防视频通话时出现花屏或卡顿的情况,以提高电子设备进行视频通话时的通话质量。
可选地,本申请实施例中,结合图2,如图3所示,上述步骤302具体可以通过下述的步骤302a实现,并且在上述步骤302之后,本申请实施例提供的视频通话方法还可以包括下述的步骤303。
步骤302a、第一电子设备根据预设条件,对n个第四视频数据包进行筛选,得到k个第四视频数据包,并将k个第四视频数据包确定为至少一个第一视频数据包中的数据包。
本申请实施例中,上述预设条件包括以下至少一项:第四视频数据包对应的图像信息的颜色特征满足第一条件、第四视频数据包对应的图像信息的形状特征满足第二条件、第四视频数据包对应的图像信息的纹理特征满足第三条件和第四视频数据包对应的图像信息的空间关系特征满足第四条件。
可选地,本申请实施例中,第一电子设备可以根据图像的颜色特征、纹理特征、形状特征和空间关系特征,判断图像信息的重要程度,以保留包括有效的用户信息和用户环境信息的数据包,删除掉重复的数据包,或者信息量比较少的数据包,例如人脸轮廓信息,属于重要特征信息,应该保留人脸轮廓信息数据,并对重复的轮廓信息进行删除。
可选地,本申请实施例中,第一电子设备可以将筛选得到的将k个第四视频数据包保存至本地中(即确定为至少一个第一视频数据包中的数据包),从而在检测到目标视频数据包存在异常时,可以快速获取目标视频数据包对应的第二视频数据包。
步骤303、第一电子设备根据每个第一视频数据包对应的图像信息,对至少一个第一视频数据包进行标记,确定每个第一视频数据包对应的图像信息中包括的对象类型。
可选地,本申请实施例中,第一电子设备可以通过物体识别功能,确定每个第一视频数据包对应的图像信息,从而对每个第一视频数据包进行标记。
示例性地,第一电子设备可以将人脸信息对应的数据包标记为人脸(即将人脸信息对应的数据包的标识或名称确定为“人脸”),将衣服对应的数据包标记为衣服等,以在检测到视频通话中包括有人脸时,标记该数据为人脸数据;检测到视频通话中包括有用户的头发时,标记该数据为头发数据;检测到视频通话中用户旁边的柜子时,标记该数据为柜子数据。
本申请实施例中,第一电子设备可以根据预设条件,对接收到的n个第四视频数据包进行筛选,以得到k个第四视频数据包,并将该k个第四视频数据包确定为至少一个第一视频数据包中的数据包,以及根据每个第一视频数据包对应的图像信息,对至少一个第一视频数据包进行标记,确定每个第一视频数据包对应的图像信息中包括的对象类型,从而可以准确的从至少一个第一视频数据包中确定需求的数据包。
可选地,本申请实施例中,上述步骤201具体可以通过下述的步骤201a或步骤201b实现。
步骤201a、在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在丢包的现象,则第一电子设备从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包。
可选地,本申请实施例中,第一电子设备可以在接收到第二电子设备发送的至少一个视频数据包时,对该至少一个视频数据包进行检测,以确定目标视频数据包是否存在丢包的现象,从而可以及时的获取第二视频数据包以替换至少一个视频数据包中的目标视频数据包。
可选地,本申请实施例中,第一电子设备可以在将至少一个视频数据包中的目标视频数据包替换为第二视频数据包之后,生成并显示目标视频画面,从而用户不会查看到花屏或卡顿的情况。
需要说明的是,上述实施例可以预防视频画面出现花屏或卡顿的情况,从而在视频画面出现花屏或卡顿之前,替换存在异常的视频数据包。
可选地,本申请实施例中,上述实施例需要第一电子设备实时的检测第二电子设备发送的至少一个视频数据包中的数据包是否存在异常,对电子设备的性能要求较高。
步骤201b、在与第二电子设备进行视频通话的情况下,若检测到视频通话对应的视频画面存在花屏或卡顿的情况,则第一电子设备根据视频画面中的花屏或卡顿区域,确定目标对象,并根据目标对象对应的目标视频数据包从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包。
可选地,本申请实施例中,第一电子设备可以在检测到视频通话对应的视频画面存在花屏或卡顿的情况时,根据视频画面中的花屏或卡顿区域,确定目标对象之后,从已获取的至少一个第一视频数据包中确定第二视频数据包,从而防止后续的视频画面出现花屏或卡顿的情况。
可选地,本申请实施例中,上述实施例无需第一电子设备实时的检测第二电子设备发送的至少一个视频数据包中的数据包是否存在异常,仅需在检测到视频通话对应的视频画面存在花屏或卡顿的情况时,对目标视频数据包进行处理,该实现方式对电子设备的性能要求较低。
本申请实施例中,在第一电子设备检测到目标视频数据包存在丢包的现象,可以从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包;或者,在第一电子设备检测到视频通话对应的视频画面存在花屏或卡顿的情况,根据视频画面中的花屏或卡顿区域,确定目标对象,并根据目标对象对应的目标视频数据包从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,从而电子设备可以通过多种方式提高电子设备进行视频通话时的通话质量。
可选地,本申请实施例中,结合图1,如图4所示,在上述步骤202之后,本申请实施例提供的视频通话方法还可以包括下述的步骤401和步骤402。
步骤401、若检测到至少一个视频数据包中的视频数据包不存在异常,则获取第二电子设备发送的视频画面中的m个图像信息。
本申请实施例中,上述m个图像信息为第一电子设备当前显示的视频画面中包括的对象对应的图像信息,m为正整数。
可选地,本申请实施例中,第一电子设备可以在视频通话对应视频画面未出现花屏或卡顿现象时(即至少一个视频数据包中的视频数据包不存在异常),从当前显示的视频画面中获取多个对象对应的m个图像信息。
可选地,本申请实施例中,第一电子设备可以从接收到的至少一个视频数据包中获取m个图像信息对应的数据包。
步骤402、第一电子设备将m个图像信息中的l个图像信息对应的数据包确定为至少一个第一视频数据包中的数据包。
本申请实施例中,上述l个图像信息为至少一个图像信息中未包括的图像信息,l为小于或等于m的正整数。
可选地,本申请实施例中,第一电子设备可以将m个图像信息与至少一个第一视频数据包对应的至少一个图像信息作比较,从而确定在m个图像信息中包括的图像信息、但在至少一个图像信息中未包括的l个图像信息,并将该l个图像信息对应的数据包确定为至少一个第一视频数据包中的数据包。
可以理解的是,第一电子设备从获取的m个图像信息中确定出l个图像信息,是为了将该l个图像信息对应的数据包添加至至少一个第一视频数据包中,以扩大至少一个第一视频数据包的范围,从而可以准确的从至少一个第一视频数据包中获取与目标视频数据包对应的第二视频数据包。
本申请实施例中,第一电子设备可以在检测到至少一个视频数据包中的视频数据包不存在异常,则获取当前显示的视频画面中包括的对象对应的m个图像信息,并从该m个图像信息中确定出至少一个图像信息中未包括的l个图像信息,以将该l个图像信息确定为至少一个第一视频数据包中的数据包,从而可以扩大至少一个第一视频数据包的范围,提高电子设备获取目标视频数据包对应的第二视频数据包的效率。
需要说明的是,本申请实施例提供的视频通话方法,执行主体可以为视频通话装置,或者该视频通话装置中的用于执行视频通话方法的控制模块。本申请实施例中以视频通话装置执行加载视频通话方法为例,说明本申请实施例提供的视频通话装置。
图5示出了本申请实施例中涉及的视频通话装置的一种可能的结构示意图。如图5所示,视频通话装置70可以包括:获取模块71、生成模块72和显示模块73。
其中,获取模块71,用于在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,该目标视频数据包为视频通话过程中第二电子设备发送的至少一个视频数据包中的数据包,每个视频数据包分别对应视频画面中的一个对象。生成模块72,用于基于第二视频数据包和第三视频数据包,生成目标视频画面。显示模块73,用于显示目标视频画面,该第三视频数据包为至少一个视频数据包中除目标视频数据包之外的数据包。
在一种可能的实现方式中,结合图5,如图6所示,本申请实施例提供的视频通话装置70还可以包括:接收模块74、筛选模块75和确定模块76。其中,接收模块74,用于在若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包之前,接收第二电子设备发送的n个第四视频数据包,每个第四视频数据包对应一个图像信息,该n个第四视频数据包对应的n个图像信息为在第二电子设备显示视频通话的预览界面的情况下,该预览界面中包括的对象的信息,n为正整数。筛选模块75,用于对n个第四视频数据包进行筛选,得到k个第四视频数据包。确定模块76,用于将k个第四视频数据包确定为至少一个第一视频数据包中的数据包,k为小于或等于n的正整数。
在一种可能的实现方式中,筛选模块75,具体用于根据预设条件,对n个第四视频数据包进行筛选,得到k个第四视频数据包,该预设条件包括以下至少一项:第四视频数据包对应的图像信息的颜色特征满足第一条件、第四视频数据包对应的图像信息的形状特征满足第二条件、第四视频数据包对应的图像信息的纹理特征满足第三条件和第四视频数据包对应的图像信息的空间关系特征满足第四条件。本申请实施例提供的视频通话装置70还可以包括:标记模块。其中,标记模块,用于在将k个第四视频数据包确定为至少一个第一视频数据包中的数据包之后,根据每个第一视频数据包对应的图像信息,对至少一个第一视频数据包进行标记,确定每个第一视频数据包对应的图像信息中包括的对象类型。
在一种可能的实现方式中,获取模块71,具体用于若检测到目标视频数据包存在丢包的现象,则从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包;或者,获取模块71,具体用于若检测到视频通话对应的视频画面存在花屏或卡顿的情况,则根据视频画面中的花屏或卡顿区域,确定目标对象,并根据目标对象对应的目标视频数据包从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包。
在一种可能的实现方式中,获取模块71,还用于若检测到至少一个视频数据包中的视频数据包不存在异常,则获取第二电子设备发送的视频画面中的m个图像信息,该m个图像信息为当前显示的视频画面中包括的对象对应的图像信息,m为正整数。结合图5,如图7所示,本申请实施例提供的视频通话装置70还可以包括:确定模块76。其中,确定模块76,用于将m个图像信息中的l个图像信息对应的数据包确定为至少一个第一视频数据包中的数据包,该l个图像信息为至少一个图像信息中未包括的图像信息,l为小于或等于m的正整数。
本申请实施例提供的视频通话装置能够实现上述方法实施例中视频通话装置实现的各个过程,为避免重复,详细描述这里不再赘述。
本申请实施例提供一种视频通话装置,由于在第一电子设备与第二电子设备进行视频通话时,第一电子设备可以检测视频通话过程中,第二电子设备发送的至少一个视频数据包,从而确定该至少一个视频数据包中的视频数据包是否存在异常,并且在检测到目标视频数据包存在异常时,第一电子设备可以获取与目标视频数据包对应的第二视频数据包,以替换至少一个视频数据包中的目标视频数据包,因此可以基于获取的第二视频数据包和至少一个视频数据包中除目标视频数据包之外的数据包,生成并显示目标视频画面,从而可以提高电子设备进行视频通话时的通话质量。
本申请实施例中的视频通话装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobilepersonalcomputer,umpc)、上网本或者个人数字助理(personaldigitalassistant,pda)等,非移动电子设备可以为服务器、网络附属存储器(networkattachedstorage,nas)、个人计算机(personalcomputer,pc)、电视机(television,tv)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的视频通话装置可以为具有操作系统的装置。该操作系统可以为安卓(android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
可选地,本申请实施例还提供一种电子设备,包括处理器110,存储器109,存储在存储器109上并可在所述处理器110上运行的程序或指令,该程序或指令被处理器110执行时实现上述视频通话方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图8为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、以及处理器110等部件。
本领域技术人员可以理解,电子设备100还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图8中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器110,用于在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,该目标视频数据包为视频通话过程中第二电子设备发送的至少一个视频数据包中的数据包,每个视频数据包分别对应视频画面中的一个对象;并基于第二视频数据包和第三视频数据包,生成目标视频画面。
显示单元106,用于显示目标视频画面,该第三视频数据包为至少一个视频数据包中除目标视频数据包之外的数据包。
本申请实施例提供一种电子设备,由于在第一电子设备与第二电子设备进行视频通话时,第一电子设备可以检测视频通话过程中,第二电子设备发送的至少一个视频数据包,从而确定该至少一个视频数据包中的视频数据包是否存在异常,并且在检测到目标视频数据包存在异常时,第一电子设备可以获取与目标视频数据包对应的第二视频数据包,以替换至少一个视频数据包中的目标视频数据包,因此可以基于获取的第二视频数据包和至少一个视频数据包中除目标视频数据包之外的数据包,生成并显示目标视频画面,从而可以提高电子设备进行视频通话时的通话质量。
可选地,网络模块102,用于接收第二电子设备发送的n个第四视频数据包,每个第四视频数据包对应一个图像信息,该n个第四视频数据包对应的n个图像信息为在第二电子设备显示视频通话的预览界面的情况下,该预览界面中包括的对象的信息,n为正整数。
处理器110,还用于对n个第四视频数据包进行筛选,得到k个第四视频数据包,并将k个第四视频数据包确定为至少一个第一视频数据包中的数据包,k为小于或等于n的正整数。
本申请实施例中,第一电子设备可以接收第二电子设备发送的n个第四视频数据包,并对该n个第四视频数据包进行筛选,得到k个第四视频数据包,以将得到的k个第四视频数据包确定为至少一个第一视频数据包中的数据包,从而在检测到目标视频数据包存在异常,可以从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,因此可以有效的预防视频通话时出现花屏或卡顿的情况,以提高电子设备进行视频通话时的通话质量。
处理器110,具体用于根据预设条件,对n个第四视频数据包进行筛选,得到k个第四视频数据包,该预设条件包括以下至少一项:第四视频数据包对应的图像信息的颜色特征满足第一条件、第四视频数据包对应的图像信息的形状特征满足第二条件、第四视频数据包对应的图像信息的纹理特征满足第三条件和第四视频数据包对应的图像信息的空间关系特征满足第四条件。
处理器110,还用于根据每个第一视频数据包对应的图像信息,对至少一个第一视频数据包进行标记,确定每个第一视频数据包对应的图像信息中包括的对象类型。
本申请实施例中,第一电子设备可以根据预设条件,对接收到的n个第四视频数据包进行筛选,以得到k个第四视频数据包,并将该k个第四视频数据包确定为至少一个第一视频数据包中的数据包,以及根据每个第一视频数据包对应的图像信息,对至少一个第一视频数据包进行标记,确定每个第一视频数据包对应的图像信息中包括的对象类型,从而可以准确的从至少一个第一视频数据包中确定需求的数据包。
处理器110,具体用于若检测到目标视频数据包存在丢包的现象,则从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包;或者,若检测到视频通话对应的视频画面存在花屏或卡顿的情况,则根据视频画面中的花屏或卡顿区域,确定目标对象,并根据目标对象对应的目标视频数据包从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包。
本申请实施例中,在第一电子设备检测到目标视频数据包存在丢包的现象,可以从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包;或者,在第一电子设备检测到视频通话对应的视频画面存在花屏或卡顿的情况,根据视频画面中的花屏或卡顿区域,确定目标对象,并根据目标对象对应的目标视频数据包从已获取的至少一个第一视频数据包中确定与目标视频数据包对应的第二视频数据包,从而电子设备可以通过多种方式提高电子设备进行视频通话时的通话质量。
处理器110,还用于若检测到至少一个视频数据包中的视频数据包不存在异常,则获取第二电子设备发送的视频画面中的m个图像信息,该m个图像信息为当前显示的视频画面中包括的对象对应的图像信息,m为正整数;并将m个图像信息中的l个图像信息对应的数据包确定为至少一个第一视频数据包中的数据包,该l个图像信息为至少一个图像信息中未包括的图像信息,l为小于或等于m的正整数。
本申请实施例中,第一电子设备可以在检测到至少一个视频数据包中的视频数据包不存在异常,则获取当前显示的视频画面中包括的对象对应的m个图像信息,并从该m个图像信息中确定出至少一个图像信息中未包括的l个图像信息,以将该l个图像信息确定为至少一个第一视频数据包中的数据包,从而可以扩大至少一个第一视频数据包的范围,提高电子设备获取目标视频数据包对应的第二视频数据包的效率。
应理解的是,本申请实施例中,输入单元104可以包括图形处理器(graphicsprocessingunit,gpu)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元106可包括显示面板1061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板1061。用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器109可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述视频通话方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(read-onlymemory,rom)、随机存取存储器(randomaccessmemory,ram)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述视频通话方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
1.一种视频通话方法,应用于第一电子设备,其特征在于,所述方法包括:
在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与所述目标视频数据包对应的第二视频数据包,所述目标视频数据包为视频通话过程中所述第二电子设备发送的至少一个视频数据包中的数据包,每个所述视频数据包分别对应视频画面中的一个对象;
基于所述第二视频数据包和第三视频数据包,生成并显示目标视频画面,所述第三视频数据包为所述至少一个视频数据包中除所述目标视频数据包之外的数据包。
2.根据权利要求1所述的方法,其特征在于,所述若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与所述目标视频数据包对应的第二视频数据包之前,所述方法还包括:
接收所述第二电子设备发送的n个第四视频数据包,每个第四视频数据包对应一个图像信息,所述n个第四视频数据包对应的n个图像信息为在所述第二电子设备显示视频通话的预览界面的情况下,所述预览界面中包括的对象的信息,n为正整数;
对所述n个第四视频数据包进行筛选,得到k个第四视频数据包,并将所述k个第四视频数据包确定为所述至少一个第一视频数据包中的数据包,k为小于或等于n的正整数。
3.根据权利要求2所述的方法,其特征在于,所述对所述n个第四视频数据包进行筛选,得到k个第四视频数据包,包括:
根据预设条件,对所述n个第四视频数据包进行筛选,得到所述k个第四视频数据包,所述预设条件包括以下至少一项:所述第四视频数据包对应的图像信息的颜色特征满足第一条件、所述第四视频数据包对应的图像信息的形状特征满足第二条件、所述第四视频数据包对应的图像信息的纹理特征满足第三条件和所述第四视频数据包对应的图像信息的空间关系特征满足第四条件;
所述将所述k个第四视频数据包确定为所述至少一个第一视频数据包中的数据包之后,所述方法还包括:
根据每个第一视频数据包对应的图像信息,对所述至少一个第一视频数据包进行标记,确定每个第一视频数据包对应的图像信息中包括的对象类型。
4.根据权利要求1所述的方法,其特征在于,所述若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与所述目标视频数据包对应的第二视频数据包,包括:
若检测到所述目标视频数据包存在丢包的现象,则从已获取的所述至少一个第一视频数据包中确定与所述目标视频数据包对应的所述第二视频数据包;
或者,
若检测到视频通话对应的视频画面存在花屏或卡顿的情况,则根据视频画面中的花屏或卡顿区域,确定目标对象,并根据所述目标对象对应的所述目标视频数据包从已获取的所述至少一个第一视频数据包中确定与所述目标视频数据包对应的所述第二视频数据包。
5.根据权利要求1所述的方法,其特征在于,所述基于所述第二视频数据包和第三视频数据包,生成并显示目标视频画面之后,所述方法还包括:
若检测到所述至少一个视频数据包中的视频数据包不存在异常,则获取所述第二电子设备发送的视频画面中的m个图像信息,所述m个图像信息为当前显示的视频画面中包括的对象对应的图像信息,m为正整数;
将所述m个图像信息中的l个图像信息对应的数据包确定为所述至少一个第一视频数据包中的数据包,所述l个图像信息为所述至少一个图像信息中未包括的图像信息,l为小于或等于m的正整数。
6.一种视频通话装置,应用于第一电子设备,其特征在于,所述视频通话装置包括:获取模块、生成模块和显示模块;
所述获取模块,用于在与第二电子设备进行视频通话的情况下,若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与所述目标视频数据包对应的第二视频数据包,所述目标视频数据包为视频通话过程中所述第二电子设备发送的至少一个视频数据包中的数据包,每个所述视频数据包分别对应视频画面中的一个对象;
所述生成模块,用于基于所述第二视频数据包和第三视频数据包,生成目标视频画面;
所述显示模块,用于显示所述目标视频画面,所述第三视频数据包为所述至少一个视频数据包中除所述目标视频数据包之外的数据包。
7.根据权利要求6所述的视频通话装置,其特征在于,所述视频通话装置还包括:接收模块、筛选模块和确定模块;
所述接收模块,用于在所述若检测到目标视频数据包存在异常,则从已获取的至少一个第一视频数据包中确定与所述目标视频数据包对应的第二视频数据包之前,接收所述第二电子设备发送的n个第四视频数据包,每个第四视频数据包对应一个图像信息,所述n个第四视频数据包对应的n个图像信息为在所述第二电子设备显示视频通话的预览界面的情况下,所述预览界面中包括的对象的信息,n为正整数;
所述筛选模块,用于对所述n个第四视频数据包进行筛选,得到k个第四视频数据包;
所述确定模块,用于将所述k个第四视频数据包确定为所述至少一个第一视频数据包中的数据包,k为小于或等于n的正整数。
8.根据权利要求7所述的视频通话装置,其特征在于,所述筛选模块,具体用于根据预设条件,对所述n个第四视频数据包进行筛选,得到所述k个第四视频数据包,所述预设条件包括以下至少一项:所述第四视频数据包对应的图像信息的颜色特征满足第一条件、所述第四视频数据包对应的图像信息的形状特征满足第二条件、所述第四视频数据包对应的图像信息的纹理特征满足第三条件和所述第四视频数据包对应的图像信息的空间关系特征满足第四条件;
所述视频通话装置还包括:标记模块;
所述标记模块,用于在所述将所述k个第四视频数据包确定为所述至少一个第一视频数据包中的数据包之后,根据每个第一视频数据包对应的图像信息,对所述至少一个第一视频数据包进行标记,确定每个第一视频数据包对应的图像信息中包括的对象类型。
9.根据权利要求6所述的视频通话装置,其特征在于,所述获取模块,具体用于若检测到所述目标视频数据包存在丢包的现象,则从已获取的所述至少一个第一视频数据包中确定与所述目标视频数据包对应的所述第二视频数据包;
或者,
所述获取模块,具体用于若检测到视频通话对应的视频画面存在花屏或卡顿的情况,则根据视频画面中的花屏或卡顿区域,确定目标对象,并根据所述目标对象对应的所述目标视频数据包从已获取的所述至少一个第一视频数据包中确定与所述目标视频数据包对应的所述第二视频数据包。
10.根据权利要求6所述的视频通话装置,其特征在于,所述获取模块,还用于若检测到所述至少一个视频数据包中的视频数据包不存在异常,则获取所述第二电子设备发送的视频画面中的m个图像信息,所述m个图像信息为当前显示的视频画面中包括的对象对应的图像信息,m为正整数;
所述视频通话装置还包括:确定模块;
所述确定模块,用于将所述m个图像信息中的l个图像信息对应的数据包确定为所述至少一个第一视频数据包中的数据包,所述l个图像信息为所述至少一个图像信息中未包括的图像信息,l为小于或等于m的正整数。
技术总结