基于播放视频的信息搜索方法、装置、设备和介质制造方法及图纸

本申请实施例公开了一种基于播放视频的信息搜索方法、装置、设备和介质，涉及信息搜索技术领域，其中，该方法包括：识别智能音箱发送的音频信息，确定目标视频；获取智能音箱发送的查询指令，其中，查询指令由用户观看目标视频过程中，基于当前播放的视频画面而触发，查询指令中携带有与视频画面对应的时间戳；在目标视频中，确定与时间戳对应的视频画面；基于对查询指令的识别结果以及视频画面，进行信息搜索。本申请实施例可以实现在不影响用户观看视频的前提下，便捷而准确的进行与视频画面相关的信息搜索的效果，满足用户对当前播放的视频画面中未知信息的搜索需求。

【技术实现步骤摘要】
基于播放视频的信息搜索方法、装置、设备和介质
本申请实施例涉及计算机技术，具体涉及信息搜索技术，尤其涉及一种基于播放视频的信息搜索方法、装置、设备和介质。
技术介绍
目前，用户在观看视频过程中，视频播放设备不支持与用户进行互动。例如，用户观看电视时，想知道当前播放画面中某明星的名字，或者想知道当前画面中背景景点的信息，传统电视和机顶盒均无法与用户做到互动，不能及时反馈给用户所需信息。
技术实现思路
本申请实施例公开一种基于播放视频的信息搜索方法、装置、设备和介质，以实现在不影响用户观看视频的前提下，便捷而准确的进行与视频画面相关的信息搜索的效果，满足用户对当前播放的视频画面中未知信息的搜索需求。第一方面，本申请实施例公开了一种基于播放视频的信息搜索方法，包括：识别智能音箱发送的音频信息，确定目标视频；获取所述智能音箱发送的查询指令，其中，所述查询指令由用户观看所述目标视频过程中，基于当前播放的视频画面而触发，所述查询指令中携带有与所述视频画面对应的时间戳；在所述目标视频中，确定与所述时间戳对应的视频画面；基于对所述查询指令的识别结果以及所述视频画面，进行信息搜索。上述申请中的一个实施例具有如下优点或有益效果：实现了在不影响用户观看视频的前提下，便捷而准确的进行与视频画面相关的信息搜索的效果，满足了用户对当前播放的视频画面中未知信息的搜索需求，丰富了现有的信息搜索模式。可选的，基于对所述查询指令的识别结果以及所述视频画面，进行信息搜索，包括：<br>识别所述查询指令，确定用户的查询需求，其中，所述查询需求中包括查询对象；基于所述查询对象，在所述视频画面中确定图像子区域；基于所述图像子区域，搜索满足所述查询需求的信息。可选的，所述音频信息包括用户发出的视频播放语音指令，所述视频播放语音指令用于指示所述智能音箱控制播放设备播放所述目标视频；相应的，所述识别智能音箱发送的音频信息，确定目标视频，包括：获取所述智能音箱发送的所述视频播放语音指令；识别所述视频播放语音指令中包括的节目名称或者频道信息，确定所述目标视频。可选的，所述音频信息包括播放设备当前播放的节目音频；相应的，所述识别智能音箱发送的音频信息，确定目标视频，包括：获取所述智能音箱发送的所述播放设备当前播放的节目音频；对所述节目音频的内容进行识别，确定所述目标视频。可选的，所述方法还包括：将搜索结果实时发送至视频叠加设备，其中，所述视频叠加设备用于按照所述查询指令中的时间戳，对实时接收的视频信息和所述搜索结果进行叠加处理，使得所述搜索结果叠加显示在与所述时间戳对应的视频画面上。可选的，所述方法还包括：将搜索结果发送至所述智能音箱或者用户终端。上述申请中的一个实施例具有如下优点或有益效果：体现了本实施例方案中搜索结果的反馈方式的多样化与灵活性，使得用户可以在不影响当前观看视频的前提下，便捷地获知视频画面中的未知信息。可选的，所述目标视频包括直播节目视频。第二方面，本申请实施例还公开了一种基于播放视频的信息搜索装置，包括：目标视频确定模块，用于识别智能音箱发送的音频信息，确定目标视频；查询指令获取模块，用于获取所述智能音箱发送的查询指令，其中，所述查询指令由用户观看所述目标视频过程中，基于当前播放的视频画面而触发，所述查询指令中携带有与所述视频画面对应的时间戳；视频画面确定模块，用于在所述目标视频中，确定与所述时间戳对应的视频画面；信息搜索模块，用于基于对所述查询指令的识别结果以及所述视频画面，进行信息搜索。第三方面，本申请实施例还公开了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如本申请实施例任一所述的基于播放视频的信息搜索方法。第四方面，本申请实施例还公开了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行如本申请实施例任一所述的基于播放视频的信息搜索方法。根据本申请实施例的技术方案，通过获取用户在观看视频过程中发出的关于视频画面的查询指令，根据查询指令中的时间戳确定视频画面，基于图像搜索确定用户需求的信息，解决了传统电视和机顶盒均无法与用户做到互动，不能及时反馈给用户所需信息的问题，实现了在不影响用户观看视频的前提下，便捷而准确的进行与视频画面相关的信息搜索的效果，满足了用户对当前播放的视频画面中未知信息的搜索需求；同时，通过智能音箱作为视频播放设备和搜索服务之间的桥梁，丰富了现有的信息搜索模式。上述可选方式所具有的其他效果将在下文中结合具体实施例加以说明。附图说明附图用于更好地理解本方案，不构成对本申请的限定。其中：图1是根据本申请实施例公开的一种基于播放视频的信息搜索方法的流程图；图2是根据本申请实施例公开的另一种基于播放视频的信息搜索方法的流程图；图3是根据本申请实施例公开的将实时接收的视频信息和搜索结果进行叠加处理的一种示意图；图4是根据本申请实施例公开的智能音箱、服务器和用户终端之间的一种交互示意图；图5是根据本申请实施例公开的一种基于播放视频的信息搜索装置的结构示意图；图6是根据本申请实施例公开的一种电子设备的框图。具体实施方式以下结合附图对本申请的示范性实施例做出说明，其中包括本申请实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本申请的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。图1是根据本申请实施例公开的一种基于播放视频的信息搜索方法的流程图，本实施例可以适用于在用户观看视频过程中，通过智能音箱对当前播放的视频画面中的未知信息进行搜索的情况，用户观看的视频包括电视节目以及在网络视频。本实施例方法可以由基于播放视频的信息搜索装置来执行，该装置可以采用软件和/或硬件的方式实现，并可集成在任意的具有计算能力的电子设备上，例如智能音箱对应的后台服务器等，以下主要以该服务器为例，对本申请实施例方案进行示例性说明。如图1所示，本实施例公开的基于播放视频的信息搜索方法包括：S101、识别智能音箱发送的音频信息，确定目标视频。在本实施例中，用户可以通过智能音箱控制视频播放设备播放其想看的视频内容。智能音箱向服务器发送的音频信息用于服务器确定目标视频，服务器在确定目标视频的过程中，可以同时确定目标视频的播放进度。音频信息的具体内容与播放设备当前的状态有关，例如，如果是等待播放视频，则音频信息可以包括用户向智能音箱发出的视频播放语音指令，指令发出时刻对应的视频播放进度为0，随本文档来自技高网...

【技术保护点】
1.一种基于播放视频的信息搜索方法，其特征在于，包括：/n识别智能音箱发送的音频信息，确定目标视频；/n获取所述智能音箱发送的查询指令，其中，所述查询指令由用户观看所述目标视频过程中，基于当前播放的视频画面而触发，所述查询指令中携带有与所述视频画面对应的时间戳；/n在所述目标视频中，确定与所述时间戳对应的视频画面；/n基于对所述查询指令的识别结果以及所述视频画面，进行信息搜索。/n

【技术特征摘要】
1.一种基于播放视频的信息搜索方法，其特征在于，包括：
识别智能音箱发送的音频信息，确定目标视频；
获取所述智能音箱发送的查询指令，其中，所述查询指令由用户观看所述目标视频过程中，基于当前播放的视频画面而触发，所述查询指令中携带有与所述视频画面对应的时间戳；
在所述目标视频中，确定与所述时间戳对应的视频画面；
基于对所述查询指令的识别结果以及所述视频画面，进行信息搜索。


2.根据权利要求1所述的方法，其特征在于，基于对所述查询指令的识别结果以及所述视频画面，进行信息搜索，包括：
识别所述查询指令，确定用户的查询需求，其中，所述查询需求中包括查询对象；
基于所述查询对象，在所述视频画面中确定图像子区域；
基于所述图像子区域，搜索满足所述查询需求的信息。


3.根据权利要求1所述的方法，其特征在于，所述音频信息包括用户发出的视频播放语音指令，所述视频播放语音指令用于指示所述智能音箱控制播放设备播放所述目标视频；
相应的，所述识别智能音箱发送的音频信息，确定目标视频，包括：
获取所述智能音箱发送的所述视频播放语音指令；
识别所述视频播放语音指令中包括的节目名称或者频道信息，确定所述目标视频。


4.根据权利要求1所述的方法，其特征在于，所述音频信息包括播放设备当前播放的节目音频；
相应的，所述识别智能音箱发送的音频信息，确定目标视频，包括：
获取所述智能音箱发送的所述播放设备当前播放的节目音频；
对所述节目音频的内容进行识别，确定所述目标视频。


5.根据权利要求1所述的方法，其...

【专利技术属性】
技术研发人员：于德鸿，
申请(专利权)人：百度在线网络技术北京有限公司，
类型：发明
国别省市：北京;11