一种多媒体智能控制方法及客户端、系统技术方案

一种多媒体智能控制方法及客户端与系统，所述方法包括：实时获取用户的第一多媒体信息和/或传感器信息，以获取对应的实时动作信息；接收用户指令，获取对应的第二多媒体信息，将第二多媒体信息分割成一个或多个片段信息；基于实时动作信息生成智能控制指令并修正智能控制指令；进而控制所述片段信息的内容播放速度。减少了多媒体处理的资源消耗，同时方便用户利用自身动作来灵活控制多媒体的播放，防止出现播放停顿、跳跃、不连贯等情况，进而使用户获得沉浸式的参与体验。

【技术实现步骤摘要】
一种多媒体智能控制方法及客户端、系统
本专利技术涉及多媒体智能控制领域，具体涉及一种多媒体智能控制方法及客户端、系统。
技术介绍
目前由于距离、时间、人员流动等因素，导致人们无法亲身前往特定场所参与特定的活动，例如祭拜、祈福、殿堂活动等，市面上出现了一些能够为用户提供预先录制好的视频的线上礼佛产品，或通过互联网远程直播现场活动。但通过这些渠道，用户仍然无法获得参与上述场所活动的“沉浸式”体验。近年来为了改善用户体验，在向用户提供互联网视频播放服务时，将体感控制的方法应用其中，例如用户可以做出一些特定动作来加速视频播放，或者根据用户动作拼凑个性化的视频片段，上述方案存在控制形式单一、视频播放生硬不连贯等缺陷。还有一些不计算力成本的方法，例如实时计算用户动作与特定动作的匹配程度，进而控制视频加速或减速播放，由于需要对不同视频流进行连续的图像匹配计算，算法复杂且对算力要求较高，终端成本要求太高。
技术实现思路
为解决上述问题中的至少之一，提出一种简单、灵活的多媒体智能控制方法及产品，使得用户可以藉此获得沉浸式的远程参与体验。为实现上述目的，本专利技术的第一方面提供一种多媒体智能控制方法，包括：步骤101.实时获取用户的第一多媒体信息和/或传感器信息，根据所述第一多媒体信息和/或所述传感器信息获取对应的实时动作信息；步骤102.接收用户指令，所述用户指令包括标准片段时长；获取与所述用户指令对应的第二多媒体信息；所述第二多媒体信息包括一个或多个祭拜元素，根据所述祭拜元素将第二多媒体信息分割成一个或多个片段信息；步骤103.基于所述实时动作信息生成智能控制指令，所述智能控制指令包括控制播放速度的状态指令和播放下一片段信息的决策指令；步骤104.根据所述标准片段时长修正所述智能控制指令，得到修正后的决策指令和修正后的状态指令；步骤105.根据所述智能控制指令中修正前的状态指令和所述修正后的状态指令控制所述片段信息的内容播放速度。优选地，每个所述片段信息的时长是所述标准片段时长的整数倍。优选地，所述修正后的决策指令之间的时间间隔是所述标准片段时长的整数倍。优选地，所述步骤104具体包括：获取所述智能控制指令中的当前决策指令的时间点，如果所述当前决策指令的时间点与前一决策指令的时间点之间的时间间隔不等于所述标准片段时长的整数倍，则延迟修正所述当前决策指令的时间点，使修正后的当前决策指令的时间点与所述前一决策指令的时间点之间的时间间隔等于所述标准片段时长的整数倍。该步骤进一步包括：根据所述修正前的当前决策指令的时间点确定当前片段信息的对应播放时间点，基于所述当前片段信息的对应播放时间点与下一片段信息的起始时间点之间的时间间隔，以及所述当前决策指令的延迟修正时间，确定修正后的状态指令。进一步，所述步骤105具体包括：根据修正前的状态指令，控制当前片段信息的所述对应播放时间点之前的内容播放速度；以及根据所述修正后的状态指令，控制当前片段信息的所述对应播放时间点之后的内容播放速度。优选地，所述步骤102进一步包括：获取所述第二多媒体信息之后、分割成一个或多个片段信息之前，根据所述第一多媒体信息对所述第二多媒体信息进行融合操作。通过本专利技术的第一方面，用户可以利用自身动作来灵活控制相应多媒体的播放，进而使其在进行远程礼佛等活动时获得沉浸式的参与体验，具体有益效果至少包括：第一，上述技术方案不需要拼凑多媒体片段，用户播放的均是各个环节连贯的完整多媒体信息，因此不会出现播放停顿跳跃、不连贯的情况；第二，上述技术方案可以根据用户当前形象，对多媒体信息进行融合处理，从而使用户侧获得自身亲自参与的多媒体内容；第三，上述技术方案不需要对视频流进行连续不间断的图像识别匹配操作，只需要按照标准片段时长进行指令的修正与执行，甚至可以将绝大部分操作置于客户端实现，相较于现有技术大大减少了运算成本、降低了硬件要求；第四，用户可以根据自身需要调节标准片段时长，从而在实时性和控制准确性之间保持平衡，实现用户的自调节，进一步增强用户的沉浸式体验。本专利技术的第二方面提供一种多媒体智能控制客户端，包括采集模块、输入模块、通讯模块、第一处理模块、指令控制模块和多媒体内容播放模块，其中，所述采集模块，用于实时采集第一多媒体信息和/或传感器信息，并将采集的信息发送给所述第一处理模块；所述输入模块，用于接收用户指令，所述用户指令包括标准片段时长；所述通讯模块，用于向多媒体智能控制服务器发送所述用户指令，并接收所述多媒体智能控制服务器发送的第二多媒体信息，所述第二多媒体信息包括一个或多个祭拜元素；所述第一处理模块，用于接收所述采集模块发送的第一多媒体信息和/或传感器信息，并处理得到实时动作信息；根据所述祭拜元素将所述第二多媒体信息分割成一个或多个片段信息；所述指令控制模块，用于根据所述实时动作信息生成智能控制指令，并基于所述标准片段时长修正所述智能控制指令，得到修正后的决策指令与修正后的状态指令；多媒体内容播放模块，用于根据修正前的状态指令与所述修正后的状态指令控制所述片段信息的内容播放速度。第三方面，本专利技术提供一种多媒体智能控制系统，所述多媒体智能控制系统包括：多媒体智能控制服务器，以及本专利技术第二方面提供的多媒体智能控制客户端。与现有技术相比，本专利技术的第二和第三方面为用户提供了可以利用自身动作来灵活控制相应多媒体播放的产品，进而使其在进行远程礼佛等活动时获得沉浸式的参与体验。客户端自身采集用户动作，进而按照展现的多媒体内容生成控制各个片段信息播放的控制指令并加以修正，从而控制多媒体中各个片段信息的播放，无需进行复杂的视频拼接、编辑操作；同时，由于远程礼佛、祭拜等活动并不要求用户的动作与多媒体中的动作同步且同态，节省了视频实时画面匹配识别的运算资源，使得绝大部分信息处理的工作可以不依赖服务器而独立完成，减少了运算成本；此外，用户可以根据自身需求来调节标准片段时长，进而修正智能控制指令，使得其能够在不明显增加处理负担的基础上，有效地控制多媒体连贯且“跟随”用户动作播放，进而在实时性和控制准确性之间实现用户的自调节，进一步增强用户的沉浸式体验。本专利技术的其他特征及优点，将在随后的说明书具体实施方式部分阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。附图说明图1为本专利技术第一实施方式中的多媒体智能控制方法的流程图；图2为本专利技术第二实施方式中的多媒体智能控制客户端结构示意性框图；图3为本专利技术第三实施方式中的多媒体智能控制系统结构示意性框图。具体实施方式下面将结合本专利技术实施方式中的附图，对本专利技术实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式仅仅是本专利技术一部分实施方式，而不是全部的实施方式。基于本专利技术中的实施方式，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施方式，都属于本专利技术保护的范围。具体实施方式一请参阅图1，本专利技术第一实施方式提供一种多媒体智能控制方法，包括如下步骤：步骤101.实时获取用户本文档来自技高网...

【技术保护点】
1.一种多媒体智能控制方法，其特征在于，包括如下步骤：/n步骤101.实时获取用户的第一多媒体信息和/或传感器信息，根据所述第一多媒体信息和/或所述传感器信息获取对应的实时动作信息；/n步骤102.接收用户指令，所述用户指令包括标准片段时长；获取与所述用户指令对应的第二多媒体信息；所述第二多媒体信息包括一个或多个祭拜元素，根据所述祭拜元素将第二多媒体信息分割成一个或多个片段信息；/n步骤103.基于所述实时动作信息生成智能控制指令，所述智能控制指令包括控制播放速度的状态指令和播放下一片段信息的决策指令；/n步骤104.根据所述标准片段时长修正所述智能控制指令，得到修正后的决策指令和修正后的状态指令；/n步骤105.根据所述智能控制指令中修正前的状态指令和所述修正后的状态指令控制所述片段信息的内容播放速度。/n

【技术特征摘要】
1.一种多媒体智能控制方法，其特征在于，包括如下步骤：
步骤101.实时获取用户的第一多媒体信息和/或传感器信息，根据所述第一多媒体信息和/或所述传感器信息获取对应的实时动作信息；
步骤102.接收用户指令，所述用户指令包括标准片段时长；获取与所述用户指令对应的第二多媒体信息；所述第二多媒体信息包括一个或多个祭拜元素，根据所述祭拜元素将第二多媒体信息分割成一个或多个片段信息；
步骤103.基于所述实时动作信息生成智能控制指令，所述智能控制指令包括控制播放速度的状态指令和播放下一片段信息的决策指令；
步骤104.根据所述标准片段时长修正所述智能控制指令，得到修正后的决策指令和修正后的状态指令；
步骤105.根据所述智能控制指令中修正前的状态指令和所述修正后的状态指令控制所述片段信息的内容播放速度。


2.根据权利要求1所述的多媒体智能控制方法，其特征在于，每个所述片段信息的时长是所述标准片段时长的整数倍。


3.根据权利要求1所述的多媒体智能控制方法，其特征在于，所述修正后的决策指令之间的时间间隔是所述标准片段时长的整数倍。


4.根据权利要求3所述的多媒体智能控制方法，其特征在于，所述步骤104具体包括：获取所述智能控制指令中的当前决策指令的时间点，如果所述当前决策指令的时间点与前一决策指令的时间点之间的时间间隔不等于所述标准片段时长的整数倍，则延迟修正所述当前决策指令的时间点，使修正后的当前决策指令的时间点与所述前一决策指令的时间点之间的时间间隔等于所述标准片段时长的整数倍。


5.根据权利要求4所述的多媒体智能控制方法，其特征在于，所述步骤104进一步包括：根据所述修正前的当前决策指令的时间点确定当前片段信息的对应播放时间点，基于所述当前片段信息的对应播放时间点与下一片段信息的起始时间点之间的时间间隔，以及所述当前决策指令的延迟修正时间，确定修正后的状态指令。


6.根据权利要求5所述的多媒体智能控制方法，其特征在于，所述步骤105具体包括：根据修正前的状态指令，控制当前片段信息的所述对应播放时间点之前的内容播放速度；以及根据所述修正后的状态指令，控制当前片段信息的所述对应播放时间点之后的内容播放速度。


7.根据权利要求1至6中任意一项所述的多媒体智能控制方法，其特征在于，所述步骤102进一步包括：获取所述第二多媒体信息之后、分割成一个或多个片段信息之前，根据所述第一多媒体信息对所述第二多媒体信息进行融合操作。


8.一种多媒体智能控制客户端，其特征在于，包括采集模块、输入模块、通讯模块、第一处理模块、指令控制模块和多媒体内容播放模块，其中，
所述采集模块，用于实时采集第一多媒体信息和/或传感器信息，并将采集的信息发送给所述第一处理模块；
所述输入模块，用于接收用户指令，所述用户指令包括标准片段时长；
所述通讯...

【专利技术属性】
技术研发人员：李和康，
申请(专利权)人：宁波绿能科创文化艺术发展有限公司，
类型：发明
国别省市：浙江;33