资源推送方法以及装置制造方法及图纸

本公开提供了一种资源推送方法以及装置，其中，该方法包括：接收用户端发送的包括指示对象的目标图像；所述指示对象为用户控制的、用于指示需要读取的书本中内容的人体目标部位或目标物；基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果；基于所述内容识别结果，获取与所述内容识别结果对应的推送资源，并将所述推送资源发送给所述用户端。

【技术实现步骤摘要】
资源推送方法以及装置
本公开涉及互联网
，具体而言，涉及一种资源推送方法以及装置。
技术介绍
互联网技术的发展，为用户提供了很多便捷的学习方式。比如，用户在遇到教科书中不理解的、不会阅读的内容时，可以对该内容进行复制、编辑后发送至线上服务器，并可以接收线上服务器基于该内容提供的相关学习资源，比如理解注释或发音等，以实现对该内容的学习。但是，通过复制、编辑等方式将教科书中的内容发送至线上服务器的过程较为繁琐，会影响用户的学习效率。因此，如何对用户关注的内容进行自动化识别进而进行相关资源的推送是值得研究的问题。
技术实现思路
本公开实施例至少提供一种资源推送方法以及装置。第一方面，本公开实施例提供了一种资源推送方法，所述方法应用于服务端，包括：接收用户端发送的包括指示对象的目标图像；所述指示对象为用户控制的、用于指示需要读取的书本中内容的人体目标部位或目标物；基于文本识别(OpticalCharacterRecognition，OCR)算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果；基于所述内容识别结果，获取与所述内容识别结果对应的推送资源，并将所述推送资源发送给所述用户端。一种可选的实施方式中，所述基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果，包括：基于所述OCR算法，对所述目标图像进行识别，以及，基于所述图像识别算法，对所述目标图像进行识别；若首先得到基于所述OCR算法的第一中间识别结果，该第一中间识别结果的置信度高于设定置信度阈值，且在得到所述第一中间识别结果后的预设时间段之内未得到基于所述图像识别算法的第二中间识别结果，则将所述第一中间识别结果作为所述内容识别结果；若首先得到基于所述图像识别算法的第二中间识别结果，该第二中间识别结果的置信度高于设定置信度阈值，且在得到所述第二中间识别结果后的预设时间段之内未得到基于所述OCR算法的第一中间识别结果，则将所述第二中间识别结果作为所述内容识别结果。一种可选的实施方式中，所述基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果，包括：若所述第一中间识别结果和第二中间识别结果均指示在间隔预设时间段内得到识别结果，则将所述第一中间识别结果和第二中间识别结果中指示的置信度较高、且大于设定置信度阈值的识别结果作为所述内容识别结果。一种可选的实施方式中，基于所述内容识别结果，获取与所述内容识别结果对应的推送资源，包括：基于所述内容识别结果中包含的标识信息，获取与所述标识信息关联的目标资源；将获取的所述目标资源作为所述内容识别结果对应的推送资源。一种可选的实施方式中，在接收用户端发送的包括指示对象的目标图像之前，所述方法还包括：为接收到的多个目标资源确定对应的所述标识信息，并将所述标识信息与对应的所述目标资源关联后存储。第二方面，本公开实施例提供了一种资源推送方法，所述方法应用于用户端，包括：周期性获取第一采样图像，并对获取的第一采样图像进行指示对象识别；在识别到获取的第一采样图像中含有所述指示对象后，基于所述用户端拍摄的第二采样图像，获取所述目标图像；将所述目标图像发送给服务端，接收并展示所述服务端返回的所述目标图像对应的推送资源。一种可选实施方式中，在识别到获取的第一采样图像中含有所述指示对象后，基于所述用户端拍摄的第二采样图像，获取所述目标图像，包括：在识别到获取的连续多帧第一采样图像中每帧第一采样图像中均含有所述指示对象后，将连续多帧第一采样图像中的最后一帧第一采样图像的下一帧第一采样图像确定为所述第二采样图像；基于所述第二采样图像，获取所述目标图像。一种可选实施方式中，基于所述第二采样图像，获取所述目标图像，包括：按照设置的读取面积值，从所述第二采样图像中截取得到所述目标图像。第三方面，本公开实施例还提供一种资源推送装置，包括：目标图像接收模块，用于接收用户端发送的包括指示对象的目标图像；所述指示对象为用户控制的、用于指示需要读取的书本中内容的人体目标部位或目标物；识别模块，用于基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果；发送模块，用于基于所述内容识别结果，获取与所述内容识别结果对应的推送资源，并将所述推送资源发送给所述用户端。一种可选实施方式中，所述识别模块，在基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果时，用于：基于所述OCR算法，对所述目标图像进行识别，以及，基于所述图像识别算法，对所述目标图像进行识别；若首先得到基于所述OCR算法的第一中间识别结果，该第一中间识别结果的置信度高于设定置信度阈值，且在得到所述第一中间识别结果后的预设时间段之内未得到基于所述图像识别算法的第二中间识别结果，则将所述第一中间识别结果作为所述内容识别结果；若首先得到基于所述图像识别算法的第二中间识别结果，该第二中间识别结果的置信度高于设定置信度阈值，且在得到所述第二中间识别结果后的预设时间段之内未得到基于所述OCR算法的第一中间识别结果，则将所述第二中间识别结果作为所述内容识别结果。一种可选实施方式中，所述识别模块，在基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果时，用于：若所述第一中间识别结果和第二中间识别结果均指示在间隔预设时间段内得到识别结果，则将所述第一中间识别结果和第二中间识别结果中指示的置信度较高、且大于设定置信度阈值的识别结果作为所述内容识别结果。一种可选实施方式中，所述发送模块，在基于所述内容识别结果，获取与所述内容识别结果对应的推送资源时，用于：基于所述内容识别结果中包含的标识信息，获取与所述标识信息关联的目标资源；将获取的所述目标资源作为所述内容识别结果对应的推送资源。一种可选实施方式中，所述装置还包括：关联模块，用于为接收到的多个目标资源确定对应的所述标识信息，并将所述标识信息与对应的所述目标资源关联后存储。第四方面，本公开实施例还提供一种资源推送装置，包括：第一采样图像获取模块，用于周期性获取第一采样图像，并对获取的第一采样图像进行指示对象识别；目标图像获取模块，用于在识别到获取的第一采样图像中含有所述指示对象后，基于所述用户端拍摄的第二采样图像，获取所述目标图像；推送资源接收模块，用于将所述目标图像发送给服务端，接收并展示本文档来自技高网...

【技术保护点】
1.一种资源推送方法，其特征在于，所述方法应用于服务端，包括：/n接收用户端发送的包括指示对象的目标图像；所述指示对象为用户控制的、用于指示需要读取的书本中内容的人体目标部位或目标物；/n基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果；/n基于所述内容识别结果，获取与所述内容识别结果对应的推送资源，并将所述推送资源发送给所述用户端。/n

【技术特征摘要】
1.一种资源推送方法，其特征在于，所述方法应用于服务端，包括：
接收用户端发送的包括指示对象的目标图像；所述指示对象为用户控制的、用于指示需要读取的书本中内容的人体目标部位或目标物；
基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果；
基于所述内容识别结果，获取与所述内容识别结果对应的推送资源，并将所述推送资源发送给所述用户端。


2.根据权利要求1所述的方法，其特征在于，所述基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果，包括：
基于所述OCR算法，对所述目标图像进行识别，以及，基于所述图像识别算法，对所述目标图像进行识别；
若首先得到基于所述OCR算法的第一中间识别结果，该第一中间识别结果的置信度高于设定置信度阈值，且在得到所述第一中间识别结果后的预设时间段之内未得到基于所述图像识别算法的第二中间识别结果，则将所述第一中间识别结果作为所述内容识别结果；
若首先得到基于所述图像识别算法的第二中间识别结果，该第二中间识别结果的置信度高于设定置信度阈值，且在得到所述第二中间识别结果后的预设时间段之内未得到基于所述OCR算法的第一中间识别结果，则将所述第二中间识别结果作为所述内容识别结果。


3.根据权利要求2所述的方法，其特征在于，所述基于文本识别OCR算法以及图像识别算法，对所述包括指示对象的目标图像进行识别，得到与所述目标图像中所述指示对象的位置对应的内容识别结果，包括：
若所述第一中间识别结果和第二中间识别结果均指示在间隔预设时间段内得到识别结果，则将所述第一中间识别结果和第二中间识别结果中指示的置信度较高、且大于设定置信度阈值的识别结果作为所述内容识别结果。


4.根据权利要求1所述的方法，其特征在于，基于所述内容识别结果，获取与所述内容识别结果对应的推送资源，包括：
基于所述内容识别结果中包含的标识信息，获取与所述标识信息关联的目标资源；
将获取的所述目标资源作为所述内容识别结果对应的推送资源。


5.根据权利要求4所述的方法，其特征在于，在接收用户端发送的包括指示对象的目标图像之前，所述方法还包括：
为接收到的多个目标资源确定对应的所述标识信息，并将所述标识信息与对应的所述目标资源关联后存储。


6.一种资源推送方法，其特征在于，所述方法应用于用户端，包括：
周期性获取第一采样图像，并对...

【专利技术属性】
技术研发人员：孙懿博，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：北京;11