System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术的实施方式涉及终端,更具体地,本专利技术的实施方式涉及一种用于便携式电子设备的数据交互方法,以及执行前述方法的便携式电子设备和计算机可读存储介质。
技术介绍
1、本部分旨在为权利要求书中陈述的本专利技术的实施方式提供背景或上下文。此处的描述可包括可以探究的概念,但不一定是之前已经想到或者已经探究的概念。因此,除非在此指出,否则在本部分中描述的内容对于本申请的说明书和权利要求书而言不是现有技术,并且并不因为包括在本部分中就承认是现有技术。
2、在教育与学习场景中,利用便携式电子设备等学习工具辅助学习,可以一定程度地辅助用户学习。随着人工智能技术的发展,通过技术赋能使得目前的便携式电子设备在应用功能上得到一定程度的升级。但是,目前应用功能的输入模式的局限性,没有充分地利用人工智能技术的优势,也不能满足用户的搜索诉求。
技术实现思路
1、已知的数据交互方式受制于应用功能的模式的局限,采用单一的输入方式得到的响应结果不能满足用户的诉求。
2、为此,非常需要一种改进的用于便携式电子设备的数据交互方法,使得便携式电子设备的输入信息可以更好地与人工智能技术相结合,满足用户的搜索诉求,同时提升用户使用便携式电子设备的体验度。
3、在本上下文中,本专利技术的实施方式期望提供一种用于便携式电子设备的数据交互方法、便携式电子设备及计算机可读存储介质。
4、在本专利技术实施方式的第一方面中,提出了一种用于便携式电子设备的数据交互方法,便携式电子设备
5、在本专利技术的一个实施例中,第二图形用户界面包括用于获取语音数据的语音功能控件,通过第二图形用户界面获取至少一张经由第一摄像头采集的扫描图像和经由麦克风采集的第一语音数据,包括:在每次检测到第一摄像头结束扫描时,在第二图形用户界面中显示一张经由第一摄像头采集的扫描图像和语音功能控件;检测到针对语音功能控件的触控输入;响应于该触控输入,获取经由麦克风采集的第一语音数据并在第二图形用户界面中显示与第一语音数据对应的文字内容;其中,在第二图形用户界面中添加显示的扫描图像的总数量小于等于预设阈值。
6、在本专利技术的另一个实施例中,在获取多张扫描图像之后,该方法还包括:将多张扫描图像进行拼接处理,得到拼接扫描图像;其中,反馈结果是根据拼接扫描图像和语音数据确定的意图判断结果经由预先构建的大模型进行处理得到的。
7、在本专利技术的再一个实施例中,便携式电子设备还包括第二摄像头,第二摄像头用于拍照,第一图形用户界面包括多个输入模式控件,输入模式控件与便携式电子设备的输入装置一一对应,输入装置包括第一摄像头、第二摄像头和麦克风,该方法还包括:当检测到针对与第一摄像头对应的输入模式控件的触控输入时,响应于该触控输入,从第一图形用户界面切换显示为用于提示获取扫描图像的界面;当检测到第一摄像头启动时,从用于提示获取扫描图像的界面自动地切换显示为第二图形用户界面;或者,当检测到针对与麦克风对应的输入模式控件的触控输入时,响应于该触控输入,获取经由麦克风采集的第三语音数据并在第一图形用户界面中显示与第三语音数据对应的文字内容;在检测到麦克风采集结束时,在第一图形用户界面中显示与第三语音数据对应的反馈内容。
8、在本专利技术的一个实施例中,便携式电子设备还包括第二摄像头,第二摄像头用于拍照,第一图形用户界面包括多个输入模式控件,输入模式控件与便携式电子设备的输入装置一一对应,输入装置包括第一摄像头、第二摄像头和麦克风,该方法还包括:当检测到针对与第二摄像头对应的输入模式控件的触控输入时,响应于该触控输入,将第一图形用户界面切换显示为用于获取拍照图像的操作界面;当检测到在操作界面接收到的确认输入时,响应于该确认输入,从用于获取拍照图像的操作界面切换显示为第三图形用户界面,通过第三图形用户界面获取至少一张经由第二摄像头采集的拍照图像和经由麦克风采集的第二语音数据;检测到第二提交输入,第二提交输入用于同时提交在第三图形用户界面内显示的拍照图像和第二语音数据;响应于第二提交输入,将第三图形用户界面切换显示为第一图形用户界面,并通过第一图形用户界面呈现第二反馈结果,第二反馈结果是根据拍照图像和第二语音数据确定的意图判断结果经由预先构建的大模型进行处理得到的。
9、在本专利技术的另一个实施例中,第三图形用户界面还包括添加图像功能控件和用于获取语音数据的语音功能控件,添加图像功能控件用于触发第二摄像头采集新的拍照图像,通过第三图形用户界面获取至少一张经由第二摄像头采集的拍照图像和经由麦克风采集的第二语音数据,包括:在从用于获取拍照图像的操作界面切换显示为第三图形用户界面时,在第三图形用户界面中添加显示拍照图像和添加图像功能控件以及语音功能控件;检测到至少一次针对添加图像功能控件的触控输入;每次响应于该触控输入,将第三图形用户界面切换显示为用于获取拍照图像的操作界面;当检测到在操作界面接收到的确认输入时,响应于该确认输入,从用于获取拍照图像的操作界面切换显示为第三图形用户界面,在第三图形用户界面中添加显示经由第二摄像头采集的一张新的拍照图像;检测到针对第三图形用户界面上显示的语音功能控件的触控输入;响应于该触控输入,获取经由麦克风采集的第二语音数据并在第三图形用户界面中显示与第二语音数据对应的文字内容;其中,在与第三图形用户界面中添加显示的拍照图像的总数量小于等于预设阈值。
10、在本专利技术的又一个实施例中,第一模式为人工智能驱动的助学模式,第一图形用户界面是人工智能聊天界面的聊天窗口,第二图形用户界面是供用户输入数据的输入框,该方法包括:在便携式电子设备处于人工智能驱动的助学模式时,将便携式电子设备包括第一摄像头的一端与扫描对象接触,则检测到第一摄像头的启动;在便携式电子设备包括第一摄像头的一端与扫描对象分离时,则检测到结束扫描,在第二图像用户界面中显示经由第一摄像头采集的扫描图像;在第二图形用户界面接收到第一提交输入时,在第一图形用户界面内以上下文对话方式呈现扫描图像和第一语音数据对应的文字内容和反馈结果,并通过语音播报和文字展示相结合的方式或者多媒体播放的方式呈现反馈结果;在第一图形用户界面呈现反馈结果之后,接收针对第一图形用户界面的多个输入模式控件的触控输入,在第一图形用户界面中继续追加对话内容。
11、在本专利技术的再一个实施例中,第一模式为人工智能驱动本文档来自技高网...
【技术保护点】
1.一种用于便携式电子设备的数据交互方法,所述便携式电子设备包括第一摄像头和麦克风,所述第一摄像头用于扫描,其特征在于,该方法包括:
2.根据权利要求1所述的方法,其特征在于,所述第二图形用户界面包括用于获取语音数据的语音功能控件,通过所述第二图形用户界面获取至少一张经由所述第一摄像头采集的扫描图像和经由所述麦克风采集的第一语音数据,包括:
3.根据权利要求2所述的方法,其特征在于,在获取多张所述扫描图像之后,该方法还包括:
4.根据权利要求1所述的方法,其特征在于,所述便携式电子设备还包括第二摄像头,所述第二摄像头用于拍照,所述第一图形用户界面包括多个输入模式控件,所述输入模式控件与所述便携式电子设备的输入装置一一对应,所述输入装置包括所述第一摄像头、所述第二摄像头和所述麦克风,该方法还包括:
5.根据权利要求1所述的方法,其特征在于,所述便携式电子设备还包括第二摄像头,所述第二摄像头用于拍照,所述第一图形用户界面包括多个输入模式控件,所述输入模式控件与所述便携式电子设备的输入装置一一对应,所述输入装置包括所述第一摄像头、所述第二
6.根据权利要求5所述的方法,其特征在于,所述第三图形用户界面还包括添加图像功能控件和用于获取语音数据的语音功能控件,所述添加图像功能控件用于触发所述第二摄像头采集新的拍照图像,通过所述第三图形用户界面获取至少一张经由所述第二摄像头采集的拍照图像和经由所述麦克风采集的第二语音数据,包括:
7.根据权利要求1-5中任意一项所述的方法,其特征在于,所述第一模式为人工智能驱动的助学模式,所述第一图形用户界面是人工智能聊天界面的聊天窗口,所述第二图形用户界面是供用户输入数据的输入框,该方法包括:
8.根据权利要求5所述的方法,其特征在于,所述第一模式为人工智能驱动的助学模式,所述第一图形用户界面是人工智能聊天界面的聊天窗口,所述第二图形用户界面是供用户输入数据的输入框,所述第三图形用户界面是供用户输入数据的输入框,该方法包括:
9.根据权利要求1所述的方法,其特征在于,所述大模型被配置于所述便携式电子设备的本地,在所述经由预先构建的大模型进行处理得到的所述反馈结果之前,该方法包括:
10.一种便携式电子设备,其特征在于,包括:
...【技术特征摘要】
1.一种用于便携式电子设备的数据交互方法,所述便携式电子设备包括第一摄像头和麦克风,所述第一摄像头用于扫描,其特征在于,该方法包括:
2.根据权利要求1所述的方法,其特征在于,所述第二图形用户界面包括用于获取语音数据的语音功能控件,通过所述第二图形用户界面获取至少一张经由所述第一摄像头采集的扫描图像和经由所述麦克风采集的第一语音数据,包括:
3.根据权利要求2所述的方法,其特征在于,在获取多张所述扫描图像之后,该方法还包括:
4.根据权利要求1所述的方法,其特征在于,所述便携式电子设备还包括第二摄像头,所述第二摄像头用于拍照,所述第一图形用户界面包括多个输入模式控件,所述输入模式控件与所述便携式电子设备的输入装置一一对应,所述输入装置包括所述第一摄像头、所述第二摄像头和所述麦克风,该方法还包括:
5.根据权利要求1所述的方法,其特征在于,所述便携式电子设备还包括第二摄像头,所述第二摄像头用于拍照,所述第一图形用户界面包括多个输入模式控件,所述输入模式控件与所述便携式电子设备的输入装置一一对应,所述输入装置包括所述第一摄像头、所述第二摄像头和所述麦克风...
【专利技术属性】
技术研发人员:郑雄,赵冬霜,孙希仁,朱坤特,孟旭,
申请(专利权)人:网易有道杭州智能科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。