【技术实现步骤摘要】
本申请涉及音频处理技术，尤其涉及一种音频数据的处理方法、装置、设备、介质及产品。
技术介绍
1、随着技术发展，用户无需使用专用k歌直播耳机进行k歌，通过佩戴耳机即可实现k歌。
2、现有技术通过佩戴tws(true wireless stereo)耳机进行k歌，在k歌过程中，用户会听到耳机反馈至人耳的伴奏和人声，从而基于听到的伴奏和人声实时k歌，同时，通过手机麦克风进行拾音，以便对拾音所得音频进行剪辑后得到目标音频文件。
3、但是由于佩戴耳机容易引起物理降噪效果和/或闭塞效应，使用户在佩戴耳机k歌时听到的自身发出声音与实际发出声音的效果存在较大差异，并且手机麦克风进行拾音过程中存在传输延迟，导致人耳听到的人声和伴奏不同步，从而影响拾音录制的效果，降低用户体验。
技术实现思路
1、本申请实施例提供音频数据的处理方法、装置、设备、介质及产品，用以提升用户k歌的音频质量和音频处理的效率，增强用户耳返听音和录制的效果，提升用户体验。
2、第一方面，本申请实施例提供一种音频数据的处理方法，应用于耳机设备，包括：
3、获取外部人声信号和耳道声音信号；基于耳机设备的扬声器信号对耳道声音信号进行音频负叠加处理，得到物理传导人声信号，物理传导人声信号为用户听到的人声，外部人声信号为用户发出的实际声音；
4、对物理传导人声和外部人声信号进行预处理，得到耳返人声信号；
5、基于终端设备发送的伴奏同步信号和耳返人声信号生成上行音频文件，
6、在接收到终端设备发送的传输指令时，向终端设备传输上行音频文件，以使终端设备确定上行音频文件对应的上行同步信号，基于预设同步信号对上行同步信号进行验证，验证通过后，根据上行音频文件和对应的伴奏信号生成目标混音文件并输出。
7、可选地，对物理传导人声和外部人声信号进行预处理，得到耳返人声信号，包括：
8、对物理传导人声和外部人声信号进行降噪处理，得到干净人声信号；
9、对干净人声信号进行空间处理，得到实时的耳返人声信号。
10、可选地，基于终端设备发送的伴奏同步信号和耳返人声信号生成上行音频文件，包括：
11、通过对伴奏同步信号进行信号提取处理，得到预设同步信号；
12、根据预设同步信号中每个伴奏音频帧的预设顺序信息，将实时得到的干净人声信号和耳返人声信号进行对齐存储；
13、根据预设同步信号确定当前伴奏音频帧为结束音频帧时，将当前生成的干净人声信号和耳返人声信号进行对齐存储后生成上行音频文件，上行音频文件包括前一次结束音频帧之后存储的所有干净人声信号和耳返人声信号。
14、可选地，得到耳返人声信号之后，方法包括：
15、基于耳返人声信号和终端设备发送的伴奏同步信号进行音频正叠加处理，得到耳返音频，耳返音频用于更新耳道内实时的扬声器信号。
16、第二方面，本申请实施例提供一种音频数据的处理方法，应用于终端设备，包括：
17、获取伴奏信号和预设同步信号，生成伴奏同步信号向耳机设备发送，以使耳机设备根据伴奏同步信号和耳返人声信号生成上行音频文件，耳返人声信号是在耳机设备对物理传导人声和获取的外部人声信号进行预处理后得到的，物理传导人声是由耳机设备基于扬声器信号对获取的耳道声音信号进行音频负叠加处理后得到的；
18、向耳机设备发送传输指令，以使耳机设备基于传输指令将上行音频文件发送至终端设备；
19、在接收到耳机设备发送的上行音频文件时，确定上行音频文件对应的上行同步信号，基于预设同步信号对上行同步信号进行验证，验证通过后，根据上行音频文件和对应的伴奏信号生成目标混音文件并输出。
20、可选地，对上行音频文件进行音频处理，得到处理后的上行音频文件；
21、对处理后的上行音频文件进行信号分离处理，得到上行同步信号以及处理后的干净人声信号和耳返人声信号；
22、根据处理后的干净人声信号和伴奏信号生成目标干声文件；根据耳返人声信号和伴奏信号生成目标湿声文件。
23、第三方面，本申请实施例提供一种音频数据的处理装置，应用于耳机设备，包括：
24、第一获取模块，用于获取外部人声信号和耳道声音信号；基于耳机设备的扬声器信号对耳道声音信号进行音频负叠加处理，得到物理传导人声信号，物理传导人声信号为用户听到的人声，外部人声信号为用户发出的实际声音；
25、处理模块，用于对物理传导人声和外部人声信号进行预处理，得到耳返人声信号；
26、处理模块，还用于基于终端设备发送的伴奏同步信号和耳返人声信号生成上行音频文件，伴奏同步信号是由终端设备根据伴奏信号和预设同步信号生成的；
27、处理模块，还用于在接收到终端设备发送的传输指令时，向终端设备传输上行音频文件，以使终端设备确定上行音频文件对应的上行同步信号，基于预设同步信号对上行同步信号进行验证，验证通过后，根据上行音频文件和对应的伴奏信号生成目标混音文件并输出。
28、可选地，处理模块，还用于对物理传导人声和外部人声信号进行降噪处理，得到干净人声信号；
29、对干净人声信号进行空间处理，得到实时的耳返人声信号。
30、可选地，处理模块，还用于通过对伴奏同步信号进行信号提取处理，得到预设同步信号；
31、根据预设同步信号中每个伴奏音频帧的预设顺序信息，将实时得到的干净人声信号和耳返人声信号进行对齐存储；
32、根据预设同步信号确定当前伴奏音频帧为结束音频帧时，将当前生成的干净人声信号和耳返人声信号进行对齐存储后生成上行音频文件，上行音频文件包括前一次结束音频帧之后存储的所有干净人声信号和耳返人声信号。
33、可选地，处理模块，还用于在得到耳返人声信号之后，基于耳返人声信号和终端设备发送的伴奏同步信号进行音频正叠加处理，得到耳返音频，耳返音频用于更新耳道内实时的扬声器信号。
34、第四方面，本申请实施例提供一种音频数据的处理装置，应用于终端设备，包括：
35、第二获取模块，用于获取伴奏信号和预设同步信号，生成伴奏同步信号向耳机设备发送，以使耳机设备根据伴奏同步信号和耳返人声信号生成上行音频文件，耳返人声信号是在耳机设备对物理传导人声和获取的外部人声信号进行预处理后得到的，物理传导人声是由耳机设备基于扬声器信号对获取的耳道声音信号进行音频负叠加处理后得到的；
36、发送模块，用于向耳机设备发送传输指令，以使耳机设备基于传输指令将上行音频文件发送至终端设备；
37、接收模块，用于在接收到耳机设备发送的上行音频文件时，确定上行音频文件对应的上行同步信号，基于预设同步信号对上行同步信号进行验证，验证通过后，根据上行音频文件和对应的伴奏信号生成目标混音文件并输出。
38、可选地本文档来自技高网...
【技术保护点】
1.一种音频数据的处理方法，其特征在于，应用于耳机设备，包括：
2.根据权利要求1所述的方法，其特征在于，对所述物理传导人声和所述外部人声信号进行预处理，得到耳返人声信号，包括：
3.根据权利要求2所述的方法，其特征在于，基于终端设备发送的伴奏同步信号和所述耳返人声信号生成上行音频文件，包括：
4.根据权利要求1所述的方法，其特征在于，得到耳返人声信号之后，所述方法包括：
5.一种音频数据的处理方法，其特征在于，应用于终端设备，包括：
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
7.一种音频数据的处理装置，其特征在于，应用于耳机设备，包括：
8.一种音频数据的处理装置，其特征在于，应用于终端设备，包括：
9.一种电子设备，其特征在于，包括：存储器，处理器；
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如权利要求1-4或5-6中任一项所述的方法。
11.一种计算机程
...【技术特征摘要】
1.一种音频数据的处理方法，其特征在于，应用于耳机设备，包括：
2.根据权利要求1所述的方法，其特征在于，对所述物理传导人声和所述外部人声信号进行预处理，得到耳返人声信号，包括：
3.根据权利要求2所述的方法，其特征在于，基于终端设备发送的伴奏同步信号和所述耳返人声信号生成上行音频文件，包括：
4.根据权利要求1所述的方法，其特征在于，得到耳返人声信号之后，所述方法包括：
5.一种音频数据的处理方法，其特征在于，应用于终端设备，包括：
6.根据权利要求5所述的方法，其特征在于，所述方法还...
【专利技术属性】
技术研发人员：刘新岳，程黎辉，关亚东，
申请(专利权)人：上海龙旗智能科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。