CN113535115B 音频播放方法、装置、电子设备及存储介质 （北京小米移动软件有限公司）

在保证主设备与从设备对音频数据进行同步播2根据每帧音频数据生成对应的音频包，并将生成的多帧音频包发根据所述主设备的硬件性能，预测将所述下一帧音频数据写入至所述如果所述预测播出时间小于所述第一目标播出时间下一帧音频数据进行合并，根据所述预测播出时间和所述第一目标播出时间之间的差值，如果所述预测播出时间大于所述第一目标播出时间下一帧音频数据进行合并，根据所述预测播出时间和所述第一目标播出时间之间的差值，从所述数据扩充或数据压缩后的音频数据之中选取前N个插值节点对应的音频数据，如果所述预测播出时间小于所述第一目标播出时间所述当前帧音频数据作为新的当前帧音频数据基于三次样条插值法，根据所述第一调整点数或第二调整点数根据所述下一帧音频数据的开始时间和所述播出响应时间，确定所3根据所述从设备的硬件性能，预测将所述下一帧音频数据写入至所述如果所述预测播出时间小于所述第二目标播出时间下一帧音频数据进行合并，根据所述预测播出时间和所述第二目标播出时间之间的差值，如果所述预测播出时间大于所述第二目标播出时间下一帧音频数据进行合并；根据所述预测播出时间和所述第二目标播出时间之间的差值，从所述数据扩充或数据压缩后的音频数据之中选取前N个插值节点对应的音频数据，如果所述预测播出时间小于所述第二目标播出时间所述当前帧音频数据作为新的当前帧音频数据基于三次样条插值法，根据所述第三调整点数或第四调整点数根据所述下一帧音频数据的开始时间、所述播出响应时间和所述4划分处理模块，用于获取待播放的音频数据流发送模块，用于根据每帧音频数据生成对应的音预测单元，用于根据所述主设备的硬件性能，预测将所述下一第二确定单元，用于根据所述当前时间和所述所需时间调整单元，用于在所述预测播出时间和所述第一目标播出时间不一如果所述预测播出时间小于所述第一目标播出时间下一帧音频数据进行合并；根据所述预测播出时间和所述第一目标播出时间之间的差值，如果所述预测播出时间大于所述第一目标播出时间下一帧音频数据进行合并，根据所述预测播出时间和所述第一目标播出时间之间的差值，从所述数据扩充或数据压缩后的音频数据之中选取前N个插值节点对应的音频数据，如果所述预测播出时间小于所述第一目标播出时间所述当前帧音频数据作为新的当前帧音频数据基于三次样条插值法，根据所述第一调整点数或第二调整点数根据所述下一帧音频数据的开始时间和所述播出响应时间，确定所5预测单元，用于根据所述从设备的硬件性能，预测将所述下一第二确定单元，用于根据所述当前时间和所述所需时间调整单元，用于在所述预测播出时间和所述第二目标播出时间不一如果所述预测播出时间小于所述第二目标播出时间下一帧音频数据进行合并，根据所述预测播出时间和所述第二目标播出时间之间的差值，如果所述预测播出时间大于所述第二目标播出时间下一帧音频数据进行合并；根据所述预测播出时间和所述第二目标播出时间之间的差值，从所述数据扩充或数据压缩后的音频数据之中选取前N个插值节点对应的音频数据，如果所述预测播出时间小于所述第二目标播出时间所述当前帧音频数据作为新的当前帧音频数据基于三次样条插值法，根据所述第三调整点数或第四调整点数播放模块，用于在所述新的当前帧音频数据播放完毕之后，播放根据所述下一帧音频数据的开始时间、所述播出响应时间和所述6中任一项所述的音频播放方法，和/或，实现如权利要求6至9中任一项所述的音频播放方7[0017]调整模块，用于根据所述第一目标播出时间调整所述下一帧音频数据的播放速8[0023]调整模块，用于根据所述第二目标播出时间调整所述下一帧音频数据的播放速所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序[0035]图7是根据本公开实施例中另一种主设备调整下一帧音频数据的播放速度的流程[0036]图8是根据本公开实施例中又一种主设备调整下一帧音频数据的播放速度的流程9[0039]图11是根据本公开实施例中另一种从设备调整下一帧音频数据的播放速度的流[0040]图12是根据本公开实施例中又一种从设备调整下一帧音频数据的播放速度的流使从设备可以根据音频包中对应的播出时间来每帧的长度为20ms，第一帧音频包中包含播出时间，第二帧音频包中包含其对应的编号其与主设备之间的系统时钟的差值τ0。[0064]在本公开实施例中，第一目标播出时间是指主设备在对音频流数据进行帧划分下一帧音频数据的开始时间和播出响应时间，确定下一帧音频数据的第一目标播出时间，帧音频数据播放速度调整方式进行介绍。图4为本公开实施例中下一帧音频数据播放速度[0080]步骤342，根据预测播出时间和第一目标播出时间之间的差值，确定第一调整点[0081]可以理解，预测播出时间小于第一目标播出时间说明当的音频数据进行合并，基于三次样条插值法对合并后的数据对应的采用点进行插值计算，采样节点个数，只是采样点的数据变更为扩充后的音频数据中的前N个差值节点对应的音频数据。将扩充后的音频数据中剩余的N+M个差值节点对应的音频数据作为新的下一帧音[0091]步骤346，根据预测播出时间和第一目标播出时间之间的差值，确定第二调整点[0092]可以理解，预测播出时间大于第一目标播出时间说明当的音频数据进行合并，基于三次样条插值法对合并后的数据对应的采用点进行插值计算，采样节点个数，只是采样点的数据变更为压缩后的音频数据中的前N个插值节点对应的音[0104]可以理解，预测播出时间小于第一目标播出时间说明当数对应数量的采样点数据得实现方式可以如公的音频数据中每帧有N-1个采样点，这样通过逐帧减少采样点的方式来逐步地调整音频播公开针对该方式提出了又一个实施例。图8为本公开实施例中又一种调整下一帧音频数据[0119]对于音频播放速度的调整，可以通过主设备之中硬件驱动的播放采样率来实播放方法应用于多设备组合之中的从设备上，该多设备组合实现立体声播放的音频同步。频包中的音频数据和其对应的划分时间。从设备根据获取的划分时间对音频数据进行播τ0+1s时刻播放出音频。二目标播出时间播出，这样会出现该从设备音频数据的播放与其他设备之间不同步的问[0146]可以理解，预测播出时间小于第二目标播出时间说明当的音频数据进行合并，基于三次样条插值法对合并后的数据对应的采用点进行插值计算，采样节点个数，只是采样点的数据变更为扩充后的音频数据中的前N个插值节点对应的音频数据。将扩充后的音频数据中剩余的N+M个插值节点对应的音频数据作为新的下一帧音[0157]可以理解，预测播出时间大于第二目标播出时间说明当的音频数据进行合并，基于三次样条插值法对合并后的数据对应的采用点进行插值计算，采样节点个数，只是采样点的数据变更为压缩后的音频数据中的前N个插值节点对应的音[0169]可以理解，预测播出时间小于第二目标播出时间说明当数对应数量的采样点数据得实现方式可以如上述公二目标播出时间之间的差值减少音频帧中的采样点数，来调整下一帧音频数据的播放速[0182]对于音频播放速度的调整，可以通过从设备之中硬件驱动的播放采样率来实[0200]从数据扩充后的音频数据之中选取前N个插值节点对应的音频数据，作为新的当前帧音频数据，将数据扩充后的音频数据之中剩余的音频数据作为新的下一帧音频数据；[0205]从数据压缩后的音频数据之中选取前N个插值节点对应的音频数据，作为新的当前帧音频数据，将数据压缩后的音频数据之中剩余的音频数据作为新的下一帧音频数据；样点数据，将预测得到的采样点数据和当前帧音频数据作为新的当前帧音频数据进行播[0237]从数据扩充后的音频数据之中选取前N个插值节点对应的音频数据，作为新的当前帧音频数据，将数据扩充后的音频数据之中剩余的音频数据作为新的下一帧音频数据；[0242]从数据压缩后的音频数据之中选取前N个插值节点对应的音频数据，作为新的当前帧音频数据，将数据压缩后的音频数据之中剩余的音频数据作为新的下一帧音频数据；样点数据，将预测得到的采样点数据和当前帧音频数据作为新的当前帧音频数据进行播三次样条差值法对当前帧与下一帧音频合并后的数据进行扩充或者压缩来对播放速度进[0258]图15是根据一示例性实施例示出的一种用于音频播放的装置以方便多媒体组件1508和处理组件1502之头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学[0265]I/O接口1512为处理组件1502和外围接口模块之间提供接口，上述外围接口模块通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识