1.本说明书涉及互联网技术领域，尤其涉及一种回声消除中的时延估计方法、装置以及电子设备。


背景技术：

2.随着互联网的发展，视频/语音通话已经被广泛应用。而在语音的双向对话中，本地麦克风所拾取到的混合信号中同时包括了本地人员所产生的近端语音信号以及播放设备所播放的远端语音信号，这对于远端人员而言，则不可避免的会产生回声信号，因此需要进行回声消除。在回声消除中，最为重要的部分即需要对进行时延值的估计，以进行后续的线性以及非线性的回声消除，当前在进行时延估计时通常需要对拾取到的全量的混合信号和全量的下行信号进行对比处理，计算量较大，且近端语音、噪声都会对时延估计产生较大影响，时延估计准确度差。
3.基于此，需要一种更为高效的回声消除中的时延估计方案。


技术实现要素：

4.本说明书一个或多个实施例提供一种回声消除中的时延估计方法、装置、电子设备以及存储介质，用以解决如下技术问题：需要更为有效的回声消除中的时延估计方案。
5.为解决上述技术问题，在第一方面，本说明书实施例提供一种回声消除中的时延估计方法，包括：
6.生成超声波信号，叠加所述超声波信号和下行信号生成参考信号；
7.采集混合信号，其中，所述混合信号中包含播放所述参考信号所产生的回声信号；
8.从所述混合信号中分离出第一有效信号，以及，从所述参考信号中分离出第二有效信号，其中，所述第一有效信号和第二有效信号的频段包含所述超声波信号的频段；
9.针对所述第一有效信号中的任意目标帧信号，确定该目标帧信号的第一功率谱，以及，确定所述第二有效信号中所包含的多帧信号所对应的多个第二功率谱；
10.根据所述第一功率谱和所述第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。
11.在第二方面，本说明书实施例提供一种回声消除中的时延估计装置，包括：
12.信号生成模块，生成超声波信号，叠加所述超声波信号和下行信号生成参考信号；
13.信号采集模块，采集混合信号，其中，所述混合信号中包含播放所述参考信号所产生的回声信号；
14.信号分离模块，从所述混合信号中分离出第一有效信号，以及，从所述参考信号中分离出第二有效信号，其中，所述第一有效信号和第二有效信号的频段包含所述超声波信号的频段；
15.功率谱确定模块，针对所述第一有效信号中的任意目标帧信号，确定该目标帧信号的第一功率谱，以及，确定所述第二有效信号中所包含的多帧信号所对应的多个第二功
率谱；
16.时延估计模块，根据所述第一功率谱和所述第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。
17.在第三方面，本说明书实施例提供一种电子设备，包括：
18.至少一个处理器；以及，
19.与所述至少一个处理器通信连接的存储器；其中，
20.所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如第一方面所述的方法。
21.在第四方面，本说明书实施例提供一种非易失性计算机存储介质，存储有计算机可执行指令，当计算机读取存储介质中的计算机指令后，该指令使得一个或多个处理器执行如第一方面所述的方法。
22.本说明书一个或多个实施例采用的上述至少一个技术方案能够达到以下有益效果：生成超声波信号，叠加所述超声波信号和下行信号生成参考信号；采集混合信号；从所述混合信号中分离出第一有效信号，以及，从所述参考信号中分离出第二有效信号，其中，所述第一有效信号和第二有效信号的频段包含所述超声波信号的频段；针对所述第一有效信号中的任意目标帧信号，确定该目标帧信号的第一功率谱，以及，确定所述第二有效信号中所包含的多帧信号所对应的多个第二功率谱；根据所述第一功率谱和所述第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。从而仅需要基于包含超声波信号的频段的第一有效信号和第二有效信号进行频率谱的距离分析，即可以实现时延值的准确估计，计算量小效率更高，并且具有强鲁棒性。
附图说明
23.为了更清楚地说明本说明书实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本说明书中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
24.图1为本说明书实施例所提供的系统架构的示意图；
25.图2为本说明书实施例所提供的一种回声消除中的时延估计方法的流程示意图；
26.图3为本说明书实施例所涉及的功率谱的示意图；
27.图4为本说明书实施例所提供的一种时延值估计的逻辑结构示意图；
28.图5为本说明书实施例提供的一种回声消除中的时延估计装置的结构示意图；
29.图6为本说明书实施例提供的一种电子设备的结构示意图。
具体实施方式
30.本说明书实施例提供一种回声消除中的时延估计方法、装置、设备以及存储介质。
31.为了使本技术领域的人员更好地理解本说明书中的技术方案，下面将结合本说明书实施例中的附图，对本说明书实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例。基于本说明书实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都应当属于本技术
保护的范围。
32.在语音双向通信(例如，手机打电话、第三方app音视频通话、会议设备多方音视频通话等等)的场景中，远端语音经过处理成为下行信号，被送至播放设备(例如扬声器、听筒)进行外放，本地的麦克风会拾取本地的混合信号(包括近端语音、噪音以及播放下行信号时所产生的回声)，并进行上行处理(包括回声消除、降噪、音量调节等等)以形成上行信号，并发送至远端。在这个过程中，回声消除是较为重要的环节，而在回声消除中，即需要对于回声相对于下行信号的时延值进行快速而准确的估计。
33.基于此，本技术实施例提供一种更为高效的时延估计方案。如图1所示，图1为本说明书实施例所提供的系统架构的示意图。在该系统架构中，加入了超声波信号生成器生成超声波信号，将超声波信号对下行信号进行叠加以生成参考信号，并在后续的过程中从全量信号中提取部分包含超声波信号的有效信号进行处理，从而实现更为高效的时延估计。
34.如图2所示，图2为本说明书实施例所提供的一种回声消除中的时延估计方法的流程示意图，包括：
35.s201：生成超声波信号，叠加所述超声波信号和下行信号生成参考信号。
36.超声波信号在经过扬声器播放时即产生不能为人耳所直接感知的高频超声波。高频超声波指的是频率超过20hz的声波。在本说明书实施例中，为了后续处理时更为方便，可以预设产生的超声波信号的频率范围在一个较小的区间内，例如，预设播放时所产生的超声波信号的频段(即频率范围)为[20khz，22khz]。
[0037]
进而，即可以直接叠加所述超声波信号和下行信号生成参考信号。生成的参考信号一方面通过扬声器进行播放，从而在近端产生了相应的远端语音和超声波；同时，生成的参考信号也会进入回声消除(acoustic echo cancelling，aec)装置中，以用于和回声信号进行对比，如图1中所示。
[0038]
由于超声波并不会被人耳所感知，因此，播放参考信号的同时虽然也产生了超声波，但不会影响近端的收听和实际的双方通信。由于超声波的频率较高，因此在混响较大的房间内超声波遇到墙壁或者其它障碍发生反射并被麦克风所采集到时，所产生的混响回声也是很小的，这有利于后续的时延估计。
[0039]
s203，采集混合信号，其中，所述混合信号中包含播放所述参考信号所产生的回声信号。
[0040]
采集得到的混合信号是一个由多帧信号所组成的信号流。混合信号包括近端说话时所产生的语音信号、噪声以及回声信号。回声信号为参考信号在经过近端播放设备的播放之后，再被近端语音的麦克风采集得到所产生的信号。显然，回声信号对比参考信号而言，通常在能量上会可能会有所变化(被环境衰减或者被设备增加)，但是在频率、功率分布和相位上仍然是与参考信号存在对应的关系。
[0041]
s205，从所述混合信号中分离出第一有效信号，以及，从所述参考信号中分离出第二有效信号，其中，所述第一有效信号和第二有效信号的频段包含所述超声波信号的频段。
[0042]
由于超声波信号频率较高，因此，在处理过程中不再需要对采集得到的混合信号的整体进行快速傅里叶变换(fast fourier transform，fft)处理，而仅需要混合信号中包含有超声波信号的频段的那部分信号即可。因此，可以采用分离滤波的形式，从采集得到的混合信号直接分离出包含有所述超声波信号的频段的第一有效信号，以及，从从所述参考
信号中分离出包含有所述超声波信号的频段的第二有效信号。通常而言，第一有效信号和第二有效信号的频段同样可以是人耳所不能听见的超声波频段。
[0043]
例如，假设产生的超声波的频段为[20khz，22khz]，而采样器的采样频段为0至48khz，那么，此时即可以直接滤出18khz至24khz的有效信号，并把采样率设置为12khz。从而从混合信号中分离出包含了多帧信号(每一帧信号包含了12k个采样点)的第一有效信号，以及，从所述参考信号中分离出包含了多帧信号的第二有效信号。
[0044]
s207，针对所述第一有效信号中的任意目标帧信号，确定该目标帧信号的第一功率谱，以及，确定所述第二有效信号中所包含的多帧信号所对应的多个第二功率谱。
[0045]
进而，及可以对分离得到的第一有效信号和第二有效信号进行fft，从而得到对应的第一复数谱信号和对应的第二复数谱信号。
[0046]
并基于第一复数谱信号和第二复数谱信号进行功率谱的计算，从而得到每一帧所对应的功率谱。即针对所述第一有效信号中的任意目标帧信号，确定该目标帧信号的第一功率谱，以及，确定所述第二有效信号中所包含的多帧信号所对应的多个第二功率谱。
[0047]
同时，在实际应用中，可以根据第一有效信号中的帧顺序依次将当前帧信号d(n)视为目标帧信号以计算第一功率谱，并预先将多个第二功率谱进行缓存至缓冲区。以第一有效信号中的当前帧记为目标帧信号d(n)，那么，在缓冲区即可以缓存有d(n)之前的m帧信号(即第n
‑
m帧至第n帧)所对应的第二功率谱x(n
‑
m)
…
x(n)。
[0048]
由于在每一帧中实际上包含了多个采样点，以12khz的采样率为例(即每一秒采样12000个)，如果将每一帧之间的帧移设置为10ms，那么每一帧之间即包含了个120采样点。而在功率谱上，则可以知道每一个采样点都会有自己对应的功率值。每一帧的功率谱表征了在该帧所对应的时刻，信号功率在频域的分布状况，具体而言，功率谱包含有频谱中一些幅度信息，而相位信息被舍弃掉了。如图3所，图3为本说明书实施例所涉及的功率谱的示意图。在实际应用中，可以从有效信号中所包含的超声波的频段范围内取多个频点，例如，如果有效信号的频段为18khz～24khz，超声波的频段范围为20khz～22khz，那么，即可以在20khz～22khz范围内均匀分布的取128个频点，进而可以用离散的数组或者向量的形式将功率谱进行表征。例如，对于目标帧信号的第一功率谱，可以将其示意为(功率值1，功率值2
……
，功率值128)，每一个功率值对应了一个频点，而得到一个维度为128维的向量。同样的，对于任意的第二功率谱同样可采取类似的方式进行向量化。
[0049]
s209，根据所述第一功率谱和所述第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。
[0050]
需要说明的是，由于在本说明书实施例中，分离得到的第一有效信号和第二有效信号均为高频信号，而人声已经被滤除。因此，在一般情形下，如果回声衰减影响较小，对于第一有效信号中的目标帧和第二有效信号中的待搜索的对应的帧而言，如果某两帧信号存在对应关系，那么显然，其对应的第一功率谱和第二功率谱应当较为接近。因此，可以根据所述第一功率谱和所述第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。
[0051]
例如，在确定以当前帧作为目标帧信号，并确定该目标帧信号的第一功率谱之后，即可以从缓冲区中进行搜索，并确定出与第一功率谱距离符合预设条件(可以包括距离低于预设阈值，和/或，从小到大的距离排序前列等)的第二功率谱作为对应帧，从而可以根据
目标帧信号和对应帧之间的时间差确定出目标帧信号相对于所述参考信号的时延值。
[0052]
本说明书一个或多个实施例采用的上述至少一个技术方案能够达到以下有益效果：生成超声波信号，叠加所述超声波信号和下行信号生成参考信号；采集混合信号；从所述混合信号中分离出第一有效信号，以及，从所述参考信号中分离出第二有效信号，其中，所述第一有效信号和第二有效信号的频段包含所述超声波信号的频段；针对所述第一有效信号中的任意目标帧信号，确定该目标帧信号的第一功率谱，以及，确定所述第二有效信号中所包含的多帧信号所对应的多个第二功率谱；根据所述第一功率谱和所述第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。从而仅需要基于包含超声波信号的频段的第一有效信号和第二有效信号进行频率谱的距离分析，即可以实现时延值的准确估计，计算量小效率更高，并且具有强鲁棒性。
[0053]
在一种实施例中，在生成超声波时，还可以基于预设的窗口时长为周期，生成在所述周期内各帧频率不同的超声波信号(即变频超声信号)。具体而言，预设的窗口时长可以与帧的时长设置相关，例如，预设的窗口时长可以是100帧；以及，在一个周期内，每一帧的频率在预设范围内随机抽取，例如，从20khz至22khz的范围内以0.2khz作为间隔，生成从20khz、20.2khz、20.4khz
……
直至22khz的一百个频率，并对每一帧生成的超声波信号从这一百个频率中进行随机的频率抽取，保证在一个周期内任意两帧超声波信号的频率的差异的绝对值不低于0.2khz，从而可以生成在所述周期内各帧频率不同的超声波信号，在一个周期范围内突出每一帧信号之间的频率差异。由于每一帧之间的差异很大，因此第一功率谱和每一个第二功率谱之间的距离也就会存在较大的差异，从而提高距离对于第二功率谱的区分度，有利于时延值的准确计算。
[0054]
在一种实施例中，可以采用如下时延粗搜索的方式进行时延值的确定，即从缓冲区中获取与目标信号帧之前的m帧信号所对应的m个第二功率谱，并分别计算第一功率谱与各第二功率谱的距离，进而将与所述第一功率谱的距离最小的第二功率谱确定为目标功率谱；确定所述第一功率谱的所对应的第一时间点，以及，确定所述目标功率谱所对应的第二时间点；将所述第一时间点与所述第二时间点的时间差确定为所述时延值。在这种方式下，由于第一时间点和第二时间点都是与一帧信号相对应，因此，确定得到的时延值与是一帧时长的整数倍(例如，时延值为10帧)。例如，对于12khz的采样率而言，若在进行fft时所选取的帧移为120个采样点(即一帧包含120个采样点)，则可知一帧的时长为10ms，此时计算得到的时延值即可以精确到10ms的数量级，而由于帧移是可以基于实际需要进行选取的，因此，通过该方式估计时延值的精度可以基于需要进行调整，适应用户的实际需求。
[0055]
在一种实施例中，还可以进一步在前述时延粗搜索的基础上采用如下时延细搜索的方式得到更精确的时延值。具体而言，可以确定所述目标帧信号中的多个采样点信号的第一时域特征；获取包含第二时间点所对应的帧信号在内的连续多帧的时延信号，确定所述时延信号中的多个采样点信号的第二时域特征；互相关所述第一时域特征和所述第二时域特征，生成互相关结果；将互相关结果最大时所对应的时间差确定为所述时延值。
[0056]
例如，假设当前帧为第100帧，在以当前帧为目标帧信号时，同时确定时延值为10帧，那么即可以选取包括第90帧信号在内的连续多帧(例如，从89帧至第91帧)的时延信号，并分别确定所述时延信号中的多个采样点信号的第二时域特征，从而进行互相关，并基于互相关结果得到更细粒度的时延值。
[0057]
时域特征(第一时域特征或者第二时域特征)表征的是在一个信号随时间在频率上的变化。互相关结果表征的是两个信号在一段时间差之后的关系，若二者相关度大，则互相关结果越大，若二者相关度小，则互相关结果越小。因此，可以选取多个不同的时间差(例如，以采样点的时间间隔的整数倍作为时间差序列)，将目标帧信号中的多个采样点信号的第一时域特征与时延信号中的多个采样点信号的第一时域特征基于选取的多个不同的时间差进行互相关，而得到多个不同的互相关结果，当互相关出现了一个最大值，说明这个时候两个信号形状最接近，也就是说此时的时间差即为目标帧信号相对于参考信号的时延值。换言之，在该方式下可以从互相关的结果得到以采样点的时间间隔为粒度的时延值。
[0058]
例如，在以12khz作为采样频率时，两个采样点对应的时间间隔即为0.083ms，此时得到的时延值即可以达到0.083ms的整数倍的精度，有利于后续的滤波以及非线性处理。
[0059]
如图4所示，图4为本说明书实施例所提供的一种时延值估计的逻辑结构示意图。在该示意图中，delay0即为经过时延粗搜索所给定的时延值，而delay1即为在时延粗搜索的基础上进行时延细搜索所得到的更精确的时延值。
[0060]
在一种实施例中，可以采用如下方式来获取时延信号：获取所述第二时间点之前和之后的连续的指定帧数的帧信号，组成所述时延信号；或者，以所述第二时间点为终点，获取在所述第二时间点之前连续的指定帧数的帧信号，组成所述时延信号。例如，假设第二时间点对应的帧数为第90帧，那么可以获取在第90帧之前和之后连续一帧的帧信号，即第89帧至91帧，组成时延信号；或者，以第90帧为终点，获取在第90帧之前的连续2帧的信号，即第88帧至第90帧的信号，组成时延信号。通过该方式，可以保证在获取得到的时延信号中始终存在对应当前帧的信号，从而提高时延细搜索的准确性。
[0061]
在一种实施例中，由于参考信号中的超声波在经过传播后会发生回声衰减，此时即表现为第一功率谱和第二功率谱在形状上较为相似，此时，即可以采用如下方式来进行二者的距离计算：基于预设的功率阈值和/或频率阈值二值化所述第一功率谱和所述第二功率谱，生成二值化的第一功率谱和第二功率谱；根据所述二值化的第一功率谱和第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。
[0062]
即对于第一功率谱采用第一功率阈值进行二值化(大于功率阈值即将对应的功率值置为1，而不超过功率阈值即为0)，而对于第二功率谱采用第二功率阈值进行二值化，第一功率阈值和第二功率阈值可以基于经验设定，从而使得在二值化以后存在对应关系的第一功率谱和第二功率谱在对应的频段上取值相同，进而可以基于前述时延粗搜索的方式来确定出所述目标帧信号相对于所述参考信号的时延值。
[0063]
例如，对于一个第一功率谱，假设其对应的向量为(功率值1，功率值2
……
，功率值128)，那么基于第一功率阈值进行二值化之后，其可能的值即为(0，1
……
，1)，在这种方式下，缓存区也同样存在多个对应的第二功率谱所对应的向量。显然，若目标信号与参考信号中的某帧对应，则参考信号中的第二功率谱所对应的向量在形状上将会与第一功率谱相似，也就是说，理论上该第二功率谱所对应的向量的取值是第一功率谱的x倍(x大于1)，即其理论取值可能是(x*功率值1，x*功率值2
……
，x*功率值128)。基于此，可以采用另一个较大的第二功率阈值(例如，第二功率阈值＝x*第一功率阈值)对第二功率谱进行二值化，从而得到同样类似的取值(0，1
……
，1)。
[0064]
当然，在实际应用中，由于存在噪声以及设备方面的影响，两个二值化之后的功率
谱不可能完全相同(即不可能距离为零)，但此时基于这一思路，可以分别计算缓冲区中各二值化的第二功率谱与二值化的第一功率谱的距离，并如同前述的粗时延搜索的方式，根据距离最小的二值化的第二功率谱确定所述目标帧信号相对于所述参考信号的时延值。通过该方式，可以避免回声衰减对于有效信号的功率谱的影响，提高时延值估计的准确性。
[0065]
在另一种实施方式中，为了排除不相关的频段的信号对于有效信号检测中的干扰，还可以系统在启动时对于有效信号的频段范围内，进行多个预设频段的测试。例如，在有效信号的频段为20khz～22khz时，分别测试20khz～20.5khz、20.5khz～21khz、21khz～21.5khz、21.5khz～22khz的四个频段的能量，此时，首先检测现场是否有其他设备干扰，并选择噪声少的频段作为后续超声产生的频段，超声发生器在此频段范围内周期产生信号；后续的时延估计计算功率谱时，也只在该频段上计算，可以直接将二值化的功率谱中的在其他频段上的取值置为0，以减少干扰。例如，如果预先发现20.5khz～21khz的频段上干扰和噪声较少，那么即可以仅产生20.5khz～21khz的超声波，并在后续对提取得到的有效信号的功率谱进行二值化时，则对于第一功率谱和第二功率谱中在20.5khz～21khz以外(即频率阈值)的频段的值均直接置为0，从而降低了环境噪声对于时延值估计的影响。
[0066]
需要说明的，基于预设的功率阈值或者频率阈值进行二值化，可以仅选取一种方式进行，也可以两种方式同时进行，二者并不冲突。此外，系统在启动时可以随时对环境进行检测，以确定出最佳的频率阈值，即频率阈值是在有效信号的频段范围内随环境而变化，提高频率阈值对于环境的适应性。
[0067]
在一种实施例中，确定时延值之后，还可以基于所述时延值进行线性或者非线性的回声消除。例如，在假设没有回声衰减的情形下，则可以将将所述混合信号和所述参考信号根据所述时延值进行时间对齐；将对齐后的混合信号及参考信号，送入线性滤波及非线性处理模块进行回声消除，生成上行信号。若存在回声衰减，则可以将混合信号基于衰减系数进行缩放，并将缩放后的混合信号与参考信号进行对齐，并送入线性滤波及非线性处理模块进行回声消除，生成上行信号，从而实现准确的回声消除。
[0068]
基于同样的思路，本说明书实施例还提供了上述方法对应的装置和电子设备，如图5、图6所示。
[0069]
图5为本说明书实施例提供的一种回声消除中的时延估计装置的结构示意图，所述装置包括：
[0070]
信号生成模块501，生成超声波信号，叠加所述超声波信号和下行信号生成参考信号；
[0071]
信号采集模块503，采集混合信号，其中，所述混合信号中包含播放所述参考信号所产生的回声信号；
[0072]
信号分离模块505，从所述混合信号中分离出第一有效信号，以及，从所述参考信号中分离出第二有效信号，其中，所述第一有效信号和第二有效信号的频段包含所述超声波信号的频段；
[0073]
功率谱确定模块507，针对所述第一有效信号中的任意目标帧信号，确定该目标帧信号的第一功率谱，以及，确定所述第二有效信号中所包含的多帧信号所对应的多个第二功率谱；
[0074]
时延估计模块509，根据所述第一功率谱和所述第二功率谱的距离确定所述目标
帧信号相对于所述参考信号的时延值。
[0075]
进一步地，所述信号生成模块501，以预设的窗口时长为周期，生成在所述周期内各帧频率不同的超声波信号。
[0076]
进一步地，所述时延估计模块509，将与所述第一功率谱的距离最小的第二功率谱确定为目标功率谱；确定所述第一功率谱的所对应的第一时间点，以及，确定所述目标功率谱所对应的第二时间点；将所述第一时间点与所述第二时间点的时间差确定为所述时延值。
[0077]
进一步地，当一帧信号包含多个采样点信号时，所述时延估计模块509，确定所述目标帧信号中的多个采样点信号的第一时域特征；获取包含第二时间点所对应的帧信号在内的连续多帧的时延信号，确定所述时延信号中的多个采样点信号的第二时域特征；互相关所述第一时域特征和所述第二时域特征，生成互相关结果；将互相关结果最大时所对应的时间差确定为所述时延值。
[0078]
进一步地，所述时延估计模块509，获取所述第二时间点之前和之后的连续的指定帧数的帧信号，组成所述时延信号；或者，以所述第二时间点为终点，获取在所述第二时间点之前连续的指定帧数的帧信号，组成所述时延信号。
[0079]
进一步地，所述时延估计模块509，基于预设的功率阈值二值化所述第一功率谱和所述第二功率谱，生成二值化的第一功率谱和第二功率谱；根据所述二值化的第一功率谱和第二功率谱的距离确定所述目标帧信号相对于所述参考信号的时延值。
[0080]
进一步地，所述装置还包括回声消除模块511，将所述混合信号和所述参考信号根据所述时延值进行时间对齐；根据对齐后的所述混合信号和所述参考信号进行回声消除，生成上行信号。
[0081]
图6为本说明书实施例提供的一种电子设备的结构示意图，所述设备包括：
[0082]
至少一个处理器；以及，
[0083]
与所述至少一个处理器通信连接的存储器；其中，
[0084]
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能执行如图2所述的方法。
[0085]
基于同样的思路，本说明书实施例还提供了对应于上述方法的一种非易失性计算机存储介质，存储有计算机可执行指令，计算机读取存储介质中的计算机指令后，该指令使得一个或多个处理器执行如图2所述的方法。
[0086]
在20世纪90年代，对于一个技术的改进可以很明显地区分是硬件上的改进(例如，对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而，随着技术的发展，当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此，不能说一个方法流程的改进就不能用硬件实体模块来实现。例如，可编程逻辑器件(programmable logic device,pld)(例如现场可编程门阵列(field programmable gate array，fpga))就是这样一种集成电路，其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片pld上，而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且，如今，取代手工地制作集成电路芯片，这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现，它与程序开发撰写时所用的软件编译器相类似，
而要编译之前的原始代码也得用特定的编程语言来撰写，此称之为硬件描述语言(hardware description language，hdl)，而hdl也并非仅有一种，而是有许多种，如abel(advanced boolean expression language)、ahdl(altera hardware description language)、confluence、cupl(cornell university programming language)、hdcal、jhdl(java hardware description language)、lava、lola、myhdl、palasm、rhdl(ruby hardware description language)等，目前最普遍使用的是vhdl(very
‑
high
‑
speed integrated circuit hardware description language)与verilog。本领域技术人员也应该清楚，只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中，就可以很容易得到实现该逻辑方法流程的硬件电路。
[0087]
控制器可以按任何适当的方式实现，例如，控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(application specific integrated circuit，asic)、可编程逻辑控制器和嵌入微控制器的形式，控制器的例子包括但不限于以下微控制器：arc 625d、atmel at91sam、microchip pic18f26k20以及silicone labs c8051f320，存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道，除了以纯计算机可读程序代码方式实现控制器以外，完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件，而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至，可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
[0088]
上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的，计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
[0089]
为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本说明书时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
[0090]
本领域内的技术人员应明白，本说明书实施例可提供为方法、系统、或计算机程序产品。因此，本说明书实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本说明书实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd
‑
rom、光学存储器等)上实施的计算机程序产品的形式。
[0091]
本说明书是参照根据本说明书实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0092]
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
[0093]
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
[0094]
在一个典型的配置中，计算设备包括一个或多个处理器(cpu)、输入/输出接口、网络接口和内存。
[0095]
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(ram)和/或非易失性内存等形式，如只读存储器(rom)或闪存(flash ram)。内存是计算机可读介质的示例。
[0096]
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(pram)、静态随机存取存储器(sram)、动态随机存取存储器(dram)、其他类型的随机存取存储器(ram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、快闪记忆体或其他内存技术、只读光盘只读存储器(cd
‑
rom)、数字多功能光盘(dvd)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
[0097]
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
[0098]
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
[0099]
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置、设备、非易失性计算机存储介质实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
[0100]
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可
以的或者可能是有利的。
[0101]
以上所述仅为本说明书的一个或多个实施例而已，并不用于限制本说明书。对于本领域技术人员来说，本说明书的一个或多个实施例可以有各种更改和变化。凡在本说明书的一个或多个实施例的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本说明书的权利要求范围之内。