1.本公开涉及一种用于支持车辆的多会话模式的方法和系统。


背景技术：

2.通常，用于车辆的话语识别设备允许使用多会话模式以及1：1转换的会议呼叫，并且还允许多个用户通过通讯应用程序发送/接收文本。
3.然而，在传统的话语识别设备中，当驾驶员座位上的用户呼叫话语识别系统并发起电话会议时，当驾驶期间通过通讯应用程序在多个用户之间输出相对于文本的话语时，话语输出而不区分用户，并且因此在电话会议期间不能轻易识别用户。


技术实现要素：

4.本公开的目的是提供一种用于支持车辆的多会话模式的方法和系统，该方法和系统通过在多个用户之间的语音通话期间通过环绕声功能和声音方向性功能输出具有方向性的声音来提供容易识别会话伙伴的功能。
5.本领域技术人员将认识到，本公开可以实现的目的不限于上文已经具体描述的内容，并且本公开可以实现的上述和其他目的将从以下详细描述中更清楚地理解。
6.为了实现这些目的和其他优点，并且根据本公开的目的，如在本文中具体体现和广泛描述的，用于支持车辆的多会话模式的方法可以包括：从参与多会话模式的会话伙伴接收多会话模式的用户信息以及消息和话语中的至少一个；基于用户信息分配声音空间；并且将方向性分配给基于消息和话语中的至少一个而生成的话语，并将该话语输出到所分配的空间。
7.根据实施例，用户信息可以包括会话伙伴的数量、性别、年龄、id以及名称中的至少一个。
8.根据实施例，基于用户信息分配声音空间可以包括响应于会话伙伴的数量来分配声音空间。
9.根据实施例，该方法可以进一步包括：当会话伙伴的数量大于所分配的空间的数量时，基于用户信息对会话伙伴进行分组；并将生成的组分配给声音空间。
10.根据实施例，将方向性分配给话语并将话语输出到所分配的空间可以包括：基于消息接收顺序，与消息相对应的会话伙伴被安排在所分配的空间当中的最远的空间中；并且将方向性分配给与从会话伙伴接收的消息相对应的话语，并输出该话语。
11.根据实施例，将方向性分配给与从会话伙伴接收的消息相对应的话语，并输出该话语可以包括：为分配的空间设置预定的话语输出时间；确定与所接收的消息相对应的话语输出是否在预定的话语输出时间内；当话语输出不在预定的话语输出时间内时，从消息中排除特殊字符和修饰符，并确定作为话语的已排除特殊字符和修饰符的消息的输出是否在预定的话语输出时间内；当作为话语的已排除特殊字符和修饰符的消息的输出不在预定的话语输出时间内时，控制话语输出速度以使话语输出速度变为预定值，并确定话语输出
是否在预定的话语输出时间内；并且当根据话语输出速度控制的话语输出不在预定的话语输出时间内时，控制消息，使得消息以叠加的方式输出到声音空间。
12.根据实施例，确定与所接收的消息相对应的话语的输出是否在预定的话语输出时间内可以包括：当话语输出不在预定的话语输出时间内时，确定所接收的消息的句子的数量是否等于或大于预定值，并且当句子的数量等于或大于预定值时，划分话语输出间隔。
13.根据实施例，该方法可以进一步包括：在驾驶员讲话时通过相机确定驾驶员的面部方向；确定驾驶员的面部方向是否与声音的方向性一致；以及当驾驶员的面部方向与声音的方向性一致时，识别与对应的声音空间相对应的会话伙伴。
14.根据实施例，该方法可以进一步包括：当驾驶员对会话伙伴讲话时，接收驾驶员的话语；并且向会话伙伴发送驾驶员的消息或话语。
15.根据本公开的用于支持车辆的多会话模式的方法和系统，可以容易地识别会话伙伴，并且可以为多会话模式中的会话选择特定的伙伴。
16.另外，将从多个用户发送的文本转换为与相应用户相对应的话语或分配了方向性的话语，使得收听话语的用户在多会话模式下可以容易地识别发送文本的用户。
17.本领域技术人员将认识到，利用本公开可以实现的效果不限于以上已经具体描述的内容，并且本公开的其他优点从以下详细描述将更清楚地理解。
附图说明
18.被包括以提供对本公开的进一步理解并且并入本技术并构成本技术的一部分的附图示出了本公开的(一个或多个)实施例，并且与说明书一起用于解释本公开的原理。在附图中：
19.图1a是根据本公开的实施例的用于支持车辆的多会话模式的系统的框图；
20.图1b是根据本公开的实施例的用于支持车辆的多会话模式的系统的框图；
21.图2是示出根据本公开的实施例的用于使用声音的方向性来支持多会话模式的方法的示例的图；
22.图3是根据本公开的实施例的支持多会话模式的方法的流程图；
23.图4是用于描述根据本公开的实施例的使用声音的方向性的空间分配方法的图；以及
24.图5是示出根据本公开的实施例的用于支持多会话模式的方法中的语音输出方法的图。
具体实施方式
25.在下文中，将参照附图更详细地描述应用了本公开的实施例的设备和各种方法。在整个说明书中，术语“模块”和“部件”是为了便于描述而使用的，并且因此可以互换使用，并且没有任何可区别的含义或功能。
26.在实施例的描述中，将理解的是，当元件被称为在另一元件“上”或“下”以及“之前”或“之后”时，该元件可以直接在另一个元件上，或者也可以存在中间元件。
27.将理解的是，尽管术语第一、第二、a、b、(a)、(b)等在本文中可用于描述本公开的各种元件，但是这些术语仅用于区分一个元素与另一元素且相应元素的顺序或排序不受这
些术语的限制。将理解的是，当一个元件被称为“连接至”、“耦接至”或“访问”另一元件时，尽管一个元件可以直接连接到或直接访问另一元件，但该一个元件可以通经由另一元件“连接到”、“耦接到”或“访问”另一元件。
28.另外，除非明确相反地定义，否则如“包括(include)”、“包含(comprise)”和“具有(have)”的术语应默认解释为包括性或开放性，而不是排他性或封闭性。除非相反地定义，否则所有技术性、科学性或其他方面的术语均与本领域技术人员所理解的含义一致。除非在本公开中明确定义，否则在词典中找到的常用术语应在相关技术著作的上下文中解释得不会太理想或不切实际。
29.图1a是根据本公开的实施例的用于支持车辆的多会话模式的系统的框图。
30.参照图1a，用于支持车辆的多会话模式的系统可以包括数据接收器110、用户分类器120、话语方向分配器130、话语调制器140和话语输出单元150。
31.数据接收器110可以通过用于实现多会话模式的通讯应用程序从会话伙伴接收消息和话语中的至少一个。数据接收器110可以在通过电话呼叫的多个会话期间接收会话伙伴的话语。数据接收器110可以在多个会话期间从会话伙伴接收消息。数据接收器110可以接收多会话模式的用户信息。在一个示例中，数据接收器110可以包括天线或收发器，该天线或收发器被配置为执行无线/有线通信以从服务器或外部设备(例如包括移动电话的移动设备)接收数据。
32.用户分类器120可以通过电路或协议分析对输出消息的会话伙伴进行分类。因此，用户分类器120可以基于从电话号码/会话消息协议获得的用户信息对用户进行分类。在此，用户信息可以包括会话伙伴的数量、性别、年龄、id和名称中的至少一个。
33.话语方向分配器130可以基于用户信息分配声音空间。
34.为此，话语方向分配器130可以响应于由用户分类器120分类的用户来划分声音空间。然后，话语方向分配器130可以响应于所分类的用户来分配方向。
35.当输出与文本相对应的话语时，话语调制器140可以使用用户信息来对话语进行调制，以使得该话语与对应用户的男性/女性语音或用户年龄语音相对应，并输出调制后的话语，使得可以轻松识别出会话伙伴。为此，话语调制器140可以用于适于使用在文本的情况下的用户信息输出话语的话语调制。可以选择性地对话语调制器140设置打开/关闭(on/off)。
36.话语输出单元150可以将具有方向性的话语输出到所分配的空间。
37.话语输出单元150可以将方向性分配给基于从数据接收器110接收的消息和话语中的至少一个而生成的话语，并将具有方向性的话语输出到由话语方向分配器130分配的空间。在一示例中，话语输出单元150可包括一个或多个扬声器。话语输出单元150可以被配置为例如基于由话语方向分配器130分配的空间的方向性来调节一个或多个扬声器的相应的音量。
38.这里，可以输出话语，使得输出的会话伙伴的话语的方向与由话语方向分配器130分配的声音空间的方向相对应。
39.图1b是根据本公开的实施例的用于支持车辆的多会话模式的系统的框图。
40.参照图1b，用于支持车辆的多会话模式的系统可以包括会话伙伴识别器160、话语接收器170和数据发送器180。
41.会话伙伴识别器160可以通过相机从由话语方向分配器130分配的空间中确定驾驶员为了与用户进行会话而面向的空间。当驾驶员面部的方向与话语的方向性一致时，会话伙伴识别器160可以识别与话语相对应的声音空间所相对应的会话伙伴。在一示例中，驾驶员面部的方向与话语的方向性一致可以意味着驾驶员面部面向与话语相对应的声音空间。
42.相应地，会话伙伴识别器160可以通过相机在通讯应用程序的用户当中识别驾驶员的会话伙伴。
43.当驾驶员将话语输出到会话伙伴时，话语接收器170可以接收驾驶员的话语。在一个示例中，话语接收器170可以包括被配置为接收语音数据的麦克风，并将语音数据转换为消息或话语。在一个示例中，在经话语接收器170转换之后，消息或话语可以是文本的形式。
44.数据发送器180可以通过会话伙伴识别器160和话语接收器170来确认会话伙伴。这里，数据发送器180可以可选地检查所选择的会话伙伴是否正确。
45.数据发送器180可以将驾驶员的消息或话语发送到经确认的会话伙伴。在一示例中，数据发送器180可以包括天线或收发器，该天线或收发器被配置为执行无线/有线通信以将数据发送到服务器或外部设备(例如包括移动电话的移动设备)。
46.图2是示出根据本公开的实施例的用于使用声音的方向性来支持多会话模式的方法的示例的图。
47.参考图2，数据接收器110可以从通讯应用程序210接收关于参与多会话模式或聊天室的用户的信息。
48.话语方向分配器130可以基于用户信息来分配声音空间220。话语方向分配器130可以响应于包括在用户信息中的会话伙伴的数量来分配声音空间220。
49.尽管在该图中基于驾驶员10分配了扇形的五个声音空间220，并且将会话伙伴分配给每个空间，但是声音空间220的形状和声音空间220的数量不限于此。
50.当会话伙伴的数量大于所分配的空间的数量时，话语方向分配器130可基于从用户分类器120接收到的用户信息对会话伙伴进行分组，并将该组分配给声音空间220。
51.尽管基于用户信息对两个会话伙伴进行分组并且在该图中将该组分配给五个所分配的空间中的一个，但是组的数量和组中的会话伙伴的数量不限于此。
52.话语输出单元150可以响应于通过通讯应用程序从多个用户接收到的消息和话语，将话语输出到由话语方向分配器130分配的空间。
53.当声音被输出到车辆内部时，话语输出单元150可以将具有方向性230的声音输出到由话语方向分配器130分配的空间。这里，话语输出单元150可以使用环绕声效来输出具有方向性230的声音。
54.当从会话伙伴接收到消息时，话语输出单元150可以将方向性分配给与所接收的消息相对应的话语，并输出具有方向性的话语。
55.当同时接收到许多消息时，话语输出单元150可将预定的话语输出时间分配给由话语方向分配器130分配的每个空间，以便输出与消息相对应的话语。根据实施例，话语输出单元150可以为每个所分配的空间分配3秒。
56.当话语输出单元未能在预定的话语输出时间内将话语输出到每个所分配的空间时，话语输出单元150可以控制话语输出速度。为此，话语输出单元150可以提高话语输出速
度。当话语输出单元150在即使提高话语输出速度之后仍未能输出话语时，话语输出单元150可以以叠加的方式同时将话语输出到声音空间220。
57.如果话语输出单元150在预定的话语输出时间内不能将话语输出到每个所分配的空间，则话语输出单元150可不输出消息的拟声词、修饰符等。
58.当从单个会话伙伴接收到的消息的句子的数量等于或大于预定值时，话语输出单元150可以在经过预定的话语输出时间之后停止话语输出，并将话语输出到另一分配空间。此后，当输出到另一分配空间的话语结束时，话语输出单元150可以继续输出停止的消息作为话语。在此，消息的句子的预定数量可以是2个或更多个。
59.当在设置的时间内没有来自其他会话伙伴的消息时，话语输出单元150可以在其中当前输出话语的分配空间中将话语输出延长预定的话语输出时间。
60.当通过多会话模式执行电话呼叫时，话语输出单元150可以分配与参与会话的电路相对应的声音空间220，并且控制要输出到与电话呼叫电路相对应的所分配的空间的话语。
61.同时，当通过多会话模式执行电话呼叫时，话语输出单元150可以预先向电话呼叫的会话伙伴分配声音空间200，并且当接收到来自与所分配的空间相对应的用户的呼叫时，话语输出单元150可以将铃声输出到所分配的空间。
62.会话伙伴识别器160可以识别通过相机240检测到的驾驶员的面部方向250。会话伙伴识别器160可以确定驾驶员的面部方向250是否与相对于由话语方向分配器130分配的空间的声音的方向性230一致。
63.当驾驶员的面部方向250与声音的方向性230一致时，会话伙伴识别器160可以选择与对应于声音的方向性230的空间220相对应的会话伙伴。
64.然后，话语输出单元150可以基于通过会话伙伴识别器160选择的会话伙伴的话语，将话语输出到所分配的空间。
65.图3是根据本公开的实施例的支持多会话模式的方法的流程图。
66.参照图3，数据接收器110可获取关于参与多会话模式的用户的信息(s310)。
67.在步骤s310之后，话语方向分配器130可以基于所获得的用户信息在车辆中分配声音空间200(s320)。在此，当基于用户信息确定多会话模式的会话伙伴的数量大于所分配的空间的数量时，话语方向分配器130可以基于用户分类器120接收到的用户分类信息对多会话模式用户进行分组，并且将该组分配给所分配的空间。
68.在步骤s320之后，数据接收器110可以从参与多会话模式的会话伙伴接收消息或话语(s330)。
69.在步骤s330之后，话语输出单元150可以将声音的方向性230分配给与每个会话伙伴相对应的消息或话语，并与话语类似地输出。
70.在步骤s320之后，当驾驶员讲话时，会话伙伴识别器160可以在驾驶员通过相机讲话时识别驾驶员面向并进行交谈的方向，并且当驾驶员面向并进行交谈的方向与话语方向分配器130所分配的空间相对应时，会话伙伴识别器160可以选择与该空间相对应的会话伙伴(s350)。
71.在步骤s350之后，话语接收器170可以接收驾驶员的话语，并且数据发送器180可以将消息或驾驶员的话语发送到所选择的会话伙伴(s360)。
72.图4是用于描述根据本公开的实施例的使用声音的方向性的空间分配方法的图。
73.参照图4，当会话伙伴被安排在所分配的空间中时，话语方向分配器130可以在多会话模式下按照接收消息的顺序分配声音空间220。这里，可以分配空间，使得基于消息的接收顺序，将与消息相对应的会话伙伴分配给所分配的空间当中的最远的空间，从而驾驶员可以容易地识别车辆中的话语。
74.如图4中的(a)所示，当在多会话模式下接收到第一消息401至第五消息405时，如图4的(b)所示，话语方向分配器130可以基于接收消息的顺序将会话伙伴安排在五个所分配的空间211至215中。
75.话语方向分配器130可以在边缘空间中安排与第一消息401相对应的会话伙伴。在该图中，可以将与第一消息401相对应的会话伙伴安排在最左侧的空间211中。
76.话语方向分配器130可以在离与第一消息401相对应的会话伙伴最远的空间中安排与第二消息402相对应的会话伙伴。在该图中，与第二消息402相对应的会话伙伴可以被安排在最右边的空间215中。
77.话语方向分配器130可以在离与第二消息402相对应的会话伙伴最远的空间中安排与第三消息403相对应的会话伙伴。在该图中，与第三消息403相对应的会话伙伴可以被安排在中心空间左侧的空间212中。
78.话语方向分配器130可以在离与第三消息403相对应的会话伙伴最远的空间中安排与第四消息404相对应的会话伙伴。在该图中，与第四消息404相对应的会话伙伴可以被安排在中心空间右侧的空间214中。
79.话语方向分配器130可以在离与第四消息404相对应的会话伙伴最远的空间中安排与第五消息405相对应的会话伙伴。在该图中，与第五消息405相对应的会话伙伴可以被安排在中心空间213中。
80.图5是示出根据本公开的实施例的用于支持多会话模式的方法中的语音输出方法的图。
81.参照图5，当同时接收到许多消息时，话语输出单元150可以为所分配的空间设置预定的话语输出时间(s510)。
82.在步骤s510之后，话语输出单元150可以确定是否可以在预定的话语输出时间内输出与接收到的消息相对应的话语，当在预定的话语输出时间内不能输出话语时，确定所接收的消息的句子的数量是否等于或大于预定值，且当句子的数量等于或大于预定值时，划分话语输出间隔(s520)。此后，话语输出单元150可以基于划分的输出间隔在可以在预定的话语输出时间内输出话语时输出消息。
83.在步骤s520之后，当在预定的话语输出时间内不能输出话语时，话语输出单元150可以从消息中排除特殊字符、修饰符等，确定是否可以在预定的话语输出时间内将已排除了特殊字符、修饰符等的消息作为话语输出，并且当可以在预定的话语输出时间内输出消息时输出该消息(s530)。然后，话语输出单元150输出已经排除了特殊字符、修饰符等的消息。
84.在步骤s530之后，当在预定的输出时间内不能将已经排除了特殊字符、修饰符等的消息作为话语输出时，话语输出单元150可以控制话语输出速度(s540)。此后，话语输出单元150可以将话语输出速度提高到预定速度，并且确定是否可以在预定的话语输出时间
内输出话语。
85.在步骤s540之后，当在预定的话语输出时间内不能执行根据话语输出话语控制的话语输出时，话语输出单元150可以执行控制以使得消息以叠加的方式同时输出到空间中(s550)。
86.根据实施例的上述方法可以被实现为在计算机中可执行并存储在计算机可读记录介质(例如，非暂时性计算机可读记录介质)中的程序。例如，由包括但不限于用户分类器120、话语方向分配器130、话语调制器140和会话伙伴识别器160的各个组件执行的方法或操作可以被实现为存储在例如由例如非暂时性计算机可读记录介质的计算机可读记录介质实现的存储器上的计算机可读代码。计算机可读记录介质的示例包括rom、ram、cd
‑
rom、磁带、软盘、光学数据存储系统等。计算机可读记录介质可以分发到经由网络连接的计算机系统，计算机可读代码可以根据分布式系统来保存和执行。另外，本领域技术人员可以容易地推断出用于实现上述方法的功能程序、代码和代码段。该系统可以包括计算机、处理器或微处理器。可替代地，用户分类器120、话语方向分配器130、话语调制器140和会话伙伴识别器160中的每一个或一起，可以被实现为计算机、处理器或微处理器。当计算机、处理器或微处理器读取并执行存储在计算机可读记录介质中的计算机可读代码时，计算机、处理器或微处理器可以被配置为执行上述操作/方法。
87.对于本领域技术人员将显而易见的是，在不脱离本公开的精神或范围的情况下，可以对本公开进行各种修改和变型。因此，本公开旨在覆盖本公开的修改和变化，只要该修改或变化落入所附权利要求及其等同物的范围内。