首页 > 化学装置 专利正文
用于运行车辆中的操作系统的方法和车辆中的操作系统与流程

时间:2022-02-13 阅读: 作者:专利查询

用于运行车辆中的操作系统的方法和车辆中的操作系统与流程

1.本发明涉及一种用于运行车辆中的操作系统的方法以及一种在车辆中的操作系统。


背景技术:

2.现代的日常生活通过大量设备来影响,其在不同背景中的操作能够以不同的方式实现。为此提出不同的操作设计,例如借助于按键、手势、语音或指示器的控制,其按照应用领域具有特殊的优点和缺点。在一些情况中,此外为了取得相同的系统反应可设置有不同的操作方式,其识别用户且用户在其之间须作决定。
3.在已知的操作系统的情形中经常呈现如下问题,即,这些操作系统仅被设计用于确定的操作方式。因此,用户仅可困难地取得各种各样的操作可行性方案且将其用于操作。
4.在us 2015/0175172 a1中描述了一种带有触觉反馈的用于基于手势的输入的系统。手势被获取且相应的反馈被输出。此外同样可实现语音控制。描述了不同的手势,所述手势借助于摄像机可被获取且配属于该系统的不同的可控制的动作。
5.由us 2004/0189720 a1已知一种用于借助于手势控制计算机的架构,在其中手势可与语音指令组合地来使用。
6.de 10 2009 039 114 a1提出了一种用于车辆的操作装置,在其中用户的身体部分在三个空间区域中的一个空间区域中被探测出且在图形对象的情形中显示相关联的对象。例如,数量和标度可被显示。
7.us 2018/0307347 a1描述了一种用于探测手势的方法,其中,电容传感器被使用。用户在数据库中对于确定的命令可定义手势以及通过查看指南学习预设的手势。
8.由de 10 2006 037 156 a1已知一种用于运行交互式操作装置的方法,在其中操作元素被显示且用户到操作元素处的靠近被探测出。操作元素于是例如以如下方式被最优地示出,即,其被放大。此外,图示的匹配可借助于手势来控制。


技术实现要素:

9.本发明基于如下目的,即,提供一种用于运行操作系统的方法和一种操作系统,其对于用户而言使得特别简单且快速的操作成为可能,尤其当该操作可借助于不同的操作方式实现时。
10.根据本发明,该目的通过一种带有权利要求1的特征的方法和一种带有权利要求10的特征的操作系统来实现。有利的设计方案和改进方案由从属权利要求得出。
11.在用于运行车辆中的操作系统的根据本发明的方法的情形中,带有至少一个第一操作对象的输出被产生且在输出区域中被输出。在此,第一操作对象配属于分层次地组织的数据库的第一层次级别的第一元素。操作手势被获取,其中,经获取的操作手势包括操纵对象垂直于输出区域的运动方向,且输出取决于操作手势的运动方向被如此地改变,即使得第一操作对象被第二操作对象替代。在此,在改变输出的情形中第一操作对象到操作手
势的运动方向上的运动被透视地输出。在此,第二操作对象配属于分层次地组织的数据库的第二层次级别。
12.这有利地使得借助于操作手势的特别简单且直观的操作和在多个层次级别内的期望位置的快速找到成为可能。
13.在该方法的情形中首先产生操作对象,其以自身已知的方式例如构造成窗口小部件(widget)、窗口或图形对象(例如图标或符号)且可在显示面上被输出。操作对象尤其是可操作的元素。其备选地或附加地可用于信息的输出。操作对象可例如构造成显示器的图形元素且定义了显示面的这样的区域,即在该区域中操纵引起操作对象的操作。该操纵可例如通过借助于操纵对象在操作对象的区域中接触触摸屏或通过借助于指示工具(例如通过鼠标或类似装置来控制的光标)的操纵实现。此外,在该情况中可借助于手势实现操纵,其中,触摸屏或输入设备的接触不一定是必要的,例如借助于指示和操纵手势。
14.在此,操作对象配属于分层次地组织的数据库的层次级别。这样的数据库尤其包括数据对象(例如数据或数据集),其例如以目录结构的方式分层次地来组织。媒体数据、关于电台的数据、日程记录或地址数据例如可属于此。此外,操作表面的操作菜单可分层次地来组织,其中,在菜单结构内的各个菜单被理解为分层次地组织的数据库的对象。该数据库被如此地布置,即使得其数据对象相应地配属于层次级别。这些层次级别又彼此相对地在上一级和下一级。
15.操作对象的输出在输出区域中以自身已知的方式实现。输出区域可例如包括显示装置的显示面,例如显示器或触摸屏。此外,输出区域可在三维空间中构造,尤其在全息输出的情形中。同样地借助于自动立体显示的输出装置可如此地产生输出,即使得操作对象三维地在空间中显现。在此,被用于输出的装置可固定地布置在车辆中或作为车辆外部的或能与车辆可分开地使用的仪器来实现。
16.在该方法的情形中此外操作手势被获取,这可以自身已知的方式实现。“手势”尤其被理解为操纵对象(例如用户的手)的确定的位置和定向(也就是说姿态)或利用操纵对象实施的确定的运动。手势可根据自身已知的形式来设计。其尤其包括指示手势、挥动手势和这样的在日常使用中所使用的手势,例如手转动、抓取手势和多个这样的必要时直接立刻地依次实施的手势的组合。手势在获取空间中实施。该获取空间可处在相对确定的设备(例如输出装置)的空间上的关联中,且可例如毗邻于其。此外,手势可包括到确定的空间位置(例如设备或在显示面上的位置)处的靠近。通过手势操作给用户提供特别简单且直观的操作可行性方案。
17.借助手势此外可确定在空间中的方向且取决于经确定的方向可尤其确定这样的位置,即针对该位置指示手势被确定。例如,用户可指向在显示区域中的一点且由此执行选择。紧接着,图形对象的选择可被可视化,当该图像对象处在围绕计算出的点的经预先确定的环境区域中时。由此,图像对象可通过指示来选出。图像对象的选择的可视化具有如下优点,即,用户直接取得对于其操作动作的反馈。在此,即使当对象尚未在围绕该点的环境区域中被辨别出时,该点在显示区域中同样可被可视化。这避免了如下,即,用户须在对象之间在空白中寻找,直至其碰到期望的图像对象。这可进一步加速选择程序。
18.手势的获取可例如无接触地通过摄像机系统实现,其从探测空间中采集在时间上分散的视频数据且借助于相联接的分析单元将经获取的用户运动配属于确定的手势。备选
地或同样附加地,手势可借助于电阻且/或电容平面被获取。
19.在本发明的情形中,操作手势包括操纵对象垂直于输出区域的运动方向。在本发明的意义中这如此来理解,即,运动方向不是平行于所输出的操作对象或以相对于所输出的操作对象的保持不变的间距延伸,而是操纵对象例如朝向操作对象运动或从该操作对象远离地运动。运动方向尤其地以垂直于显示面布置在其中的显示平面的方向分量延伸。
20.在根据本发明的方法的一种构造方案的情形中,第一操作对象的运动在改变输出的情形中在三维图示中被输出。由此有利地实现特别清楚的且可容易获取的图示。
21.第一操作对象的运动被透视地输出且与操作手势的运动方向相符。透视的输出可以自身已知的方式来产生。第一操作对象被移动地如此示出,即使得其运动方向大致与操作手势的运动方向相符。在此,第一操作对象可相对操作手势同时地在相同方向上运动,其中,操作对象的所示出的运动成比例于或等于操纵对象的实际运动。操作对象可例如以相同的或可选的速度运动或在运动的情形中经过的行程可等于或成比例于操纵对象所经过的行程。
22.三维图示可以自身已知的方式来产生,例如通过虚拟对象在虚拟三维空间中的投影的两维图示。此外,该输出可借助于全息的或自动立体显示图示实现,通过其操作对象在三维空间中显现。
23.在该方法的另一构造方案的情形中,第二操作对象取决于操作手势的运动方向配属于相对于第一操作对象的层次级别上一级或下一级的层次级别。由此可有利地特别简单地在层次级别之间变换。
24.尤其地如下被确定,即,是否操作手势的运动方向包括朝向输出区域或从该输出区域远离的方向分量。例如,在由输出区域离开的运动的情形中下一级的层次级别的第二操作对象被输出。例如,这样的操作手势类似于朝向用户“拿来”或“拉近”来构造。与之相反,在朝向输出区域的运动的情形中上一级层次级别的第二操作对象可被输出。例如,这样的操作手势类似于从用户远离的“推开”或“驳回”地构造。例如当运动分量向下或向上、向右或向左延伸,且第二层次级别和/或待输出的第二操作对象可取决于该方向分量被确定时,类似于其也可评估运动方向的另外的分量。
25.尤其地实现输出由确定的层次级别出发至分层次地直接地布置在其上或者在其下的层次级别的变换。此外,取决于操作手势的类型同样可进行至这样的层次级别的过渡,即该层次级别在层次结构中相比第一操作对象的层次级别的级别更远地远离;例如确定的操作手势可被识别出且操作手势被配属有大量待跳过的层次级别,或在确定的“快捷方式(shortcut)”操作手势的情形中可被变换至确定的层次级别,例如最上部的层次级别。以该方式可特别快速地导航通过层次结构且找到确定的操作对象。
26.在另一种构造方案的情形中,输出包括至少两个第一操作对象,其配属于相同的层次级别且布置在一排中。由此,层次级别的多个元素有利地可特别明显地且可容易找到地被输出。
27.尤其地,所有配属于相同层次级别的操作对象相应地布置在一排中。该排在此可水平地、竖直地或在其它方向上延伸,其中, 操作对象然而沿着直线布置。
28.该排可如此地构造,即使得其根据带的形式延伸,例如越过显示面。此外,层次级别的操作对象可沿着虚拟的空间结构布置,例如沿着呈环形的走向,其中,不同层次级别的
操作对象沿着依次且例如同中心布置的结构布置。该布置可例如沿着虚拟的辊表面或根据旋转木马形式来构造。
29.例如,在输出由第一至第二操作对象的改变的情形中该布置的移动如此来示出,即使得对不同层次级别的操作对象的布置的虚拟的透视发生变化。例如,第一和第二操作对象沿着环布置,所述环彼此同中心地延伸且其配属于各一个层次级别。在另外的例子的情形中,该布置作为同中心的环的替代同样可沿着同中心的辊表面或旋转木马布置的表面实现。
30.用户可如此地实施操作手势,即,其例如在输出区域的方向上实施挥动手势且操作对象的在该处所示出的布置同样由用户离开地被移动。以该方式,进一步处在外部的环的第二操作对象实现显示,而首先被示出的第一操作对象移动到背景中。与之相反,用户可实施由输出区域离开和朝向用户的拉动手势;图示于是被如此地改变,即使得操作元素的布置朝向用户运动且如此地改变透视,即使得首先进一步处在内部的环的第二操作对象获得显示。
31.在该方法的情形中所实现的操作于是尤其是这样的,即,用户借助于操作手势在空间上移动操作对象的虚拟布置,从而使得操作手势的运动类似于操作对象的所示出的运动延伸。用户于是可通过其操作手势移动虚拟的布置且由此导航至确定的层次级别且/或至确定的操作对象。
32.在一种改进方案的情形中,输出的恰一个第一操作对象被标记为当前所选出的元素,其中,该标记尤其自动地实现。这有利地加速借助于操作手势的操作。
33.例如,当第一操作对象处在输出区域的确定的区域中、例如在显示面上的中间时,第一操作对象总是可被自动标记。这也就是说,标记同样可由此来进行,即使得操作对象移动到确定的位置处,例如借助于挥动手势。
34.当前所选出的操作对象可以自身已知的方式被突出地示出,例如通过特别的位置、尺寸、颜色或亮度。
35.在一种构造方案的情形中,操作手势包括利用用户的手的推动或拉动手势,其中,操作手势尤其利用闭合的或张开的手来实施。推动或拉动手势尤其在朝向第一操作对象的方向上或由其离开地来执行。用户由此有利地可特别简单且快速地区分不同的操作手势。
36.尤其地如下被获取,即,以哪种手部姿态执行操作手势且在哪个方向上手在此指示。例如如下可被区分,即,是否在张开的手的情形中手掌朝向操作对象或由其离开地、尤其朝向用户指示。此外,手的张开和闭合可被获取,尤其在操作手势的开始或结束时,例如用于执行用于抓取和/或松开的操作手势。
37.在一种改进方案的情形中,操作系统具有至少一个第一和第二操作模式。在此,输出取决于操作模式来构成。触发信号被获取,其中,取决于触发信号执行在第一与第二操作模式之间的变换。由此,输出有利地被匹配于当前情况地产生。在此尤其在不同的操作模式之间被变换,对不同的操作模式而言同样产生第一或第二操作对象的不同输出。
38.在不同操作模式之间的变换的情形中,输出同样可被改变,尤其操作对象或多个操作对象在输出内的布置。例如,多个操作对象在第一操作模式的情形中可彼此并排地且相叠地根据矩阵形式布置,而其在第二操作模式的情形中在一排中彼此并排地或相叠地布置。此外,操作对象的布置在过渡的情形中可借助于动画被改变,其中,例如操作对象沿着
显示面被移动且重新布置。
39.取决于当前激活的操作模式,操作例如可借助于不同的优选的操作方式实现。在第一操作模式中,操作可例如优选地借助于在三维空间中的操作手势实现,而在第二操作模式中借助于沿着二维表面的操作手势的操作是优选的。此外,取决于操作模式其它的操作方式可以是优选的,例如借助于语音输入、指示器或物理操作元件(例如开关或调节器)的控制。
40.对于在操作模式之间的变换而言的触发信号可以不同的方式来产生,例如自动地在满足确定条件的情形中或通过触发信号借助用户的操作动作的手动产生。例如,车辆设备的状态或设定参数可被获取且操作模式取决于经获取的状态或参数来设定。此外,触发信号可取决于针对确定用户的设定来产生。
41.在一种构造方案的情形中,触发信号在改变座椅位置的情形中被获取。例如,在接近模式与距离模式之间进行区分。操作模式由此可被有利地匹配于用户用于操作的可行性方案。
42.座椅位置可例如相对于输出区域被确定,例如借助相对显示器的间距。此外,在座椅上的用户的作用范围可被确定或预设,例如通过手臂长度或通过固定地被预设的距离值。在此,例如在座椅的靠近显示器的与远离显示器的位置之间进行区分,按照显示器是否处于在座椅上的用户的作用范围中或在作用范围之外。当座椅位置超出作用范围值或在其之下的调节被获取时,触发信号于是被产生。
43.在另一构造方案的情形中,触发信号取决于车辆驾驶模式的变换被获取。操作模式由此可有利地被特别良好地匹配于驾驶员的需求。
44.例如当车辆控制的自动化的确定的程度被超出或低于时,操作模式可变换。例如当车辆手动地或以较小程度的自动化被控制时,第一操作模式可被设定,且当车辆以较高程度的自动化或完全自动化地被控制时,第二操作模式可被设定。
45.例如,在由车辆的手动或部分自动的控制过渡至车辆的至少在很大程度上全自动的控制的情形中不仅座椅位置由靠近显示器的位置被调节至远离显示器的位置且同时可产生用于变换操作模式的触发信号。
46.在车辆中的根据本发明的操作系统包括控制单元、获取单元和与控制单元相耦联的带有输出区域的输出单元。在此,控制单元被设置用于产生带有至少一个第一操作对象的输出且在输出单元的输出区域中输出。在此,第一操作对象配属于分层次地组织的数据库的第一层次级别的第一元素且获取单元被设置用于获取操作手势,其中,经获取的操作手势包括操纵对象垂直于输出区域的运动方向。此外控制单元被设置用于取决于操作手势的运动方向如此地改变输出,即,第一操作对象被第二操作对象替代。在此,在改变输出的情形中第一操作对象到操作手势的运动方向上的运动被透视地输出且第二操作对象配属于分层次地组织的数据库的第二层次级别。
47.根据本发明的操作系统尤其构造用于借助于上述根据本发明的方法来运行。因此,该操作系统具有与根据本发明的方法相同的优点。
48.在根据本发明的操作系统的一种构造方案的情形中,输出单元和获取单元被集成在触摸屏中。由此,输入可有利地特别简单地被获取。
附图说明
49.本发明此时借助实施例参照附图阐述。
50.图1显示了带有根据本发明的操作系统的实施例的车辆,图2显示了根据本发明的方法的实施例,图3显示了带有对操作手势的执行的提示的在根据本发明的方法的情形中所产生的输出的实施例,图4显示了带有对不同方向的提示的在根据本发明的方法的情形中所产生的输出的实施例,图5显示了带有关于音量调节的弹出窗口的在根据本发明的方法的情形中所产生的输出的实施例,图6a和6b显示了带有相对操作手势的实施的提示的在根据本发明的方法的情形中所产生的输出的实施例,图7显示了带有用于控制照明设备的弹出窗口的在根据本发明的方法的情形中所产生的输出的实施例,且图8a至8d显示了在该方法的情形中所产生的输出和其在不同操作模式中的操作的实施例。
具体实施方式
51.参照图1阐述了一种带有根据本发明的操作系统的实施例的车辆。
52.车辆1包括触摸屏2,触摸屏2以自身已知的方式构造且包括显示单元3以及布置在其上的对接触敏感的表面4。此外,车辆1包括获取单元5,获取单元5构造成摄像机5且通过获取单元5可在车辆1的内部空间中的获取区域7中获取手势,且包括构造成扬声器6的输出单元6。触摸屏2、摄像机5和扬声器6与控制单元8相耦联,多媒体单元9同样与控制单元8相耦联。
53.参考图2和3阐述了根据本发明的方法的实施例和在此所产生的带有对操作手势的执行的提示的输出。在此以根据本发明的操作系统的上面参考图1所阐述的实施例为出发点,该操作系统通过本方法的描述来进一步详细说明。
54.在步骤s1中如下被获取,即,哪种功能当前可操作。为此如下被确定,即,哪个设备当前可通过控制单元8被操控且处于在其中用户的输入可被处理的状态中。在该实施例的情形中,多媒体单元9的功能可操作,例如用于输出视听内容、文本和图像、用于控制导航仪器、用于取用车辆1的另外的设备或用于控制通讯设备(例如电话)的功能。在此,用户同样可导航通过分层次地组织的数据库、例如音乐标题或地址数据或菜单结构。在另外的实施例的情形中,备选地或附加地车辆1的其它的功能和/或设备可为能够操作的。
55.在该步骤s1中,在该实施例的情形中此外用户的身份被获取。这在该实施例的情形中借助配属于用户的移动的仪器、尤其车辆钥匙实现。在另外的实施例的情形中,该鉴别可借助其位置被确定在车辆1中的确定的车辆座椅、例如驾驶员座椅的区域中且其配属于确定的用户的移动电话实现。此外,该鉴别可借助用户的输入实现,其例如通过借助于触摸屏2的输入经由登录名登录。
56.取决于可操作的功能,在进一步的步骤s2中可能的操作动作类型被确定,这也就
是说如下被确定,即,用户可执行哪种形式的操作动作,以便于进行用于操作可操作的功能的确定的输入。在该实施例的情形中,首先不同的操作方式被确定,例如在获取区域7中的三维手势、在对接触敏感的表面4上的手势、语音指令和/或物理操作元件(例如按键、压力和转动开关、滑动件和调整旋钮或按钮)的操纵。
57.在进一步的步骤s3中,优选的操作动作类型被确定,其中,在该实施例的情形中优选的操作方式的确定的优选的操作动作类型的操作动作类型被确定为优选的。这也就是说,如下被确定,即,哪种操作动作类型在当前情况中或对于确定的可操作的功能而言是特别良好地合适的。
58.在该实施例的情形中,为此用户处在其上的车辆座椅的位置被确定。为此首先可确定用户实际处在哪个车辆座椅上,例如借助于坐垫或探测设备,此外确定的车辆座椅可配属于车辆1的操作系统或确定的可操作的设备9。在该实施例的情形中由此出发,即,车辆1的驾驶员被看作用户且处在驾驶员座椅上。车辆座椅的确定的位置可作为优选配属于不同的操作方式。
59.如果例如驾驶员座椅(例如在自动驾驶的情形中)处在向后移动的位置中,从该位置起在车辆1的仪表板处的操作元件被远离,因此无需操纵布置在仪表板处的操作元件的操作方式可被确定为优选的;例如在该情况中借助于语音指令或三维手势的控制可能是优选的。
60.备选地或附加地,在另一实施例的情形中可确定如下,即,哪种操作动作类型对于确定的输入而言需要最小的体力耗费或允许尽可能快速的操作。例如,通过列表的滚动可需要物理或虚拟示出的按键的多次操纵,而借助于沿着对接触敏感的表面4或在获取区域7中的挥动手势的类似操作可明显更快速地且以更少的耗费来执行。在另一例子的情形中借助于语音指令可特别快速地实现至列表的确定条目的跳转,而条目借助于键盘的输入需要多次操纵。
61.在另外的实施例的情形中,备选地或附加地可利用其它的参数,以便于确定优选的操作动作类型或操作方式,例如手动或至少部分自动的驾驶模式、行驶的道路类型、地理周围环境或对于车辆1的经鉴别的用户或驾驶员的设定、输入和偏好。
62.在进一步的步骤s4中,对于经鉴别的用户而言的操作历史被获取。在该实施例的情形中,操作历史包括关于如下的信息,即,借助于哪种操作动作类型的操作动作用户在过去进行对于确定的可操作的功能的输入。此外,操作历史包括关于如下的信息,即,用户以哪种方式实施操作动作,例如如何好地借助确定操作动作类型的操作动作识别出输入且操作动作的经改变的执行如何改善可识别性。这也就是说,操作历史包括关于如下的信息,即,是否用户在过去使用确定的操作动作类型的操作动作,以便于进行确定的输入,且用户如何实施这些操作动作。
63.例如,用户在过去未精确地例如以如下方式实施确定操作动作类型的操作动作,即,其在三维空间中以太高的速度、经由太小的距离且/或非充分直线地执行挥动手势。这在过去引起如下,即,挥动手势的识别以较小的置信度实现,其中,例如挥动手势的幅度或其方向可以仅较小的精度被确定。在另一例子的情形中,用户在过去不清楚地、太小声地或太快地说出语音指令。在另一例子的情形中,用户在触摸屏2上操纵虚拟的操作元素的情形中接触在操作元素的边缘处的区域,从而使得输入不可清楚地与相邻操作元素的操纵隔
开。
64.在该实施例的情形中,操作历史被如此地获取,即,其包括用户的预设数量的输入。在另外的实施例的情形中,确定的持续时间能够被预设或在过去所考虑的操作动作的数量在该方法的实施期间能够可变地确定。
65.当借助经获取的操作历史确定如下,即,用户为了操作通常使用优选的操作动作类型且可良好识别地实施相应的操作动作时,则在进一步的步骤s5中操作动作被获取、相应的控制信号被产生且车辆1的设备被操控。
66.如果与之相反如下被确定,即,用户很少或从不使用优选的操作动作类型或用户没有最佳地实施优选的操作动作类型的操作动作,则在步骤s6中产生且输出带有对可能的操作动作类型的实施的提示的输出。
67.对于用户而言如下应被说明,即,其完全不或错误地实施可能的手势或其可以较少的体力耗费实施该操作。该输出此时个别地在相应的情况中被如此地产生,即使得由用户未实施的、错误实施的或未最佳地实施的操作动作类型(例如确定的手势)被指出。
68.在该例子的情形中,对于用户而言在未利用在人机界面的操作的确定位置处的确定的手势的情形中在这些位置处例如示意性的手被显示,其示出尚未被利用的手势类型的实施。在确定手势类型的手势的错误的或未最佳实施的情形中,拟做的手势被识别出且其同样显示示意性的手,该示意性的手显示在运动中的正确的或更节省的手势实施。
69.在另外的例子的情形中实现以其它形式示出的正确的手势实施。因此,例如借助于全息的或自动立体显示的显示可在显示器之前的空间中显示三维的手或在另一获取区域中显示正确的手势运动。该方法的一种可能的扩展在于如下,即,除了视觉的显示之外视觉的建议用于补充语音输出。因此,关于在确定的操作情况中从不实施的手势(然而用户在其它位置处正确地实施且识别所述手势)可以经由语音输出来输出提示;例如“你在此同样可实施滑动手势”。在措施的或非最佳的手势实施的情形中,用于实施和改善的语音提示可被输出;例如“你须在结束时非常短地保持该手势”或“你无需如此远地移动臂部”。由此可更有针对性地解决操作动作类型的实施的问题且模仿例如与自然的配对物(gegen
ü
ber)的自然交互。
70.此外,在借助钥匙或借助生物特性获取用户的身份的情形中可单独地探讨不同用户的手势操作和利用。该系统例如在进入到车辆中的情形中已借助操作历史识别出如下,即,用户在确定的操作情况中不实施确定的手势。以该方式此外可识别出如下,即,用户在过去已具有正确地或以较小的体力耗费实施确定的手势的问题。于是对于用户而言可实现用于最佳的手势操作的单独的辅助。
71.图3显示了带有对可能的操作动作类型的实施的提示的输出的例子。在该处示例地示出的情况中,优选的操作动作类型是在三维空间中的挥动手势,通过其可移动在操作表面20内的不同的图形对象22至25,尤其用于将元素带到前景中、选择且紧接着进一步操作。对这样的挥动手势的提示在此构造成手21的示意性地以轮廓的方式所显示的图示。该输出在此动态地形成,这也就是说,示意性示出的手21以该方式运动地示出挥动手势应如何在三维空间中被实施。在该实施例的操作表面20的情形中,然而同样可实现以其它方式借助于非优选的操作动作的操纵,例如通过箭头按键的操纵、通过沿着对接触敏感的表面4的挥动手势、通过语音指令或通过物理操作元件(例如旋转按压调节器)的操纵。
72.在该实施例的情形中,输出此外取决于如下构成,即,用户可如何改善其优选的操作动作类型的操作动作的实施,这也就是说,实施方案的在其中存在改善需求的这样的方面被特别清楚地示出。例如,在手势期间的手部姿态可特别清楚地示出,运动的速度或幅度(例如在特别长的路径上)同样地可特别清楚地示出。
73.在另一实施例的情形中,对可能的操作动作类型的实施的提示的呈现通过文字提示的输出实现。在另外的实施例的情形中,输出可借助于全息的或自动立体显示的显示实现,尤其地用于示出三维的手势。在另外的实施例的情形中,输出备选地或附加地在声学上可为能够感知的,例如通过对优选的操作动作类型的实施的语音提示。尤其地,该输出可借助于提示优选的操作方式的输出方式实现,例如通过在声学上能够感知的对借助于语音指令的操作的提示的输出或通过可操纵的物理或虚拟示出的操作元素的(例如通过亮度、颜色或动态效果例如闪烁)的强调。
74.在输出之后,在另一实施例的情形中在步骤s5中用户的操作动作可作为输入被获取且相应的控制信号被产生,以便于操作车辆1的设备9。该操作同样可借助于非优选的操作动作类型的操作动作实现。
75.借助经获取的操作动作,操作历史被更新。
76.在根据本发明的方法的另一实施例的情形中,用户的操作动作被获取,例如在获取区域7中的手势或语音指令,其中,该操作动作然而不配属于车辆1的设备9的当前可供使用的操作。这可由此引起,即,操作动作未被正确识别和被配属于错误的操作动作类型或用户执行了不可供使用的操作动作类型的操作动作,例如因为对其而言未意识到哪个操作动作类型当前可供使用或应如何实施这些操作动作类型。意图假设被确定,这也就是说,该系统形成关于如下的假设,即,哪些操作动作类型可能由用户拟做。该输出于是利用对根据意图假设拟做的操作动作类型的提示来产生。
77.例如,作为意图假设可确定这样的操作动作类型,其相对经获取的操作动作具有最高相似性。在此此外考虑哪些可能的操作动作类型实际当前可供使用。此外,借助操作历史可考虑用户优选使用的这样的操作动作类型,或可确定是否经获取的操作动作相对在过去获取的在其中用户不最佳地实施确定的操作动作类型的操作动作具有特殊的相似性。
78.例如,这样的语音指令可作为操作动作被获取,即该语音指令相对于可能的操作动作类型具有在声音或语义上的相似性,该语音指令于是被确定为意图假设。在另一例子的情形中,这样的三维的手势可作为操作动作被获取,即该三维的手势具有此时未设置的方向,比如竖直的方向而不是水平的方向,其中于是带有水平的方向的操作动作类型被确定为意图假设。
79.在另一实施例的情形中,此外借助操作历史且/或借助经获取的操作动作执行学习过程,其中,操作动作类型的识别通过该系统被改善。为此可应用例如机器学习的自身已知的方法。以该方式,在该方法的情形中不仅识别出针对用户的学习需求,即对其而言使得优选的操作动作类型的最佳应用成为可能,而且识别出系统的学习需求,针对其确定的操作动作类型的识别针对用户被改善。
80.在另一实施例的情形中,在获取区域7中获取用户的指示手势且借助经获取的指示手势确定方向。如下被确定,即,用户指向车辆1的哪个设备9且该设备9被选出。紧接着被获取的操作动作作为所选出的设备9的操作来处理,这也就是说,借助该操作动作产生用于
所选出的设备9的控制信号。例如,用户指向车辆1的推动门且借助于到一方向上的推动或挥动手势执行推动门的自动的打开或关闭。在另一例子的情形中,用户指向车辆1的显示器,在其上可输出图像数据或操作表面,其中,紧接着的操作动作被处理为输出或操作表面的操作。以该方式,可供使用的操作动作类型的数量可被限制于对于确定的设备9而言的相关的操作可行性方案。
81.参考图4阐述了在根据本发明的方法的情形中所产生的带有对不同方向的提示的输出的实施例。在此,由根据本发明的操作系统和方法的所阐述的实施例出发,其通过另外的实施例进一步详细说明。
82.根据该实施例的输出40包括箭头41至46,其相应地示出空间方向且部分构造成双箭头。借助于箭头41至46如下被输出,即,在哪个空间方向上可实施可能的手势作为操作动作。按照具体的操作情况且按照借助于手势设置哪种可能的操作动作类型,箭头或多个箭头41至46同时在输出40中被示出。此外,箭头41至46可叠加地附加于任意的其它图形图示在输出40内被产生。
83.在另外的实施例的情形中,如下可被附加地输出,即是否且以哪种方式在手势的实施期间实施带有确定的手部姿态的手势,例如张开的或闭合的手、向上、向下、向前或向后指向的手掌、伸展的或弯曲的手指或手在空间中的定向。这可通过附加的图形对象或箭头41至46的确定的造型被输出。此外,作为箭头41至46的替代可使用用于输出的图形对象的其它图示,例如操纵对象例如手的其它图示,尤其示意性地借助于轮廓。此外,该图示可动态地来产生。
84.在该实施例的情形中,向上的箭头41和向下的箭头42代表包括由上向下的运动的手势。借助于这样的手势可例如实施在竖直方向上向上或向下的滚动或屏幕内容移动(bildlauf)。此外,向右的箭头43和向左的箭头44代表带有朝向相应的侧部的运动的手势。借助于这样的手势可例如实施朝向一侧部的翻阅或移动。包括平行于输出40的表面的运动的手势尤其被称作挥动或“滑动”手势。
85.此外设置有透视示出的向后的箭头45和向前的箭头46,这也就是说尤其地朝向输出40的显示面或者由其离开。这些箭头45,46尤其被透视地示出,其中,图形图示的自身已知的方式被如此地利用,即,使得在输出40的观察者的情形中的空间印象如此地形成,即使得向后的箭头45或向前的箭头46到输出40的平面中且进而由观察者离开或者从输出40的平面出来且进而朝向观察者指示。
86.在另外的实施例的情形中,可设想其它的箭头形状,尤其直的或弯曲的走向,通过其例如提示带有确定轨迹、例如圆形轨道或圆节段的手势的实施。此外,该输出在另外的实施例的情形中可如此地构成,即使得通过其提示如下,即,在手势(滑动或其它运动)实施的开始和/或结束时,操纵对象的姿势应被保持达较长或较短的时间。以该方式可例如标记对于借助于手势的输入而言的运动的结束。
87.对于手势操作而言,在该实施例的情形中使用被限制于确定的操作动作类型(也就是说确定形式的手势)的手势组。尤其地,该手势组如此地构成,即使得信息娱乐系统的完整的可操作性被实现。借助于这样的手势组,可操作尤其分层次地划分的数据和操作等级的整个系统,而不是仅操作在单个背景内的部分。这样的手势组尤其包括清楚的数量的手势,从而使得用户可注意到这些手势。同时,这样的手势组的手势如此地构成,即使得其
特别清楚地彼此区分且可被容易地获取,例如借助于摄像机。
88.在该实施例的情形中,手势组包括五个基础手势。借助图4阐述了带有图形对象41至46的图形显示,借助于其可输出对基础手势的提示。
89.在“滑动,水平”手势的情形中,手尤其在竖起姿势中在水平方向上向右或向左移动,尤其相对于例如在显示面上或在输出40内被输出的操作对象。手在手势结束时的姿势的保持例如以如下方式尤其引起持续的功能,即,持久的操纵被获取。在“滑动,竖直”手势的情形中,手在平的或平放的姿势中在竖直方向上向上或向下移动,尤其相对于操作对象。同样地此处,手在手势结束时的姿势的保持可例如以如下方式尤其引起持续的功能,即,持久的操纵被获取。在“ok”手势的情形中,手以手掌向上运动,其中,指尖尤其在例如被显示在屏幕上的操作对象的方向上指示。在“停止”手势的情形中,手在打开的姿势中且以手掌朝向操作对象、尤其在朝向操作对象的方向上运动。同样地此处,手在手势结束时的姿势可被保持且作为持久的操纵被获取。在“音量”手势的情形中,最后食指可朝向操作对象指示且例如在侧面的方向上运动。为了使得可记忆性变得容易,所提及的基础手势中的大多数可相应成对地在相反方向上被实施。借助于滑动手势可例如不仅向右而且向左或者向上或向下挥动。操作对象例如用于到达到确定的层次级别中或到确定的菜单中或用于操纵询问的选择或操纵通过朝向身体的运动实现,层次级别或菜单的退出或询问的拒绝通过由身体离开的相反运动实现。
90.这些成对的手势被用于使得完全导航通过大量分层次地组织的菜单或其它层次级别成为可能且与在三维空间中的三个空间方向相符。空间手势的可行性方案由此借助所有三个维度来充分利用。这些附加的维度相对已知的带有二维操作(例如经由触摸屏)的操作使得内容的更好的结构化成为可能且更大程度地与用户的空间思维方式相符。
91.用于导航通过菜单或分层次地组织的元素的所提及的基础手势尤其遵循如下原理,即,待操作的元素无须预先在屏幕上被选择,例如通过朝向确定对象的指示手势。作为替代,输出的元素尤其始终已被选出。该手势于是被评估为直接关于该元素的输入。例如,对于在显示面的中间所显示的且已自动选出的操作对象而言可直接执行“打开”过程,例如借助于“ok”手势。为了选出操作对象,其在此可借助于挥动手势被移动到显示面的中间中或到另一自动的选择区域中。尤其在车辆中,这具有如下优点,即,内容可被可靠地且简单地选出,即使当例如在行驶中的振动使得精确的导航变得困难,例如相对于借助于光标或触摸屏的已知的操作。
92.在上面所阐述的手势组的情形中此外设置成,音量或系统的其它参数借助于相应的“音量手势”来调节。例如,用户以伸出的食指或操纵对象在操作对象或显示面的方向上指示。音量调节可由此显示,音量-显示器被显示为弹出窗口,其中,音量水平可通过手指的侧向运动被调节。在此,音量显示尤其跟随手指的运动且音量被提高或降低。
93.此外可定义选项手势,其不用于菜单导航,而是充当用于调用确定的功能的快捷方式。尤其地设置有三个选项手势,即,用于直接跳转至主屏幕(以在结束时形成拳头的停止手势)、用于调用显示和说明手势和其功能的指导以及用于声音播放的静音(打开的手向下的运动)。在该实施例的情形中,选项手势始终引起相同功能的调用,不取决于在其中该手势被实施的相应的背景。
94.参考图5阐述了在根据本发明的方法的情形中所产生的带有用于音量调节的弹出
窗口的输出的实施例。在此由根据本发明的操作系统和方法的所阐述的实施例出发,其通过另外的实施例进一步详细说明。
95.根据该实施例的输出50包括图形对象51,其此处代表当前所播放的媒体数据,以及包括音量操作对象51,其作为弹出窗口叠加地输出输出50的另外的元素。音量操作对象51包括音量符号52以及标度对象54,标度对象54构造成水平的直线,其中,纵向延伸的不同位置配属于音量的不同值,尤其由左向右上升的音量。在标度对象51处布置有指示物对象53(此处填满的圆),其中,指示物对象53在标度对象51处的位置显示了音量的当前所设定的值。
96.在该实施例的情形中,当用户在媒体数据的通过图形对象55所显示的播放期间将其伸展的食指指向输出50且执行水平的运动时,用户到达至所示出的输出50。根据食指的运动(尤其对此成正比地),在输出50中指示物对象53沿着标度对象51被移动且以相同的程度改变音量的所设定的值。
97.在该实施例的情形中,音量操作对象51借助于输出输出50的触摸屏2的接触也可操作。用户可例如接触指示物对象53且借助于沿着触摸屏2的挥动手势沿着标度对象54被移动。此外,它可借助于确定位置的标度对象54的接触设定音量的配属于该位置的值,其中,指示物对象53被移动到接触的位置处。
98.借助于伸出的食指在输出50的方向上(由在水平方向上的运动跟随)的上面所描述的指示手势,在实施例的情形中尤其被称作“音量手势”。在此,其尤其是选项手势,该选项手势在该实施例的情形中可不取决于当前所输出的背景来应用。这也就是说,不取决于在输出50中输出什么,借助于音量手势可显示和改变当前所设定的音量。这简化了操作,因为确定的背景或内容须被调用以用于改变音量。
99.尤其地,音量手势以及另外的选项手势在该例子的情形中可在每个背景中被应用,这也就是说不取决于恰好激活的显示或当前所选出的操作对象。例如,用于音量调节的音量手势和用于静音的手势影响恰好激活的声音背景的音量,类似于例如自身已知的类似的音量调节器,其例如使用调整旋钮。
100.在根据本发明的方法的在该说明书中所说明的实施例的情形中可使用不同的操作方式,以用于操作功能。在此尤其优选的操作方式被确定,其按照具体的情况说明以哪种方式可特别有利地执行操作。该操作可借助于优选的操作方式例如特别可靠、快速、以更少的体力耗费且/或在没有用户注意力的过度要求的情形中实现。
101.可能的操作方式例如是在接触表面或操作对象期间的手势、在三维空间中的手势的操纵或执行、类似操作元件(例如开关、按键或调节器)的操纵、语音指令、远程操作的使用或与语音指令相结合的手势操作。
102.信息娱乐系统的操作可例如完全经由不同的方式被实现,以便于给予用户个人偏好的操作方式。因此,有些用户基本上优选语音操作,其它的用户优选手势操作。此外,用户由此可取决于情况自由地选择所述一种或另一种方式,例如作为语音替代的手势,以便于不干扰睡觉的副驾驶乘员。此外,在该例子的情形中对于用户而言建议如下,即,哪种操作动作类型和/或哪个操作方式现在且对于当前可操作的功能而言是最佳地合适的。优选的操作方式在该实施例的情形中借助下面的逻辑来确定:特别当存在“不清晰的”、未能具体命名的操作目标时、当于是用户例如执行搜索
或导航通过一排对象(“浏览”)时以及当例如特殊目标的精确命名以繁琐的方式输入时,那么手势操作可以是优选的操作方式。此外,手势操作在较短交互的情形中可为优选的,或当在确定情况中的语言上的中断是干扰的时。此外,其对于空间的选择或空间的操作可为优选的。
103.当操作目标能清楚地命名时,例如当用户可容易地说出对于待操作的功能或设备而言的名称时,借助于语音指令的操作那么可能是特别有利的。用户借助于语音指令此外可特别简单地跳转经过多个层次级别,而无须首先执行较长的搜索。此外可设置有自然语言的输入。
104.当对于用户而言特别良好地信任的操作应被保证时,借助于远程操作的操作那么可能是优选的。
105.当应与其名称不清楚或繁琐的单元相互作用时,或当应避开用于激活语音控制的特殊的操作动作、例如按键件的按压或确定的码字时,借助于手势和语音指令的组合的操作那么可能是优选的。
106.在该例子的情形中,当搜索或浏览应被执行,例如用于寻找名字或地址或用于执行在电影或音乐标题的列表内的搜索时,手势操作被确定为优选的操作方式。此外,对于较短的交互(例如电话的接受)而言、对于操作件或环境元素(其最容易地能在空间上选择或其名称是未知的)的操作而言(例如以便操作确定的窗或调整确定的照明设备)以及当由于语音指令的中断干扰时(例如在电话期间或当副驾驶乘员被干扰时),手势操作是优选的。
107.尤其地,在系统的例子的情形中虽然支持针对操作的多种操作方式,然而其在输出中指出操作的相应最佳地合适的形式。
108.例如,用于接受进入的呼叫的手势操作以如下方式被指出,即,视觉的元素对于不同的操作选项而言以类似的方式动态运动地示出应如何实施相关联的操作手势。尤其地,操作元素在这样的方向上的运动被示出,即相应的手势应该在所述方向上实施。同时,操作元素在该例子的情形中然而同样自身可操作,例如通过接触在操作元素的区域中的显示面。在另外的例子的情形中,此外可设置有语音操作的可行性方案;对相应的可行性方案的提示于是例如借助于所显示的复述相应的语音指令的文字或借助于用于语音控制的符号被输出。
109.参考图6a和6b阐述了在根据本发明的方法的情形中所产生的带有用于实施操作手势的提示的输出的实施例。在此由根据本发明的操作系统和方法的所阐述的实施例出发,其通过另外的实施例进一步详细说明。
110.根据该实施例的输出60在图6a中所显示的情况中包括弹出窗口61,其叠加地输出输出60的另外的元素。在弹出窗口61的区域中输出关于进入的呼叫的信息,尤其呼叫者的名字和面貌图,其中,这些信息配属于带有联系人和相配属的附加信息的数据库。此外,弹出窗口61包括用于接受的操作元素62和另外的用于拒绝进入的呼叫的操作元素63。
111.在该实施例的情形中,操作元素62,63可通过轻击手势来操作,其中,用户短时间接触相应的操作元素62,63的位置的触摸屏2,以便于实施相应配属的功能。此外,在该实施例的情形中设置有手势操作。在该例子的情形中如下被确定,即,手势操作是优选的操作方式,这也就是说用于接受或拒绝呼叫的操作优选通过相应配属于这些功能的手势实现。该优选在该实施例的情形中由此引起,即,用户的座椅位置位于与触摸屏2远离且其因此仅可
困难地被接触。
112.用于接受或拒绝呼叫的手势由此被输出,即,操作元件62,63被动态地示出。在图6a中,这通过动态对象64,65来显示。为了接受呼叫,用户应执行如下手势,在其中用户将其手在垂直于输出60的平面的方向上从其离开地移动,例如与“挥手”、“拉近”或“拿来”手势相符。与之相反,用户为了拒绝呼叫应执行如下手势,在其中用户将其手在垂直于输出60的平面的方向上朝向该平面移动,例如与“推开”、“拒绝”或“驳回”手势相符。相应的操作元件62,63动态地且透视地被如此示出,即使得其似乎具有在与手势的相应运动相符的方向上的运动。
113.在另外的实施例的情形中,输出60借助于三维图示技术来产生,例如借助于自动立体显示或全息图示。
114.在图6a中所显示的情况中于是产生动画输出,其包括用于接受和拒绝呼叫的操作元件,其中,操作元件在待实施的手势的方向上移动地被示出。借助于透视图示示出操作对象由驾驶员离开或朝向驾驶员的运动,其中,红色(拒绝)和绿色(接受)的圆借助于大量较小的或者较大的圆的显示在空间上似乎在显示器中移动。
115.在图6b中所显示的情况中,输出60包括背景图示66,其此处与视频数据的播放相符。此外,输出60包括操作元素67,68,69a,69b,其以类似于在图6a的情况中的操作元素62,63的方式不仅可通过接触触摸屏2操纵,而且用于输出对可能的操作手势的提示。在该实施例的情形中,尤其当操作意图被获取时,例如在操纵对象进入到获取空间7中的情形中或在接触触摸屏2的情形中,操作元素67,68,69a,69b那么被显示。
116.如已经在上面参考图6a所阐述的那样,同样地此处操作元素67,68,69a,69b被动态地示出。其显示了与可能的操作手势的运动相符的运动。例如,操作元素67被设置用于停止播放且构造有相应的符号。操作元素67此外动画地如此示出,即使得其似乎与用户远离。用于停止的相应的操作手势相应地包括朝向输出60的运动,例如与“按压”手势相符地。此外,在该实施例的情形中用于调用关联菜单(kontextmen
ü
s,有时称为快捷菜单)的操作元素68向下移动地示出且相应的操作手势包括向下挥动。用于回放(操作元素69a)或者向前放(操作元素69b)的操作元素69a,69b以向左或者向右的运动被动画示出,这同样此处与相应的操作手势、尤其挥动手势的运动相符。
117.在另外的实施例的情形中,操作手势还可构造有其它的方式或被不同地组合。尤其地,所设置的手势基于基础手势的上面参考图4所阐述的组,可选地通过同样在上面所阐述的选项手势来补充。
118.在该实施例的情形中,借助于手势操作不仅导航通过菜单层次,而且背景同样被操作。由于背景的区别设置有不同的功能。如上面参考图6a和6b所说明的那样,例如进入的电话可被接受或被拒绝。此外,当前所播放的电影可在两个方向上被命令(geschult)或停止。此外,可选择用于设定附加选项的关联菜单,例如小标题或语音。必要功能的多样性借助于上面所说明的手势组被操作,其中,例如电话的拒绝通过与电影停止相同的停止手势实现。为了使用户知道在哪个背景中哪些操作选项对其而言可供使用,对于用户而言取决于背景显示哪些手势是可能的且它们相应具有哪些功能。此外可输出哪个是优选的操作方式。
119.在对于进入的呼叫而言的实施例的情形中于是显示两个作为“泡泡”示出的操作
对象62,63,在电影的例子的情形中多个操作对象67,68,69a,69b作为泡泡。这些泡泡包含各一个符号且可选地包含一种颜色,由此功能被输出。例如,红色的听筒符号代表电话的结束或停止符代表停止。此外,泡泡在这样的方向上移动,即在所述方向上应实施相应手势,这也就是说向右或向左、向上或向下,或透视地朝向用户或由其离开。
120.在显示设计的情形中,用户以如下方式被提示手势控制的可供使用的操作动作类型或其它优选的操作动作类型,即,其特定背景地被显示。由此降低对于用户而言的记忆耗费且不想要的操作的数量被减少。
121.上面参考图6a和6b所描述的图示特别良好地适合用于,可简单且直观获取地、在此然而较不显眼地且微妙地以信号的方式告知用户,其在相应的操作情况中具有哪些操作可能性。备选地或附加地,其它的输出可被用于要求用户使用确定的操作手势。例如,上面参考图4所描述的箭头41至46可被输出,其中,这样的附加的对象然而经常被感觉为干扰的。元素在手势方向上的空间上示出的运动与之相反同样可在无附加的图形对象的情形中被输出,从而使得被输出的操作表面不被装满。
122.参考图7阐述了在根据本发明的方法的情形中所产生的带有用于控制照明设备的弹出窗口的输出的实施例。在此由根据本发明的操作系统和方法的所阐述的实施例出发,其通过另外的实施例进一步详细说明。
123.根据该实施例的输出70包括图形对象75,其此处代表当前所播放的媒体数据,以及包括弹出窗口71,其叠加地输出输出70的另外的元素。弹出窗口71包括亮度符号72以及用于接通或者关闭照明设备的操作元素73,74。
124.在该实施例的情形中,当用户在媒体数据的通过图形对象75所显示的播放期间将其伸展的食指指向车辆1的设备且该食指保持预设的时间时,用户到达至所示出的输出70。根据食指的方向被确定,用户指向车辆1的哪个设备,在该实施例的情形中照明设备。紧接着产生弹出窗口71,其包括操作元素73,74,其提示可能的操作。在该实施例的情形中同样地此处存在不同的可能的操作方式,尤其在操作元素73,74的区域中的触摸屏的接触或语音指令。在该实施例的情形中,另外的借助于语音指令的操作是优选的,为了其执行操作元素73,74构造成文本元素。由此告知用户其借助于哪个语音指令可操作设备。
125.对此附加地,在该实施例的情形中此外可进行借助于另外的指示手势的操作,其中,用户指向弹出窗口71内的操作元素73,74的其中一个,以便于操纵该操作元素且触发与此相联结的功能。此外可设置成,操作可借助于另外的操作手势来执行,例如向下挥动用于关闭或向上挥动用于接通。
126.在图7中所显示的实施例的情形中,操作于是优选地可借助于手势与语音指令组合地实施。当车辆的设备应被操作,而为此确定的唤醒惯用语应被用于激活纯粹的语音指令时,该操作方式被确定为优选的。在该例子的情形中,用户指向待操作的设备,其在该例子的情形中是在车辆内部空间中的灯。紧接着,用户继续借助于语音指令的操作。为了在指示手势之后对用户显示,语音操作可被执行,带有可能的语音选项的弹出窗口被显示。
127.参考图8a至8d阐述了在该方法的情形中所产生的输出的实施例和其在不同操作模式中的操作。在此由根据本发明的操作系统和方法的所阐述的实施例出发,其通过另外的实施例进一步详细说明。
128.在图8a中所显示的情况的情形中,操作系统处在接近模式中,这也就是说用户连
同其座椅布置在触摸屏2的作用范围中。输出80包括多个窗口小部件81,其根据矩阵形式彼此并排地和彼此相叠地布置。优选的操作方式在该实施例的情形中在接近模式中是通过接触触摸屏2的操作和必要时沿着触摸屏2的被接触表面的手势。
129.在图8b中所显示的情况的情形中,车辆1的自动驾驶模式被激活且用户(其此时不再须手动干预车辆的控制)的座椅被向后移动。触摸屏2由此可能难以达到且操作模式因此被转换成距离模式。优选的操作方式此时是借助于在三维空间中、尤其在车辆1的内部空间中的获取区域7中的手势的操作。在变换操作模式的情形中,输出80同样如此变化,从而使得显示此时对于新的优选的操作方式而言是最优的。
130.这也就是说,在该实施例的情形中操作系统不仅可借助于触摸板而且可借助于手势来操作。在至少部分自动化的驾驶模式的情形中、尤其在level 4或level 5的自动化程度的情形中,尤其驾驶员座椅向后移动以便于使得更高的座椅舒适性成为可能,由此然而由于显示器的不可达到性也使得在仪表板处的触摸屏的操作变得困难。在该情况中,手势操作应作为优选的操作方式被提供。为此,显示设计须被匹配,因为不是所有显示良好地适合于手势操作。此外,否则由于更大的座椅距离太小示出的内容可能难以看到。
131.在该例子的情形中,对于远离显示器的座椅位置而言对于手势操作而言最佳的显示在“距离模式”中被显示。在此,在该例子的情形中仅同时显示三个“背景”,在该实施例的情形中构造成平铺窗口(kacheln)、窗口小部件或窗口。这些被足够大地示出,以便于从更大的距离同样可识别出。
132.因为在借助于手势的操作的情形中显示的更简单的结构是有用的,输出80的对象82,83此时彼此并排地布置。在此,布置在中间的对象82始终被自动选出,而另外的对象83布置在旁边。在该实施例的情形中,所选出的对象82此外以如下方式被突出地示出,即,其以更大的面、特殊的边缘且相对另外的对象83以更强的亮度来输出。
133.这也就是说,在距离模式中的显示的情形中背景单行地布置,而其对于触摸操作而言多行地布置。中间的背景或者中间的平铺窗口总是处在焦点中,这也就是说,其始终被自动选出,且在视觉上更大、更亮且突出地示出。该背景于是可被立即操作,例如用于开始在其中所示出的电影,而无须事先选出该背景。在另外的实施例的情形中,背景多行地布置且借助于手势、(例如指示手势)在打开或激活之前被选出。
134.在图8c中所显示的情况的情形中示出了用户如何通过以其手84在通过箭头85所示出的方向上的侧向挥动手势进行在输出80中所显示的图形对象的移动。在此,所选出的对象87从中间出来侧向上移动且另外的对象86移动到该对象的其此时被自动选出的位置处。在该实施例的情形中设置成,附加于在三维空间中的侧向挥动手势同样可利用沿着触摸屏2的对接触敏感的挥动手势和/或语音指令以移动对象86,87。
135.在图8d中所显示的情况的情形中,从中间示出的情形出发示出了通过分层次地组织的数据库或菜单结构的导航。此外,信息娱乐系统的内容可分层次地被结构化。用户针对当前的中间示出的且因此自动选出的对象82可如此地进行操纵,即使得该对象被激活或被打开或被变换至下一级的层次级别;为此可使用的可能的操作动作类型通过提示88来示出,其以类似的方式同样可在输出80内被示出。此外,用户针对所选出的对象82可停止进程或变换至上一级的层次级别;为此可使用的可能的操作动作类型通过提示89来示出。
136.为了激活背景的打开或为了变换至下一级的层次级别,提示88显示了借助于三维
手势的操作的可行性方案,其中,手掌朝向用户指向且执行朝向用户的运动。备选地或附加地,语音指令“ok”可被使用。与之相反,用于停止或变换至上一级的层次级别的提示89显示了对如下三维手势的提示,在其中手掌朝向触摸屏2或者朝向输出80指向,且其中,朝向输出80的运动被执行。备选地或附加地可使用语音指令“停止”。
137.此外,图8d显示在数据库的层次级别之间的过渡如何被示出:由中间示出的起始情况出发在根据提示88的操作的情形中(例如利用“ok”手势)增大所选出的对象82且另外的对象83被从图示中排挤出。该图示于是与所选出的对象82朝向用户的靠近或者由用户的视角朝向所选出的对象82的运动相符。紧接着,下一级的层次级别的另外的对象以与在图8d中在中间所示出的相同的方式被显示,这也就是说中间的对象被自动选出且另外的对象布置在旁边。与之相反,在根据提示89的操作的情形中(例如利用“停止”手势)缩小所选出的对象82,其中,另外的对象83同样可被缩小。这相反于上面所阐述的情况与所选出的对象82与用户的远离相符或者用户似乎与所选出的对象82远离。
138.输出80尤其如此地来产生,即使得所选出的对象82和另外的对象83被如此地彼此并排地示出,即使得不同层次级别或菜单等级的对象依次布置地显现。在此,输出80尤其透视地如此来产生,即使得布置沿着三维结构、例如沿着同中心的环或辊被示出。在变换层次级别或菜单等级的情形中,所示出的视图的透视图移动至另一层次级别的对象。
139.在该实施例的情形中,在相同层次级别上的背景或者对象82,83如在旋转木马上那样侧向上彼此并排地且略微透视地向后偏移地示出。外部的平铺窗口或者对象82,83被切割地示出,以便于说明在其旁边存在另外的内容。在打开背景或者对象82的情形中执行到更深的菜单级别的变换且示出到相应的平铺窗口处的缩放,其中,所选出的中间的平铺窗口被短暂放大。紧接着再次示出缩小直至在那时更深的菜单级别上的三个背景的更新的示出。
140.背景或者对象82的关闭且进而到更高菜单级别中的变换被输出为与平铺窗口的透视的远离。在显示中为此中间的自动选择的背景或者对象82被缩小且紧接着再次实现放大直至在那时更高的菜单级别上的例如三个背景的更新的图示。
141.通过所描述的视觉动画,对于用户而言作为视觉辅助输出用户在哪个操作方向上移动穿过菜单层次,从而使得用户取得关于菜单结构的更好的取向和其在层次内的当前位置。
142.在另一实施例的情形中此外竖直而不是水平布置地输出列表内容、例如电话本的条目。同样地此处示出条目沿着辊或旋转木马结构的透视布置。上面和下面的元素被相应切割地示出以便于说明在其旁边存在另外的内容。平面变换可如上面参考图8d所说明的那样来执行。
143.附加于平面变换的视觉辅助,此外可产生听觉上或触觉上能感知的输出。
144.附图标记列表1 车辆2 触摸屏3 输出单元;显示单元4 获取单元;对接触敏感的表面5 获取单元;摄像机
6 输出单元;扬声器7 获取区域8 控制单元9 设备;多媒体单元20 操作表面21 手的示意图22至25 图形对象s1至s6 步骤40 输出41,42 箭头(“滑动,竖直”)43,44 箭头(“滑动,水平”)45,46 箭头(透视地)50 输出51 音量操作对象52 音量符号53 指示物对象54 标度对象55 图形对象60 输出61 弹出窗口62 操作元素(接受)63 操作元素(拒绝)64 动态对象(向前)65 动态对象(向后)66 背景图示67 操作元素(停止)68 操作元素(关联菜单)69a,69b 操作元素(放)70 输出71 弹出窗口72 亮度符号73 操作元素(“打开(an)”)74 操作元素(“关闭(aus)”)75 图形对象80 输出81 窗口小部件(接近模式)82 所选出的对象83 另外的对象84 手
85 箭头86 另外的对象87 所选出的对象88 对“ok”手势的指示89 对“停止”手势的指示。