多媒体操作设备和用于控制多媒体操作设备的方法

摘要

多媒体操作设备包括触敏的操作表面、设计用于读取关于多媒体区段的信息的接口、控制装置，该控制装置设计：用于在操作表面上显示操作区域；用于显示在操作区域之内的彼此邻接的区段，该区段代表多媒体区段或多媒体区段的一部分；用于将第一触觉效果与所显示的区段相关联；用于将与第一触觉效果不同的第二触觉效果与所显示的区段的边界相关联；用于检测利用操作元件在操作区域之内对触敏的操作表面的触摸；和用于根据对触敏的操作表面的触摸的位置产生第一或第二触觉效果，本发明还涉及包括多媒体操作设备的多媒体装置和用于控制多媒体操作设备的方法。

权利要求

1.一种多媒体操作设备(1)，包括

触敏的操作表面(11)，

接口(12)，所述接口设计用于读取关于多媒体区段的信息，控制装置(13)，所述控制装置设计

-用于在所述操作表面(11)上显示操作区域(30)，-用于显示在所述操作区域(30)之内的彼此邻接的区段(311，312，313，314，315，316)，所述区段代表所述多媒体区段，-用于将第一触觉效果与所显示的所述区段(311，……，316)相关联，-用于将与所述第一触觉效果不同的第二触觉效果与所显示的所述区段(311，……，

316)的边界(321，322，323，324，325)相关联，-用于检测利用操作元件(15)在所述操作区域(30)之内对触敏的所述操作表面(11)的触摸，和-用于根据对触敏的所述操作表面(11)的所述触摸的位置产生所述第一触觉效果或所述第二触觉效果。

2.根据权利要求1所述的多媒体操作设备，其特征在于，所述操作区域(30)条形地形成。

3.根据权利要求1所述的多媒体操作设备，其特征在于，所述操作区域(30)环形地形成。

4.根据前述权利要求中任一项所述的多媒体操作设备，其特征在于，所述第二触觉效果以边缘反馈或点击反馈的方式构成。

5.根据前述权利要求中任一项所述的多媒体操作设备，其特征在于，所述控制装置(13)设计用于：从所述多媒体区段的持续时间中推导出所述区段(311，……，316)的空间扩展、尤其是长度。

6.一种多媒体装置，包括根据权利要求1至5中任一项所述的多媒体操作设备。

7.一种用于控制多媒体操作设备的方法，所述多媒体操作设备包括触敏的操作表面、接口和控制装置，其中经由所述接口获得关于多媒体区段的信息，其中所述控制装置-在所述操作表面上显示操作区域，-显示在所述操作区域之内的彼此邻接的区段，所述区段代表所述多媒体区段或所述多媒体区段的一部分，-将第一触觉效果与所显示的所述区段相关联，

-将与所述第一触觉效果不同的第二触觉效果与所显示的所述区段的边界相关联，-检测利用操作元件在所述操作区域之内对触敏的所述操作表面的触摸，和-根据对触敏的所述操作表面的所述触摸的位置产生所述第一触觉效果或所述第二触觉效果。

8.根据权利要求7所述的方法，其特征在于，从所述多媒体区段的持续时间中推导出所述区段的空间扩展、尤其是长度。

9.一种用于操作多媒体装置的方法，所述方法利用根据权利要求7或8所述的方法来进行操作。

说明书

多媒体操作设备和用于控制多媒体操作设备的方法

技术领域

[0001] 本发明以电气设备和系统为出发点，该电气设备和系统具有触敏的表面作为输入机构、所谓的无显示功能的“触摸板”或者具有显示功能的“触摸屏”，并且电气设备和系统通过用一个或多个操作元件、例如输入笔或用户的手的一个或多个手指的触摸能够被操作。

背景技术

[0002] 此外，例如从WO2016/082966A1或WO2016/082963A1中已知根据在触敏的操作表面上的接触或移动获得触觉反馈的设备或系统。在此，虚拟的操作元件、例如按钮(“Button”)或滑动调节器(“Slider”)能够设有触觉效果，一方面以便在没有视觉观察的情况下在操作表面上能够找出和操作这些虚拟元件，并且另一方面以便获得在触觉路径上的操作功能。为了产生触觉反馈，借助于执行器激励整个操作表面。因此，例如能够在移动虚拟滑块时产生用于产生触觉反馈的振动。

发明内容

[0003] 具有独立权利要求的特征的发明能够借助于具有触觉反馈的操作设备实现在多媒体内容之内容易地找出特定的部段，在此和在下文中将该部段称作为多媒体区段。

[0004] 这借助一种多媒体操作设备来实现，多媒体操作设备包括

[0005] -触敏的操作表面，

[0006] -设计用于读取关于多媒体区段的信息的接口，

[0007] -控制装置，所述控制装置设计

[0008] -用于在操作表面上显示操作区域，

[0009] -用于显示在操作区域之内的彼此邻接的区段，这些区段代表多媒体区段或多媒体区段的一部分，

[0010] -用于将第一触觉效果与所显示的区段相关联，

[0011] -用于将与第一触觉效果不同的第二触觉效果与所显示的区段的边界相关联，[0012] -用于检测利用操作元件在操作区域之内对触敏的操作表面的触摸和

[0013] -用于根据对触敏的操作表面的触摸的位置产生第一触觉效果或第二触觉效果。

[0014] 多媒体操作设备能够有利地用于操作多媒体装置。

[0015] 为此，多媒体操作设备可以是要操作的多媒体装置的组成部分。可替代地，多媒体操作设备能够构成为脱离多媒体装置的设备、例如呈远程操作或在移动设备、例如智能电话上的应用的类型，其中远程操作或移动设备在需要时能够与要操作的多媒体装置连接以交换信息。要操作的多媒体装置和多媒体操作设备之间的该通信连接优选能够以已知方式构成为无线通信，例如经由红外线、蓝牙、WLAN或其他近场通信协议的无线通信。

[0016] 多媒体装置例如能够是用于音频数据载体或视频数据载体、即例如可光学扫描的光盘的播放设备。多媒体装置可替代地或补充地能够设置用于播放或再现以其他方式获得的或存在的多媒体内容，例如用于经由无线电广播或因特网串流等接受的多媒体内容、尤其如音乐作品或视频电影。

[0017] 在此，多媒体内容优选已经以分区段的形式作为多媒体区段存在，即例如作为各个音乐作品或作为音乐作品的一部分、如章节和副歌，作为电影片段或作为电影之内的情节或电影片段或著作的章节、幕、情节等。此外，多媒体内容也能够在多媒体装置中借助已知的方法划分成多媒体区段、即例如音乐作品的各个章节等。用于将多媒体内容划分成多媒体区段的方法例如在Peiszer，Ewald，Thomas Lidy 和Andreas Rauber的“Automatic audio segmentation：Segment boundary and structure detection in popular music(自动音频分割：流行音乐中的片段边界和结构检测)。”(2007)中描述。该方法不是本发明的主题，进而这里不再详述。

[0018] 触敏的操作表面上的操作区域在此尤其能够条形地形成。条形在此表示矩形形状，其中第一侧边长比与其正交的第二侧边长显得更长。

[0019] 在另一改进形式中，操作区域例如也能够环形地形成。

[0020] 优选地，与区段之间的边界相关联的第二触觉效果以边缘反馈或点击反馈的方式形成。在经过操作区域之内的两个区段之间的边界时，用户经由操作元件、即输入笔或手指或另一操作元件获得关于扫过边界的可明显察觉的反馈。借此，简化了找出特定区段和也简化了在操作区域之内的定向。点击或边缘反馈还能够通过输出相应的点击声或喀嚓声来伴奏，由此进一步强化反馈。

[0021] 这还借助一种用于控制多媒体操作设备的方法来实现，该多媒体操作设备包括触敏的操作表面、接口和控制装置，

[0022] 其中经由接口获得关于多媒体区段的信息，其中控制装置

[0023] -在操作表面上显示操作区域，

[0024] -显示在操作区域之内的彼此邻接的区段，这些区段代表多媒体区段或多媒体区段的一部分，

[0025] -将第一触觉效果与所显示的区段相关联，

[0026] -将与第一触觉效果不同的第二触觉效果与所显示的区段的边界相关联，[0027] -检测利用操作元件在操作区域之内对触敏的操作表面的触摸和

[0028] -根据对触敏的操作表面的触摸的位置产生第一触觉效果或第二触觉效果。

[0029] 本发明申请将优选自动的多媒体数据分区段的应用与动态滑块组合，动态滑块不仅能够虚拟地、例如在触摸屏或触摸板上形成，而且能够形成为电容滑块。因此，已知的或自动识别的、在歌曲区段中的过渡、例如从章节到副歌能够在滑块上在经过时触觉地显示。以该方式用户能够简单且快速地滚动经过音乐文件，并且跳至期望的歌曲区段。

附图说明

[0030] 在附图中示出本发明的实施例并且在下文中详细阐述。相同的附图标记在此表示相同的或起相同作用的元件。

[0031] 附图示出：

[0032] 图1是多媒体操作设备的方框线路图，该多媒体操作设备用于操作同样示出的多媒体装置，

[0033] 图2是多媒体操作设备的操作表面的视图，

[0034] 图3是用于控制多媒体操作设备的方法的流程图。

具体实施方式

[0035] 在图1中示出多媒体操作设备1和能够借助多媒体操作设备1来操作的多媒体装置2。

[0036] 多媒体操作设备1包括触敏的操作表面11、用于读取关于多媒体作品的区段信息的接口12和控制装置13，区段在此和在下文中被称为多媒体区段。控制装置13构成为计算机，计算机为了执行其控制任务而处理操作程序。控制装置设计用于在操作表面上显示操作区域并且显示在操作区域之内彼此邻接的区段，其中区段代表多媒体区段。此外，控制装置13设计用于：将第一触觉效果与所显示的区段相关联，并且将与第一触觉效果不同的第二触觉效果与所显示的区段之间的边界相关联。此外，控制装置设计用于：检测利用操作元件在操作区域之内对触敏的操作表面的触摸，并且根据对触敏的操作表面的触摸的位置产生第一或第二触觉效果。

[0037] 多媒体装置2包括多媒体源20，多媒体源提供了多媒体信号21。多媒体装置2还包括分区段模块25，分区段模块提供关于部段、即包含在多媒体信号21中的多媒体内容的多媒体区段的信息。

[0038] 多媒体源20在当前描述的实施例中是用于存储在数据载体上的多媒体内容的播放设备201。例如，播放设备能够包括用于可光学扫描的数据载体、如Compact Disc高密度盘(CD)、Digital Versatile Disc数字万用光盘(DVD)或Blue Ray Dics蓝光盘(BD)的读取设备。播放设备也能够包括用于具有存储芯片的芯片卡的读取设备等。

[0039] 多媒体源20可替代地或补充地也能够是或包括接收模块202，其用于例如经由无线电广播传递的、包含或代表多媒体内容的多媒体信号。多媒体源20还可替代地或补充地例如也能够具有通信接口203，用于从与多媒体装置空间分开的存储装置204、例如从可经由因特网连接达到的服务器中调用多媒体内容。

[0040] 代表多媒体内容的多媒体信号21在多媒体源10的输出端22处提供。在已经分区段的、即以划分成部段的方式存在的多媒体内容的情况下，已经在多媒体信号21中一起包含了关于该分区段的信息，例如关于音乐CD或插曲的各个标题或音乐作品的信息、或在包括视频电影系列作品的DVD或蓝光盘的情况下它们划分成档案或剧幕的信息。

[0041] 分区段模块25设计用于：从为其提供的多媒体信号21中获取或导出关于多媒体内容的部段、在此也称作为多媒体区段的信息。只要多媒体信号21已经具有关于部段的信息、即例如关于音乐CD或DVD上的音乐作品的次序和持续时间或长度的信息，则将所述信息考虑用于获取关于多媒体区段的信息。

[0042] 对于多媒体信号21不包含关于划分成多媒体区段的信息的情况而言，分区段模块25设计用于：将通过多媒体信号代表的多媒体内容划分成多媒体区段。例如能够提出：将如下音乐CD或DVD的音乐作品的次序划分成各个音乐作品，对于所述音乐CD或DVD而言多媒体信号21还不包括关于各个音乐作品、如其长度和次序等的信息，其中所产生的关于多媒体区段的信息包括关于音乐作品的次序和其长度的信息。为此，能够使用已知的算法，所述算法例如基于自动化的信号间隙识别来执行分区段。用于将多媒体内容划分成多媒体区段的方法例如在Peiszer，Ewald，Thomas Lidy和Andreas Rauber的“Automatic audio segmentation：Segment boundary and structure detection in popular music(自动音频分割：流行音乐中的片段边界和结构检测)。”(2007)中描述。该方法不是本发明的主题，进而这里不再详述。

[0043] 此外也能够提出：已经划分成部段的多媒体内容还被再划分或细分成章节和副歌等，并且提供关于这样产生的多媒体区段的相应的信息。在此，同样能够使用所提及的方法。

[0044] 分区段模块25构成为具有所属的其他操作程序的其他计算机，其他操作程序由其他计算机处理，并且在此以所描述的方式从所输送的多媒体信号21中导出关于多媒体区段的信息。在分区段模块25的输出端27处，提供关于多媒体区段的信息、即关于细分多媒体内容的信息、尤其是多媒体内容的部段的彼此间的时间位置和长度，作为多媒体区段信息信号26。

[0045] 多媒体操作设备1包括触敏的操作表面11。操作表面当前以所谓的触摸屏的形式构成，即作为由显示面或显示屏111和触敏的传感器层112构成的堆叠、即“三明治”。可替代地，触敏的表面11也能够构成为触摸板，即以没有显示功能的承载板上的触敏层112的形式构成。这种触摸板和触摸屏在计算机技术和例如所谓的智能电话的领域中被广泛采用。

[0046] 触敏层112与控制装置13连接。控制装置13构成为计算机，计算机为了执行其控制任务而处理操作程序。

[0047] 控制装置13设计用于：检测用操作元件、例如用户手指的指尖触摸触敏层112进而触敏的表面11的位置。通过重复地检测触摸位置也能够确定用操作元件15扫过触敏的表面11的速度和方向。

[0048] 控制装置13还与用于显示要示出的内容的显示屏111连接。在本发明的上下文中，控制装置13尤其设计用于：在显示屏111或触敏的表面11上，必要时除了其他虚拟的操作元件(在此为开关面311、312和313之外)，显示操作区域30(图2)。在当前优选的实施例中，操作区域30形成为条带，即形成为矩形区域，其第一棱边长比其第二棱边长很多。边比例例如能够选择为5:1。优选地根据对于相应的操作文本中的操作区域可用的面积来选择精确的尺寸。

[0049] 控制装置13设计用于：经由接口12读取关于多媒体区段的、在分区段模块25的输出端27处等待处理的信息。控制装置13基于该读取的多媒体区段信息确定应在操作区域上映射的区段。

[0050] 在图2中，示出多媒体信号21或通过多媒体信号代表的多媒体内容的一部分。针对该多媒体信号21或多媒体内容，通过多媒体装置2的分区段模块25确定多媒体区段信息26。多媒体区段信息包括多媒体区段261、262、263、264、265和266的长度或持续时间和彼此间的相对位置。此外，多媒体区段信息包括关于多媒体区段的区段边界2610、2620、2630、
2640、2650和可能在多媒体区段261、…、266之间的间隔2610、…、2650的信息。

[0051] 该包含在多媒体区段信息信号26中的信息由控制装置13用于：在操作区域30上映射区段311、312、313、314、315、316，这些区段代表多媒体区段261、…、266。类似地，多媒体区段之间的多媒体区段边界或多媒体区段261、…、266之间的间隔2610、…、2650作为区段311、…、316之间的区段边界321、322、323、324、325映射在操作区域30上。

[0052] 控制装置13设计用于：将第一触觉效果与在操作区域30上映射的或示出的区段311、312、313、314、315、316相关联，并且将与第一触觉效果不同的第二触觉效果与所示出的区段之间的边界321、322、323、324、325相关联。第一触觉效果例如能够在于粗糙表面的模拟。第二触觉效果例如在于点击反馈或边缘反馈。

[0053] 为了产生触觉效果，控制装置13还与执行器14连接，执行器又机械地与可移动支承的触敏的表面11耦联。执行器14例如能够形成为电磁体，电磁体根据通过控制装置13进行的驱控产生触敏的表面的振动。这两个彼此不同的触觉效果、即例如粗糙表面的模拟和点击反馈通过由控制装置13相应地驱控执行器14来实现。

[0054] 如果现在操作区域30、即在此示出的虚拟滑块例如由用户的手指在图2中从左向右扫过，则首先在第一区段311的区域中模拟粗糙表面进而可在指尖察觉到，其中第一区段代表第一多媒体区段261。一旦指尖达到第一区段311的端部进而达到区段极限321，该手指位置就通过操作装置感测并且相应地在触敏的表面11中产生点击反馈，点击反馈本身通过指尖15摸到。

[0055] 在图3中简绘出根据一个实例的方法的流程。

[0056] 在步骤50中读取多媒体文件，例如播放数据载体的音乐作品。

[0057] 一旦播放音乐作品，多媒体装置2的分区段模块25就在步骤52中将其自动地分解成多媒体区段261、…、266。该分区段能够在每次播放音乐作品时进行。可替代地，仅在第一次播放音乐作品时执行分区段并且随后存储，并且在重新播放音乐作品时能够从存储器中加载。

[0058] 如此产生的多媒体区段信息由控制装置13读取，并且在步骤54中与操作区域30相关联。该关联首先包括将音乐作品映射到操作区域30上。滑块30的总宽度对应于音乐作品的长度。此外，操作区域30根据音乐作品的多媒体区段的长度和位置划分成区段，使得操作区域的区段对应于音乐作品的多媒体区段。

[0059] 如果用户在步骤56中用手指15经过操作区域30或在那里示出的滑块，则在区段过渡的位置处将触觉的点击信号输出给手指，而在区段上模拟第一触觉效果，在最简单的情况下模拟光滑的表面，但是优选模拟结构化的表面，进而可被察觉。由此用户察觉到何时达到音乐作品中的新区段。

[0060] 滑块例如能够是触摸屏上的虚拟滑块。滑块能够以任意的形式示出，例如线性水平、线性竖直、弯曲地示出。可选地，触摸屏上的虚拟滑块上的多媒体区段过渡也能够虚拟地示出。可替代地，滑块也能够设计为触摸板上的滑块或设计为电容性滑块。

[0061] 替代借助于激励整个触敏的表面11的执行器产生触觉反馈，也能够通过触觉层执行触觉激励。这种触觉层例如能够通过EAP(Elektro Aktive Polymer电子活性聚合物)层来形成。

[0062] 手指15在触敏的表面11上的位置或一般性地操作元件15在触敏的表面上的位置通过控制装置13来检测，并且被转换成用于驱控源20的控制信号16(步骤58)，使得根据操作元件15在虚拟的滑块或操作区域30上的位置来控制通过源再现的多媒体信号21的再现。操作元件15在滑块上向右移动因此对应于向前倒带功能，向左移动对应于向回倒带功能。