提供多媒体内容项目的信息的方法以及装置转让专利

申请号 : CN201280048604.2

文献号 : CN103843357B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : A.兰伯特I.奥拉克L.希瓦利埃

申请人 : 汤姆逊许可公司

摘要 :

本发明涉及一种以具有显示内容内部和内容之间的信息的能力地向用户提供来自多媒体内容项目(10)的目录的多媒体内容项目(10)的信息的方法以及装置(50)。使用概念图(20)以及与多媒体内容项目(10)相关联的元数据(14)产生多媒体内容项目(10)的概念序列(24)。使用概念序列(24)以及增强概念图(26)产生多媒体内容项目(10)的增强概念序列(44)。然后,向用户显示增强概念序列(44)。

权利要求 :

1.一种向用户提供来自多媒体内容项目(10)的目录的多媒体内容项目(10)的信息的方法,该方法包含:使用概念图(20)以及与所述多媒体内容项目(10)相关联的元数据(14),产生所述多媒体内容项目(10)的概念序列(24);

使用所述概念序列(24)以及增强概念图(26)产生所述多媒体内容项目(10)的增强概念序列(44);以及向用户显示所述增强概念序列(44);其中

通过分析一个或者多个知识库得到所述概念图(20),从所述一个或者多个知识库的概念得到(31)所述概念图(20)的顶点,从所述一个或者多个知识库的概念中的链接或者交叉引用得到(33)所述概念图(20)的边;

通过将来自所述多媒体内容项目(10)的目录的一个或者多个多媒体内容项目(10)和所述概念图(20)的顶点进行关联(25),得到所述增强概念图(26)。

2.根据权利要求1所述的方法,其中,通过如下步骤产生所述多媒体内容项目(10)的概念序列(24):将与所述多媒体内容项目(10)相关联的元数据(14)和所述概念图(20)的顶点进行匹配(21);以及将与所述概念图(20)的顶点相关联的概念和与所述多媒体内容项目(10)相关联的元数据(14)进行关联(23)。

3.根据权利要求2所述的方法,还包含:基于预定的选择标准,选择(22)一个或者多个与所述概念图(20)的顶点相关联的概念,所述概念图(20)的顶点和与所述多媒体内容项目(10)相关联的元数据(14)相匹配。

4.根据权利要求1所述的方法,其中,通过如下步骤产生所述多媒体内容项目(10)的增强概念序列(44):在所述增强概念图(26)中搜索(40)连接到所述概念序列(24)中的概念的顶点;以及将与所述增强概念图(26)中的被连接的顶点相关联的概念和所述概念序列(24)进行关联(43)。

5.根据权利要求4所述的方法,还包含:

对与所述增强概念图(26)中的被连接的顶点相关联的概念进行分级(41);以及根据所述分级(41)选择预定数量的概念。

6.根据权利要求4或者5所述的方法,还包含:将链接到所述增强概念图(26)中的被连接的顶点的多媒体内容项目和所述概念序列(24)进行关联。

7.根据权利要求1所述的方法,其中,与所述多媒体内容项目(10)相关联的元数据(14)包含所述多媒体内容项目(10)的剧本或者提纲(11),以及通过对所述多媒体内容项目(10)的分析(12)而得到的元数据。

8.根据权利要求7所述的方法,其中,对所述多媒体内容项目(10)的分析(12)包含语音转文本分析或者对字幕的分析。

9.根据权利要求1所述的方法,其中,所述多媒体内容项目(10)是电影、电视连续剧、电子书、有声读物以及一段音乐之一。

10.一种配置为向用户提供来自多媒体内容项目(10)的目录的多媒体内容项目(10)的信息的装置(50),其特征在于,该装置(50)包含:处理器(54),被配置为,使用概念图(20)以及与所述多媒体内容项目(10)相关联的元数据(14)产生所述多媒体内容项目(10)的概念序列(24),并且,使用所述概念序列(24)以及增强概念图(26)产生所述多媒体内容项目(10)的增强概念序列(44);以及信息系统(55),被配置为向用户显示所述增强概念序列(44);其中通过分析一个或者多个知识库得到所述概念图(20),从所述一个或者多个知识库的概念得到(31)所述概念图(20)的顶点,从所述一个或者多个知识库的概念中的链接或者交叉引用得到(33)所述概念图(20)的边;

通过将来自所述多媒体内容项目(10)的目录的一个或者多个多媒体内容项目(10)和所述概念图(20)的顶点进行关联(25),得到所述增强概念图(26)。

说明书 :

提供多媒体内容项目的信息的方法以及装置

技术领域

[0001] 本发明涉及提供多媒体内容项目的信息的方法以及装置,更具体地涉及提供能够显示内容内部以及内容之间的信息的多媒体内容项目的信息的方法以及装置。

背景技术

[0002] VOD(视频点播)服务变得越来越流行,并且正与通过DVD(数字多功能盘)以及BD(蓝光盘)的内容分发进行竞争。如今,VOD提供商仍然不能够提供与在数字盘介质上可用的特性相同的特性。然而,研究和调查已表明,用户不仅仅是想要观看电影,还希望更多的如DVD那样的特性,诸如能够通过围绕该电影及其情节的额外内容来加深体验的能力。
[0003] 在这一点上,xtimeline(www.xtimeline.com)提供了创建并分享涉及个人、公司、历时时期或者专题的,可以交互地浏览的时间线的可能性。例如,时间线“电影世界历史之四”按照时间顺序显示从1800年至1807年的电影,更具体地,根据其涉及的历史时期排序。这样的时间线被称为电影之间的时间线。在图1中示出了该时间线的屏幕截图。
[0004] “The Movie Timeline”(www.themovietimeline.com)使用了一种对于电影之间的时间线的稍微不同的方式,该方式提供了按照时间顺序安排的电影中的(虚构的或者非虚构的)事件的静态时间线。在图2中例示了这样的电影之间的时间线的示例。如所能看到的那样,该时间线基于在电影中的事件,而不是电影涉及的历史时期。
[0005] 在所有所显示的事件均源于单一电影时,该时间线等同于电影内部的时间线,即按照时间顺序安排的电影中的(虚构的或者非虚构的)事件的时间线。在图3中描述了这样的电影内部的时间线的示例,其列出了在电影《阿凡达》中出现的主要事件。
[0006] 尽管上述的示例性的时间线向感兴趣的用户给出了某些背景信息,但是很明显的是,这些示例仅是非常基础的能力有限的方案。

发明内容

[0007] 因此,本发明的目的在于提出一种更加精细的方案,用于在一组多媒体内容项目之内进行导航。
[0008] 根据本发明,从多媒体内容项目的目录向用户提供多媒体内容项目的信息的方法包含如下步骤:
[0009] -使用概念图以及与多媒体内容项目相关联的元数据,产生多媒体内容项目的概念序列;
[0010] -使用概念序列以及增强概念图,产生多媒体内容项目的增强概念序列;以及[0011] -向用户显示增强概念序列。
[0012] 本发明开始于多媒体内容项目的概念序列,即对齐到情节进展的该情节的重要元素,例如地点、人物、事件等的序列。通过如下步骤产生多媒体内容项目的该概念序列:
[0013] -将与多媒体内容项目相关联的元数据和概念图的顶点进行匹配;以及[0014] -将与概念图的顶点相关联的概念和与多媒体内容项目相关联的元数据进行关联。
[0015] 优选地,基于预定的选择标准,选择一个或者多个与概念图的顶点相关联的概念,所述概念图的顶点和与多媒体内容项目相关联的元数据相匹配。
[0016] 直接从多媒体内容项目或者从可用的文本元数据提取建立该序列所需的元数据。为此,预先使用适当的技术,例如语音转文本分析、在可用时的对提纲或者剧本的分析、对可用字幕的分析等,处理在目录中的多媒体内容项目。通过分析一个或者多个知识库,得到概念图。根据该一个或者多个知识库的概念,得到概念图的顶点;同时,根据该一个或者多个知识库的概念中的链接或者交叉引用,得到概念图的边。
[0017] 通过将来自多媒体内容项目的目录的一个或者多个多媒体内容项目和概念图的顶点进行关联,得到增强概念图。
[0018] 然后,通过如下步骤,产生增强概念序列:
[0019] -在增强概念图中,搜索连接到概念序列中的概念的顶点;以及
[0020] -将与增强概念图的连接顶点相关联的概念和概念序列进行关联。
[0021] 有利地,与增强概念图的连接顶点相关联的概念是被分级的,并且,根据该分级选择预定数量的概念。
[0022] 有利地,链接到增强概念图的连接顶点的多媒体内容项目还与概念序列相关联。
[0023] 有利地,一种用于从多媒体内容项目的目录向用户提供多媒体内容项目的信息的装置适配于实施上述的方法。
[0024] 本发明提供了一种用于在多媒体内容项目内部进行导航以及显示关于情节的额外详细信息的工具。多媒体内容项目可以是任何具有时间方面的多媒体内容,例如电影、电视连续剧、电子书、有声读物、一段音乐等。优选地,本发明实现为使用增强的、交互式的、表示多媒体内容项目的持续时间的时间线来说明该多媒体内容项目的情节。用户沿着该时间线移动,并且被示以该情节的重要元素,例如地点、人物、事件等。而且,还示出这些元素到在相同的多媒体内容项目中很快或者之后出现的其他元素的连接。在某些情况下,所示的元素还可以涉及其情节包含那些元素的其他多媒体内容项目。
[0025] 本发明允许用户通过其使用交互接口选择的进入点,更深地探究该多媒体内容项目的情节及其涉及的主题。它使用情节线作为具有事件、人物、地点等的轴线,不仅为该多媒体内容项目,而且为涉及相同事件或者展示相同地点或人物的其他多媒体内容项目,提供了的语义视图。
[0026] 直接从多媒体内容项目或者从可用的文本元数据提取建立该序列所需的元数据,允许无监督的处理来产生必要的数据。它们与常识信息相关联,以创建多媒体内容项目的额外内容的有趣的表现,例如到其他主题、电影、常识文章等的链接。

附图说明

[0027] 为了更好的理解,现在参考附图在下面的说明中更详细地解释本发明。应当理解的是,本发明并不限制于该示例性的实施例,并且在不脱离由在所附的权利要求书中所定义的本发明的范围的情况下,可以方便地组合和/或修改所指定的特征。附图中:
[0028] 图1示出了电影之间的时间线的第一个示例;
[0029] 图2描述了电影之间的时间线的第二个示例;
[0030] 图3例示了电影内部的时间线的示例;
[0031] 图4描述了根据本发明的电影的增强概念序列;
[0032] 图5例示了产生电影的对齐的剧本的过程;
[0033] 图6示出了产生电影的概念序列的过程;
[0034] 图7示意性地描述了概念图的产生;
[0035] 图8例示了使用另外的元素进一步地填充概念序列的过程;以及
[0036] 图9示意性地描述了适配于实施根据本发明的方法的装置。

具体实施方式

[0037] 图1以及图2分别描述出电影之间的时间线的第一个以及第二个示例。在图1中,时间线根据电影涉及的历史时期、按照时间顺序显示电影,而在图2中的时间线显示按照时间顺序安排的电影中的事件。
[0038] 图3示出电影内部的时间线,该时间线是图2的时间线的特殊形式,其中,所有在该时间线中显示的事件均源于单一电影。
[0039] 下面,参考电影,例如从VOD提供商的目录获得的电影,来解释本发明。当然,本发明同样适用于其他类型的多媒体内容项目。
[0040] 在图4中示出电影《日瓦戈医生》的根据本发明的增强概念序列。在用户在该电影情节时间线1上移动滑块2时,该用户发现所有在该电影中的被认为是感兴趣的元素。在图4的示例中,主要人物在俄国革命后返回到莫斯科。使用关键元素“俄国革命”3以及“俄国”4,系统能够链接到对“弗拉基米尔·列宁”5和“俄国沙皇尼古拉二世”6的传记,以及其他两部描述相同时期的电影,即关于拉斯普廷(Rasputin)的传记片“拉斯普廷”7以及关于俄国革命的文献片“1917年10月”8。由此,该用户能够加深其对所描述的历史事件的知识,并且发现其他相同主题的电影。在图4中,以相同的方式显示增强概念序列中的所有元素。当然,对这些元素的实际显示取决于实现。典型地,将仅显示围绕滑块2的当前位置的少量元素。也可以对位于滑块2附近的元素加亮,而使位于离滑块较远的元素淡出。
[0041] 为了产生在图4中所描述的序列,第一过程为该电影产生对齐的剧本14。在图5中,示意性地例示了该过程。该过程使用电影10,并且如果可用,则还使用该电影的剧本或者提纲11,来产生对齐的剧本14。剧本11不仅包含对话,还包含不同场景的说明及位置。然而,该剧本是某人为人类所写,它通常不包含建立对齐的剧本所需的时间信息。
[0042] 因此,需要取得和/或产生12该电影的其他元数据。这些元数据来源之一是字幕,即具有相关联的时间的来自电影的对话。在不能够使用字幕的情况下,语音转文本分析是一种关于对话和时间信息的可替换的来源。然后,动态时间规整算法13从可用的元数据产生对齐的剧本14。优选对目录中所有的电影实施该过程。
[0043] 在图6中示意性地例示的第二过程从对齐的剧本14产生表示该电影的概念序列。该过程以对齐的剧本14以及概念图15开始,关于概念图15的产生将在后面参照图7予以解释。在第一步骤中,对齐的剧本14与概念图20中的概念相匹配21。可能的概念例如是个人、地点、事件、组织等。作为示例,对齐的剧本14中的元素“莫斯科外-夜晚”与概念图20中的概念“莫斯科”相匹配。有利地,每个概念均具有相关联的数值,该数值被用于说明图中相应的概念的兴趣或者相关性。例如,事件可能比个人更相关,城镇可能比国家更相关,等等。一旦完成匹配21,就选择了22那些最能表示该电影的概念。例如,使用在该电影中概念出现的频率、概念的兴趣等来完成该选择。然后,将所选择的概念与对齐的剧本14相关联23,其生成表示该电影情节的概念序列24。而且,电影10被链接25到概念图20,以便得到增强概念图
26。再次地,优选使该过程对目录中的所有电影重复,使得增强概念图26包含到在目录中的所有电影的边(链接)。
[0044] 在图7中示意性地例示了概念图20的产生。在第一步骤中,从知识库30取得31概念。根据概念的内容,例如地点、人物、事件等,选择概念,并将其作为顶点放置到有向图中。例如,能够容易地用于这一目的的知识库是在线百科全书维基百科(http://en.wikipedia.org)或者互联网电影数据库IMDb(http://www.imdb.com)。然后,对图的顶点进行加权32,以便指示在该图中的相应的顶点的兴趣或者相关性。使用存在于知识库30中的内部的交叉引用或者超链接来建立33顶点之间的边。以这种方式,确保如果相关联的概念在语义上被链接,则两个顶点被连接。例如,“巴黎”将被链接到“法国”,“弗拉基米尔·列宁”将被链接到“俄国革命(1917)”,等等。
[0045] 在图8中示意性地例示的第三过程现在用于基于增强概念图26,使用另外的元素,即到相关的概念或者电影的链接,进一步地填充每个概念序列24。在第一步骤40中,在增强概念图26中实施对概念序列24中的概念的全面的搜索,以便找到被连接的顶点。在接下来的步骤中,对与取得的被连接的顶点相关联的概念进行分级41。优选根据与概念相关联的加权完成该分级。此外,有利地,考虑其他电影是否链接到这些概念。以这种方式,能够对链接了电影的概念给出更多加权。为了限制后期将向用户提供的信息量,接下来仅选择42指定数量n个概念以及所链接的电影。优选基于在先前步骤41中分配的分级来决定要选择的概念。然后,将所选择的概念及所链接的电影关联43到概念序列24,以便得到增强概念序列44。这个增强概念序列44最终形成图4的电影情节时间线的基础。
[0046] 在图9中,示意性的描述出适配于实施上述方法的装置50。该装置50具有接口51,用于从一个或者多个外部的知识库52取得概念。可替代地或者此外,可以同样地从内部的存储器53取得概念。提供处理器54,用于分析概念以及产生概念图20的必要的顶点以及边。基于多个多媒体内容项目10,处理器54进一步从概念图20产生增强概念图26。有利地,存储器53用于存储完整的增强概念图26。装置50还包含信息系统55,用于向用户提供关于多媒体内容项目10的信息。为了产生必要信息,处理器4取得增强概念图26以及概念序列24,并且产生增强概念序列44。然后,使用这个增强概念序列44向用户显示所请求的信息。当然,可以同样地将处理器54和信息系统55组合到单一处理块中。