记录方法和装置、再现方法和装置及成像装置

摘要

当图像信息的数据被压缩并且被记录在一个记录介质上时，关于该图像信息的附加信息被以通常的可用状态而记录。在此提供读/写单元信息作为把在该记录介质上读写该压缩图像信息的单元。该读/写单元信息包含解码和再现单元信息的多个单元，其中包括该图像信息的一个帧(或一个场)。通过仅仅使用在该解码和再现单元中的图像信息，使得至少一块解码和再现单元信息受到压缩编码。在该读/写单元信息中，按照一种与该压缩图像信息分离的可提取方式复用和记录关于用于在该读/写单元中的多个单元的解码和再现单元信息的附加信息。

权利要求

1.一种对图像信息进行数据压缩，并将其记录在记录介质上的记录方法，其中，作为对上述记录介质读写上述所压缩的图像信息的单位的读写单元信息中包含构成上述图像信息的一帧或者一场的多个解码和再现单元信息，而且至少一个上述解码和再现单元信息通过只使用该解码和再现单元中的图像信息而进行压缩编码，该方法包括以下步骤：把关于上述读写单元内多个上述解码和再现单元信息的、且至少包括与包含在相同读写单元中的I图像中的时间标记相同的时间标记的附加信息，按照与所压缩的图像信息相分离的可提取方式，复用和记录在上述读写单元信息内。

2.根据权利要求1所述的记录方法，

其中上述读写单元信息包括多个块，每个块具有指定的数据量；

上述附加信息包括上述一个或者多个块。

3.根据权利要求2所述的记录方法，

其中上述附加信息的块被复用在上述读写单元中的一个预定块位置处，并且被记录在所述记录介质上。

4.根据权利要求2所述的记录方法，

其中上述附加信息的块被复用在紧接着在包括通过仅仅使用上述解码和再现单元中的图像信息进行压缩编码而得的压缩图像信息的一组块之前或之后的一个块位置处，并且被记录在所述记录介质上。

5.一种记录装置，包括：

数据压缩装置，其以构成图像信息的一帧或一场的解码和再现单元信息为单位，通过仅仅使用在该解码和再现单元中的图像信息而执行压缩编码，以及通过使用该解码和再现单元的图像信息与在该解码和再现单元的图像信息之前、或在该解码和再现单元的图像信息之前和之后的解码和再现单元的图像信息之间的相关性而执行压缩编码；

附加信息产生装置，用于产生关于上述图像信息的附加信息；以及记录控制装置，用于将上述数据压缩装置所压缩的多个上述解码和再现单元信息指定为作为对记录介质进行读写的单位的读写单元信息，使得该读写单元信息中包含通过仅仅使用在该解码和再现单元中的图像信息进行压缩编码而得的至少一个上述解码和再现单元信息，以及按照与上述所压缩的图像信息相分离的可提取方式，复用和记录来自上述附加信息产生装置的关于读写单元信息中的多个上述解码和再现单元信息的、至少包括与包含在相同读写单元信息中的I图像中的时间标记相同的时间标记的附加信息。

6.根据权利要求5所述的记录装置，

其中该读写单元信息包括多个块，每个块具有指定的数据量；

所述附加信息包括一个或多个块。

7.根据权利要求6所述的记录装置，

其中上述记录控制装置把该附加信息块复用在上述读写单元中的一个预定块位置处，并记录在所述记录介质上。

8.根据权利要求6所述的记录装置，

其中上述记录控制装置把上述附加信息块复用在紧接着包括通过仅仅使用在上述解码和再现单元中的图像信息进行压缩编码而得的压缩图像信息的一组块之前或之后的一个块位置处，并记录在上述记录介质上。

9.一种用于记录介质的再现方法，该记录介质以数据压缩方式记录图像信息，使得作为读写上述所压缩的图像信息的单位的读写单元信息包含构成所述图像信息的一帧或一场的多个解码和再现单元信息，并且记录通过仅仅使用在该解码和再现单元中的图像信息对至少一个解码和再现单元信息进行压缩编码而得到的信息，对关于上述读写单元信息中的多个上述解码和再现单元信息的、至少包括与包含在相同读写单元中的I图像中的时间标记相同的时间标记的附加信息，按照与所压缩的图像信息相分离的可提取方式被复用和记录在上述读写单元信息中，所述再现方法包括如下步骤：

从该记录介质读取上述读写单元的压缩图像信息，解压缩上述压缩图像信息，再现和输出所述解码和再现单元的图像信息；以及提取包含在上述读写单元信息中的上述附加信息，并且与包含在相应的上述读写单元信息中的上述解码和再现单元的图像信息的再现输出同步地再现输出该附加信息。

10.根据权利要求9所述的再现方法，

其中上述读写单元信息包括多个块，每个块具有指定的数据量；

上述附加信息包括一个或多个块。

11.根据权利要求10所述的再现方法，

其中把所述附加信息块复用在上述读写单元中的一个预定块位置处并被记录。

12.根据权利要求10所述的再现方法，

所述附加信息块复用在紧接着在包括通过仅仅使用在上述解码和再现单元中的图像信息进行压缩编码而得的压缩图像信息的一组块之前或之后的一个块位置处并被记录。

13.一种用于记录介质的再现装置，

该记录介质以数据压缩方式记录图像信息，使得作为读写所压缩的图像信息的单位的读写单元信息包含构成所述图像信息的一帧或一场的多个解码和再现单元信息，并且记录通过仅仅使用在该解码和再现单元中的图像信息对至少一个解码和再现单元信息进行压缩编码而得到的信息，对关于上述读写单元中的多个上述解码和再现单元信息的、至少包括与包含在相同读写单元中的I图像中的时间标记相同的时间标记的附加信息，按照与上述所压缩的图像信息相分离的可提取方式被复用和记录在上述读写单元信息中，所述再现装置包括：读取装置，用于从上述记录介质读取上述读写单元的压缩图像信息；

分离装置，用于分离来自上述读取装置的上述压缩图像信息和上述附加信息；

用于对来自上述分离装置的所述压缩图像信息进行解压缩的装置；

用于从经过解压缩的图像信息中再现地输出所述解码和再现单元信息的装置；以及用于与该解码和再现单元信息的再现输出同步地再现输出来自上述分离装置的所述附加信息。

14.根据权利要求13所述的再现装置，

其中所述读写单元信息包括多个块，每个块具有指定的数据量；

所述附加信息包括一个或多个块。

15.根据权利要求14所述的再现装置，

其中把所述附加信息块复用在上述读写单元中的一个预定块位置处并被记录。

16.根据权利要求14所述的再现装置，

所述附加信息块复用在紧接着在包括通过仅仅使用在上述解码和再现单元中的图像信息进行压缩编码而得的压缩图像信息的一组块之前或之后的一个块位置处并被记录。

17.一种成像装置，包括：

成像元件；

成像光学系统，用于在所述成像元件上形成物像；

数据压缩装置，以构成来自所述成像元件的图像信息的一帧或一场的解码和再现单元信息为单位，通过仅仅使用在所述解码和再现单元中的图像信息执行压缩编码，以及通过使用该解码和再现单元的图像信息与在该解码和再现单元的图像信息之前、或在该解码和再现单元的图像信息之前和之后的解码和再现单元的图像信息之间的相关性执行压缩编码；

附加信息产生装置，用于产生关于来自上述成像元件的图像信息的、至少包括与包含在相同读写单元中的I图像中的时间标记相同的时间标记的附加信息；以及记录控制装置，用于将由所述数据压缩装置所压缩的多个上述解码和再现单元信息指定为作为对记录介质进行读写的单位的读写单元信息，使得该读写单元信息中包含通过仅仅使用在该解码和再现单元信息中的图像信息进行压缩编码而得的至少一个上述解码和再现单元信息，以及按照与所压缩的图像信息相分离的可提取方式，复用和记录来自所述附加信息产生装置的关于所述读写单元信息中的多个上述解码和再现单元信息的附加信息。

18.根据权利要求17所述的成像装置，

其中所述读写单元信息包括多个块，每个块具有指定的数据量；

该附加信息包括一个或多个块。

19.根据权利要求18所述的成像装置，

其中该记录控制装置把该附加信息块复用在所述读写单元中的预定块位置处，并记录在所述记录介质上。

20.根据权利要求18所述的成像装置，

其中所述读写单元信息包括多个小包；以及

其中所述记录控制装置把上述附加信息块复用在紧接着在包括通过仅仅使用在所述解码和再现单元中的图像信息进行压缩编码而得的压缩图像信息的一组块之前或之后的一个块位置处，并记录在所述记录介质上。

21.一种再现装置，将至少包含1个帧内编码图像数据的多个帧作为读写单元来记录使用关于多个帧在时间轴方向上的相关性进行压缩处理而得到的图像数据，对将包含所述多个帧的所述读写单元中至少包括与包含在相同读写单元中的I图像中的时间标记相同的时间标记的附加信息配置在紧接所述帧内编码图像的图像数据之前或者之后的记录介质进行再现，该再现装置具有：再现单元，从所述记录介质中读出记录在所述记录介质中的所述读写单元；

分离装置，从由所述再现单元读出的所述读写单元中分离所述附加信息；

显示装置，对在由所述再现单元读出的所述读写单元中所包含的所述图像数据进行显示；

显示控制装置，控制成将由所述分离装置分离出的所述附加信息，重叠在由所述再现单元读出的所述读写单元中所包含的所述图像数据的再现图像上进行显示。

22.一种由再现装置进行的再现方法，该再现装置将至少包含1个帧内编码图像数据的多个帧作为读写单元来记录使用关于多个帧在时间轴方向上的相关性进行压缩处理而得到的图像数据，对将包含所述多个帧的所述读写单元中至少包括与包含在相同读写单元中的I图像中的时间标记相同的时间标记的附加信息配置在紧接所述帧内编码图像的图像数据之前或者之后的记录介质进行再现，该再现方法具有以下步骤：再现步骤，所述再现装置的再现单元从所述记录介质中读出记录在所述记录介质中的所述读写单元；

分离步骤，所述再现装置的分离装置从由所述再现步骤读出的所述读写单元中分离所述附加信息；

显示步骤，所述再现装置的显示装置对包含在由所述再现步骤读出的所述读写单元中的所述图像数据进行显示；

显示控制步骤，所述再现装置的显示控制装置控制成将由所述分离步骤分离出的所述附加信息，重叠在由所述再现步骤读出的所述读写单元中所包含的所述图像数据的再现图像上进行显示。

说明书

记录方法和装置、再现方法和装置及成像装置

[0001] 本申请是申请日为2003年12月26日、申请号是200310124322.9、发明名称是“记录方法和装置、记录介质、再现方法和装置及成像装置”的申请的分案申请。

技术领域

[0002] 本发明涉及一种用于通过压缩和编码装置把图像信息记录在例如盘这样的记录介质上的方法和装置，以及涉及用于再现该图像信息的方法和装置。

背景技术

[0003] 通常，图像信号的数据被压缩和记录在例如盘、磁带和半导体存储器这样的记录介质上，以在具有有限尺寸的面积上写入大量的图像信息。

[0004] 通常广泛使用一种MPEG(运动图像专家组)兼容的压缩编码系统，作为一种数据压缩方法。

[0005] 该MPEG系统通过如下方法处理图像信息：使用关于一个图像帧(或图像场)的信息相关性预测编码作为该图像信息的解码和再现单元；以及使用DCT(离散余弦变换)的数据压缩。

[0006] 该MPEG系统根据压缩编码把在每个帧或场中的图像分类为三种类型，即根据不同的压缩编码差别的I、P和B图像。为了便于描述，在下面的描述中将使用术语“帧”。

[0007] I图像也被称为帧内编码图像，其仅仅在一个帧内受到封闭压缩编码。P图像也被称为向前预测编码图像，其通过使用与在相关图像帧之前的一个图像帧的相关性而受到压缩编码。B图像也被称为双向预测编码图像，其通过使用在相关图像帧之前和之后的图像帧的相关性而受到压缩编码。

[0008] 该MPEG系统使用一个所谓的GOP(图像组)，其中包括多个帧(例如，15个帧)作为对记录介质的读和写的一个单元(读/写单元)。图15示出GOP的一个例子。

[0009] 如图15中所示，该MPEG系统构造该GOP，以总是包含至少一个I图像。这是因为仅仅使用P和B图像不能够解码图像。由于该GOP包含I图像，因此以GOP单元进行随机
存取成为可能。

[0010] 该I和P图像被按照与原始图像相同次序而编码。该B图像在I和P图像编码之后被编码。不考虑编码次序，一个MPEG编码器把图像从图15A中的一个原始次序重新排序为图15B中的次序。该压缩编码被应用于如专利文献1中所述的重新排序的图像信息(参
见日本专利申请No.214265/1996)。

[0011] 如图15A中的箭头所示，通过使用在前的I或P图像，该P图像受到预测编码。通过使用这些I或P图像，该B图像以夹在前和后I或P图像之间的两个B图像为单位受到
预测编码。

[0012] 按照这种方式，该B图像使用在后的I或P图像用于编码。如图15B中所述，该B图像被重新排序，使其跟随在随后的I或P图像之后，用于预测编码。

[0013] 如下文所述，该压缩和编码图像数据被提供管理信息，用于根据解码和再现单元，即基于图像的数据，进行解码和再现，并且被记录在一个记录介质上。在该MPEG系统中压缩的图像数据的再现过程中，用于解码和再现的管理信息被从所记录的数据中提取。根据该管理信息，提供控制，以图像为单位输出再现的图像数据。该图像次序被恢复到原始次序。

[0014] 当一个数字相机被用于拍摄一个静止图像时，例如，通常把拍摄日期和时间这样的信息叠加在所记录的图像上。另外，例如，专利文献2(日本专利申请No.69995/1997)公开与图像信号分离地记录相机设置数据的方法。

[0015] 上述专利文献如下：

[0016] [Patent document 1]日本专利申请No.214265/1996

[0017] [Patent document 2]日本专利申请No.69995/1997

[0018] 许多数字相机不但可以拍摄静止图像，而且还可以拍摄运动图像。通常，上述MPEG系统被用于压缩运动图像的图像数据。

[0019] 当数字相机被用于拍摄运动图像时，通常除了图像信息之外能够记录例如拍摄日期和时间这样的信息以及例如光圈调节、曝光值、白平衡状态和在记录介质上的焦距这样的拍摄条件。这种附加信息可以被用作为关于所拍摄图像的管理信息。

[0020] 上述MPEG系统可以合成和复用图像数据和音频数据，以产生一个编码数据流。已知有MPEG-PS(用于程序流的PS)，用于在一个记录介质上记录这种数据流的一种系统格式。但是，该MPEG-PS没有定义如何复用上述附加信息，例如拍摄的信息流。

[0021] 如何把附加信息提供到在MPEG系统中所记录的以便于使用的发送格式成为一个技术问题。

[0022] 在这种情况中，希望能够容易地提取目标图像信息点或编辑点。为此目的，重要的是在从记录介质中按照比正常速度更快的可变速度再现图像数据的过程中能够使用附加信息。

发明内容

[0023] 在能够满足上述要求的状态中，本发明的一个目的是提供一种能够在记录介质上记录关于图像信息的附加信息的方法和装置。

[0024] 为了解决上述问题，根据本发明的记录方法压缩和记录在一个记录介质上的图像信息的数据，其中作为对该记录介质读写被压缩的图像信息的一个单元的读/写单元信息包含包括图像信息的一个帧(或一个场)的多个解码和再现单元信息；并且通过仅仅使用在一个相关解码和再现单元中的图像信息，使得至少一块解码和再现单元信息受到压缩编码。该方法包括把关于用于在该读/写单元中的多个单元的解码和再现单元信息的附加信息按照与被压缩的图像信息相分离的可提取方式复用和记录在该读/写单元信息中。

[0025] 让我们考虑使用根据本发明的具有上述结构的用于压缩的该MPEG系统的情况。包含包括至少一个I图像的该GOP的读/写单元信息与该图像信息相分离地记录关于该读
/写单元信息的附加信息。相应地，本发明使得为每个读/写单元与图像信息的再现同时提取和再现该附加信息。

[0026] 通过仅仅再现在该读/写单元信息中的I图像，该可变速度再现还能够再现该附加信息，并且把其叠加在I图像上。当关于拍摄日期和时间的信息被记录作为附加信息时，可以执行高速再现，以容易地根据关于拍摄日期和时间的信息提取所需的图像位置。

[0027] 本发明使得对于每个读/写单元与图像信息的再现同时提取和再现附加信息成为可能。能够使用该附加信息用于编辑和图像检索是非常方便的。

[0028] 该读/写单元信息包含在该解码和再现单元中的编码图像信息。该信息与用于MPEG的帧内编码图像信息相等效，即，I图像。仅仅再现编码图像信息使得在可变速度再现过程中根据在该解码和再现单元中的编码图像信息再现和显示该附加信息成为可能。当关于该拍摄日期和时间的信息被记录为附加信息时，可以执行高速再现，以容易地根据关于拍摄日期和时间检索所需的图像位置成为可能。

附图说明

[0029] 图1示出应用根据本发明的记录方法的一个实施例的成像装置的结构例子；

[0030] 图2示出在图1中的数据编码和复用部分的结构例子；

[0031] 图3示出根据DVD视频格式的一个光盘上的数据的逻辑结构；

[0032] 图4示出根据本发明的记录方法的一个实施例的主要部分的一个例子；

[0033] 图5示出根据本发明的记录方法的实施例的主要部分的另一个例子；

[0034] 图6示出根据本发明的记录方法的实施例所记录的附加信息的一个例子；

[0035] 图7示出在图1中的数据分离和解码部分的结构例子；

[0036] 图8示出根据本发明的再现方法的实施例；

[0037] 图9示出根据本发明的再现方法的实施例；

[0038] 图10示出根据本发明的再现方法的实施例；

[0039] 图11示出根据本发明的再现方法的实施例；

[0040] 图12示出根据本发明的再现方法的实施例；

[0041] 图13示出用于描述根据本发明的再现方法的实施例的流程图；

[0042] 图14示出根据本发明的记录方法的实施例的另一个例子；以及

[0043] 图15示出根据MPEG系统的GOP结构。

具体实施方式

[0044] 下面进一步参照附图描述根据本发明的记录方法和再现方法的实施例。为了说明的目的，该实施例被应用于使用光盘作为记录介质的作为成像装置的数字相机。

[0045] 该例子使用例如DVD-R(可记录数字通用光盘)和DVD-RW(可擦写数字通用光盘)这样的可写光盘。该MPEG2技术被用于数据压缩。数据被按照MPEG2-PS(MPEG2程序流)
格式而记录。一个DVD视频格式的光盘被用于记录MPEG-PS数据。

[0046] 图1为示出根据本实施例的数字相机的结构例子的方框图。在本例中，该数字相机包括一个相机部分10、记录和再现部分20和控制部分30。

[0047] 该控制部分30包括与系统总线302连接的CPU(中央处理单元)301，该系统总线302进一步连接到：程序ROM(只读存储器)303；用于一个工作区的RAM(随机存取存储
器)304；以及用于与操作和输入部分31相连接的操作和输入接口305；用于与作为一个显示装置的LCD(液晶显示器)32相连接的LCD控制器306；用于安装一个存储卡50的存储
卡接口307；例如USB(通用串行总线)这样的通信接口308；时钟电路309；以及I/O端口
310、311、312、313、314、315、316和317。

[0048] 该ROM303存储用于控制相机部分10的程序以及用于控制所拍摄图像信息和来自麦克风15的音频信息的记录和再现的其他程序。

[0049] 该操作和输入部分31被提供多个按键，例如模式选择按键，以选择成像模式或再现模式；缩放调节按键；曝光调节按键；快门按键；运动图像拍摄按键和白平衡调节按键。

[0050] 该CPU301分析通过操作和输入接口305从操作和输入部分31提供的操作信号，确定在操作和输入部分31上的哪一个按键被操作，并且根据该确定结果执行控制处理。

[0051] 在CPU301的控制下，该LCD32不但在拍摄过程中显示物体图像和拍摄条件，而且还显示从一个记录介质再现的图像和附加信息。

[0052] 该时钟电路309测量来自一个参考时钟信号产生电路(未示出)的时钟信号，并且产生表示年、月、日、小时、分钟和秒的时间信息。该时钟电路309被配置为产生精确到小数位的信息，以能够以帧为单位计数图像。

[0053] 根据本例的数字相机被配置为不但能够记录在光盘40上的数据，而且还记录在存储卡50上的数据。在后一种情况中，该存储卡50通过存储卡接口307记录压缩数据。

[0054] 该通信接口308被用于把根据本例的数字相机与一个个人计算机相连接，用于交换所记录的数据或其他数据。

[0055] 该相机部分10包括：相机光学系统11；相机控制部分12；成像单元13；成像信号处理部分14；麦克风15；以及输入音频信号处理部分16。

[0056] 尽管未示出，相机光学系统11被提供有一组透镜、光圈调节机构、聚焦调节机构、变焦机构、快门机构、用于拍摄物体的闪光灯机构、以及相机抖动纠正机构。

[0057] 该相机抖动纠正机构具有一个回旋装置，其检测角速度信息ω(可变角θ/秒)。所检测的角速度信息被用于检测相机抖动。光学纠正机构纠正所检测的相机抖动量。如果该相机抖动数值超过该纠正限度，则该相机抖动纠正机构返回一个表示该状态的标志。

[0058] 例如，该相机抖动纠正机构被以特定的时间间隔提供角速度信息ω(例如，1/60秒的8倍)并且对从记录开始的角速度信息ω进行时间积分。如果该积分数值θ超过一个指定的角度，例如，5度，则该相机抖动纠正机构返回一个相机抖动纠正限度标志。如果该相机抖动沿着一个方向偏离参考位置，则该角速度信息ω被假设为+ω，或者RDI GI该相机抖动沿着另一个方向偏离，则其被假设为-ω。在此提供一个阈值，例如±5度，在+
和-方向上作为用于该相机抖动纠正的检测限度。

[0059] 该相机控制部分12从控制部分30中的I/O端口310接收一个控制信号，以产生要提供到相机光学系统11的控制信号。该相机控制部分12把所产生的控制信号提供到相
机光学系统11，用于提供变焦控制、快门控制以及曝光控制。来自控制部分30中的I/O端口310的信号不但包括一个对应于实时操作并且从操作和输入部分31输出的控制信号，而且还包括基于根据操作和来自操作和输入部分31的输入预定的拍摄条件的控制信号。

[0060] 在本例中，该成像单元13包括一个CCD(电荷耦合器件)并且使用其图像形成表面来形成从相机光学系统11发射的图像。成像单元13响应例如快门操作这样的用户动作
从在控制部分30中的I/O端口311产生一个图像拍摄时序信号，把形成在该图像信息表面
上的物体图像转换为一个成像信号，并且把该信号提供到成像信号处理部分14。

[0061] 根据来自控制部分30中的I/O端口312的控制，该成像信号处理部分14对成像信号执行例如施加γ纠正或AGC(自动增益控制)这样的处理，以及把这些信号转换为数
字信号。

[0062] 该麦克风15在拍摄过程中收集在该物体周围的声音。来自麦克风15的一个音频信号被提供到输入音频信号处理部分16。

[0063] 根据来自该控制部分30中的I/O端口312的控制，该输入音频信号处理部分16对输入音频信号执行例如施加纠正或AGC(自动增益控制)这样的处理，以及把这些信号转换为数字信号。

[0064] 尽管未在图1中示出，根据本例的数字相机被提供一个外部麦克风端子。当一个外部麦克风连接到该外部麦克风端子时，输入音频信号处理部分16被配置为自动地选择从该外部麦克风提供的音频信号，而不是选择该内置麦克风15的音频信号。

[0065] 在本例中，该输入音频信号处理部分16根据一个音频信号是否被从麦克风15输入或从该外部麦克风输入而考虑到不同的特性执行该AGC处理。AGC处理的选择被配置为
与输入到输入音频信号处理部分16的音频信号的选择互锁。

[0066] 该记录和再现部分20包括：DSP(数字信号处理器)21；DVD信号处理部分22；读/写部分23；以及视频/音频输出处理部分24。该DSP21与例如包括SDRAM(同步DRAM)的缓冲存储器25相连接。

[0067] 除了在拍摄过程中通过在控制部分30中的I/O端口313的信息之外，该DSP21被提供有一个来自成像信号处理部分14的数字图像信号和来自输入音频信号处理部分16的
数字音频信号。通过I/O端口313提供的拍摄信息包括以帧为单位的拍摄时间和拍摄条件
信息。

[0068] 在本例中，该时间信息被作为拍摄时间信息而根据需要从时钟电路309中读取。另外，最好可以在拍摄运动图像开始时从时钟电路309读取时间信息(拍摄开始时间)，然后参照拍摄开始时间使用以帧(帧号)为单位的相对时间作为拍摄时间。

[0069] 该拍摄条件信息包括自动指定的信息以及用户指定的信息。例如，该拍摄条件信息包括例如曝光控制信息、自动白平衡调节信息、数字变焦放大率信息、相机抖动纠正信息、F值(F数值)、曝光时间、AGC增益值以及透镜焦距。

[0070] 该拍摄信息可以包括关于是否使用内置麦克风15或外部麦克风作为用于收集音频信息的装置的信息。

[0071] 根据本实施例，上述拍摄信息被产生并且以GOP为单位记录为附加信息。

[0072] 根据通过I/O端口313提供的相机信息，该DSP21对来自成像信号处理部分14的数字图像信号提供自动白平衡控制、用于曝光纠正的控制、以及对应于数字变焦放大率的控制。该DSP21使用MPEG2技术来压缩被从输入音频信号处理部分16提供有这些控制和
数字音频信号的数字图像信号的数据。

[0073] 该DSP21执行附加信息处理，用于与被压缩图像数据和被压缩音频数据一同记录输入拍摄信息作为附加信息。

[0074] 另外，该DSP21把该被压缩图像数据、被压缩音频数据、和附加信息复用，以产生与该MPEG2-PS格式相兼容的数字序列。

[0075] 在控制部分30经I/O端口314的控制下，来自DSP21的该MPEG2-PS格式数据通过在DVD信号处理部分22中的一个记录信号处理部分，然后被提供到读/写部分23。该读
/写部分23把MPEG2-PS格式数据写入到DVD40。该读/写部分23受到该控制部分30通
过I/O端口316的控制。

[0076] 该读/写部分23从DVD40读取数据。该数据通过在DVD信号处理部分22中的再现信号处理部分并且被提供到DSP21。

[0077] 该DSP21使得复用的被压缩图像数据、被压缩音频数据、以及附加信息相互分离。该DSP21对分离的被压缩图像数据进行解压缩，以帧为单位再现原始排序的图像数据，并且把该数据输出到视频/音频输出处理部分24。另外，该DSP21对分离的被压缩音频数据
进行解压缩，再现该音频数据，以及把该数据输出到视频/音频输出处理部分24。

[0078] 在控制部分30经I/O端口315的控制下，该视频/音频输出处理部分24处理要被输出的图像数据和音频数据。该视频/音频输出处理部分24把图像数据和音频数据作
为数字数据通过I/O端口315提供到控制部分30，并且把这些数据类型数模转换为模拟信
号，以把它们输出到输出端26V和26A。一个包括图像数据的再现图像被通过I/O端口315
输入到控制部分30，然后在LCD控制器306的控制下被再现和显示在LCD32上。

[0079] 在本例中，一个GPS接收器部分60通过I/O端口317连接到系统总线302。来自GPS接收器部分60的位置信息被通过I/O端口317输入到控制部分30。在记录过程中，该
位置信息被根据用于所拍摄图像的数据而被记录。

[0080] 在再现过程中，该例子可以与一个再现图像一同显示一个拍摄位置。另外，可以使用所记录的在拍摄过程中的位置信息来在一个显示地图上显示在拍摄过程中的轨迹。

[0081] 还可以优选地从公共基站或网络使用通信装置来获得位置信息，而取代GPS接收器部分60。

[0082] [数据压缩和复用]

[0083] 现在参见图2，下面描述在DSP21中的数据压缩和复用。

[0084] 如上文所述，该DSP21根据在拍摄时的设置条件和控制条件对来自成像信号处理部分14的图像数据进行控制处理。该图像数据被通过缓冲器201提供到视频编码部分202。

[0085] 该视频编码部分202配置包括至少一个I图像、多个P图像和一个B图像的一个GOP。该视频编码部分202使用该GOP作为写入作为用于压缩的记录介质的DVD的单元。

[0086] 如上文参照图15所述，该视频编码部分202首先使用一个图像重新排序部分2021来重新排序在GOP中的图像次序。

[0087] 然后，视频编码部分202使用一个压缩编码部分2022通过执行帧内编码来压缩用于I图像的数据。该压缩编码部分2022通过使用与在前的I或P图像的相关性执行帧间预测编码来压缩用于P图像的数据。该压缩编码部分2022通过使用与在前和在后的I或
P图像的相关性执行帧间预测编码来压缩用于B图像的数据。该P图像可以包括需要帧内
编码的图像部分。

[0088] 在压缩编码部分2022对如上文所述的图像数据执行压缩和编码之后，一个可变长度编码部分2023通过使用用于该图像数据的霍夫曼编码而执行可变长度编码。该图像
数据然后通过一个缓冲器203然后被提供到一个复用部分211。

[0089] 来自输入音频信号处理部分16的音频数据被与成像时序同步地包含到该DSP21。该音频数据通过一个缓冲器204，并且被提供到一个音频编码部分205。该音频数据被以指定的音频数据量为单位(被称为音频帧)作为一个解码和再现单元而压缩和编码。该压缩
和编码的音频数据通过缓冲器206，并且被提供到一个复用部分211。

[0090] 另外，该DSP21被提供有来自I/O端口313的拍摄信息。该拍摄信息通过缓冲器207，并且被提供到一个附加信息处理部分208。以产生要被附着到每个图像帧的附加信息。
所产生的附加信息通过一个缓冲器209，并且被提供到该复用部分211。

[0091] 该复用部分211对复用图像数据、音频数据和附加信息打包。在这种情况中，该复用部分211把一个包报头(pack header)附着到一个或多个小包数据(packet data)用于模块化的目的，并且配置一个包。从复用部分211输出的复用数据被输出到DVD信号处理
部分22。该读/写部分23把该数据写入到如上文所述的DVD40。

[0092] 为了在图像数据和音频数据之间的同步，该MPEG系统把被称为时间标记的管理信息附着到图像数据或音频数据的每个解码和再现单元，即用于图像数据的帧为单位或者以用于音频数据的音频帧为单位。

[0093] 该时间标记信息被从时间管理信息产生部分210提供到复用部分211。该时间标记被给予一个基于SCR(系统时钟基准)的时间基准。

[0094] 该复用部分211把该时间标记附着到包含解码和再现单元信息的开头的一个小包的小包报头，没有时间标记被附着到不包含解码和再现单元信息的开头的一个小包的小包报头。

[0095] 两种有两种时间标记信息可用：PTS(显示时间标记)和DTS(解码时间标记)。

[0096] 该PTS是关于该解码和再现单元信息的再现输出的时间管理信息。也就是说，该PTS是关于何时再现地输出该解码和再现单元信息的时间管理信息。

[0097] 该时间标记DTS是关于该解码和再现单元信息的解码的时间管理信息。如上文所述，该MPEG系统在编码过程中重新排序一个图像次序，以使得该再现输出次序和解码次序不同。该时间标记DTS被提供作为用于该特性的对策。

[0098] 当在时间标记PTS和DTS之间存在差别时，这两个时间标记被附着到该小包报头。当它们相匹配时，仅仅时间标记PTS被附着到该小包报头。

[0099] 如上文所述，该时间标记PTS对应于用于该图像数据的一个原始帧序列，并且作为基于一一对应关系用于每个帧的时间管理信息。音频数据仅仅被提供有时间标记PTS，而没有时间标记DTS。

[0100] [复用附加信息的第一例子]

[0101] 该第一例子示出使用DVD视频格式记录数据的情况。图3示出记录在根据DVD视频格式的光盘上的数据的逻辑结构。

[0102] 如图3A中所示，在一个光盘上的记录区域按照从该光盘的最内侧沿着其径向方向包括一个导入区、数据区和导出区。该数据区记录例如管理信息、图像数据等等这样的数据。

[0103] 该数据区从该导入区侧按次序被分为一个UDF(通用盘格式)区、VMG(VideoManaGer)区和实时数据记录区。该UDF区和VMG区记录用于管理例如记录在该光盘上的图
像数据这样的文件的管理信息。该UDF支持UDF和ISO9660标准，以使得计算机读取该光
盘。该VMG区记录DVD管理信息。

[0104] 该实时数据记录区记录图像数据和音频数据。如图3B中所述，该实时数据记录区以被称为VTS(视频标题集)的数据组为单位记录数据。

[0105] 如图3C中所述，该VTS包括VTSI(视频标题集信息)、VTSM_VOBS(用于VTSM的视频对象集)、VTSTT_VOBS(用于在VTS中的标题的视频对象集)以及VTSI_BUP(VTSI的备
份)。

[0106] 如图3D中所示，VTSTT_VOBS以被称为VOBU(视频对象单元)的信息块的单元作为读写的单元而记录根据MPEG2-PS格式的压缩的数据。在该VOBU中，图像数据包括一个
包含至少一个图像的一个GOP。音频数据包括对应于该GOP的信息。这等效于以GOP为单
位在该光盘上读写数据。根据本实施例，该VOBU还包括关于要被在下文描述的一个GOP的图像数据。

[0107] VTSI记录例如关于图像数据等等的位置信息的管理信息。VTSM_VOBS记录用于图像数据等等的一个根菜单。VTSM_VOBS是可选的。VTSI_BUP保持关于VTSI的备份信息。

[0108] 如图3E中所示，该读/写单元数据VOBU包括多个包PCK。每个包PCK可以包括一个或多个小包(packet)。在本例中，一个包包括一个小包。根据该DVD视频格式，一个包被定义为包括2048个字节(等价于一个扇区)。

[0109] 图3F示出在本例中的一个包。该包PCK以一个包报头为开始。该包报头之后接着一个小包报头，然后接着包含图像数据和音频数据的小包数据。包含图像数据作为包数据的一个包被称为一个视频包。一个包含音频数据作为小包数据的一个包被称为一个音频包。用于该图像数据或音频数据的一个小包格式被定义为专用1小包(private 1packet)。

[0110] 在本说明书中，包含图像数据作为小包数据的一个包被称为一个视频包。包含音频数据作为小包数据的一个包被称为一个音频包。

[0111] 每个包的包报头包含上述时间基准信息SCR。该包报头以一个小包开始代码为开始。该小包报头包含PTS和DTS标记这样的标志信息，例如时间标记PTS和DTS。该PTS和DTS标志表示该小包是否包含该时间标记PTS和DTS。如上文所述，该时间标记PTS和DTS
被附着到包含图像的开头的一个小包的小包报头。

[0112] 当该计算机访问用上述格式记录的一个光盘时，该UDF区域信息被用于检索和再现所需的文件。当该光盘被在一个DVD播放器上再现时，该UDF区域信息被用于检索该VMG区的开头。该VMG区域信息被用于检索和再现一个所需的标题。

[0113] 例如，用于在DVD-RW(可擦写DVD)光盘上写入视频数据的技术包括增量记录系统(在下文中被称为INC系统)以及限制改写系统(在下文中被称为ROW系统)。

[0114] 该INC系统顺序地记录数据。该ROW系统被用于可擦写光盘。该ROW系统也顺序地在未使用的区域上记录数据。

[0115] 该INC和ROW系统使用RMA(记录管理区域)来保存关于整个光盘的管理信息，例如在该导入区中的记录区域保留。

[0116] 根据最后的定案，该INC和ROW系统不但形成UDF和VMG区，而且还形成导入和导出区，提供与通常用于只读DVD-ROM的DVD视频格式的兼容性。

[0117] 根据本例，该附加信息被复用作为每个VOBU的一个包信息。在下文的描述中，包含附加信息作为小包数据的一个包被称为一个附加信息包。

[0118] 在本例中，该GOP包含一个I图像。该附加信息被处理作为拍摄信息，例如在拍摄一个I图像作为一个成像信号时的设置条件。

[0119] 另外，本例把该专用1小包格式应用于在该附加信息包中的一个附加信息小包。根据本例，该附加信息小包包含与在用于相应的I图像的图像数据的开头处附着到该视频包相同的相同时间标记PTS。

[0120] 该附加信息包被在VOBU中的一个特定位置复用。该位置被在用于I图像的压缩数据的一系列包(包括I图像的开头或结束)中指定。通常，用于I图像的图像数据被包
含在多个视频包中。例如，在用于I图像的多个视频包中的第一视频包之前或在最后视频包之后，该附加信息包被复用。

[0121] 作为其他例子，复用该附加信息包的位置不但可以允许在用于I图像的视频包的开头或结束处，而且可以在不同于用于I图像的图像数据的视频包的开头的一个特定包之前或之后。另外，最好可以在VOBU结束时而不是在该I图像的附近复用该附加信息包。这是因为以VOBU为单位执行读写操作。该附加信息包可以置于VOBU的中央的预定位置中。

[0122] 在可变速度再现过程中，如将在下文中所述，通过仅仅提取在VOBU中的I图像部分而再现一个图像。如果在包括如上文所述的开头和结束的I图像中的一个特定位置复用该附加信息包，容易与该附加信息一同提取和再现该I图像，并且仅仅提取在目标VOBU中的I图像。

[0123] 图4示出如何复用用于一个GOP的图像数据、音频数据和附加信息。在本例中，一个GOP包括15帧(即，15个图像)。另外，该本例复用关于用于I图像的图像数据的拍摄信息作为该附加信息。

[0124] 图4A示出输入到缓冲器201、204和207的图像数据、音频数据和附加信息的流。图4B示出在来自复用部分211的采用一种MPEG2-PS格式化的VOBU的流结构。

[0125] 在图4A中的图像数据流考虑到分别表示I、B和P图像的图像类型I、B和P而使用B、I和P来表示以帧为单位的图像数据。在图4A中的音频流使用A来表示对应于每个
图像帧的音频数据。

[0126] 根据本例，该在图4A中的附加信息附加信息ARI_DATA示出在等价于上述一个GOP的图像数据中包括拍摄该I图像时的拍摄信息的附加信息。在本例中，该附加信息ARI_DATA表示在一个GOP周期过程中的不可改变数据。

[0127] 如上文所述，视频编码部分202为图4A中的图像数据重新排序该图像。通过压缩编码和可变长度编码而处理该图像数据，然后其被提供到复用部分211。如图4B中所示，复用部分211把用于每个图像的压缩图像数据复用到一个或多个视频包V_PCK。在此时，该复用部分211对用于每个图像的图像数据提供时间标记PTS，作为用于再现输出的时间管理信息。更加具体来说，该时间标记PTS被包含在包括图像的开头的一个小包的报头中。

[0128] 在图4B中，在每个视频包V_PCK的方框中的符号I、B和P表示例如用于在该图像包中的压缩数据的I、B和P图像这样的图像类型。

[0129] 该音频编码部分205根据MPEG音频格式压缩在图4A中的音频数据。该压缩的数据被提供到复用部分211。如图4B中所示，该复用部分211把被压缩的数据复用作为用于
在视频包V_PCK之间的特定数据量的音频包A_PCK。

[0130] 对于每个音频数据，复用部分211把该时间标记PTS，即用于再现输出的时间管理信息，置于用于每个音频帧的小包报头中。当一个小包包含多个帧时，用于第一帧的时间标记PTS被插入到该小包报头。

[0131] 在图4A中的附加信息ARI_DATA在附加信息处理部分208中受到上述信号处理，然后被提供到复用部分211。该复用部分211形成每个GOP的一个附加信息包ARI_PCK。如
图4B中所示，根据本例的该附加信息包ARI_PCK被在用于VOBU中的I图像的多个图像包
的开头复用。

[0132] 如上文所述，该附加信息包ARI_PCK包含打包的附加信息ARI_DATA。其小包报头包括与包含在用于相同GOP中的I图像的第一小包的小包中的时间标记相同的时间标记PTS。

[0133] 包含一个GOP的数据的VOBU以被称为一个导航包的一个包NV_PCK为开始。其包含例如数据搜索信息这样的再现管理信息(例如，表示一个跳转操作应当指向哪一个扇区的控制信息)。如图4B中所示，该附加信息包ARI_PCK被紧接着在该导航包NV_PCK之后复
用。

[0134] [复用的附加信息的第二例子]

[0135] 第二例子与用DVD视频记录(DVD-VR)格式记录有关。该DVD-VR格式几乎与上述DVD视频格式相同，只是在包括构成该VOBU的多个包PCK(2048字节)的结构中略有不同。
图5示出在根据该DVD-VR格式的VOBU中的一种包结构。

[0136] 根据DVD-VR格式的VOBU以RDI包RDI_PCK为开始(RDI：实时数据信息)，随后接着视频包V_PCK和音频包A_PCK。

[0137] 如图5中所示，该开始包RDI_PCK包括一个包报头、系统报头和一个RDI小包。该包报头与图3中的相同。例如，该系统报头包括用于识别例如位率、视频通道数和音频通道数这样的属性。该系统报头还包含控制该MPEG系统和控制例如用于将描述的复用部分的缓冲区尺寸这样的数据的一个指令(用于分解在该再现系统中的复用数据的装置)。

[0138] 该系统报头之后接着一个例如包含2003字节的RDI小包。该RDI小包包括一个小包报头、子流ID和RDI数据。该子流ID是标识要成为一个RDI小包的标识符。

[0139] 存在有被定义为RDI数据的可用的RDI_GI(实时数据信息概要信息)以及DCI_CCI(显示控制信息和复制控制信息)。该RDI_GI是16字节的数据，其中包含用于VOBU的
记录时间。该DCI_CCI是8字节的数据，其中包含显示控制信息等等。该2003字节的RDI
数据区域的剩余的1979字节的区域具有一个字段名MNFI(制造商的信息)，并且被保留用
于一个开发者(制造商)。

[0140] 根据第二例子，类似于第一例子，具有文件名的MNFI的区域被提供有关于用于在包含RDI包的VOBU中的I图像的图像数据的附加信息ARI_DATA。

[0141] 无论数据何时以VOBU为单位而读取，该RDI包都必须被读取。如果数据以及包含在RDI包中的附加信息被记录，则不但在正常速度再现过程中，而且还在类似于第一例子的第二例子以可变速度(高速)再现过程中，可以容易地与图像数据一同提取和再现该附加信息。

[0142] [附加信息ARI_DATA的例子]

[0143] 图6示出在根据DVD视频格式的包A_PCK中的ARI_DATA或者在根据上述DVD视频记录格式的RDI包中的ARI_DATA的例子。

[0144] 在图6中，RBP(参考字节位置)表示在一个小包中的相对字节位置，并且指定该附加信息ARI_DATA的开头为“0”。

[0145] 如图6中所示，该附加信息ARI_DATA包括一个附加记录标识符、应用程序信息、记录时间信息和相机信息。

[0146] 该附加记录标识符被用于识别在要作为该附加信息(附加记录信息)的小包中的数据并且包含一个附加记录信息数据标识符及其版本号。

[0147] 该应用程序信息包括产品制造商的名称、产品名、应用程序ID和开发者数据(制造商的信息数据)。

[0148] 该应用程序ID提供用于标识在记录时的记录系统的信息。在本例中，该“00h”表示该数据被以DVD-视频格式记录，其中“h”表示十六进制；“01h”表示该数据被以DVD视频记录格式来记录。

[0149] 该开发者数据是由开发者自由使用的一个区域，并且例如记录在开发过程中的调试数据。

[0150] 该记录时间信息记录用于记录附加信息ARI_DATA和对于包含该附加信息的VOBU的附加信息ARI_DATA的记录时间(VOBU_REC_TM)的时间区(具有如下文所述的字段名
VOBU_LCL_TM_ZONE)。

[0151] 在本例中，该附加信息ARI_DATA的记录时间(VOBU_REC_TM)表示用于I图像的拍摄帧的时间。该例子以年、月、日、小时、分钟和秒的形式表示该记录时间。

[0152] 用于记录附加信息ARI_DATA的时间区(VOBU_LCL_TM_ZONE)记录用于附加信息ARI_DATA的记录时间(VOBU_REC_TM)的时间区。在此，该时间区表示相对于由该设备的用户所配置的UTC(调整世界时间)的偏差，即对应于一个使用该记录设备的一个国家的时间(本地时间)的时差。

[0153] 可以使用该世界时间(通用于记录时间的官方时间)作为用于附加信息ARI_DATA的记录时间(VOBU_REC_TM)。在本例中，用于记录附加信息ARI_DATA的时间区(VOBU_LCL_TM_ZONE)被设置为0。

[0154] 该相机信息跟随在例如设置条件这样的记录信息之后。如图6中所示，该相机信息包括F数值、曝光时间、曝光程序、曝光程序扩展信息、曝光纠正数值、AGC增益值、透镜最小F值、闪光灯、透镜焦距、各种图像处理白平衡、拍摄场景类型、聚焦模式、对象距离、相机抖动纠正、数字变焦放大等等。

[0155] 该曝光程序(EXP_PRG)记录在拍摄时用于该相机的曝光程序的类型。存在有4种曝光程序类别：不指定(非特定)、手动、正常程序以及复位。

[0156] 在该预设类别被指定用于在拍摄时相机的曝光程序时，该曝光程序扩展信息(EXP_PRG_EX)记录详细信息。当该曝光程序不被配置为该预设类别时，任何增益优优先、快门优先和曝光优先发生作用。

[0157] 该AGC增益值字段在该信号处理系统中记录AGC增益的数值。该闪光字段(FLS)记录在拍摄时闪光灯的状态，例如，闪光打开、闪光关闭、红眼减弱闪光和强制闪光。

[0158] 该个性图像处理(CST_REN)记录该图像数据受到例外图像处理，例如为了输出而印字。

[0159] 白平衡(WHT_BAL)记录在拍摄时指定的白平衡调节模式。可用白平衡调节模式包括“自动”、“保持”、“手动”、“微光”、“白炽灯”、“低色温的荧光灯”、“高色温的荧光灯”、“太阳光”、“阴天”和“无指定”。

[0160] 拍摄场景类型(SCN_CAP_TYP)记录在拍摄时指定的物体类型。在本例中，可用的拍摄场景类型包括“标准”、“远景”、“肖像”、“夜景”、以及“无指定”。

[0161] 聚焦模式(FCS_MOD)记录聚焦模式，例如“自动聚焦”、“手动聚焦”和“无指定”。

[0162] 相机抖动纠正(IMG_STB)记录表示是否应用相机抖动纠正功能的“相机抖动纠正启动”、“相机抖动纠正关闭”或者“无指定”。

[0163] 数字变焦放大率(DIG_ZOM)记录在拍摄时所用的数字变焦放大率。当不使用数字变焦时，该字段记录“00h”。

[0164] 位置信息(GPS_INFO)记录从GPS接收器部分60或从通信装置获得的位置信息。

[0165] 相机抖动纠正限度(STB_LIM)记录表示数字相机抖动超过纠正限度的标志。当该数字相机抖动实际超过该纠正限度时，该字段记录标志“FF”(十六进制表示)。

[0166] 下文示出根据附加信息ARI_DATA的字段内容改变附加记录信息版本(ARI_DAT_VER)的规则。(1)当仅仅添加或改变相机信息的内容时，该版本号的第二小数位增加。(2)当记录时间信息字段的内容被增加或改变时，该版本号的第一小数位被增加。(3)当整个附加信息ARI_DATA的内容被增加或改变，以使得在该改变之前的数据的兼容性无效时，则该版本号的整数值被增加。

[0167] [数据分离和数据压缩/解压缩]

[0168] 现在参见图7，下面描述DSP21如何分离图像数据、音频数据和附加信息，以及如何压缩和解压缩图像数据和音频数据。

[0169] 当读/写部分23以VOBU为单位从DVD40读取数据时，多路分解部分221把该数据分离为图像数据包、音频数据包以及附加信息包。

[0170] 该多路分解部分221把包报头和小包报头从每个包分离出来，并且把该报头信息提供到控制部分220。该控制部分220分析该报头信息并且提取时间标记PTS和DTS，以控制图像数据、音频数据和附加信息的解码和再现输出。

[0171] 该多路分解部分221从分离的图像数据包提取压缩的图像数据，并且把该压缩的图像数据通过缓冲器222提供到视频解码器225。该多路分解部分221从分离的音频数据包提取压缩的音频数据，并且把压缩的音频数据通过一个缓冲器223提供到音频解码器226。该多路分解部分221从该分离的附加信息包提取附加信息，并且把附加信息通过一个缓冲器224提供到附加信息解码器227。

[0172] 在控制部分220的控制下，该视频解码器225根据时间标记DTS的次序压缩和解压缩图像数据，以帧为单位恢复该图像数据，并且把其输出到缓冲器228。该控制部分220提供控制，以按照包含在该图像数据包中的时间标记PTS的次序从缓冲器228中读取图像
数据，并且把该图像数据提供到视频信号处理部分231。

[0173] 在来自控制部分220的控制下，该音频解码器226顺序地压缩和解压缩音频数据，并且把该音频数据输出到缓冲器229。该控制部分220提供控制，以根据包含在该音频数据包中的时间标记PTS的次序读取音频数据，并且把该音频数据提供到一个音频信号处理部分232。

[0174] 在来自控制部分220的控制下，该附加信息解码器227再现关于用于一个GOP的附加信息ARI_DATA，并且把该信息输出到缓冲器230。在这种情况中，该附加信息解码器
227产生包括图像数据控制信号Av和显示信息Ad的附加信息，例如拍摄日期、时间、F数
值、和透镜焦距，并且把这些信息类型输出到缓冲器230。

[0175] 该控制部分220按照根据包含在该附加信息包中的时间标记PTS的时序，从缓冲器230读取关于用于一个GOP的图像数据的附加信息。在该附加信息中，控制部分220提
供控制，以把该图像数据控制信号Av提供到视频信号处理部分231，并且把显示信息Ad提供到一个OSD(屏幕显示)电路233。

[0176] 该视频信号处理部分231根据关于图像数据的图像数据控制信号Av执行图像数据处理。例如，视频信号处理部分231包括在拍摄时根据自动白平衡调节的图像数据。

[0177] 该显示信息Ad提供例如拍摄日期、拍摄时间、F数值以及透镜焦距这样的显示信息。该显示信息Ad被提供到合成部分234，并且与来自视频信号处理部分231的图像数据合成。来自合成部分234的图像数据被通过视频/音频输出处理部分24提供到控制部分
30，并且显示在LCD32的屏幕上。

[0178] 在本例中，如上文所述，该附加信息包被提供与I图像相同的时间标记PTS。从而，在所有图像中从对应于I图像的图像到用于一个GOP的图像合成该附加信息的显示信息Ad，并且显示在LCD32的屏幕上。

[0179] 如上文所述，根据本例，对作为读写拍摄图像的一个单元的每个GOP复用该附加信息。根据该附加信息，控制作为读写的单元的上述图像信息。另外，用于该图像信息的显示屏幕显示例如拍摄日期、时间等等这样的必要附加信息。

[0180] 上述实施例使用VOBU，即，关于一个GOP的拍摄时间信息作为包含在该附加信息中的拍摄时间消息。从关于I图像的拍摄时间消息，例如，可以计算和查找用于在前的B和P图像的每个帧的拍摄时间。基于帧的拍摄时间可以被显示或使用作为用于编辑的管理信息。

[0181] [可变速度再现的描述]

[0182] 根据本实施例，在如上文所述配置的成像装置中的控制部分30的ROM303存储实现可变速度再现的程序。下面描述该可变速度再现。

[0183] 根据本实施例的可变速度再现仅仅处理基于VOBU的信息之外的I图像。现在让我们假设该正常再现速度为1倍速并且任何再现速度被设置为N倍速。该实施例仅仅对15/N倍重复显示每个VOBU的I图像的图像帧。该可变速度再现还根据相应信息控制用于要被
显示的I图像的屏幕，或者在该屏幕上显示相应的附加信息。

[0184] 图8示出根据本实施例的可变速度再现的方案。由于以VOBU为单位在上述光盘上读或写信息，并且在可变速度再现过程中，信息被以VOBU为单位从该光盘读取。但是，如图8A中所示，假设该可变速度再现仅仅解码用于VOBU中的I图像的图像数据。根据本实
施例，该可变速度再现还解码关于该I图像的附加信息。

[0185] 根据本实施例，如图8A中所示，可变速度再现从附加信息包ARI_PCK和多个视频包V_PCK中提取解码数据，该视频包V_PCK包含用于来自该光盘的基于VOBU的信息的I图像的图像数据。也就是说，在根据本实施例的可变速度再现过程中，该附加信息包被配置为总是包含在该解码数据提取范围中。

[0186] 如图8B中的阴影部分所示，仅仅原始视频流图像中的I图像被重复地显示对应于N倍速的次数。另外，该附加信息ARI_DATA被解码，以显示例如拍摄时间和F数值这样与I图像相重叠的信息。另外，从该附加信息ARI_DATA中产生的控制信息被用于控制I图像的图像数据。

[0187] 作为例子，图9示出在3倍速再现过程中的LCD屏幕的转变。图10示出在5倍速再现过程中的LCD屏幕的转变。图11示出在15倍速再现过程中的LCD屏幕的转变。

[0188] 如图9中所示，该3倍速再现基于VOBU以5倍或帧的间隔(即，15/3)重复地再现从基于VOBU的信息提取和解码的I图像。另外，如图9中所示，该相应附加信息的显示信
息被叠加在每个I图像上。

[0189] 如图10中所示，该5倍速再现重复地再现从以3倍或帧的间隔(即，15/5)重复地再现从基于VOBU的信息提取和解码的I图像。另外，如图10中所示，该相应附加信息的显示信息被叠加在每个I图像上。

[0190] 另外，如图11中所示，该15倍速再现重复地再现从以1倍或帧的间隔(即，15/15)重复地再现从基于VOBU的信息提取和解码的I图像。另外，如图11中所示，该相应附加信息的显示信息被叠加在每个I图像上。

[0191] 下面描述在上述可变速度再现过程中在控制部分30中的处理。图12示出在LCD控制器306中的显示缓冲存储器的结构。在根据本例中的LCD控制器306内的显示缓冲存
储器3060包含两个显示缓冲器，即，第一显示缓冲器3061和第二显示缓冲器3062。开关电路3063和3064被提供给显示缓冲存储器3060的输入和输出侧。

[0192] 数模转换器3065把用来自DSP21的附加信息合成的合成图像信号转换为模拟图像信号。一个开关电路3063有选择地把被转换的模拟图像数据转换为第一显示缓冲器
3061和第二显示缓冲器3062。

[0193] 该合成的图像信号被从由开关电路3064所选择的第一显示缓冲器3061或第二显示缓冲器3062所读取，然后被提供到LCD32，以显示在其屏幕上。

[0194] 在这种情况中，CPU301提供控制，以选择在该显示缓冲存储器3060的输入和输出侧提供的开关电路3063和3064。当图像数据被从用于显示缓冲存储器3060的两个显示缓冲器3061和3062之一读取时，图像数据被写入到其他显示缓冲器。

[0195] 下面参照图13中的流程图描述在可变速度再现过程中的控制部分30的处理操作。

[0196] 当执行可变速度再现时，一个用户使用操作和输入部分31来输入用于N倍速的一个N数值，并且指示该可变速度再现的开始。例如，在此可以有几种输入用于N倍速的N数值的方法，例如选择任何一个预定N数值、直接输入一个N数值、以及旋转一个旋钮。该N数值可以是一个小数，而不是整数。

[0197] 该控制部分30根据用户的操作开始图13中的流程图，以设置用于可变速度再现的N倍速的N数值，并且使用上述操作和输入部分31指示可变速度再现的开始。

[0198] 该操作首先识别用于N倍速的上述N数值(步骤S101)。然后，该处理从光盘40获得以VOBU为单位的数据(步骤S102)。在可变速度再现过程中，该处理从基于VOBU的
数据中提取解码数据提取范围中的数据(步骤S103)。也就是说，该处理提取附加信息包
ARI_PCK和包括I图像的图像数据的多个视频包V_PCK。

[0199] 该处理把附加信息包ARI_PCK从包括在所提取数据的解码数据提取范围内的I图像的图像数据的视频包V_PCK中分离附加信息包ARI_PCK。该附加信息包ARI_PCK的数据
被提供到附加信息解码器227。该视频包V_PCK被提供到视频解码器225(步骤S104)。

[0200] 该视频解码器225压缩和解压缩I图像的图像数据，以恢复该图像数据。该附加信息解码器227解码和再现该附加信息(步骤S105)。该合成部分234把I图像的所恢复
图像数据与从上述再现的附加信息产生的附加信息的显示数据相合成。该数模转换器3065把合成的图像信号转换为一个模拟信号。该模拟信号然后被写入到用于图像帧写入的显示缓冲存储器3060的第一或第二显示缓冲器3061和3062。

[0201] 以前写入的图像数据被与上述写入并行地从一个显示帧输出侧读出。该显示帧输出侧对应于除了用于写入图像帧的一个之外的第一或第二显示缓冲器3061和3062。该再现图像被显示在LCD32的屏幕上。

[0202] 该控制部分30的CPU301确定重复地读取和再现包含在显示帧输出侧与来自显示缓冲器的I图像相合成的附加信息的图像数据的15/N帧是否成功(步骤S107)。

[0203] 当在步骤S107确定重复地读取和再现包含在显示帧输出侧与来自显示缓冲器的I图像相合成的附加信息的图像数据的15/N帧不成功时，其通过使用操作和输入部分31的输入操作确定用户是否指示可变速度再现的结束(步骤S110)。当在此提供结束该可变速
度再现的一个指示时，该可变速度再现的处理例程结束。

[0204] 当在步骤S110确定没有给出结束该可变速度再现的指令时，该处理进行到读取包括在显示帧输出侧与来自显示缓冲器的I图像合成的附加信息的图像数据(步骤S111)，然后返回到步骤S107。

[0205] 当在步骤S107确定重复地读取和再现包含在显示帧输出侧与来自显示缓冲器的I图像相合成的附加信息的图像数据的15/N帧成功时，该开关电路3063被改变为开关电路
3064，或者相反。在显示缓冲存储器3060的第一或第二显示缓冲器3061和3062之间，该
图像帧写入侧被改变为显示帧输出侧，或者相反(步骤S108)。

[0206] 当该显示缓冲器写入包括与到目前为止从VOBU解码的要被接着显示的I图像相合成的附加信息的图像数据时，在步骤S108的切换把该显示缓冲器从图像帧写入侧改变
为显示帧输出侧。所再现的图像被显示在LCD32的屏幕上。

[0207] 该处理从步骤S108进行到步骤S109。该控制部分30提供控制，以包含来自光盘40的基于VOBU的数据。然后，该处理返回到步骤103，并且重复上述操作，以执行如图9至
11中所示的可变速度再现。

[0208] 一个图像信号输出端26V把与来自开关电路3064的显示图像数据相同的图像数据提供到一个监视接收器。结果，该监视接收器在可变速度再现过程中还显示与图9至11中所示相同的所再现图像。

[0209] 如果要被再现的I图像用在对应于I图像的附加信息ARI_DATA中的相机抖动纠正限度标志使能(设置为[FF])来标记，则该I图像可能是不清楚的。最好跳到下一个I
图像，而不再现该I图像。

[0210] [其他变型]

[0211] 根据上述实施例，创建与图像I相一致的附加信息。与用于图像I的时间标记相同的时间标记PTS被按照与附加信息包中的专用1小包格式相兼容的小包中。另外，最好
不把时间标记PTS附着到附加信息包上。

[0212] 由于该附加信息可以与基于GOP的图像数据相关，因此不总是需要对应于该I图像。相应地，该附加信息可以与一个中央图像相关，而无论该中央图像是B图像或P图像。
在这种情况中，该时间标记PTS不被提供在与附加信息包中的专用1小包相兼容的一个小
包中。

[0213] 上述实施例使得使用如图14C中所示的专用2小包取代该专用1小包作为包含在附加信息包ARI_PCK中的附加信息ARI_DATA的一个小包。

[0214] 显然，根据本发明的记录方法和再现方法不但可以应用于上述成像装置，而且应用于压缩记录图像数据和音频数据的各种电子设备。在这种情况中，显然该压缩方法不限于MPEG系统。

[0215] 该记录介质不限于光盘，而可以包括例如硬盘这样的磁性记录介质，以及例如卡式存储器这样的半导体记录介质。

[0216] 根据上述实施例，仅仅用于图像数据的控制信号被产生作为来自该附加信息的控制信息。另外，可以产生用于与一个GOP等效的音频数据的附加信息。一个音频数据控制信号可以从关于该音频数据的附加信息中产生。按照这种方式，该音频信号处理部分232可以被配置为控制音频数据。

[0217] 例如，音频数据可以通过根据一个内置麦克风或外置麦克风被使用而改变AGC特性。在这种情况中，该附加信息ARI_DATA包括表示内置麦克风或外置麦克风被使用的信息。

[0218] 在再现过程中，该附加信息被用于产生用于该音频数据的控制信号。根据该控制信号，该音频信号处理部分232可以根据一个音频信号是否从内置麦克风或外置麦克风产生而控制音频数据。