例如，电视接收器接收电视广播信号，显示电视广播节目图像，并且输 出伴随图像的声音。
传统电视接收器被制造为独自工作。因此，当用户购买新电视接收器时， 用户无需拥有旧电视接收器，并且即使可以使用它们，但在很多情况下也是 丢弃它们。
如果大量连接电视接收器比一个电视接收器提供更高级功能，则防止可 以使用的电视接收器被丢弃，从而有助于资源的有效利用。
例如，在有婴儿、小孩或老年人的家庭，难以总是监视他们，并且通常 护理人员包括在家人员定期或不定期过来照顾婴儿、小孩或老年人。
然而，在这些情况下，护理人员的工作量很大，因此需要减少护理人员 工作量的手段。
例如，使用监视摄像系统作为该手段，其中，对屋内婴儿、小孩或老年 人进行摄像，并且在另一房屋内的显示单元显示图像。
然而，在传统监视摄像系统中，总是需要定期或不定期检查从摄像机发 送的图像，并且虽然在一定程度上减少了施加于护理人员的工作量，但是它 们仍然较大。
电视接收器用于很多房间内。当使用监视摄像系统时，除了所使用的电 视接收器之外，还需要为该系统安装一个显示单元，从而减小房间空间。
从监视系统的摄像机发送的图像可以在用于房间内的电视接收器显示。
然而，当在用于房间内的电视接收器显示从监视系统的摄像机发送的图 像时，护理人员不能在电视接收器观看电视广播节目。
护理人员也可以在电视广播节目与从监视摄像系统的摄像机发送的图像 之间切换。然而，该切换操作是麻烦的，此外，还可能出现护理人员忘记切 换这一情况并且在最坏的情况下可能没有注意到紧急状况。

本发明是考虑到前述情况而作出的。本发明的目的是允许当连接和使用 大量显示设备如电视接收器时比单独使用显示设备时实现更高级功能，并且 允许用户使用现有电视接收器容易地识别紧急状况从而有效使用现有电视接 收器。
本发明的第一显示设备，其特征在于包括：特征检测装置，用于检测至 少包括图像数据的输入数据的特征；以及控制装置，用于根据由特征检测装 置执行的特征检测的结果执行控制从而使包括在输入数据中的图像显示在显 示装置和另一显示设备中的至少一个。
本发明的第一控制方法，其特征在于包括：特征检测步骤，检测至少包 括图像数据的输入数据的特征；以及控制步骤，根据在特征检测步骤执行的 特征检测的结果执行控制从而使包括在输入数据中的图像显示在显示装置和 另一显示设备中的至少一个。
本发明的第一程序，其特征在于包括：特征检测步骤，检测至少包括图 像数据的输入数据的特征；以及控制步骤，根据在特征检测步骤执行的特征 检测的结果执行控制从而使包括在输入数据中的图像显示在显示装置和另一 显示设备中的至少一个。
本发明的第一存储介质，其特征在于其中存储有一种包括如下步骤的程 序：特征检测步骤，检测至少包括图像数据的输入数据的特征；以及控制步 骤，根据在特征检测步骤执行的特征检测的结果执行控制从而使包括在输入 数据中的图像显示在显示装置和另一显示设备中的至少一个。
本发明的第二显示设备，其特征在于包括：存储装置，用于根据另一显 示设备的控制来存储至少包括图像数据的输入数据中的图像数据的一个场 景；以及显示装置，用于显示在存储装置中存储的图像数据。
本发明的第二控制方法，其特征在于包括：存储步骤，根据另一显示设 备的控制来存储至少包括图像数据的输入数据中的图像数据的一个场景；以 及显示步骤，显示在存储步骤存储的图像数据。
本发明的第二程序，其特征在于包括：存储步骤，根据另一显示设备的 控制来存储至少包括图像数据的输入数据中的图像数据的一个场景；以及显 示步骤，显示在存储步骤存储的图像数据。
本发明的第二存储介质，其特征在于其中存储有一种包括如下步骤的程 序：存储步骤，根据另一显示设备的控制来存储至少包括图像数据的输入数 据中的图像数据的一个场景；以及显示步骤，显示在存储步骤存储的图像数 据。
本发明的一种显示系统，其特征在于第一显示设备包括：第一显示装置， 用于显示图像数据；特征检测装置，用于检测至少包括图像数据的输入数据 的特征；以及控制装置，用于根据输入数据的特征检测结果执行控制从而使 包括在输入数据中的图像数据显示在第一显示设备和一个或多个第二显示设 备中的至少一个，并且一个或多个第二显示设备包括：存储装置，用于根据 第一显示设备的控制来存储输入数据中的图像数据的一个场景；以及第二显 示装置，用于显示在存储装置中存储的图像数据。
在本发明的第一显示设备、第一控制方法、第一程序和第一存储介质中， 检测至少包括图像数据的输入数据的特征，并且根据特征检测结果执行控制 从而使包括在输入数据中的图像显示在显示装置和另一显示设备中的至少一 个。
在本发明的第二显示设备、第二控制方法、第二程序和第二存储介质中， 根据另一显示设备的控制来存储至少包括图像数据的输入数据中的图像数据 的一个场景，并且显示所存储的图像。
在本发明的显示系统中，在第一显示设备中，检测至少包括图像数据的 输入数据的特征；并且根据检测结果执行控制从而使包括在输入数据中的图 像数据显示在第一显示设备和一个或多个第二显示设备中的至少一个。在一 个或多个第二显示设备中，根据第一显示设备的控制来存储输入数据中的图 像数据的一个场景；并且显示所存储的图像数据。
按照本发明的一个方面，提供了一种连接到另一显示设备的显示设备， 包括：存储装置，用于根据另一显示设备的控制来存储至少包括图像数据的 输入数据中的图像数据的一个场景；显示装置，用于显示在存储装置中存储 的图像数据，和认证装置，用于与另一显示设备执行认证，其中，当成功执 行认证时，存储装置根据另一显示设备的控制来存储包括在输入数据中的图 像数据的一个场景；并且，显示装置显示在存储装置中存储的图像数据。
按照本发明的另一个方面，提供了一种用于显示设备的控制方法，其中， 所述显示设备连接到另一显示设备，所述控制方法包括：存储步骤，根据另 一显示设备的控制来存储至少包括图像数据的输入数据中的图像数据的一个 场景；显示步骤，显示在存储步骤所存储的图像数据，和认证步骤，用于与 另一显示设备执行认证，其中，当成功执行认证时，根据另一显示设备的控 制来存储包括在输入数据中的图像数据的一个场景；并且，显示在存储步骤 中存储的图像数据。

图1A是示出应用本发明的可扩展电视系统的一个实施例的示例结构的 透视图；
图1B是示出应用本发明的可扩展电视系统的一个实施例的示例结构的 透视图；
图2是示出主单元1的示例外部结构的透视图；
图3A是示出主单元1的示例外部结构的正视图；
图3B是示出主单元1的示例外部结构的顶视图；
图3C是示出主单元1的示例外部结构的右侧视图；
图3D是示出主单元1的示例外部结构的左侧视图；
图3E是示出主单元1的示例外部结构的底视图；
图3F是示出主单元1的示例外部结构的背视图；
图4是示出辅单元2的示例外部结构的透视图；
图5A是示出辅单元2的示例外部结构的正视图；
图5B是示出辅单元2的示例外部结构的顶视图；
图5C是示出辅单元2的示例外部结构的右侧视图；
图5D是示出辅单元2的示例外部结构的左侧视图；
图5E是示出辅单元2的示例外部结构的底视图；
图5F是示出辅单元2的示例外部结构的背视图；
图6是示出用于容纳组成可扩展电视系统的主单元1和辅单元2的专用 机柜的示例外部结构的透视图；
图7是示出控制器15的示例外部结构的平面图；
图8是示出控制器35的示例外部结构的平面图；
图9是示出控制器15的另一示例外部结构的平面图；
图10是示出主单元1的示例电气结构的方框图；
图11是示出辅单元2的示例电气结构的方框图；
图12是示出IEEE-1394通信协议的分层结构的图；
图13是示出CSR架构的地址空间的图；
图14是示出CSR的偏移地址、名称和功能的图；
图15是示出一般ROM格式的图；
图16是示出总线信息块、根目录和单元目录的详细信息的图；
图17是示出PCR结构的图；
图18A是示出oMPR结构的图；
图18B是示出oPCR结构的图；
图18C是示出iMPR结构的图；
图18D是示出iPCR结构的图；
图19是示出AV/C命令中以异步传输模式传输的分组的数据结构的图；
图20A是示出AV/C命令中的命令类型/响应(ctype/response)字段的图；
图20B是示出AV/C命令中的子单元类型(subunit type)字段的图；
图20C是示出AV/C命令中的操作码(opcode)字段的图；
图21A是示出AV/C命令中的示例特定命令的图；
图21B是示出AV/C命令中的示例特定响应的图；
图22是示出控制器15的示例电气结构的方框图；
图23是示出由控制器15发送和接收的帧数据的格式的图；
图24是示出控制器35的示例电气结构的方框图；
图25是示出IR接口135的示例电气结构的方框图；
图26是说明控制器15的处理的流程图；
图27是说明IR接口135的处理的流程图；
图28是说明主单元1的处理的流程图；
图29是说明主单元1的认证处理的流程图；
图30是说明辅单元2的处理的流程图；
图31是说明辅单元2的认证处理的流程图；
图32是示出信号处理部分127的第一示例结构的方框图；
图33是说明由信号处理单元127执行的主单元的第一虚拟多视点显示处 理的流程图；
图34是示出信号处理部分147的第一示例结构的方框图；
图35是说明由信号处理单元147执行的辅单元的第一虚拟多视点显示处 理的流程图；
图36A是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图36B是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图36C是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图37A是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图37B是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图37C是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图38是示出信号处理部分127的第二示例结构的方框图；
图39是说明由信号处理单元127执行的主单元的第二虚拟多视点显示处 理的流程图；
图40是示出信号处理部分127的第三示例结构的方框图；
图41是说明由信号处理单元127执行的主单元的第三虚拟多视点显示处 理的流程图；
图42是示出信号处理部分147的第二示例结构的方框图；
图43是说明由信号处理单元147执行的辅单元的第二虚拟多视点显示处 理的流程图；
图44是示出信号处理部分127的第四示例结构的方框图；
图45是说明由信号处理单元127执行的主单元的第四虚拟多视点显示处 理的流程图；
图46是示出通过红外线通信从主单元1到辅单元2的命令传输的图；
图47是说明当将命令从主单元1发送到辅单元2时所执行的控制器15 的处理的流程图；
图48是示出信号处理部分127的第五示例结构的方框图；
图49是说明由信号处理单元127执行的主单元的第五虚拟多视点显示处 理的流程图；
图50是示出信号处理部分127的第六示例结构的方框图；
图51是说明由信号处理单元127执行的主单元的第六虚拟多视点显示处 理的流程图；
图52A是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图52B是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图52C是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图53是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示的 图；
图54是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示的 图；
图55是示出信号处理部分127的第七示例结构的方框图；
图56是说明由信号处理单元127执行的主单元的第七虚拟多视点显示处 理的流程图；
图57是示出信号处理部分127的第八示例结构的方框图；
图58是说明由信号处理单元127执行的主单元的第八虚拟多视点显示处 理的流程图；
图59是示出信号处理部分127的第九示例结构的方框图；
图60是说明由信号处理单元127执行的主单元的第九虚拟多视点显示处 理的流程图；
图61A是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图61B是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图61C是示出组成可扩展电视系统的主单元1和辅单元2中的示例显示 的图；
图62是示出主单元1的另一示例电气结构的方框图；
图63A是示出应用本发明的可扩展电视系统的另一个实施例的示例结构 的透视图；
图63B是示出应用本发明的可扩展电视系统的另一个实施例的示例结构 的透视图；
图64是示出主单元1的示例电气结构的方框图；
图65是示出辅单元2的示例电气结构的方框图；
图66是示出应用本发明的安全系统的一个实施例的示例结构的方框图；
图67是示出摄像机1162的示例结构的方框图；
图68是说明主单元1的处理的流程图；
图69是说明主单元1的认证处理的流程图；
图70是说明辅单元2的处理的流程图；
图71是说明辅单元2的认证处理的流程图；
图72A是示出可扩展电视系统1161的主单元1中的示例显示的图；
图72B是示出可扩展电视系统1161中的示例全屏显示的图；
图73是示出数据处理部分1137C的示例结构的方框图；
图74A是说明数据处理部分1137C的图像数据处理的流程图；
图74B是说明数据处理部分1137C的音频数据处理的流程图；
图75是示出警告处理部分1137D的示例结构的方框图；
图76是说明警告处理部分1137D的异常事情判定/警告处理的流程图；
图77A是说明异常事情判定部分1213的处理的图；
图77B是说明异常事情判定部分1213的处理的图；
图77C是说明异常事情判定部分1213的处理的图；
图77D是说明异常事情判定部分1213的处理的图；
图78A是说明异常事情判定部分1213的处理的图；
图78B是说明异常事情判定部分1213的处理的图；
图78C是说明异常事情判定部分1213的处理的图；
图78D是说明异常事情判定部分1213的处理的图；
图78E是说明异常事情判定部分1213的处理的图；
图78F是说明异常事情判定部分1213的处理的图；
图78G是说明异常事情判定部分1213的处理的图；
图78H是说明异常事情判定部分1213的处理的图；
图78I是说明异常事情判定部分1213的处理的图；
图79A是说明安全控制器1137A的警告处理的图；
图79B是说明安全控制器1137A的警告处理的图；
图80A是说明安全控制器1137A的警告处理的图；
图80B是说明安全控制器1137A的警告处理的图；
图81是示出主单元1的另一示例电气结构的方框图；
图82A是说明安全控制器1137A的警告处理的图；
图82B是说明安全控制器1137A的警告处理的图；
图83是示出主单元1的另一示例电气结构的方框图；
图84是示出应用本发明的计算机的一个实施例的示例结构的方框图。

图1A和图1B是示出应用本发明的可扩展TV(电视)系统(系统是指多个 设备逻辑组装在一起的实体，而与这些设备是否包括在同一柜体内无关)的一 个实施例的示例结构的透视图。
在图1A所示的实施例中，可扩展电视系统由九个电视接收器1、211、 212、213、221、223、231、232和233形成。在图1B所示的实施例中，可扩展电 视系统由25个电视接收器1、211、212、213、214、215、221、222、223、224、225、 231、232、234、235、241、242、243、244、245、251、252、253、254和255形成。
组成可扩展电视系统的电视接收器的数目不限于9或25。换句话说，可 扩展电视系统可以由任意多个电视接收器形成。组成可扩展电视系统的电视 接收器的排列不限于图1A或图1B所示的3×3或5×5水平垂直格式。换句 话说，组成可扩展电视系统的电视接收器的排列可以是其他水平垂直格式， 如1×2、2×1、2×3水平垂直格式。另外，组成可扩展电视系统的电视接收 器的排列形状不限于图1A和1B所示的矩阵形状，而可以是金字塔形状。
由于可扩展电视系统可以这样由水平垂直方向上的排列个数为任意的任 意多个电视接收器构成，因此它可以称作“可扩展”系统。
在组成可扩展电视系统的电视接收器中，存在两种电视接收器：主电视 接收器(必要时以下称作主单元)，可以控制其他电视接收器；以及辅电视接收 器(必要时以下称作辅单元)，可以由另一电视接收器进行控制，但不能控制其 他电视接收器。
为执行后述的各种类型的处理，可扩展电视系统需要具有遵循可扩展电 视系统的电视接收器(以下称作可扩展使用单元)，并且它们中有一个需要是主 单元。因此，在图1A和图1B所示的各实施例中，在组成可扩展电视系统的 电视接收器中，例如位于中央的电视接收器担当主单元1。
由于上述原因，当在组成可扩展电视系统的电视接收器中使用不是可扩 展使用单元的电视接收器时，该电视接收器不能使用可扩展电视系统的功能。 另外，即使当组成可扩展电视系统的所有电视接收器都是可扩展使用单元时， 但如果它们全是辅单元，则它们也不能使用可扩展电视系统的功能。
因此，为使用可扩展电视系统的功能，用户需要购买至少一个或多个主 单元或者一个主单元和一个或多个辅单元。
由于主单元可以担当辅单元，因此在组成可扩展电视系统的电视接收器 中可以使用多个主单元。
在图1A所示的实施例中，3×3电视接收器中位于中央(左起第二且上起 第二)的电视接收器1担当主单元，而其他八个电视接收器211、212、213、221、 223、231、232和233担当辅单元。在图1B所示的实施例中，5×5电视接收器 中位于中央(左起第三且上起第三)的电视接收器1担当主单元，而其他24个 电视接收器211、212、213、214、215、221、222、223、224、225、231、232、234、 235、241、242、243、244、245、251、252、253、254和255担当辅单元。
因此，在图1A和图1B所示的各实施例中，主单元1位于组成可扩展电 视系统的电视接收器的中央。主单元1的位置不限于组成可扩展电视系统的 电视接收器的中央。主单元1可以位于任何位置，如左上角或右下角。
即使当主单元1位于可扩展电视系统中的任何位置时，后述各过程也都 是在把位于中央的电视接收器视作主单元的情况下来执行的。
为简化下面描述，假定可扩展电视系统如图1A所示由3×3电视接收器 形成，并且主单元1位于组成可扩展电视系统的电视接收器的中央。
用于组成可扩展电视系统的辅单元2ij中的下缀i和j是指辅单元2ij位于 可扩展电视系统中的第i行和第j列(上起第i行且左起第j列)。
以下，如果没有必要区分辅单元2ij，则它们统称作辅单元2。
图2是示出担当主单元1的电视接收器的示例结构的透视图。
主单元1是显示屏幕尺寸为例如14英寸或15英寸的电视接收器，并且 在正面的中央有用于显示图像的CRT(Cathode Ray Tube，阴极射线管)11，以 及在正面的左手端和右手端有用于输出声音的扬声器单元12L和12R。
包含在由未示出的天线接收的电视广播信号中的图像显示在CRT 11上， 并且从扬声器单元12L和12R输出伴随图像的L(左)声道声音和R(右)声道声 音。
主单元1连至用于发射红外线IR的遥控器(必要时以下称作控制器)15。 用户可以操作控制器15来改变接收频道和音量，并且将各种命令发送到主单 元1。
控制器15不限于执行红外线通信的遥控器。还可以采用执行无线通信如 BlueTooth(蓝牙)TM的遥控器。
控制器15不仅可以控制主单元1，还可以控制辅单元2。
下一步，图3A到图3F示出图2所示的主单元1的示例结构的六个面。
图3A示出主单元1的正面，图3B示出主单元1的顶面，图3C示出主 单元1的底面，图3D示出主单元1的左手侧面，图3E示出主单元1的右手 侧面，并且图3F示出主单元1的背面。
固定机构安设在主单元1的顶面(图3B)、底面(图3C)、左手侧面(图3D) 以及右手侧面(图3E)上。如后所述，类似的安全机构安设在担当辅单元的电 视接收器的顶面、底面、左手侧面以及右手侧面上。当在主单元1的顶面方、 底面方、左手侧面方或右手侧面方安置辅单元2或另一主单元时，安设在主 单元1的顶面、底面、左手侧面或右手侧面上的固定机构与安设在辅单元2 或另一主单元的相对面上的固定机构例如啮合以将主单元1固定到辅单元2 或另一主单元，从而不容易分开。这样，防止组成可扩展电视系统的电视接 收器发生错位。
固定机构可以由机械机构形成。它们也可以由例如磁铁形成。
在主单元1的背面，如图3F所示，安设有端子面板21、天线端子22、 输入端子23以及输出端子24。
端子面板21具有八个IEEE(Institute of Electrical and Electronics Engineers， 电气和电子工程师协会)1394端子2111、2112、2113、2121、2123、2131、2132 和2133，用于将主单元1电气连接到组成图1A所示的可扩展电视系统的八个 辅单元211、212、213、221、223、231、232和233。
在图3F所示的实施例中，在端子面板21中，连接到辅单元2ij的IEEE 1394端子21ij安设在当用户从背面方观看可扩展电视系统时所获得的与图1A 所示的可扩展电视系统中辅单元2ij的位置相对应的位置，从而主单元1知道 辅单元2ij在图1A所示的可扩展电视系统中的位置。
因此，在图1A所示的可扩展电视系统中，要求用户通过IEEE-1394端 子2111进行主单元1到辅单元211的连接，通过IEEE-1394端子2112进行主单 元1到辅单元212的连接，通过IEEE-1394端子2113进行主单元1到辅单元 213的连接，通过IEEE-1394端子2121进行主单元1到辅单元221的连接，通 过IEEE-1394端子2123进行主单元1到辅单元223的连接，通过IEEE-1394 端子2131进行主单元1到辅单元231的连接，通过IEEE-1394端子2132进行主 单元1到辅单元232的连接，并且通过IEEE-1394端子2133进行主单元1到辅 单元233的连接。
在图1A所示的可扩展电视系统中，端子面板21中的哪一个IEEE-1394 端子连接到辅单元ij不受限制。当辅单元ij连接到不同于IEEE-1394端子21ij 的IEEE-1394端子时，需要在主单元1中指定(要求用户指定)辅单元ij位于图 1A所示的可扩展电视系统中的第i行和第j列。
在图3F所示的实施例中，端子面板21安设有八个IEEE-1394端子2111 到2131，并且主单元1以并行方式连接到八个辅单元211到233。主单元1可 以以串行方式连接到八个辅单元211到233。同样在这种情况下，需要在主单 元1中指定辅单元ij位于图1A所示的可扩展电视系统中的第i行和第j列。 因此，端子面板21所安设的IEEE-1394端子的数目不限于八。
此外，可扩展电视系统中电视接收器之间的电气连接不限于IEEE 1394。 还可以采用LAN(IEEE 802)等。可扩展电视系统中电视接收器之间的电气连 接可以采用无线方式而不是有线方式来执行。
天线端子22连接到与未示出的天线连接的电缆。这样，由天线接收的电 视广播信号输入到主单元1。例如从VTR(video tape recorder，磁带录像机)输 出的图像数据和音频数据输入到输入端子23。从输出端子24输出例如主单 元1正在接收的电视广播信号的图像数据和音频数据。
图4是示出担当辅单元2的电视接收器的示例结构的透视图。
辅单元2是具有与图2所示的主单元1相同的显示屏幕尺寸的电视接收 器，并且在正面的中央有用于显示图像的CRT(阴极射线管)31，以及在正面 的左手端和右手端有用于输出声音的扬声器单元32L和32R。对于主单元1 和辅单元2，也可以使用不同的显示屏幕尺寸。
包含在由未示出的天线接收的电视广播信号中的图像显示在CRT 31上， 并且从扬声器单元32L和32R输出伴随图像的L(左)声道声音和R(右)声道声 音。
如同主单元1，辅单元2连至用于发射红外线IR的控制器35。用户可以 操作控制器35来改变接收频道和音量，并且将各种命令发送到辅单元2。
控制器35不仅可以控制辅单元2，还可以控制主单元1。
为构成图1A所示的可扩展电视系统，用户需要购买一个主单元1和八 个辅单元211到233。在这种情况下，由于主单元1连至控制器15，并且八个 辅单元211到233连至控制器35，因此用户拥有9个控制器，并且它们的管理 是麻烦的。
可以将辅单元2的控制器35与辅单元2分开出售作为一个选项。也可以 将主单元1的控制器15与主单元1分开出售作为一个选项。
如上所述，控制器15和35可以既控制主单元1又控制辅单元2。因此， 如果用户仅有控制器15和35之一，就可以既控制主单元1又控制辅单元2。
下一步，图5A到5F示出图4所示的辅单元2的示例结构的六个面。
图5A示出辅单元2的正面，图5B示出辅单元2的顶面，图5C示出辅 单元2的底面，图5D示出辅单元2的左手侧面，图5E示出辅单元2的右手 侧面，并且图5F示出辅单元2的背面。
固定机构安设在辅单元2的顶面(图5B)、底面(图5C)、左手侧面(图5D) 以及右手侧面(图5E)。当在辅单元2的顶面方、底面方、左手侧面方或右手 侧面方安置主单元1或另一辅单元时，安设在辅单元2的顶面、底面、左手 侧面或右手侧面上的固定机构与安设在主单元1或另一辅单元的相对面上的 固定机构啮合以将辅单元2固定到主单元1或另一辅单元，从而不容易分开。
在辅单元2的背面，如图5F所示，安设有端子面板41、天线端子42、 输入端子43以及输出端子44。
端子面板41具有一个IEEE-1394端子411，用于将主单元1电气连接到 辅单元2。当辅单元2例如是图1A所示的可扩展电视系统中位于左上的辅单 元211时，端子面板41中的IEEE-1394端子411通过未示出的IEEE-1394电 缆连接到图3F所示的端子面板21中的IEEE-1394端子2111。
端子面板41所安设的IEEE-1394端子的数目不限于1。
天线端子42连接到与未示出的天线连接的电缆。这样，由天线接收的电 视广播信号输入到辅单元2。例如从VTR输出的图像数据和音频数据输入到 输入端子43。从输出端子44，输出例如辅单元2正在接收的电视广播信号的 图像数据和音频数据。
如上所述构造的总共九个电视接收器，一个主单元1和八个辅单元211 到233在水平和垂直方向上均以三个单元排列，从而形成图1A所示的可扩展 电视系统。
图1A所示的可扩展电视系统通过将电视接收器直接放置在担当主单元 或辅单元的电视接收器的上方、下方、左方或右方来构造。可扩展电视系统 也可以例如通过将电视接收器放置在图6所示的系统专用机柜中来构造。当 以这种方式使用专用机柜时，可以更强壮地防止组成可扩展电视系统的电视 接收器发生错位。
当可扩展电视系统通过将电视接收器直接放置在担当主单元或辅单元的 电视接收器的上方、下方、左方或右方来构造时，例如，在没有辅单元232 的情况下，主单元1不能放置在图1A所示的第二行和第二列。相反，当可 扩展电视系统使用图6所示的专用机柜时，即使在没有辅单元232的情况下， 主单元1也可以放置在第二行和第二列。
下一步，图7是示出控制器15的示例结构的平面图。
选择按钮开关51可以在上下左右四个方向及其四个夹角方向总共八个 方向上操作(在其中一个方向上操作)。另外，还可以垂直于控制器15的顶面 来按选择按钮开关51(以作选择)。菜单按钮开关54用来在主单元1的CRT 11(或辅单元2的CRT 31)上显示一个菜单屏幕，用于输入指示各种设置(例如， 如上所述指定辅单元ij位于可扩展电视系统中的第i行和第j列)和一个预定处 理的命令。
当显示菜单屏幕时，在CRT 11上显示用于指向菜单屏幕上的一项目的 光标。光标在操作选择按钮开关51的方向所对应的方向上移动。当光标位于 预定项目上时，如果按选择按钮开关51，则判定选择该项目。在本实施例中， 如后所述，在显示在菜单上的项目中显示图标，并且也是按选择按钮开关51 来点击图标。
可以在控制器15上安设与显示在菜单屏幕上的项目和图标相对应的按 钮开关。在这种情况下，用户可以在不显示菜单屏幕的情况下直接操作控制 器15来指定显示在菜单屏幕上的项目或图标。
例如，当用户想要从菜单屏幕回到最初通常屏幕时，操作退出按钮开关 55。
音量按钮开关52用来增大或减小音量。频道上调/下调按钮开关53用来 增大或减小所要接收的广播频道号。
数字按钮(数字键盘)开关58表示从零到九的数字，并且用来输入所表示 数字。当完成操作数字按钮开关58之后立即操作输入按钮开关57，从而表 示数字输入完成。当切换频道时，新频道号等是在主单元1的CRT 11(或辅单 元2的CRT 31)上显示预定时间的OSD(on-screen display，屏显)。显示按钮56 用来切换显示当前所选频道号或当前音量的开/关OSD显示。
电视/视频切换按钮开关59用来在来自后述的图10所示的内置调谐器 121的输入(或者来自后述的图11所示的调谐器141)与来自图3F所示的输入 端子23(或者来自图5F所示的输入端子43)的输入之间切换主单元1(或辅单 元2)的输入。电视/DSS切换按钮开关60用来在调谐器121中选择用于接收 地面广播的电视模式或者用于接收卫星广播的DDS(数字卫星系统，Hughes 通信公司的商标)模式。当操作数字按钮开关58来改变频道时，存储改变之 前所选的频道。跳转按钮开关61用来返回到改变之前所选的频道。
语言按钮62用来当以两种或多种语言广播时选择一个预定语言。导向按 钮开关63用来显示EPG(electric program guide，电气节目导向)。收藏(favorite) 按钮开关64用来选择预先指定的用户喜爱频道。
有线按钮开关65、电视开关66以及DSS开关67用来切换从控制器15 发送的红外线所对应的命令码的单元类别。更具体地说，除了担当主单元1 和辅单元2的电视接收器之外，控制器15(以及控制器35)还可以遥控未示出 的STB(set-top box，机顶盒)和IRD(integrated receiver and decoder，集成接收 器和解码器)。有线按钮开关65用来通过控制器15控制用于接收通过有线电 视网络传输的信号的STB。当操作有线按钮开关65时，控制器15发射分配 给STB的单元类别的命令码所对应的红外线。同样，电视按钮开关66用来 通过控制器15控制主单元1(或辅单元2)。DSS按钮开关67用来通过控制器 15控制用于接收从卫星传输的信号的IRD。
当接通有线按钮开关65、电视按钮开关66或DSS按钮开关67时，分 别接通LED(light emitting diode，发光二极管)68、69或70。通过这些LED， 控制器15向用户显示当前允许控制的是哪一类别的单元。当断开有线按钮开 关65、电视按钮开关66或DSS按钮开关67时，分别断开LED 68、69或70。
有线电源按钮开关71、电视电源按钮开关72或DSS电源按钮开关73 分别用来接通/断开STB、主单元1(或辅单元2)或IRD的电源。
静音按钮开关74用来设置或解除主单元1(或辅单元2)的静音状态。睡 眠按钮开关75用来设置或解除当到达预定时间时或者当过去预定时间时自 动关闭电源的睡眠模式。
下一步，图8是示出辅单元2的控制器35的示例结构的平面图。
由于控制器35具有以与图7所示的控制器15中的选择按钮开关51到睡 眠按钮开关75相同的方式构造的选择按钮开关81到睡眠按钮开关105，因 此省略其描述。
图9是示出主单元1的控制器15的另一示例结构的平面图。
在图9所示的实施例中，代替图7所示的可以在八个方向上操作的选择 按钮开关51，提供用于上下左右四个方向的方向按钮开关111、112、113和 114以及用于执行选择操作的按钮开关110。另外，在图9所示的实施例中， 有线按钮开关65、电视按钮开关66和DSS按钮开关67为内部发光型，并且 省略图7所示的LED 68到70。未示出的LED位于按钮开关65到67的背侧。 当操作按钮开关65到67时，位于背侧的LED响应这些操作而开关。
其他按钮开关虽然位置不同但是基本上与图7所示的对应开关相同。
辅单元2的控制器35可以如图9所示同样构造。
控制器15可以包括一个陀螺仪，用于检测控制器15的运动。在这种情 况下，内置于控制器15的陀螺仪可以检测控制器15的运动方向和运动距离， 并且根据运动的方向和距离移动显示在菜单屏幕上的光标。当控制器15以这 种方式包括一个陀螺仪时，在图7所示的实施例中不需要在八个方向上操作 选择按钮开关51，并且在图9所示的实施例中方向按钮开关111到114是不 必要的。控制器35可以同样包括一个陀螺仪。
下一步，图10示出主单元1的示例电气结构。
由未示出的天线接收的电视广播信号发送到调谐器121，并且在CPU 129 的控制下经过检测和解调。调谐器121的输出发送到QPSK(quadrature phase shift keying，正交移相键控)解调电路122，并且在CPU 129的控制下经过 QPSK解调。QPSK解调电路122的输出发送到纠错电路123。在CPU 129的 控制下经过错误检测和纠正，并且将输出发送到解复用器124。
解复用器124必要时在CPU 129的控制下对纠错电路123的输出进行解 扰(de-scramble)，并且在预定频道中提取TS(transport stream，传输流)分组。 然后，解复用器124将图像数据(视频数据)TS分组发送到MPEG(Moving Picture Experts Group，运动图象专家组)视频解码器125，并且将音频数据(音 频数据)TS分组发送到MPEG音频解码器126。解复用器124必要时还将包 括在纠错电路123的输出中的TS分组发送到CPU 129。解复用器124还接收 从CPU 129发送的图像数据或音频数据(包括TS分组中的那些数据)，并且将 它发送到MPEG视频解码器125或MPEG音频解码器126。
MPEG视频解码器125对从解复用器124发送的图像数据TS分组进行 MPEG解码，并且发送到信号处理部分127。MPEG音频解码器126对从解 复用器124发送的音频数据TS分组进行MPEG解码。通过在MPEG音频解 码器126中解码而获得的左声道音频数据和右声道音频数据发送到信号处理 部分127。
信号处理部分127将从MPEG视频解码器125发送的图像数据发送到矩 阵电路128，并且将从MPEG音频解码器126发送的音频数据(声学数据)发送 到放大器137。
信号处理部分127由DSP(digital signal processor，数字信号处理 器)127A、EEPROM(electrically erasable programmable read only memory，电可 擦除可编程只读存储器)127B、RAM(random access memory，随机存取存储 器)127C等形成，并且还在CPU 129的控制下对向其发送的图像数据和音频 数据施加各种数字信号处理。
更具体地说，DSP 127A必要时根据存储在EEPROM 127B中的程序，使 用存储在EEPROM 127B中的数据来执行各种信号处理。EEPROM 127B存储 当DSP 127A执行各种处理时所用的程序和必要数据。RAM 137C临时存储 DSP 137A进行各种处理所需的数据和程序。
存储在EEPROM 127B中的数据和程序可以通过覆写来更新。
矩阵电路128将从信号处理部分127发送的图像数据转换成RGB(红绿 蓝)图像数据，并且将它发送到CRT以作显示。矩阵电路128具有D/A(数字/ 模拟)转换器，并且对图像数据施加D/A转换并输出它。
CPU 129根据存储在EEPROM 130和ROM(read only memory，只读存储 器)131中的程序执行各种处理以例如控制调谐器121、QPSK解调电路122、 纠错电路123、解复用器124、信号处理部分127、IEEE-1394接口133、IR 接口135以及调制解调器136。另外，CPU 129还将从解复用器124发送的数 据发送到IEEE-1394接口133，并且将从IEEE-1394接口133发送的数据发 送到解复用器124和信号处理部分127。此外，CPU 129还执行从前面板134 或IR接口135发送的命令所对应的处理。而且，CPU 129控制调制解调器136 以通过电话线访问未示出的服务器来获得更新程序和必要数据。
EEPROM 130存储即使电源断开之后也需要保存的数据和程序。ROM 131例如存储IPL(initial program loader，初始程序装载器)程序。存储在 EEPROM 130中的数据和程序可以通过覆写来更新。
RAM 132临时存储CPU 129的操作所需的数据和程序。
IEEE-1394接口133连接到端子面板21(其IEEE-1394端子2111到2133(图 3F))，并且用作执行遵循IEEE 1394标准的通信的接口。这样，IEEE-1394接 口133根据IEEE 1394标准将从CPU 129发送的数据发送到外界，并且根据 IEEE 1394标准接收从外界发送的数据，并将它发送到CPU 129。
虽然前面板134在图2或者图3A到图3F中未示出，但是它例如安设在 主单元1的正面的某一部位。前面板134包括为控制器15提供的按钮开关中 的一部分(图7和图9)。更具体地说，前面板134包括例如对应于音量按钮开 关52、频道上调/下调按钮开关53、菜单按钮开关54、数字按钮开关58和电 视电源按钮开关72的按钮开关。当操作前面板134上的按钮开关时，对应于 该操作的操作信号发送到CPU 129。在这种情况下，CPU 129执行从前面板 134发送的操作信号所对应的处理。
IR接口135响应控制器15上的操作接收从控制器15发送的红外线(光)。 另外，IR接口135对接收红外线进行光电转换，并且将因此获得的信号发送 到CPU 129。在这种情况下，CPU 129执行从IR接口135发送的信号所对应 的处理，也就是，控制器15上的操作所对应的处理。此外，IR接口135根 据CPU 129的控制来发射红外线。换句话说，在本实施例中，主单元1可以 通过上述IEEE-1394接口133执行IEEE-1394通信，通过后述的调制解调器 136执行通信，并且通过IR接口135执行红外线通信。
调制解调器136通过电话线控制通信，从而通过电话线发送从CPU 129 发送的数据，接收通过电话线发送的数据，并且将它发送到CPU 129。
放大器137必要时对从信号处理部分127发送的音频数据进行放大，并 且将它发送到扬声器单元12L和12R以作输出。放大器137具有D/A转换器， 对音频数据施加D/A转换，并且输出它。
如上所述构造的主单元1以下述方式输出电视广播节目中的图像和声音 (显示图像和输出声音)。
作为由天线接收的电视广播信号的传输流通过调谐器121、QPSK解调电 路122和纠错电路123发送到解复用器124。解复用器124从传输流中提取 预定节目的TS分组，将图像数据TS分组发送到MPEG视频解码器125，并 且将音频数据TS分组发送到MPEG音频解码器126。
MPEG视频解码器125对从解复用器124发送的TS分组进行MPEG解 码。因此获得的图像数据通过信号处理部分127和矩阵电路128从MPEG视 频解码器125发送到CRT 11以作显示。
MPEG音频解码器126对从解复用器124发送的TS分组进行MPEG解 码。因此获得的音频数据通过信号处理部分127和放大器137从MPEG音频 解码器126发送到扬声器单元12L和12R以作输出。
下一步，图11示出辅单元2的示例电气结构。
由于辅单元2由结构与图10所示的调谐器121到放大器137相同的调谐 器141到放大器157形成，因此省略其描述。
由于主单元1和辅单元2如图3F和5F所示各自具有天线端子22和天 线端子42，因此天线(起于此的电缆)可以连接到担当组成图1A或图1B所示 的可扩展电视系统的电视接收器的各个主单元1和辅单元2。然而，当天线 连接到主单元1和辅单元2时，布线可能很麻烦。在可扩展电视系统中天线 可以连接到组成可扩展电视系统的电视接收器之一，并且由该电视接收器接 收的电视广播信号通过例如IEEE-1394通信分发到其他电视接收器。
下一步，在本实施例中，主单元1中端子面板21的IEEE-1394端子21ij(图 3F)通过IEEE-1394电缆连接到辅单元2ij中端子面板41的IEEE-1394端子 411(图5F)以电气连接主单元1与辅单元2，从而执行IEEE-1394通信(遵循 IEEE-1394标准的通信)以在主单元1和辅单元2之间传输各种类型的数据。
下面将参照图12到图21B简短描述IEEE-1394通信。
IEEE 1394是串行总线标准之一。IEEE-1394通信允许数据同步传输，因 此适合于传输需要实时再现的数据如图像和声音。
更具体地说，数据同步传输可以以最大100μs(微秒)传输频带(尽管它是 以时间测量的，但这样称谓)和125μs的间隔在具有IEEE-1394接口的单元 (IEEE-1394单元)之间执行。在上述传输频带内，允许对多个信道进行同步传 输。
图12示出IEEE-1394通信协议的分层结构。
IEEE-1394协议具有三层分层结构，它包括事务层、链路层和物理层。 各层相互通信，并且还与串行总线管理通信。另外，事务层和链路层还与高 层应用通信。四种发送和接收消息用于通信中。它们是请求、表示(显示)、响 应和确认。图12中的箭头表示这些通信消息类型。
以“.req”为箭头名称结尾的通信表示请求消息，以“.ind”结尾的通信 表示表示消息，以“.resp”结尾的通信表示响应消息，并且以“.conf”结尾 的通信表示确认消息。例如，TR CONT.req是指从串行总线管理发送到事务 层的请求通信消息。
事务层提供用于根据来自应用的请求与另一IEEE-1394单元(具有 IEEE-1394接口的单元)执行数据通信的异步传输服务，并且实现ISO/IEC 13213所需的请求响应协议。更具体地说，根据IEEE-1394标准的数据传输 方法包括上述同步传输和异步传输。事务层执行异步传输处理。通过事务层 协议所需的三种处理单元即读取事务、写入事务和锁定事务的异步传输在 IEEE-1394单元之间传输数据。
链路层提供使用确认、地址处理、数据错误确认和数据分帧的数据传输 服务。通过链路层实现的分组传输的一个操作称作子操作。存在两种子操作： 异步子操作和同步子操作。
异步子操作采用指定一个节点(IEEE 1394中的可访问单元)的物理标识 (ID)和所指定节点中的地址来执行，并且接收数据的节点回送一个确认。在 将数据设到IEEE-1394串行总线中的所有节点的异步广播子操作中，接收数 据的节点不回送确认。
在同步子操作中，采用所指定的信道号以固定间隔(125μs，如前所述) 传输数据。在同步子操作中不返回确认。
物理层将用于链路层中的逻辑符号转换成电信号。另外，物理层处理从 链路层发送的仲裁(对试图执行IEEE-1394通信的节点的争用进行仲裁)拥塞 请求，并且当总线复位为自动分配物理ID时执行IEEE-1394串行总线的重新 配置。
串行总线管理实现基本总线控制功能，并且提供ISO/IEC 13212的 CSR(control & status register architecture，控制与状态寄存器架构)。串行总线 管理具有节点控制器、同步资源管理器和总线管理器的功能。节点控制器控 制节点的状态、物理ID等，并且还控制事务层、链路层和物理层。同步资源 管理器提供用于同步通信的资源的使用状态。为执行同步通信，在连接到 IEEE-1394串行总线的单元中需要至少一个具有同步资源管理器功能的 IEEE-1394单元。总线管理器与其他相比具有最高级功能，并且它的目的是 试图最适当地使用IEEE-1394串行总线。同步资源管理器和总线管理器可以 省略。
IEEE-1394单元可以通过节点分支或节点菊花链来连接。当连接一个新 IEEE-1394单元时，对总线复位，并且确定树标识、根节点、物理ID、同步 资源管理器、循环控制器(cycle master)、总线管理器等。
作为节点的IEEE-1394单元之间的层次关系用树标识来确定。根节点指 定获得在仲裁中使用IEEE-1394串行总线的权限的节点。物理ID是在将称作 自身ID分组的分组发送到各节点时确定的。自身ID分组还包括如节点数据 传输速率和节点是否担当同步资源管理器的信息。
同步资源管理器是如上所述提供用于同步通信的资源的使用状态的节 点，并且具有如后所述的带宽寄存器(bandwidth_available(可用带宽)寄存器) 和信道号寄存器(channels_available(可用信道)寄存器)。另外，同步资源管理 器具有表示担当总线管理器的节点的物理ID的寄存器。当作为通过 IEEE-1394串行总线连接的IEEE-1394单元的节点中没有总线管理器时，同 步资源管理器用作简化总线管理器。
循环控制器以125μs的间隔发送循环开始分组到IEEE-1394串行总线， 其中，125μs是同步传输间隔。为此，循环控制器具有用于对间隔(125μs) 计数的循环时间寄存器(cycle_time寄存器)。根节点担当循环控制器。当根节 点不具有循环控制器的功能时，总线管理器改变根节点。
总线管理器管理IEEE-1394串行总线上的电源，并且如上所述改变根节 点。
当如上所述在总线复位之后确定同步资源管理器等时，通过IEEE-1394 串行总线的数据传输就绪。
在作为IEEE-1394数据传输方法之一的同步传输中，获取传输频带和传 输信道，然后传输其中安排有数据的分组(同步分组)。
更具体地说，在同步传输中，循环控制器以125μs的间隔将循环开始分 组广播到IEEE-1394串行总线。当广播循环开始分组时，同步分组的传输就 绪。
为执行同步传输，需要将数据重写到由同步资源管理器提供用来获取传 输频带的带宽寄存器以及用于获取信道的信道号寄存器中，以声明获取用于 同步传输的资源。
带宽寄存器和信道号寄存器均分配为一个如后所述的CSR(控制与状态 寄存器)，它具有由ISO-IEC 13213定义的64比特地址空间。
带宽寄存器是一个32比特寄存器，其中，高位19比特作为保留区域， 并且低位13比特表示当前可以使用的传输频带(bw_remaining)。
更具体地说，带宽寄存器的初始值为 00000000000000000001001100110011B(B表示之前的值为二进制)(＝4915)。这 是由于下面原因。IEEE 1394定义以1572.864Mbps(比特/秒)传输32比特所需 的时间为1。上述间隔125μs对应于 00000000000000000001100000000000B(＝6144)。然而，IEEE 1394指定可以用 于同步传输的传输频带为间隔125μs的80％。因此，可以用于同步传输的最 大传输频带是100μs，即如上所述的 00000000000000000001001100110011B(＝4915)。
通过从125μs中减去用于同步传输的最大传输频带100μs而获得的剩 余传输频带25μs用于异步传输。异步传输用于读取存储在带宽寄存器和信 道号寄存器中的值或者用于其他目的。
开始同步传输需要获取传输频带。例如，当使用125μs间隔中的10μs 传输频带来执行同步传输时，需要获取传输频带10μs。获取传输频带通过重 写带宽寄存器的值来实现。更具体地说，为获取如上所述的10μs传输频带， 从带宽寄存器的值中减去对应于10μs的值492，并且将差值存储在带宽寄存 器中。因此，当带宽寄存器的值为4915(如果根本不执行同步传输)来获得10 μs的传输频带时，带宽寄存器的值从上述4915变成 4423(00000000000000000001000101000111B)，它是通过从4915中减去对应 于10μs的492而获得的。
当通过从带宽寄存器的值减去所要获得(使用)的传输频带而获得的值小 于零时，不能获得传输频带，不重写带宽寄存器的值，还不能执行同步传输。
为执行同步传输，除传输频带之外还需要获得传输信道。重写信道号寄 存器来获得一个传输信道。
信道号寄存器是一个64比特寄存器，并且各比特对应于一个信道。更具 体地说，当第n比特(从最低有效比特开始的第n比特)为1时，第(n-1)信道没 有使用，并且当第n比特为0时，第(n-1)信道正在使用。因此，当没有信道 正在使用时，信道号寄存器为 1111111111111111111111111111111111111111111111111111111111111111B。当例 如获得第一信道时，信道号寄存器改成 1111111111111111111111111111111111111111111111111111111111111101B。
由于信道号寄存器如上所述具有64比特，因此在同步传输中最大可以获 得从第0到第63信道的总共64个信道。第63信道用于广播同步分组。
如上所述，由于获得传输频带和传输信道，然后实现同步传输，因此数 据是以受到保证的传输速率来传输的。如上所述，它尤其适合于需要实时再 现数据的数据传输，如图像和声音。
下一步，IEEE-1394通信遵循由ISO/IEC 13213定义的具有64比特地址 空间的CSR架构。
图13示出CSR架构的地址空间。
CSR的高位16比特表示各节点的ID，而剩余48比特用于在分配给各节 点的地址空间中进行指定。这些高位16比特进一步分成表示总线ID的10比 特和表示物理ID(狭义上的节点ID)的6比特。由于通过将所有比特设为“1” 而获得的值用于特殊目的，因此可以指定1023条总线和63个节点。
在由CSR的低位48比特指定的256吉字节地址空间中，由高位20比特 确定的空间分成由2048字节CSR唯一寄存器、IEEE-1394唯一寄存器等使用 的初始寄存器空间；私有空间；初始存储器空间；以及其他，并且当由高位 20比特确定的空间用于初始寄存器空间时，由低位28比特确定的空间用于 配置ROM，对节点唯一使用的初始单元空间、插头控制寄存器(PCR)等。
图14示出主CSR的偏移地址、名称和功能。
在图14中，“偏移”列表示从初始寄存器空间所起始的 FFFFF000000h(“h”表示之前的值为十六进制)开始计数的偏移地址。偏移为 220h的带宽寄存器如上所述表示可以分配给同步通信的带宽。只有由担当同 步资源管理器的节点的带宽寄存器表示的值才有效。换句话说，各节点均具 有图13所示的CSR，但是只有同步资源管理器的带宽寄存器才有效。因此， 实际上只有同步资源管理器才有带宽寄存器。
在偏移为224h到228h的信道号寄存器中，如上所述，各比特对应于信 道号0到63之一，并且具有“0”的比特表示对应信道已被分配。只有担当 同步资源管理器的信道号寄存器才有效。
回到图13，遵循一般ROM格式的配置ROM位于初始寄存器空间中的 地址400h到800h。
图15示出一般ROM格式。
作为IEEE 1394中的访问单元的节点可以具有多个共享地址空间但独立 操作的节点内单元。单元目录可以表示分配给该单元的软件的版本和位置。 总线信息块和根目录的位置是固定的，但其他块的位置由偏移地址来指定。
图16示出总线信息块、根目录和单元目录的详细信息。
总线信息块中的公司ID存储表示单元制造商的ID号。芯片ID存储唯 一于单元的ID，该ID不等于其他单元的任何ID。根据IEC 1833标准，满足 IEC 1883的单元的单元目录的单元特定ID的第一八比特组设为00h，其第二 八比特组设为A0h，并且其第三八比特组设为2Dh。此外，单元sw版本的第 一八比特组设为01h，并且其第三八比特组的LSB(least significant bit，最低有 效比特)设为“1”。
节点在图13所示的初始寄存器空间中的地址900h到9FFh具有在IEC 1883中指定的PCR(插头控制寄存器)。这是当插头概念简化为逻辑形成类似 于模拟接口的信号路径时获得的。
图17示出PCR结构。
PCR具有表示输出插头的oPCR(输出插头控制寄存器)和表示输入插头 的iPCR(输入插头控制寄存器)。PCR还具有分别表示唯一于各单元的输出插 头和输入插头信息的oMPR(输出主插头寄存器)和iMPR(输入主插头寄存器)。 IEEE-1394单元没有多个oMPR或多个iMPR，但是可以根据IEEE-1394单元 的性能具有对应于各插头的oPCR和iPCR。图17所示的PCR具有31个oPCR #0到#30以及31个iPCR#0到#30。同步数据流通过操作对应于这些插头的 寄存器来控制。
图18A到18D示出oMPR、oPCR、iMPR和iPCR的结构。
图18A示出oMPR结构，图18B示出oPCR结构，图18C示出iMPR结 构，并且图18D示出iPCR结构。
oMPR以及iMPR在MSB侧的最高两比特中的数据速率容量字段存储表 示单元可以发送或接收的同步数据的最大传输速率的代码。oMPR中的基本 广播信道(broadcast channel base)字段指定用于广播输出的信道号。
oMPR在LSB侧的最低五比特中的输出插头数字段存储表示单元所拥有 输出插头个数的值，也就是，oPCR个数。非持久性扩展字段和持久性扩展字 段是为将来扩展而定义的区域。
oPCR和iPCR在MSB的联机字段表示插头的使用状态。更具体地说， 当值为“1”时，插头处于联机状态，而当值为“0”时，插头处于脱机状态。 oPCR和iPCR中的广播连接计数器字段表示广播连接是否存在(“1”表示存 在，而“0”表示不存在)。oPCR和iPCR中的六比特宽度点对点连接计数器 字段具有表示插头所具有点对点连接数的值。
oPCR和iPCR中的六比特宽度信道号字段具有表示插头所连接的同步信 道号的值。oPCR中的两比特宽度数据速率字段表示从插头输出的同步数据分 组的实际传输速率。oPCR中的四比特宽度开销ID具有表示同步通信的超出 带宽的代码。oPCR中的十比特宽度有效载荷字段表示可以由插头处理的包括 在同步分组中的数据的最大值。
AV/C命令集被指定为用于如上所述执行IEEE-1394通信的IEEE-1394 单元的控制命令。在本实施例中，主单元1和辅单元2可以通过使用AV/C 命令集来相互控制。也可以使用不同于AV/C命令集的专用命令系统来控制 主单元1和辅单元2。
下面将对AV/C命令集进行简短描述。
图19示出以异步传输模式传输的AV/C命令集分组的数据结构。
AV/C命令集是用于控制AV(音频视频)单元的命令集。在使用AV/C命令 集的控制系统中，AV/C命令帧和响应帧通过FCP(function control protocol，功 能控制协议)来传输。为了不对总线和AV单元施加负载，命令响应应在100ms 内发送。
如图19所示，异步分组中的数据在水平方向上由32比特(一个四字节组 (quadlet))形成。图中的上部表示分组头部，而图中的下部表示数据块。 destination_ID表示目的地。
CTS字段表示命令集ID，并且对于AV/C命令集为“0000”。当分组包 含命令时，命令类型/响应(ctype/response)字段表示命令的功能分类，而当分 组包含响应时，它表示命令的处理结果。命令大致可以分成四种类型：(1)用 于从外界控制功能的命令(控制)；(2)用于从外界查询状态的命令(状态)；(3) 用于从外界查询控制命令是否被支持的命令(一般查询(操作码是否被支持)和 特定查询(操作码和操作数是否被支持))；以及(4)用于请求将状态变化报告给 外界的命令(通知)。
响应根据命令类型来回送。对控制命令的响应包括“未实现”(没有安装)、 “接受”(接受)、“拒绝”(拒绝)以及“临时”(临时)。对状态命令的响应包括 “未实现”、“拒绝”、“转换中”(转换期间)以及“稳定”(稳定性)。对一般查 询命令和特定查询命令的响应包括“实现”(安装)以及“未实现”。对通知命 令的响应包括“未实现”、“拒绝”、“临时”(临时)以及“变化”(变化)。
子单元类型字段用于标识单元功能。例如，分配磁带记录器/播放器或调 谐器。为区分多个相同类型的子单元，子单元id字段(位于子单元类型字段之 后)用作用于寻址的区分号。操作码(opcode)字段表示一个命令。操作数 (operand)字段表示命令参数。附加操作数字段是放置附加操作数的字段。填 充字段是放置哑元数据以使分组长度等于预定比特数的字段。数据CRC(cycle redundancy check，循环冗余校验)字段表示用于对数据传输期间的错误进行 校验的CRC。
下一步，图20A到图20C示出AV/C命令的特定例子。
图20A示出命令类型/响应中的特定例子。该图的上部表示命令，并且下 部表示响应。“控制”分配为“0000”，“状态”分配为“0001”，“特定查询” 分配为“0010”，“通知”分配为“0011”，并且“一般查询”分配为“0100”。 “0101”到“01111”被保留用于将来规范。“未实现”分配为“1000”，“接 受”分配为“1001”，“拒绝”分配为“1010”，“转换中”分配为“1011”，“实 现/稳定”分配为“1100”，“变化”分配为“1101”，并且“临时”分配为“1111”。 “1110”被保留用于将来规范。
图20B示出子单元类型(subunit_type)字段中的特定例子。“视频监控器” 分配为“00000”，“盘记录器/播放器”分配为“00011”，“磁带记录器/播放器” 分配为“00100”，“调谐器”分配为“00101”，“视频摄像机”分配为“00111”， “唯一于厂商”分配为“11100”，并且“扩展到下一字节的子单元类型”分 配为“11110”。“单元”分配为“11111”。这是在将如接通或断开电源的设置 发送到单元本身时使用的。
图20C示出操作码(opcode)字段中的特定例子。对于各子单元类型均存 在一个操作码表，并且图中示出当子单元类型为磁带记录器/播放器时所使用 的操作码。操作数是针对各操作码来定义的。“厂商相关”分配为“00h”，“搜 索模式”分配为“50h”，“时间码”分配为“51h”，“ATN”分配为“52h”，“打 开MIC”分配为“60h”，“读取MIC”分配为“61h”，“写入MIC”分配为“62h”， “载入介质”分配为“C1h”，“记录”分配为“C2h”，“播放”分配为“C3h”， 并且“倒带”分配为“C4h”。
图21A和图21B示出AV/C命令和AV/C响应的特定例子。
例如，当向作为目标端(消费者)(所要控制的一方)的再现单元指示再现 时，控制器(控制方)将如图21A所示的命令发送到目标端。由于该命令使用 AV/C命令集，因此CTS设为“0000”。由于使用从外界控制单元的命令(控制)， 因此ctype设为“0000”(图20A)。由于使用磁带记录器/播放器，因此子单元 类型字段设为“00100”(图20B)。id字段设为“000”，这表示该ID不为零。 操作码字段设为“C3h”，这表示再现(图20C)。操作数字段设为“75h”，这 表示“快进”。当进行再现时，目标端将如图21B所示的响应回送到控制器。 表示接受的“接受”置于响应字段中。响应字段设为“1001”(见图20A)。由 于除了响应字段之外的字段具有与图21A相同的值，因此省略其描述。
在可扩展电视系统中，通过使用上述AV/C命令集在主单元1与辅单元2 之间进行各种控制。在本实施例中，在主单元1与辅单元2之间所执行的控 制中，为现有命令和响应不能处理的控制定义新命令和响应，并且使用这些 新命令和响应来执行各种控制。
上述IEEE-1394通信和AV/C命令集详见由Triceps出版的“WHITE SERIES No.181 IEEE-1394 MULTIMEDIA INTERFACE(白皮书序列号181 IEEE-1394多媒体接口)”。
如参照图10所述，主单元1的IR接口135可以接收和发射红外线，并 且主单元1的控制器15与可以发射和接收红外线的IR接口135相对应，可 以既发送又接收红外线。
图22示出控制器15的示例电气结构。
操作部分161具有参照图7或图9所述的为控制器15提供的各种按钮开 关，并且将对应于操作按钮开关的操作信号发送到控制部分162。
控制部分162从操作部分161接收操作信号，并且将表示操作信号所请 求处理的命令代码(命令码)发送到帧生成部分163。控制部分162还根据接收 处理部分167的输出执行各种处理。另外，控制部分162还将设备码存储到 设备码存储部分168中。
帧生成部分163产生其中置有从控制部分162发送的命令码和存储在设 备存储部分168中的设备码的帧结构数据(帧数据)，并且将该数据发送到发送 处理部分164。
发送处理部分164根据从帧生成部分163发送的帧数据，对具有预定频 率的载波进行调制，并且根据因此获得的调制信号驱动光发射部分165。
光发射部分165例如由LED形成，并且当由发送处理部分164驱动时发 射红外线。由光发射部分165发射的红外线例如由IR接口135(图10)进行接 收。
光接收部分166接收红外线，将它转换成电信号，并且将该信号发送到 接收处理部分167。光接收部分166例如接收由IR接口135发射的红外线。
接收处理部分167对光接收部分166的输出进行解调，并且将因此获得 的帧数据发送到控制部分162。
下一步，图23示出由帧生成部分163生成的帧数据的帧格式。
帧数据由位于首部的帧头部部分(leader)和位于其后的两个数据部分#1 和#2形成。
帧头部部分具有由表示帧首部的预定比特串形成的数据。
数据部分#1包括设备码和命令码。
设备码是分配给执行帧数据传输的设备的代码。当一个设备接收帧数据 时，如果位于帧数据中的设备码匹配分配给该设备的设备码，则该设备认为 帧数据是面向该设备的，并且执行位于帧数据中的命令码所对应的处理。
更具体地说，在图22所示的控制器15中，当控制部分162从接收处理 部分167接收帧数据时，控制部分162比较位于帧数据中的设备码与存储在 设备码存储部分168中的设备码，并且只有它们匹配，控制部分162才执行 位于帧数据中的命令码所对应的处理。
当从接收处理部分167发送的帧数据中的设备码不匹配存储在设备码存 储部分168中的设备码时，控制部分162忽略(丢弃)该帧数据。因此，在这种 情况下，控制部分162不执行任何处理。
数据部分#2具有与数据部分#1相同的数据。
在图22所示的控制器15中，当控制部分162从接收处理部分167接收 帧数据时，控制部分162比较帧数据中的数据部分#1和#2，并且只有它们匹 配，控制部分162才如上所述比较设备码。因此，如果帧数据中的数据部分 #1和#2不匹配，则控制部分162不执行任何处理。
由于如上所述如果帧数据中的数据部分#1和#2不匹配则控制部分162 不执行任何处理，因此防止处理未被成功接收的帧数据(错误帧数据)。
如上所述，辅单元2的IR接口155(图11)也是以与图10所示的主单元1 的IR接口135相同的方式来构造的，因此可以发射和接收红外线。辅单元2 的控制器35与可以发射和接收红外线的IR接口155相对应，可以既发射又 接收红外线。
图24示出控制器35的示例电气结构。
由于控制器35由操作部分171到设备码存储部分178形成，其中，这些 部分以与图22所示的操作部分161到设备码存储部分168相同的方式来构 造，因此省略其描述。
下一步，图25示出主单元1的IR接口135(图10)的示例详细结构。
控制部分182从CPU 129(图10)接收一个命令，并且将对应于该命令的 命令码发送到帧生成部分183。控制部分还从接收处理部分187接收帧数据， 并且判定帧数据的数据部分#1和#2(图23)是否匹配。另外，当帧数据的数据 部分#1和#2匹配时，控制部分182比较帧数据的设备码(图23)与存储在设备 码存储部分188中的设备码，并且如果它们匹配，则控制部分182将帧数据 的命令码(图23)所对应的命令发送到CPU 129。
此外，控制部分182还将设备码存储在设备码存储部分188中。
帧生成部分183产生其中置有从控制部分182发送的命令码和存储在设 备码存储部分188中的设备码的帧数据，并且将该数据发送到发送处理部分 184。
发送处理部分184根据从帧生成部分183发送的帧数据，对具有预定频 率的载波进行调制，并且根据因此获得的调制信号驱动光发射部分185。
光发射部分185例如由LED形成，并且当由发送处理部分184驱动时发 射红外线。由光发射部分185发射的红外线例如由控制器15的光接收部分 166(图22)进行接收。
光接收部分186接收红外线，将它转换成电信号，并且将该信号发送到 接收处理部分187。光接收部分186例如接收由控制器15的光发射部分165(图 22)发射的红外线。
接收处理部分187对光接收部分186的输出进行解调，并且将因此获得 的帧数据发送到控制部分182。
辅单元2的IR接口155也是以与图25所示的主单元1的IR接口135 相同的方式来构造的。
下一步将参照图26所示的流程图描述图22所示的主单元1的控制器15 的处理(控制器处理)。在图24所示的辅单元2的控制器35中也执行相同的处 理。
在步骤S1，控制部分162判定它是否接收到当用户操作操作部分161时 来自操作部分161的担当命令的操作信号。
当在步骤S1判定尚未接收到担当命令的操作信号时，换句话说，当控制 器15未被操作时，处理进入步骤S2，并且控制部分162判定它是否接收到 帧数据。
当在步骤S2判定尚未接收到帧数据时，处理返回到步骤S1，并且以后 重复相同的过程。
当在步骤S2判定接收到帧数据时，换句话说，当光接收部分166接收到 红外线并且接收处理部分167已将对应于红外线的帧数据发送到控制部分 162时，处理进入步骤S3，并且控制部分162判定帧数据的设备码是否匹配 存储在设备码存储部分168中的设备码。
当在步骤S3判定帧数据的设备码不匹配存储在设备码存储部分168中的 设备码时，处理返回到步骤S1，并且以后重复相同的过程。
当在步骤S3判定帧数据的设备码匹配存储在设备码存储部分168中的设 备码时，处理进入步骤S4，并且控制部分162执行帧数据中的命令码所对应 的处理，并且处理返回到步骤S1。
当在步骤S1判定接收到担当命令的操作信号时，换句话说，当用户操作 操作部分161并且对应于该操作的操作信号已发送到控制部分162时，处理 进入步骤S5，并且控制部分162判定操作信号是否请求设置设备码。
设备码存储部分168存储缺省设备码。用户可以改变该设备码。更具体 地说，控制器15的设备码可以通过预定操作如用户同时操作控制器15的菜 单按钮开关54和电视电源按钮开关72(图7)的操作来指定。在步骤S5，根据 菜单按钮开关54和电视电源按钮开关72的同时操作来判定操作信号是否请 求设置设备码。
当在步骤S5判定从操作部分161发送的操作信号不请求设置设备码时， 控制部分162将对应于操作信号的命令码发送到帧生成部分163，并且处理 进入步骤S6。
在步骤S6，帧生成部分163放置从控制部分162发送的命令码和存储在 设备存储部分168中的设备码，以产生具有图23所示格式的帧数据，并且将 该数据发送到发送处理部分164。处理进入步骤S7。
在步骤S7，发送处理部分164根据从帧生成部分163发送的帧数据，驱 动光发射部分165，并且处理返回到步骤S1。光发射部分165发射对应于帧 数据的红外线。
当在步骤S5判定从操作部分161发送的操作信号请求设置设备码时，换 句话说，当用户同时操作控制器15的菜单按钮开关54和电视电源按钮开关 72(图7)时，处理进入步骤S8。控制部分162等待从操作部分161发送对应 于设备码的操作信号，接收该操作信号，并且在设备码存储部分168中设置(覆 写)对应于该操作信号的设备码。然后，处理返回到步骤S1，并且以后重复相 同的过程。
设备码例如可以是具有预定数位的数值。在这种情况下，用户通过例如 操作控制器15的数字按钮开关58(图7)来输入设备码。
下一步，将参照图27所示的流程图描述图25所示的主单元1的IR接口 135的处理(IR接口处理)。辅单元2的IR接口(图11)也执行相同的处理。
在步骤S21，控制部分182判定它是否从CPU 129接收到一个命令。
当在步骤S21判定尚未接收到命令时，处理进入步骤S22，并且控制部 分182判定它是否从接收处理部分187接收到帧数据。
当在步骤S22判定尚未接收到帧数据时，处理返回到步骤S21，并且以 后重复相同的过程。
当在步骤S22判定接收到帧数据时，换句话说，当光接收部分186接收 到例如从控制器15发送的红外线并且接收处理部分187已将对应于红外线的 帧数据发送到控制部分182时，处理进入步骤S23，并且控制部分182判定 帧数据的设备码是否匹配存储在设备码存储部分188中的设备码。
当在步骤S23判定帧数据的设备码不匹配存储在设备码存储部分188中 的设备码时，处理返回到步骤S21，并且以后重复相同的过程。
当在步骤S23判定帧数据的设备码匹配存储在设备码存储部分188中的 设备码时，处理进入步骤S24，并且控制部分182将帧数据中的命令码所对 应的命令发送到CPU 129，并且处理返回到步骤S21。
因此，在这种情况下，CPU 129执行从IR接口135(控制部分182)发送 的命令所对应的处理。
当在步骤S21判定从CPU 129接收到一个命令时，处理进入步骤S25， 并且控制部分182判定该命令是否请求设置设备码。
设备码存储部分188以与图22所示的设备码存储部分168相同的方式存 储缺省设备码。用户可以改变该设备码。更具体地说，IR接口135的设备码 可以通过预定操作如用户同时操作前面板134(图10)上的两个按钮开关的操 作来指定，其中，这两个按钮开关对应于控制器15的菜单按钮开关54和电 视电源按钮开关72(图7)。在步骤S25，根据这两个按钮开关的同时操作来判 定从CPU 129发送的命令是否请求设置设备码。
当在步骤S25判定从CPU 129发送的操作信号不请求设置设备码时，控 制部分182将对应于该命令的命令码发送到帧生成部分183，并且处理进入 步骤S26。
在步骤S26，帧生成部分183放置从控制部分182发送的命令码和存储 在设备码存储部分188中的设备码，以产生具有图23所示格式的帧数据，并 且将该数据发送到发送处理部分184。处理进入步骤S27。
在步骤S27，发送处理部分184根据从帧生成部分183发送的帧数据， 驱动光发射部分185，并且处理进入步骤S21。光发射部分185发射对应于帧 数据的红外线。红外线例如由控制器15进行接收。
当在步骤S25判定从CPU 129发送的操作信号请求设置设备码时，换句 话说，当用户同时操作前面板134(图10)上的两个按钮开关时，其中，这两个 按钮开关对应于控制器15的菜单按钮开关54和电视电源按钮开关72(图7)， 则处理进入步骤S28。控制部分182等待从CPU 129发送设备码，接收该设 备码，并且在设备码存储部分188中设置(覆写)该设备码。然后，处理返回到 步骤S21，并且以后重复相同的过程。
在主单元1中，用户可以操作控制器15的数字按钮开关58所对应的前 面板134(图10)上的一个按钮开关来输入设备码。
如上所述，用户可以为控制器15和35、主单元1的IR接口135和辅单 元2的IR接口155设置设备码。另外，在它们当中，命令码可以仅在具有相 同设备码的那些设备之间传输。
因此，例如，为通过控制器15控制主单元1，控制器15的设备码和主 单元1的IR接口135的设备码需要设为相同值。此外，例如，为通过控制器 15控制辅单元2，控制器15的设备码和辅单元2的IR接口155的设备码需 要设为相同值。而且，例如，当控制器15、主单元1的IR接口135和辅单 元2的IR接口155的设备码使得相等时，如果用户操作控制器15，则在主 单元1和辅单元2中执行相同的处理。
例如，即使当用户仅有控制器15时，如果在作为组成可扩展电视系统的 电视接收器的主单元1和辅单元2ij中设置不同的设备码，则用户可以通过将 控制器15的设备码设为所需电视接收器的设备码，使用一个控制器15来单 独遥控作为组成可扩展电视系统的电视接收器的主单元1和辅单元2ij。
下一步将参照图28所示的流程图描述图10所示的主单元1的处理。
首先，在步骤S41，CPU 129判定是否发生任何单元连接到端子面板21 或通过IEEE-1394接口133、IR接口135等发送任何命令的事件。当判定没 有发生任何事件时，处理返回到步骤S41。
当在步骤S41判定发生一单元连接到端子面板21的事件时，处理进入步 骤S42，并且CPU 129执行后述的图29所示的认证处理。然后，处理返回到 步骤S41。
为判定是否有一单元连接到端子面板21，需要检测该单元已连接到端子 面板21这一状态。该检测例如以下面方式来执行。
当一单元(通过IEEE-1394电缆)连接到为端子面板21(图3F)提供的 IEEE-1394端子21ij时，IEEE-1394端子21ij的端子电压发生变化。IEEE-1394 接口133被配置为使它将端子电压变化报告给CPU 129。CPU 129从 IEEE-1394接口133接收端子电压变化的报告，以检测新单元已连接到端子 面板21这一状态。CPU 129还例如通过同一方法来识别一单元已与端子面板 21断连这一状态。
当在步骤S41判定发生通过IEEE-1394接口133、IR接口135等发送任 何命令的事件时，处理进入步骤S43，并且主单元1执行对应于该命令的处 理。然后，处理返回到步骤S41。
下一步，将参照图29所示的流程图描述在图28所示的步骤S42由主单 元1执行的认证处理。
在由主单元1执行的认证处理中，执行两种认证：新连接到端子面板21 的单元(必要时以下称作连接单元)是否为授权IEEE-1394单元，以及 IEEE-1394单元是否为担当主单元或辅单元的电视接收器(可扩展使用单元)。
更具体地说，在由主单元1执行的认证处理中，首先在步骤S51，CPU 129 控制IEEE-1394接口133将用于请求相互认证的认证请求命令发送到连接单 元，并且处理进入步骤S52。
在步骤S52，CPU 129判定是否已从连接单元返回对认证请求命令的响 应。当在步骤S52判定尚未从连接单元返回对认证请求命令的响应时，处理 进入步骤S53，并且CPU 129判定是否发生超时，也就是，是否自从发送认 证请求命令以来已过去预定时间。
当在步骤S53判定已发生超时，换句话说，即使当认证请求命令发送到 连接单元之后过去预定时间时也没有从连接单元返回对认证请求命令的响应 时，处理进入步骤S54。CPU 129判定连接单元不是授权IEEE-1394单元且 认证失败，并且将操作模式设为不与连接单元传输任何数据的独立模式。处 理返回。
因此，主单元1以后不与不是授权IEEE-1394单元的连接单元传输任何 数据，并且不执行IEEE-1394通信。
当在步骤S53判定尚未发生超时时，处理返回到步骤S52，并且以后重 复相同的过程。
当在步骤S52判定已从连接单元返回对认证请求命令的响应，换句话说， 来自连接单元的响应由IEEE-1394接口133接收并发送到CPU 129时，处理 进入步骤S55，并且CPU 129根据预定算法生成随机数(伪随机数)R1，并且 通过IEEE-1394接口133将它发送到连接单元。
然后，处理进入步骤S56，并且CPU 129判定是否已从连接单元发送加 密随机数E’(R1)，其中，加密随机数E’(R1)是通过根据预定算法(密钥加密方 法如DES(Data Encryption Standard，数据加密标准)、FEAL(Fast Data Encipherment Algorithm，快速数据加密算法)或RC5)对在步骤S55发送的随机 数R1进行加密而获得的。
当在步骤S56判定尚未从连接单元发送加密随机数E’(R1)时，处理进入 步骤S57，并且CPU 129判定是否发生超时，也就是，是否自从发送随机数 R1以来已过去预定时间。
当在步骤S57判定已发生超时，换句话说，即使当随机数R1发送到连 接单元之后过去预定时间时也没有从连接单元返回加密随机数E’(R1)时，处 理进入步骤S54。CPU 129如上所述判定连接单元不是授权IEEE-1394单元， 并且将操作模式设为独立模式。处理返回。
当在步骤S57判定尚未发生超时时，处理返回到步骤S56，并且以后重 复相同的过程。
当在步骤S56判定已从连接单元返回加密随机数E’(R1)，换句话说，来 自连接单元的加密随机数E’(R1)由IEEE-1394接口133接收并发送到CPU 129时，处理进入步骤S58，并且CPU 129根据预定加密算法对在步骤S55 生成的随机数R1进行加密，以生成加密随机数E(R1)。处理进入步骤S59。
在步骤S59，CPU 129判定从连接单元发送的加密随机数E’(R1)是否等 于在步骤S58由CPU 129生成的加密随机数E(R1)。
当在步骤S59判定加密随机数E’(R1)不等于加密随机数E(R1)，换句话 说，连接单元所采用的加密算法(必要时包括用于加密的密钥)不同于CPU 129 所采用的加密算法时，处理进入步骤S54，并且CPU 129如上所述判定连接 单元不是授权IEEE-1394单元，并且将操作模式设为独立模式。处理返回。
当在步骤S59判定加密随机数E’(R1)等于加密随机数E(R1)，换句话说， 连接单元所采用的加密算法与CPU 129所采用的加密算法相同时，处理进入 步骤S60，并且CPU 129判定是否已从连接单元发送由连接单元用来认证主 单元1的随机数R2。
当在步骤S60判定尚未接收到随机数R2时，处理进入步骤S61，并且 CPU 129判定是否发生超时，也就是，例如，是否在步骤S59判定加密随机 数E’(R1)等于加密随机数E(R1)之后已过去预定时间。
当在步骤S61判定已发生超时，换句话说，即使当过去预定时间时也没 有从连接单元发送随机数R2时，处理进入步骤S54，并且CPU 129如上所述 判定连接单元不是授权IEEE-1394单元，并且将操作模式设为独立模式。处 理返回。
另一方面，当在步骤S61判定尚未发生超时时，处理返回到步骤S52， 并且以后重复相同的过程。
当在步骤S60判定已从连接单元发送随机数R2，换句话说，来自连接单 元的随机数R2由IEEE-1394接口133接收并发送到CPU 129时，处理进入 步骤S62，并且CPU 129根据预定加密算法对随机数R2进行加密，以产生加 密随机数E(R2)，并且通过IEEE-1394接口133将它发送到连接单元。
当在步骤S60判定已从连接单元发送随机数R2时，连接单元被成功认 证为IEEE-1394单元。
然后，处理进入步骤S63，并且CPU 129控制IEEE-1394接口133以将 用于请求连接单元的单元ID和功能信息的功能-信息请求命令以及主单元1 的单元ID和功能信息发送到连接单元。
单元ID是标识担当主单元1或辅单元2的电视接收器的唯一ID。
功能信息是与拥有功能相关的信息，并且例如包括要从外界接收的命令 的类型(例如，要从外界接收用于控制电源开关、音量调节、频道、亮度和锐 度的命令中的哪一个)、是否允许屏显(OSD显示)、是否允许静音状态，以及 是否允许睡眠状态。另外，功能信息还包括单元是否具有主单元的功能或辅 单元的功能。
主单元1可以将单元ID和功能信息例如存储在EEPROM 130或图15所 示的配置ROM的vendor_dependent_information(厂商相关信息)字段中。
然后，处理进入步骤S64，并且CPU 129等待响应在步骤S63发送到连 接单元的功能-信息请求命令而到达连接单元的单元ID和功能信息。CPU 129 通过IEEE-1394接口133接收单元ID和功能信息，并将它们存储在EEPROM 130中，并且处理进入步骤S65。
在步骤S65，CPU 129参考存储在EEPROM 130中的功能信息，以判定 连接单元是否为辅单元。当在步骤S65判定连接单元是辅单元，换句话说， 连接单元被成功认证为辅单元时，处理跳过步骤S66和S67，并且进入步骤 S68。CPU 129将操作模式设为多视点显示可能模式，其中，与担当辅单元的 连接单元一起提供后述虚拟多视点显示功能。处理返回。
另一方面，当在步骤S65判定连接单元不是辅单元时，处理进入步骤S66， 并且CPU 129参考存储在EEPROM 130中的功能信息以判定连接单元是否为 主单元。当在步骤S66判定连接单元是主单元，换句话说，连接单元被成功 认证为主单元时，处理进入步骤S67，并且CPU 129与担当主单元的连接单 元执行主单元与辅单元调整处理。
具体地说，在这种情况下，由于主单元1连接到另一主单元，因此在组 成可扩展电视系统的电视接收器中存在两个电视接收器担当主单元。在本实 施例中，要求可扩展电视系统中仅有一个主单元。因此，在步骤S67，执行 主单元与辅单元调整处理，其中，判定是主单元1还是担当主单元的连接单 元用作担当主单元的电视接收器。
更具体地说，例如，判定最早成为可扩展电视系统一部分的那个主单元， 也就是，本实施例中的主单元1，用作担当主单元的电视接收器。判定为用 作主单元的主单元1之外的其他主单元用作辅单元。
在步骤S67执行主单元与辅单元调整处理之后，处理进入步骤S68，并 且CPU 129如上所述将操作模式设为多视点显示可能模式，并且处理返回。
当在步骤S66判定连接单元不是主单元，换句话说，连接单元既不是主 单元又不是辅单元，因此连接单元没有被认证为主单元或辅单元时，处理进 入步骤S69，并且CPU 129将操作模式设为通常功能命令接收/提供模式，其 中，可以与连接单元传输现有AV/C命令集，但是不能传输用于提供多视点 显示功能的控制命令，并且处理返回。
换句话说，在这种情况下，由于连接单元既不是主单元又不是辅单元， 因此即使该连接单元连接到主单元1，也不提供多视点显示功能。然而，在 这种情况下，由于连接单元是授权IEEE-1394单元，因此允许在主单元1与 连接单元之间传输现有AV/C命令集。从而，在这种情况下，在主单元1与 连接单元之间，一个(或连接到主单元1的另一IEEE-1394单元)可以通过现有 AV/C命令集控制另一个。
下一步将参照图30所示的流程图描述图11所示的辅单元2的处理。
首先，在步骤S71，CPU 149判定是否发生任何单元连接到端子面板41 或者通过IEEE-1394接口153或IR接口155发送任何命令的事件。当判定没 有发生任何事件时，处理返回到步骤S71。
当在步骤S71判定发生一单元连接到端子面板41的事件时，处理进入步 骤S72，并且CPU 149执行后述的图31所示的认证处理。然后，处理返回到 步骤S71。
为判定是否有一单元连接到端子面板41，则需要检测该单元已连接到端 子面板41这一状态。该检测例如以与图28所示的步骤S41所述相同的方式 来执行。
当在步骤S71判定发生通过IEEE-1394接口153或IR接口155发送任何 命令的事件时，处理进入步骤S73，并且辅单元2执行对应于该命令的处理。 然后，处理返回到步骤S71。
下一步，将参照图31所示的流程图描述在图30所示的步骤S72由辅单 元2执行的认证处理。
在由辅单元2执行的认证处理中，执行两种认证：新连接到端子面板41 的单元(必要时以下称作连接单元)是否为授权IEEE-1394单元，以及 IEEE-1394单元是否为主单元。
更具体地说，在由辅单元2执行的认证处理中，首先在步骤S81，CPU 149 判定是否已从连接单元发送用于请求相互认证的认证请求命令。当判定尚未 发送该命令时，处理进入步骤S82。
在步骤S82，CPU 149判定是否发生超时，也就是，是否自从开始认证 处理以来已过去预定时间。
当在步骤S82判定已发生超时，换句话说，即使当开始认证请求命令之 后过去预定时间时也没有从连接单元发送认证请求命令时，处理进入步骤 S83。CPU 149判定连接单元不是授权IEEE-1394单元且认证失败，并且将操 作模式设为不与连接单元传输任何数据的独立模式。处理返回。
因此，辅单元2以与主单元1相同的方式，不与不是授权IEEE-1394单 元的连接单元传输任何数据，并且不执行IEEE-1394通信。
当在步骤S82判定尚未发生超时时，处理返回到步骤S81，并且以后重 复相同的过程。
当在步骤S81判定已从连接单元发送认证请求命令，换句话说，在图29 所示的步骤S51从担当连接单元的主单元1发送的认证命令由IEEE-1394接 口153接收并发送到CPU 149时，处理进入步骤S84，并且CPU 149控制 IEEE-1394接口153以将对认证请求命令的响应发送到连接单元。
在本实施例中，主单元1执行图29所示的步骤S51到S53的处理，并 且辅单元2执行图31所示的步骤S81、S82和S84的处理。还可以是辅单元 2执行图29所示的步骤S51到S53的处理并且主单元1执行图31所示的步 骤S81、S82和S84的处理。换句话说，主单元1或辅单元2都可以发送认证 请求命令。
然后，处理进入步骤S85，并且CPU 149判定是否已从连接单元发送随 机数R1。当判定尚未发送随机数R1时，处理进入步骤S86。
在步骤S86，CPU 149判定是否发生超时，也就是，是否自从CPU 149 在步骤S84发送对认证请求命令的响应以来已过去预定时间。
当在步骤S86判定已发生超时，换句话说，即使当CPU 149发送对认证 命令的响应之后过去预定时间时也没有从连接单元发送随机数R1时，处理进 入步骤S83。CPU 149如上所述判定连接单元不是授权IEEE-1394单元，并 且将操作模式设为不与连接单元传输任何数据的独立模式。处理返回。
当在步骤S86判定尚未发生超时时，处理返回到步骤S85，并且以后重 复相同的过程。
当在步骤S85判定已从连接单元发送随机数R1，换句话说，在图29所 示的步骤S55从担当连接单元的主单元1发送的随机数R1由IEEE-1394接 口153接收并发送到CPU 149时，处理进入步骤S87，并且CPU 149根据预 定加密算法对随机数R1进行加密，以生成加密随机数E’(R1)。另外，在步骤 S87，CPU 149控制IEEE-1394接口153将加密随机数E’(R1)发送到连接单元。 处理进入步骤S89。
在步骤S89，CPU 149生成随机数(伪随机数)R2，并且控制IEEE-1394 接口153以将随机数R2发送到连接单元。处理进入步骤S90。
在步骤S90，CPU 149判定是否已从连接单元发送加密随机数E(R2)，其 中，加密随机数E(R2)是通过对随机数R2加密而在图29所示的步骤S62由 担当连接单元的主单元1生成的。
当在步骤S90判定尚未接收加密随机数E(R2)时，处理进入步骤S91，并 且CPU 149判定是否发生超时，也就是，是否CPU 149发送随机数R2之后 已过去预定时间。
当在步骤S91判定已发生超时，换句话说，即使当CPU 149发送随机数 R2到连接单元之后过去预定时间时也没有从连接单元发送加密随机数E(R2) 时，处理进入步骤S83，并且CPU 149如上所述判定连接单元不是授权 IEEE-1394单元，并且将操作模式设为独立模式。处理返回。
另一方面，当在步骤S91判定尚未发生超时时，处理返回到步骤S90， 并且以后重复相同的过程。
当在步骤S90判定已从连接单元发送加密随机数E(R2)，换句话说，来 自连接单元的加密随机数E(R2)由IEEE-1394接口153接收并发送到CPU 149 时，处理进入步骤S92，并且CPU 149根据预定加密算法对在步骤S89生成 的随机数R2进行加密，以生成加密随机数E’(R2)。处理进入步骤S93。
在步骤S93，CPU 149判定从连接单元发送的加密随机数E(R2)是否等于 在步骤S92由辅单元2生成的加密随机数E’(R2)。
当在步骤S93判定加密随机数E(R2)不等于加密随机数E’(R2)，换句话 说，连接单元所采用的加密算法(必要时包括用于加密的密钥)不同于CPU 149 所采用的加密算法时，处理进入步骤S83，并且CPU 149如上所述判定连接 单元不是授权IEEE-1394单元，并且将操作模式设为独立模式。处理返回。
当在步骤S93判定加密随机数E(R2)等于加密随机数E’(R2)，换句话说， 连接单元所采用的加密算法与CPU 149所采用的加密算法相同从而连接单元 被成功认证为授权IEEE-1394单元时，处理进入步骤S94，并且CPU 149通 过IEEE-1394接口153接收在图29所示的步骤S63由担当连接单元的主单元 1与功能-信息请求命令一起发送的单元ID和功能信息，并且将它们存储在 EEPROM 150中。
然后，处理进入步骤S95，并且CPU 149控制IEEE-1394接口153以响 应在步骤S94从连接单元接收的功能-信息请求命令而将辅单元2的单元ID 和功能信息发送到连接单元。然后，处理进入步骤S96。
辅单元2可以采用相同于参照图29所述的主单元1的方式，将单元ID 和功能信息存储在EEPROM 150或图15所示的配置ROM的 vendor_dependent_information(厂商相关信息)字段中。
在步骤S96，CPU 149参考存储在EEPROM 150中的功能信息，以判定 连接单元是否为主单元。当在步骤S96判定连接单元是主单元，换句话说， 连接单元被成功认证为主单元时，处理进入步骤S97，并且CPU 149将操作 模式设为多视点显示可能模式，其中，可以与担当主单元的连接单元一起提 供虚拟多视点显示功能。处理返回。
另一方面，当在步骤S96判定连接单元不是主单元，换句话说，连接单 元没有被认证为主单元时，处理进入步骤S98，并且CPU 149将操作模式设 为通常功能命令接收/提供模式，其中，可以与连接单元传输现有AV/C命令 集，但是不能传输用于提供多视点显示功能的控制命令，并且处理返回。
换句话说，在这种情况下，由于连接单元不是主单元，因此即使该连接 单元连接到辅单元2，也不提供多视点显示功能。因此，仅通过将另一辅单 元连接到辅单元2，不提供多视点显示功能。然而，在这种情况下，由于连 接单元是授权IEEE-1394单元，因此允许在辅单元2与连接单元之间传输现 有AV/C命令集。从而，在这种情况下，在辅单元2与连接单元(包括其他辅 单元)之间，一个可以通过现有AV/C命令集控制另一个。
下一步，在主单元1和辅单元2分别成功完成参照图29和图31所述的 认证处理并且主单元1和辅单元2将它们的操作模式设为多视点显示可能模 式之后，当用户操作控制器15(或控制器35)来请求多视点显示时，主单元1 和辅单元2执行后述的虚拟多视点显示处理。
用来执行虚拟多视点显示处理的指令例如可以从菜单屏幕发出。
更具体地说，如上所述，当用户操作控制器15(图7)上的菜单按钮开关 54(或者控制器35(图8)上的菜单按钮开关84)时，菜单屏幕显示在主单元1的 CRT 11(或者辅单元2的CRT 31)上。在该菜单屏幕上，例如显示一个表示虚 拟多视点显示处理的图标(必要时以下称作虚拟多视点显示图标)。当用户操作 控制器15来点击虚拟多视点显示图标时，在主单元1和辅单元2中执行虚拟 多视点显示处理。
图32示出执行虚拟多视点显示处理的主单元1中的信号处理部分127(图 10)的第一示例功能结构。当点击虚拟多视点显示图标时，主单元1的CPU 129 控制信号处理部分127以使DSP 127A执行存储在EEPROM 127B中的预定 程序。图32所示的功能结构是在DSP 127A执行存储在EEPROM 127B中的 程序时实现的。后述的信号处理部分127的其他功能结构也以相同方式来实 现。
帧存储器191、192和193以帧为单位(或者以域(field)为单位)临时存储 作为从MPEG视频解码器125(图10)输出的图像数据的亮度信号Y和色彩信 号R-Y与B-Y。具体地说，MPEG视频解码器125对从解复用器124输出的 预定频道节目的图像数据TS分组进行MPEG解码，并且将由亮度信号Y和 色彩信号R-Y与B-Y形成的图像数据作为解码结果。帧存储器191、192和 193存储以这种方式从MPEG视频解码器125输出的亮度信号Y和色彩信号 R-Y和B-Y。
在图32所示的实施例中，帧存储器191到193具有允许存储至少两帧(两 域)图像数据的存储容量。具体地说，帧存储器191到193具有各自可以存储 一帧图像数据的两个存储体(bank)，并且将图像数据交替存储在这两个存储体 中。
因此，当存储在帧存储器191中的最近帧称作当前帧时，帧存储器191 总是存储当前帧及其前一帧(必要时以下称作前一帧)的图像数据。帧存储器 192和193以相同方式存储图像数据。
帧存储器194、195和196分别存储在帧存储器191、192和193中存储 且从存储器控制部分197发送的一帧(或一域)图像数据的亮度信号Y和色彩 信号R-Y与B-Y。
存储器控制部分197由系统控制器201进行控制，并且分别将存储在帧 存储器191到193中的当前帧的图像数据(亮度信号Y和色彩信号R-Y与B-Y) 发送到帧存储器194到196，并且以覆写方式存储数据。
差值检测部分198获取存储在帧存储器191中的当前帧与前一帧的图像 数据的亮度信号Y之间的差值作为当前帧图像数据的特征，并且将该差值发 送到系统控制器201。具体地说，例如，差值检测部分198获取当前帧像素 的亮度信号Y与前一帧像素的亮度信号之间的差值绝对值之和作为当前帧图 像的特征，并且将该和发送到系统控制器201。
计数器部分199在系统控制器201的控制下执行对预定值的计数并且将 计数值发送到系统控制器201。计数器部分199还根据系统控制器201的控 制对其计数复位。
输出控制部分200在系统控制器201的控制下，读取存储在帧存储器194 到196中的一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，并且将它们 发送到CPU 129。
系统控制器201控制存储器控制部分197、计数器部分199和输出控制 部分200。
更具体地说，系统控制器201将预定阈值与作为当前帧图像数据特征且 从差值检测部分198发送的差值绝对值之和进行比较，并且根据比较结果控 制计数器部分199。系统控制器201还根据计数器部分199的计数来控制存 储器控制部分197和输出控制部分200。
在此，系统控制器201根据亮度信号Y的差值绝对值之和，控制计数器 部分199。例如，还可以是差值检测部分198获取色彩信号R-Y或B-Y的差 值绝对值之和并且系统控制器201考虑色彩信号R-Y或B-Y的差值绝对值之 和来控制计数器部分199。
作为从MPEG视频解码器125(图10)输出的图像数据的亮度信号Y和色 彩信号R-Y与B-Y发送到帧存储器191到193以及位于信号处理部分127之 后的矩阵电路128。矩阵电路128将以这种方式发送的亮度信号Y和色彩信 号R-Y与B-Y转换成RGB图像数据。
图32没有示出从主单元1中的MPEG音频解码器126(图10)输出的音频 数据。从MPEG音频解码器126输出的音频数据例如按原样发送到后一级的 放大器137。
下一步，将参照图33所示的流程图描述由图32所示的信号处理部分127 执行的主单元中的虚拟多视点显示处理。
首先，在步骤S101，帧存储器191到193等待从MPEG视频解码器125(图 10)到达作为一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，并且存储 亮度信号Y和色彩信号R-Y与B-Y。处理进入步骤S102。
在步骤S102，差值检测部分198检测(获取)在紧邻之前所执行的步骤 S101存储在帧存储器191中的图像数据的亮度信号Y即当前帧图像数据的亮 度信号Y与在前一操作中所执行的步骤S101存储在帧存储器191中的图像 数据的亮度信号Y即前一帧图像数据的亮度信号Y之间的差值绝对值之和 (必要时以下称作当前帧的差值绝对值之和)作为当前帧图像数据的特征，并且 将该和发送到系统控制器201。处理进入步骤S103。
在步骤S103，系统控制器201判定当前帧的差值绝对值之和是否几乎为 零，也就是，该和是否等于或小于(或小于)一个小的正阈值。
当在步骤S103判定当前帧的差值绝对值之和不为零或接近于零的值时， 处理跳过步骤S104到S108，并且进入步骤S109。
当在步骤S103判定当前帧的差值绝对值之和为零或接近于零的值，换句 话说，当前帧图像与前一帧图像几乎没有(或没有)变化因此当前帧图像可以视 作静止画面时，处理进入步骤S104，并且系统控制器201控制计数器部分199 对计数增1。处理进入步骤S105。
在步骤S105，系统控制器201参考计数器部分199的计数以判定计数是 否大于(或者等于或大于)预定阈值Thc(如5)。
当在步骤S105判定计数器部分199的计数不大于阈值Thc时，处理跳过 步骤S106到S108，并且进入步骤S109。
当在步骤S105判定计数器部分199的计数大于阈值Thc，换句话说，从 MPEG视频解码器125输出的预定数目帧的图像数据不包括任何运动时，处 理进入步骤S106，并且系统控制器201控制存储器控制部分197以将存储在 帧存储器191到193中的当前帧图像数据(亮度信号Y和色彩信号R-Y与B-Y) 发送到帧存储器194到196，并且以覆写方式将该数据存储在其中。处理进 入步骤S107。
在步骤S107，系统控制器201对计数器部分199的计数复位。处理进入 步骤S108。在步骤S108，系统控制器201控制输出控制部分200以读取存储 在帧存储器194到196中的一帧图像数据的亮度信号Y和色彩信号R-Y与 B-Y并将这些信号发送到CPU 129。另外，在步骤S108，系统控制器201将 指示在预定辅单元2ij显示图像数据的显示请求命令发送到CPU 129。处理进 入步骤S109。
当CPU 129从系统控制器201接收显示请求命令时，CPU 129控制 IEEE-1394接口133以将从输出控制部分200发送的一帧图像数据(亮度信号 Y和色彩信号R-Y与B-Y)与用于指示显示图像数据的显示请求命令一起发送 到辅单元2ij。当正在执行虚拟多视点显示处理的辅单元2ij从主单元1接收图 像数据以及显示请求命令时，辅单元如后所述显示图像数据。
因此，例如，当上述阈值Thc为5时，如果连续六帧的图像数据几乎相 同，则将第六帧图像数据从主单元1发送到辅单元2ij并进行显示。
在步骤S109，判定系统控制器201是否从CPU 129接收到指示终止虚拟 多视点显示处理的终止命令。
当在步骤S109判定尚未接收到终止命令时，处理返回到步骤S101，并 且以后重复相同的过程。
当在步骤S109判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
图34示出执行虚拟多视点显示处理的辅单元2ij中的信号处理部分 147(图11)的示例功能结构。当点击虚拟多视点显示图标时，主单元1的CPU 129如上所述控制IEEE-1394接口133(图10)以将用于指示辅单元执行虚拟多 视点显示处理的开始命令发送到各辅单元2ij。在辅单元2ij中，当CPU 149(图 11)通过IEEE-1394接口153接收开始命令时，CPU 149使信号处理部分147 的DSP 147A执行存储在EEPROM 147B中的预定程序。图34所示的功能结 构是在DSP 147A执行存储在EEPROM 147B中的程序时实现的。后述的信 号处理部分147的其他功能结构也以相同方式来实现。
帧存储器211、212和213临时存储从CPU 149发送的一帧(或一域)图像 数据的亮度信号Y和色彩信号R-Y与B-Y。
更具体地说，根据参照图33所述的主单元的虚拟多视点显示处理，当 CPU 129从系统控制器201接收显示请求命令时，CPU 129控制IEEE-1394 接口133以将从输出控制部分200发送的一帧图像数据(亮度信号Y和色彩信 号R-Y与B-Y)与显示请求命令一起发送到辅单元2ij。在辅单元2ij中，CPU 149 通过IEEE-1394接口153(图11)接收显示请求命令和一帧图像数据。CPU 149 将显示请求命令发送到后述的系统控制器219，并且还将一帧图像数据的亮 度信号Y和色彩信号R-Y与B-Y发送到帧存储器211、212和213。帧存储 器211、212和213临时存储以这种方式从CPU 149发送的一帧图像数据的亮 度信号Y和色彩信号R-Y与B-Y。
帧存储器214、215和216分别存储在帧存储器211、212和213中存储 且从存储器控制部分217发送的一帧(或一域)图像数据的亮度信号Y和色彩 信号R-Y与B-Y。
存储器控制部分217由系统控制器219进行控制，并且分别将存储在帧 存储器211到213中的一帧图像数据(亮度信号Y和色彩信号R-Y与B-Y)发 送到帧存储器214到216，并且以覆写方式存储数据。
选择器218在系统控制器219的控制下，选择存储在帧存储器214到216 中的一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，或者从辅单元2ij 的MPEG视频解码器145(图11)输出的图像数据的亮度信号Y和色彩信号 R-Y与B-Y，并且将它们发送到后一级的矩阵电路148(图11)。
因此，当选择器218选择从MPEG视频解码器145(图11)输出的图像数 据时，调谐器141(图11)所选频道的节目图像数据显示在辅单元2ij的CRT 31 上，并且当选择器218选择存储在帧存储器214到216中的图像数据时，图 像数据，也就是，如上所述从主单元1发送的图像数据显示在辅单元2ij的CRT 31上。
系统控制器219在CPU 149的控制下控制存储器控制部分217和选择器 218。
如同图32，图34没有示出从辅单元2ij中的MPEG音频解码器146(图 11)输出的音频数据。从MPEG音频解码器146输出的音频数据例如按原样发 送到后一级的放大器157。
下一步，将参照图35所示的流程图描述由图34所示的信号处理部分147 执行的辅单元中的虚拟多视点显示处理。
首先，在步骤S121，系统控制器219控制选择器218以选择存储在帧存 储器214到216中的一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，并 且开始显示数据。更具体地说，因此，选择器218重复读取存储在帧存储器 214到216中的一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，并且将 它们发送到后一级的矩阵电路148(图11)。这样，以参照图33所述的方式从 主单元1发送的图像数据显示在辅单元2ij的CRT 32上。
当在辅单元2中没有正在执行虚拟多视点显示处理时，选择器218选择 从MPEG视频解码器145(图11)输出的图像数据，并且将它输出到后一级的 矩阵电路148。因此，在这种情况下，调谐器141所选频道的节目图像数据 显示在辅单元2的CRT 31上。
然后，处理进入步骤S122，并且系统控制器219判定CPU是否已与显 示请求命令一起发送一帧图像数据。
当在步骤S122判定没有接收到显示请求命令和图像数据时，处理跳过步 骤S123和S124，返回到步骤S125，并且以后重复相同的过程。
当在步骤S122判定接收到显示请求命令和图像数据，换句话说，主单元 1已通过参照图33所述的主单元的虚拟多视点显示处理将显示请求命令和图 像数据发送到辅单元2ij时，处理进入步骤S123，并且帧存储器211到213分 别存储图像数据的亮度信号Y和色彩信号R-Y与B-Y。处理进入步骤S124。
在步骤S124，系统控制器219控制存储器控制部分217以等待选择器218 从帧存储器214到216读取一帧图像数据；分别将在紧邻之前所执行的步骤 S123存储在帧存储器211到213中的亮度信号Y和色彩信号R-Y与B-Y发 送到帧存储器214到216；并且以覆写方式存储它们。处理进入步骤S125。
这样，从下一帧显示时刻，选择器218读取新存储在帧存储器214到216 中的图像数据。图像数据通过后一级的矩阵电路148发送到CRT 31，并且进 行显示。
在步骤S125，系统控制器219判定是否已从CPU 149(图11)发送终止命 令。
更具体地说，如参照图33所述，当指示终止虚拟多视点显示处理时，主 单元1的CPU 129(图10)发送终止命令到系统控制器201。同时，CPU 129控 制IEEE-1394接口133(图10)还将终止命令发送到辅单元2ij。在辅单元2ij中， CPU 149通过IEEE-1394接口153从主单元1接收终止命令。当CPU 149接 收终止命令时，它将该命令发送到系统控制器219。在步骤S125，判定是否 已以这种方式将终止命令从CPU 149发送到系统控制器219。
当在步骤S125判定尚未从CPU 149发送终止命令时，处理返回到步骤 S122，并且以后重复相同的过程。
当在步骤S125判定已从CPU 149发送终止命令时，处理进入步骤S126， 系统控制器219控制选择器218以将选择状态返回到它在步骤S121改变之前 所用的前一状态，并且终止辅单元的虚拟多视点显示处理。
根据参照图32到图35所述的虚拟多视点显示处理，当主单元1如图36A 所示显示节目图像数据时，如果在连续帧中不发生(或者几乎不发生)运动，则 将不包含任何运动的帧图像数据从主单元1发送到组成可扩展电视系统的辅 单元，例如辅单元211，并且如图36B所示显示在其CRT 31上。
然后，如果主单元1中所显示的图像数据中又有连续帧不发生运动，则 将不包含任何运动的帧图像数据从主单元1发送到辅单元211，并且代替目前 所显示的图像数据显示在其CRT 31上，如图36C所示。
在图36A中，主单元1显示职业棒球比赛的实时电视广播节目的图像数 据。在图36B中，主单元1继续显示职业棒球比赛的实时电视广播节目，并 且辅单元211显示记分牌的图像数据作为不包含任何运动的帧图像数据。此 外，在图36C中，主单元1继续显示职业棒球比赛的实时电视广播节目的图 像数据，并且辅单元211显示选手替补席的图像数据作为不包含任何运动的帧 图像数据。
换句话说，在图36A到图36C所示的实施例中，主单元1以与普通电视 接收器相同的方式，显示职业棒球比赛的实时电视广播节目的图像数据。由 于在职业棒球比赛的实时电视广播节目中改变摄像机，以特写镜头的方式显 示记分牌，并且该场景持续若干帧，因此主单元1将记分牌图像数据发送到 辅单元211，并且辅单元211显示图像数据(图36B)。此外，然后，由于在职业 棒球比赛的实时电视广播节目中改变摄像机，显示选手替补席，并且该场景 持续若干帧，因此主单元1将替补席图像数据发送到辅单元211，并且辅单元 211显示图像数据(图36C)。
如上所述，根据参照图32到图35所述的虚拟多视点显示处理，当主单 元1所显示的节目中有连续帧不包含任何运动时，将帧图像数据发送到辅单 元2，并且进行显示。因此，用户可以观看显示在主单元1中的图像数据和 不同于该图像数据的场景，换句话说，用户可以同时观看从多个视点拍摄的 图像数据。
通常，职业棒球比赛的实时广播节目在每一局的开始以特写镜头的方式 显示记分牌。在这种情况下，根据虚拟多视点显示处理，即使用户没有在一 局的开始看到以特写镜头方式显示的记分牌，但是由于在辅单元2上显示该 场景，因此用户也可以立即知道比分。
在图36A到36C所示的实施例中，图像数据总是从主单元1发送到辅单 元211。从主单元1发送图像数据所要抵达并在其中显示的辅单元2ij可以改变。
具体地说，例如，可以是将不包含任何运动的第一组帧的图像数据从主 单元1发送到辅单元211，如图37A所示，将不包含任何运动的第二组帧的图 像数据从主单元1发送到辅单元212，如图37B所示，并且以相同方式顺序改 变发送图像数据所要抵达并在其中显示的辅单元ij。在这种情况下，当图像数 据如图37C所示发送到所有辅单元2ij并作显示时，例如，可以将不包含任何 运动的下一组帧的图像数据发送到首先向其发送图像数据并作显示的辅单元 211，并且代替目前所显示的图像数据来进行显示。
在这种情况下，用户可以同时观看显示在主单元1中的图像数据以及不 同于该图像数据的很多场景。
在图37A到图37C所示的实施例中，图像数据从主单元1发送到组成可 扩展电视系统的所有辅单元2ij，并作显示。可以将图像数据从主单元1仅发 送到组成可扩展电视系统的某辅单元2ij并作显示。某辅单元2ij可以例如在菜 单屏幕上进行指定。
下一步，图38示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第二示例功能结构。在该图中，相同于图32所用的符号分配 给对应于图32所示的部分，并且如果没有必要，省略其描述。具体地说，除 了没有提供计数器部分199之外，图38所示的信号处理部分127基本上具有 与图32相同的结构。
下一步，将参照图39所示的流程图描述由图38所示的信号处理部分127 执行的主单元中的虚拟多视点显示处理。
在步骤S131和S132，执行与图33所示的步骤S101和S102相同的处理。
在差值检测部分198在步骤S132检测当前帧的差值绝对值之和作为当前 帧图像数据的特征并且将该和发送到系统控制器201之后，处理进入步骤 S133，并且系统控制器201判定当前帧的差值绝对值之和是否大于(大于或等 于)预定阈值Th1。
当在步骤S133判定当前帧的差值绝对值之和不大于阈值Th1时，处理 跳过步骤S134和S135，并且进入步骤S136。
当在步骤S133判定当前帧的差值绝对值之和大于阈值Th1，换句话说， 当前帧图像与前一帧图像相比变化大，因此在当前帧图像中场景发生改变时， 处理进入步骤S134，并且系统控制器201以与图33所示的步骤S106相同的 方式控制存储器控制部分197，从而将存储在帧存储器191到193中的当前 帧图像数据的亮度信号Y和色彩信号R-Y与B-Y发送到帧存储器194到196， 并且以覆写方式将该数据存储在其中。处理进入步骤S135。
在步骤S135，系统控制器201控制输出控制部分200，以读取存储在帧 存储器194到196中的一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y， 并且将这些信号发送到CPU 129。另外，在步骤S135，系统控制器201将用 于指示在预定辅单元2ij显示图像数据的显示请求命令发送到CPU 129。处理 进入步骤S136。
当CPU 129从系统控制器201接收显示请求命令时，CPU 129如上所述 控制IEEE-1394接口133将从输出控制部分200发送的一帧图像数据(亮度信 号Y和色彩信号R-Y与B-Y)与显示请求命令一起发送到辅单元2ij。在这种 情况下，辅单元2ij的信号处理部分147如图34所示构造，并且正在执行参 照图35所述的虚拟多视点显示处理。因此，如参照图36A到图36C或者图 37A到图37C所述，辅单元2ij与显示请求命令一起显示从主单元1发送的图 像数据。
在图39所示的实施例中，由于在改变场景之后获得的第一帧从主单元1 发送到辅单元2ij，因此辅单元2ij显示在主单元1中所显示的节目的摘要。
在步骤S136，判定系统控制器201是否从CPU 129接收到用于指示终止 虚拟多视点显示处理的终止命令。
当在步骤S136判定尚未接收到终止命令时，处理返回到步骤S131，并 且以后重复相同的过程。
当在步骤S131判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
下一步，图40示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第三示例功能结构。在该图中，相同于图32所用的符号分配 给对应于图32所示的部分，并且如果没有必要，省略其描述。换句话说，除 了没有提供帧存储器192到196、存储器控制部分197或输出控制部分200 之外，图40所示的信号处理部分127基本上具有与图32相同的结构。
下一步，将参照图41所示的流程图描述由图40所示的信号处理部分127 执行的主单元中的虚拟多视点显示处理。
在步骤S141到S145，执行与图33的步骤S101到S105相同的处理。然 而，在步骤S141，仅将从MPEG视频解码器125(图10)输出的图像数据中的 亮度信号Y存储在帧存储器191中。
当在步骤S145判定计数器部分199的计数不大于阈值Thc时，处理跳过 步骤S146和S147，并且进入步骤S148。
当在步骤S145判定计数器部分199的计数大于阈值Thc，换句话说，从 MPEG视频解码器125输出的预定数目帧的图像数据不包含任何运动时，处 理进入步骤S146，并且系统控制器201将辅单元2ij调谐至主单元1的调谐器 121所选的频道(当前频道)，并且将用于指示冻结并显示该频道所广播节目的 图像数据帧的冻结命令发送到CPU 129。处理进入步骤S147。
当CPU 129从系统控制器201接收冻结命令时，CPU 129控制IEEE-1394 接口133以将冻结命令发送到辅单元2ij。当正在执行虚拟多视点显示处理的 辅单元2ij从主单元1接收冻结命令时，辅单元接收由冻结命令指定的频道， 存储该频道中的节目图像数据，并且显示它，如后所述。
在图32和图33所示的实施例中，当显示在主单元1中的图像数据在若 干连续帧中不发生变化(几乎不发生变化)时，将未变图像数据从主单元1发送 到辅单元2ij并作显示。然而，在图40和图41所示的实施例中，不是将图像 数据从主单元1发送到辅单元2ij，而是发送包含正在广播图像数据节目的频 道的冻结命令。在辅单元2ij中，如后所述，调谐器141选择包含在冻结命令 中的频道，并且存储和显示该频道所广播节目的图像数据。
在步骤S147，系统控制器201将计数器部分199的计数复位为零。处理 进入步骤S148。
在步骤S148，判定系统控制器201是否从CPU 129接收到用于指示终止 虚拟多视点显示处理的终止命令。
当在步骤S148判定尚未接收到终止命令时，处理返回到步骤S141，并 且以后重复相同的过程。
当在步骤S148判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
下一步，图42示出主单元1的信号处理部分127如图40所示构造的情 况所对应的辅单元2ij中的信号处理部分147(图11)的示例功能结构。在图42 中，相同于图34所用的符号分配给对应于图34所示的部分，并且如果没有 必要，省略其描述。具体地说，图42所示的信号处理部分147基本上具有与 图34相同的结构。
在图42所示的实施例中，不是将从CPU 149(图11)输出的图像数据而是 将从MPEG视频解码器145(图11)输出的图像数据发送到帧存储器211到 213。
下一步，将参照图43所示的流程图描述由图42所示的信号处理部分147 执行的辅单元中的虚拟多视点显示处理。
首先，在步骤S151，系统控制器219控制选择器218以选择存储在帧存 储器214到216中的图像数据的亮度信号Y和色彩信号R-Y与B-Y，并且开 始显示数据。更具体地说，因此，选择器218重复读取存储在帧存储器214 到216中的一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，并且将它们 发送到后一级的矩阵电路148(图11)。这样，将存储在帧存储器214到216 中的图像数据显示在辅单元2ij的CRT 32上。
在图43所示的实施例中，在开始虚拟多视点显示处理之前，假定帧存储 器214到216存储例如具有黑电平的图像数据。在这种情况下，紧邻在执行 步骤S151的处理之后将具有黑电平的图像数据显示在辅单元2ij的CRT 32 上。
然后，处理进入步骤S152，并且系统控制器219判定是否接收到冻结命 令。当判定尚未接收到冻结命令时，处理跳过步骤S153和S154，并且进入 步骤S155。
当在步骤S152判定接收到冻结命令，换句话说，在图41所示的步骤S146 由主单元1发送的冻结命令已通过IEEE-1394接口153(图11)由CPU 149接 收并发送到系统控制器219时，处理进入步骤S153，并且系统控制器219请 求CPU 149通过调谐器141接收包含在冻结命令中的频道。CPU 149根据来 自系统控制器219的请求，控制调谐器141，从而接收包含在冻结命令中的 频道。
这样，调谐器141接收包含在冻结命令中的频道，并且通过QPSK解调 电路142、纠错电路143和解复用器144以及MPEG视频解码器145和MPEG 音频解码器146将它发送到信号处理部分147。
在信号处理部分147的帧存储器211到213中开始存储包含在如上所述 发送的冻结命令内的频道中的图像数据，并且处理进入步骤S154。
帧存储器211到213以覆写方式顺序存储向其提供的图像数据帧。
在步骤S154，系统控制器219控制存储器控制部分217等待在帧存储器 211到213中存储最近帧图像数据；分别将图像数据的亮度信号Y和色彩信 号R-Y与B-Y发送到帧存储器214到216；并且以覆写方式存储它们。处理 进入步骤S155。
这样，选择器218读取在步骤S154新存储在帧存储器211到213中的图 像数据。因此，新存储在帧存储器214到216中的图像数据，也就是，紧邻 在主单元1在若干连续帧中都显示不包含(包含极少)运动的图像数据之后所 获得的与主单元1正在接收的频道相同的频道中的图像数据，显示在辅单元 2ij的CRT 31上。
在步骤S155，系统控制器219判定是否已从CPU 149(图11)发送终止命 令。
更具体地说，如上所述，主单元1的CPU 129(图10)将终止命令发送到 系统控制器201，同时，CPU 129还将终止命令发送到辅单元2ij。在辅单元 2ij中，CPU 149通过IEEE-1394接口153从主单元1接收终止命令。当CPU 149 接收终止命令时，它将该命令发送到系统控制器219。在步骤S155，判定是 否已以这种方式将终止命令从CPU 149发送到系统控制器219。
当在步骤S155判定尚未从CPU 149发送终止命令时，处理返回到步骤 S152，并且以后重复相同的过程。
当在步骤S155判定已从CPU 149发送终止命令时，处理进入步骤S156， 系统控制器219控制调谐器141将调谐状态返回到紧邻在开始虚拟多视点显 示处理之前所用的前一状态。处理进入步骤S157。
在步骤S157，系统控制器219控制选择器218以将选择状态返回到在步 骤S151改变它之前所用的前一状态，并且在辅单元中终止虚拟多视点显示处 理。
另外，根据参照图40到43所述的虚拟多视点显示处理，以与参照图32 到图35所述的虚拟多视点显示处理相同的方式，当正在主单元1中显示的节 目图像数据中有多个连续帧不包含(包含很少)运动时，如参照图36A到图36C 或者图37A到图37C所述，辅单元2ij显示不包含运动的帧的图像数据。
下一步，图44示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第四示例功能结构。在该图中，相同于图38所用的符号分配 给对应于图38所示的部分，并且如果没有必要，省略其描述。换句话说，除 了没有提供帧存储器192到196、存储器控制部分197或输出控制部分200 之外，图44所示的信号处理部分127基本上具有与图38相同的结构。
在图38和图39所示的实施例中，当显示在主单元1的图像数据发生场 景变化时，紧邻在场景发生改变之后的帧的图像数据从主单元1发送到辅单 元2ij，并且进行显示。然而，在图44所示的实施例中，如同图40和图41 所示的情况，不是将图像数据而是将包含正由主单元1接收的频道的冻结命 令从主单元1发送到辅单元2ij。在辅单元2ij中，如参照图42和图43所述， 调谐器141选择包含在从主单元1发送的冻结命令中的频道，并且立即存储 和显示该频道所广播节目的图像数据。
具体地说，图45是示出由图44所示的信号处理部分127执行的主单元 中的虚拟多视点显示处理的流程图。
在步骤S161和S163，执行与图39所示的步骤S131和S133相同的处理。
当在步骤S163确定当前帧的差值绝对值之和不大于阈值Th1时，处理 跳过步骤S164，并且进入步骤S165。
当在步骤S163确定当前帧的差值绝对值之和大于阈值Th1，换句话说， 当前帧图像与前一帧图像相比变化大因此在当前帧图像中场景发生改变时， 处理进入步骤S164，并且系统控制器201以与图41所示的步骤S146相同的 方式将冻结命令发送到CPU 129。处理进入步骤S165。
当CPU 129从系统控制器201接收冻结命令时，CPU 129控制IEEE-1394 接口133以将冻结命令发送到辅单元2ij。
在这种情况下，辅单元2ij的信号处理部分147如图42所示构造，并且 正在执行参照图43所述的虚拟多视点显示处理。因此，当辅单元2ij从主单 元1接收冻结命令时，立即开始接收已由主单元1接收的频道，而且立即存 储和显示该频道节目的图像数据。换句话说，同样在这种情况下，辅单元2ij 以与图38和图39所示的实施例所述相同的方式显示在主单元1中显示的节 目的摘要。
在步骤S165，判定系统控制器201是否从CPU 129接收到用于指示终止 虚拟多视点显示处理的终止命令。
当在步骤S165判定尚未接收到终止命令时，处理返回到步骤S161，并 且以后重复相同的过程。
当在步骤S165判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
在图40到图45所示的实施例中，冻结命令是通过IEEE-1394通信从主 单元1发送到辅单元2ij的。冻结命令的传输可以如图46所示通过控制器15(或 35)例如采用红外线通信来执行。
更具体地说，在图46所示的实施例中，主单元1的CPU 129指示IR接 口135将冻结命令发送到辅单元2ij。响应来自CPU 129的指令，IR接口135 发射用于指示发送冻结命令到辅单元2ij的传输命令所对应的红外线。红外线 由控制器15进行接收，并且控制器15响应对应于接收红外线的传输命令， 将对应于冻结命令的红外线发射到辅单元2ij。对应于冻结命令的红外线由辅 单元2ij的IR接口155进行接收，并且IR接口155将对应于红外线的冻结命 令发送到CPU 149。
主单元1的IR接口135和控制器15通过红外线发送具有参照图23所述 格式的帧数据。从IR接口135发送的帧数据称作F1，并且从控制器15发送 的帧数据称作F2。帧数据F1包括分配给IR接口135和控制器15的设备码， 从而从IR接口135发送的帧数据F1由控制器15接收。
在当前情况下，从IR接口135发送到控制器15的帧数据F1请求将冻结 命令发送到辅单元2ij。因此，帧数据F1需要包括用于指示传输到辅单元2ij 的传输命令、所要传输的冻结命令、以及作为传输目的地的辅单元2ij的设备 码。
在帧数据F1的命令码中，包括传输命令的命令码作为所谓的操作码，并 且包括冻结命令的命令码和通过传输命令传输冻结命令所要抵达的传输目的 地的设备码(在这种情况下为辅单元2ij的IR接口155的设备码)作为所谓的操 作数。
在这种情况下，发送帧数据F1的主单元1需要识别辅单元2ij的设备码， 其中，辅单元2ij是通过传输命令发送冻结命令所要抵达的传输目的地。当设 备码发生改变时，以及紧邻在例如当辅单元2ij通过IEEE-1394电缆连接到主 单元1时所执行的上述认证处理(图31)之后，通过IEEE-1394通信将辅单元 2ij的设备码报告给主单元1。这样，主单元1识别组成可扩展电视系统的所 有辅单元2ij的设备码。
当控制器15接收上述帧数据F1时，控制器15在参照图26所述的控制 器处理的步骤S4执行位于帧数据F1中的命令码所对应的处理，以生成其中 置有帧数据F1中的冻结命令码和传输目的地的设备码的帧数据F2，并且将 它发送到辅单元2ij。
更具体地说，在这种情况下，图22所示的控制器15响应位于帧数据F1 中的传输命令而根据图47所示的流程图执行命令传输处理，作为在图26的 步骤S4执行的对应于命令码的处理。
在命令传输处理中，首先，在步骤S171，当控制部分162从接收处理部 分167接收帧数据F1时，控制部分162控制帧生成部分163以将帧数据F1 的命令码中的传输目的地设备码放入帧数据F2中的设备码。处理进入步骤 S172。
在步骤S172，控制部分162控制帧生成部分163以将帧数据F1的命令 码中的冻结命令码放入帧数据F2中的命令码。处理进入步骤S173。
在步骤S173，帧生成部分163将如上所述其中置有传输目的地的设备码 和冻结命令的命令码的帧数据F2发送到发送处理部分164，从而通过红外线 输出帧数据F2，并且处理完成。
在这种情况下，帧数据F2包括传输目的地的设备码，也就是，辅单元 2ij的设备码。因此，在辅单元2ij中，IR接口155接收帧数据F2，并且将对 应于命令码的命令即冻结命令发送到CPU 149。
通过红外线通信从主单元1发送到辅单元2ij的命令不限于冻结命令。还 可以传输其他命令。
下一步，图48示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第五示例功能结构。在该图中，相同于图32所用的符号分配 给对应于图32所示的部分，并且如果没有必要，省略其描述。换句话说，除 了不提供差值检测部分198或计数器部分199并且新提供环形缓冲器221、 音频比较部分222和音频模式存储部分223之外，图48所示的信号处理部分 127基本上具有与图32相同的结构。
环形缓冲器221接收从MPEG音频解码器126(图10)输出的音频数据， 并且顺序存储音频数据。
从MPEG音频解码器126输出的音频数据按原样发送到环形缓冲器以及 后一级的放大器137。
音频比较部分222把存储在环形缓冲器221中的音频数据当作输入模式， 将输入模式与作为基准模式存储在音频模式存储部分223中的音频数据进行 比较，并且将比较结果发送到系统控制器201。
音频模式存储部分223存储作为基准模式的音频数据。
从MPEG音频解码器126(图10)输出且存储在环形缓冲器221中的音频 数据发送到音频模式存储部分223，并且音频模式存储部分223可以在系统 控制器201的控制下将存储在环形缓冲器221中的音频数据存储为新基准模 式。换句话说，可以更新存储在音频模式存储部分223中的音频基准模式。
下一步，将参照图49所示的流程图描述由图48所示的信号处理部分127 执行的主单元中的虚拟多视点显示处理。
帧存储器191到193已以覆写方式顺序存储从MPEG视频解码器125(图 10)发送的图像数据的亮度信号Y和色彩信号R-Y与B-Y。
环形缓冲器221也已以覆写方式顺序存储从MPEG音频解码器126(图 10)发送的音频数据。
在虚拟多视点显示处理中，首先，在步骤S181，系统控制器201判定是 否已从CPU 129发送音频模式登记请求。
如上所述，音频模式存储部分223可以将存储在环形缓冲器221中的音 频数据存储为新基准模式，也就是，可以登记新基准模式。该登记请求可以 例如通过在当操作控制器15(图7)上的菜单按钮开关84时所显示的菜单屏幕 上点击音频模式登记请求图标来执行。
在步骤S181，判定是否点击了音频模式登记请求图标。
当在步骤S181判定尚未接收到音频模式登记请求时，处理跳过步骤 S182，并且进入步骤S183。
当在步骤S181判定接收到音频模式登记请求时，换句话说，当用户点击 音频模式登记请求图标从而将用于请求登记新基准模式的音频模式登记请求 从CPU 129发送到系统控制器201时，处理进入步骤S182，并且系统控制器 201将例如从存储在环形缓冲器221中的最近音频数据样本到回退预定时间 的样本的音频数据存储在音频模式存储部分223中作为新基准模式。
因此，当在用户听取从扬声器单元12L和12R输出的节目声音的时候输 出用户想要用作基准模式的音频数据时，用户可以操作控制器15来登记该音 频数据作为基准模式。
音频模式存储部分223可以存储一个基准模式，也就是，可以以覆写已 经存储在音频模式存储部分223中的基准模式的方式存储新基准模式，并且 也可以存储多个基准模式，也就是，除已经存储在音频模式存储部分223中 的基准模式之外，还可以存储新基准模式。
当在步骤S182将新基准模式存储在音频模式存储部分223中时，处理进 入步骤S183，并且音频比较部分222读取例如存储在环形缓冲器221中的所 有音频数据作为输入模式。处理进入步骤S184。
在步骤S184，音频比较部分222读取存储在音频模式存储部分223中的 基准模式以将它与输入模式进行比较。更具体地说，音频比较部分222在伸 长或缩短时间轴的情况下根据预定比例获取输入模式与基准模式之间的距离 (必要时以下称作音频模式间距离)，获取最小音频模式间距离作为输入模式的 特征(相对于基准模式)，并且将它发送到系统控制器201。
然后，处理进入步骤S185，并且系统控制器201判定作为输入模式特征 而获得的音频模式间距离是否等于或小于(或小于)预定阈值。
当在步骤S185判定音频模式间距离大于预定阈值时，处理跳过步骤S186 和S187，并且进入步骤S188。
当在步骤S185判定音频模式间距离不大于预定阈值，换句话说，可以认 为输入模式与基准模式匹配时，处理进入步骤S186和S187以执行与在图33 的步骤S106和S108所执行相同的处理。然后，处理进入步骤S188。
这样，在主单元1中，当从MPEG音频解码器126输出相同或类似于基 准模式的音频数据时，将从MPEG视频解码器125输出的图像数据帧发送到 辅单元2ij。
在这种情况下，辅单元2ij的信号处理部分147如图34所示构造，并且 正在执行图35所示的虚拟多视点显示处理。因此，在辅单元2ij中，显示以 上述方式从主单元1发送的图像数据帧。
在步骤S188，判定系统控制器201是否从CPU 129接收到用于指示终止 虚拟多视点显示处理的终止命令。
当在步骤S188判定尚未接收到终止命令时，处理返回到步骤S181，并 且重复相同的过程。
当在步骤S188判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
根据图49所示的虚拟多视点显示处理，当从MPEG音频解码器126输 出相同或类似于基准模式的音频数据时，在辅单元2ij中显示从MPEG视频解 码器125输出的图像数据帧。因此，例如，当存储播放特别新闻切入片断 (special-news telop)时所输出的音频数据作为基准模式时，在辅单元2ij中显示 当输出该音频数据时所广播的图像数据，也就是，包括特别新闻切入片断的 图像数据。
当音频模式存储部分223存储有多个基准模式时，在图49的步骤S184 将输入模式与多个基准模式逐一进行比较。例如，如果可以认为输入模式匹 配多个模式中的至少一个，则执行步骤S186和S187的处理。
在上述情况下，获取音频模式间距离作为担当输入模式的音频数据的特 征。可以获取担当输入模式的音频数据的功率(或幅度电平)作为其特征。在这 种情况下，可以将担当输入模式的音频数据的功率与预定阈值进行比较，并 且在辅单元2ij中显示紧邻在音频数据的功率变得大于或者小于(大于或等于， 或者，小于或等于)预定阈值之后从MPEG视频解码器125输出的图像数据帧。
另外，显示在辅单元2ij中的图像数据从主单元1传输到辅单元2ij，此外 如上所述还可以通过将冻结命令从主单元1发送到辅单元2ij来由辅单元2ij 接收。
下一步，图50示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第六示例功能结构。在该图中，相同于图32所用的符号分配 给对应于图32所示的部分，并且如果没有必要，省略其描述。换句话说，除 了不提供差值检测部分198或计数器部分199并且新提供图像比较部分232 和图像模式存储部分233之外，图50所示的信号处理部分127基本上具有与 图32相同的结构。
图像比较部分232把存储在帧存储器191中的图像数据当作输入模式， 将输入模式与作为基准模式存储在图像模式存储部分233中的图像数据进行 比较，并且将比较结果发送到系统控制器201。
图像模式存储部分233存储担当基准模式的图像数据。
从MPEG视频解码器125(图10)输出且存储在帧存储器191中的图像数 据(其亮度信号Y)发送到图像模式存储部分233，并且图像模式存储部分233 可以在系统控制器201的控制下将存储在帧存储器191中的图像数据存储为 新基准模式。换句话说，可以更新存储在图像模式存储部分233中的图像基 准模式。
下一步，将参照图51所示的流程图描述由图50所示的信号处理部分127 执行的主单元中的虚拟多视点显示处理。
帧存储器191到193已以覆写方式顺序存储从MPEG视频解码器125(图 10)发送的图像数据的亮度信号Y和色彩信号R-Y与B-Y。
在虚拟多视点显示处理中，首先，在步骤S191，系统控制器201判定是 否已从CPU 129发送图像模式登记请求。
如上所述，图像模式存储部分233可以将存储在帧存储器191中的图像 数据存储为新基准模式，也就是，可以登记新基准模式。该登记请求可以例 如通过在当操作控制器15(图7)上的菜单按钮开关84时所显示的菜单屏幕上 点击图像模式登记请求图标来执行。
在步骤S191，判定是否点击了图像模式登记请求图标。
当在步骤S191判定尚未接收到图像模式登记请求时，处理跳过步骤 S192，并且进入步骤S193。
当在步骤S191判定接收到图像模式登记请求时，换句话说，当用户点击 图像模式登记请求图标从而将用于请求登记新基准模式的图像模式登记请求 从CPU 129发送到系统控制器201时，处理进入步骤S192，并且系统控制器 201将存储在帧存储器191中的最近帧图像数据存储到图像模式存储部分233 中作为新基准模式。
因此，当在用户观看显示在CRT 11上的节目图像的时候显示用户想要 用作基准模式的图像数据时，用户可以操作控制器15来登记该图像数据作为 基准模式。
图像模式存储部分233可以采用与音频模式存储部分223相同的方式， 存储一个基准模式，并且也可以存储多个基准模式。
当在步骤S192将新基准模式存储在图像模式存储部分233中时，处理进 入步骤S193，并且图像比较部分232读取例如存储在帧存储器191中的最近 帧图像数据作为输入模式。处理进入步骤S194。
在步骤S194，图像比较部分232读取存储在图像模式存储部分233中的 基准模式以将它与输入模式进行比较。更具体地说，图像比较部分232根据 预定比例获取输入模式与基准模式之间的距离(必要时以下称作图像模式间 距离)作为输入模式的特征(相对于基准模式)，并且将它发送到系统控制器 201。
图像模式间距离例如可以是担当输入模式的图像数据像素的像素值与担 当基准模式的图像数据的对应像素的像素值之间的差值绝对值之和。
在此，输入模式和基准模式均是一帧图像数据。还可以使用一帧图像数 据的一部分作为输入模式和基准模式。
此外，还可以是使用一帧图像数据作为输入模式并且使用一帧图像数据 的一部分作为基准模式。在这种情况下，可以是在改变担当输入模式的一帧 图像数据与担当基准模式的一帧图像数据的一部分之间的位置对应关系的情 况下获取多个图像模式间距离，并且使用所获取的最小值作为最终的图像模 式间距离。
当在步骤S194获得图像模式间距离时，处理进入步骤S195，并且系统 控制器201判定作为输入模式特征而获得的图像模式间距离是否等于或小于 (或小于)预定阈值。
当在步骤S195判定图像模式间距离大于预定阈值时，处理跳过步骤S196 和S197，并且进入步骤S198。
当在步骤S195判定图像模式间距离不大于预定阈值，换句话说，可以认 为输入模式与基准模式匹配时，处理顺序进入步骤S196和S197以执行与在 图33的步骤S 106和S108所执行相同的处理。然后，处理进入步骤S198。
这样，在主单元1中，当从MPEG视频解码器125输出相同或类似于基 准模式的图像数据时，将图像数据帧发送到辅单元2ij。
在这种情况下，辅单元2ij的信号处理部分147如图34所示构造，并且 正在执行图35所示的虚拟多视点显示处理。因此，在辅单元2ij中，显示以 上述方式从主单元1发送的图像数据帧。
在步骤S198，判定系统控制器201是否从CPU 129接收到用于指示终止 虚拟多视点显示处理的终止命令。
当在步骤S198判定尚未接收到终止命令时，处理返回到步骤S191，并 且重复相同的过程。
当在步骤S198判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
根据图51所示的虚拟多视点显示处理，当从MPEG视频解码器125输 出相同或类似于基准模式的图像数据时，在辅单元2ij中显示图像数据帧。
因此，当存储在职业棒球比赛的实时节目中以特写镜头方式显示的记分 牌图像数据作为基准模式时，在辅单元2ij中显示以后广播且与担当基准模式 的图像数据具有相同或类似模式的图像数据，也就是，以特写镜头方式显示 的记分牌的以后广播图像数据。
更具体地说，当在主单元1如图52A所示正在接收职业棒球比赛节目的 时候存储在职业棒球比赛的实时节目中以特写镜头方式显示的记分牌图像数 据作为基准模式时，如果在以后的某局以特写镜头方式广播记分牌图像数据， 则例如图52B所示在辅单元211中以特写镜头方式显示记分牌图像数据。此 外，以后，当在下一局再次以特写镜头方式广播记分牌图像数据时，例如图 52C所示，在辅单元212中以特写镜头方式显示记分牌图像数据。
当在职业棒球比赛的实时电视广播节目中每一局的开始以特写镜头方式 广播记分牌图像时，如上所述，在组成可扩展电视系统的辅单元2ij中以特写 镜头方式顺序显示记分牌图像。
因此，在这种情况下，用户可以观看辅单元2ij的显示来知道每局的比分 变化。
在选举快报节目中，显示以特写镜头方式显示被选举人面部的图像数据， 其中，该图像数据附有表示各党派被选举人号码的图片。当将该图像数据存 储在图像模式存储部分233中作为基准模式时，如果主单元1接收选举快报 节目，则在组成可扩展电视系统的辅单元2ij中顺序显示以特写镜头方式显示 被选举人面部的在选举快报节目中所广播的图像数据，如图53所示。
因此，在这种情况下，用户可以观看辅单元2ij的显示来了解被选举人。
而且，例如，广播站在一天内频繁广播天气预报。当将用于天气预报节 目中的日本地图(或局部地区如Kanto地区的地图)的图像数据存储在图像模 式存储部分233中作为基准模式时，如果主单元1接收天气预报节目，则在 组成可扩展电视系统的辅单元2ij中顺序显示在天气预报中广播的天气图，如 图54所示。
因此，在这种情况下，用户可以观看辅单元2ij的显示来容易地知道在不 同时区以同一频道广播的天气预报和以不同频道广播的天气预报。
要在辅单元2ij中显示的图像数据从主单元1发送到辅单元2ij。另外，如 上所述，图像数据还可以通过将冻结命令从主单元1发送到辅单元2ij来由辅 单元2ij接收。
下一步，图55示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第七示例功能结构。在该图中，相同于图32、图48或图50 所用的符号分配给对应于图32、图48或图50所示的部分，并且如果没有必 要，省略其描述。换句话说，除了不提供图32所示的差值检测部分198或计 数器部分199并且新提供图48所示的环形缓冲器221、音频比较部分222和 音频模式存储部分223以及图50所示的图像比较部分232和图像模式存储部 分233之外，图55所示的信号处理部分127基本上具有与图32相同的结构。
下一步，将参照图56所示的流程图描述由图55所示的信号处理部分127 执行的主单元中的虚拟多视点显示处理。
帧存储器191到193已以覆写方式顺序存储从MPEG视频解码器125(图 10)发送的图像数据的亮度信号Y和色彩信号R-Y与B-Y。
环形缓冲器221也已以覆写方式顺序存储从MPEG音频解码器126(图 10)发送的音频数据。
在虚拟多视点显示处理中，首先，在步骤S201，系统控制器201以与图 49的步骤S181相同的方式，判定是否已从CPU 129发送音频模式登记请求。 当判定尚未接收到音频模式登记请求时，处理跳过步骤S202，并且进入步骤 S203。
当在步骤S201判定接收到音频模式登记请求时，处理进入步骤S202， 并且系统控制器201以与图49的步骤S183相同的方式，将在预定时间内存 储在环形缓冲器221中的音频数据存储在音频模式存储部分223中作为新基 准模式。处理进入步骤S203。
在步骤S203，系统控制器201以与图51的步骤S191相同的方式，判定 是否已从CPU 129发送图像模式登记请求。当判定尚未接收到图像模式登记 请求时，处理跳过步骤S204，并且进入步骤S205。
当在步骤S203判定接收到图像模式登记请求时，处理进入步骤S204， 并且系统控制器201以与图51的步骤S192相同的方式，将存储在帧存储器 191中的最近帧图像数据存储到图像模式存储部分233中作为新基准模式。 处理进入步骤S205。
在步骤S205，音频比较部分222以与图49的步骤S183相同的方式，读 取存储在环形缓冲器221中的音频数据作为音频输入模式。另外在步骤S205， 图像比较部分232以与图51的步骤S193相同的方式，读取存储在帧存储器 191中的图像数据作为图像输入模式。处理进入步骤S206。
在步骤S206，音频比较部分222以与图49的步骤S184相同的方式，比 较存储在音频模式存储部分223中的音频基准模式与音频输入模式，从而获 取音频模式间距离作为担当音频输入模式的音频数据的特征，并且将它发送 到系统控制器201。另外在步骤S206，图像比较部分232以与图51的步骤 S194相同的方式，比较存储在图像模式存储部分233中的图像基准模式与图 像输入模式，从而获取图像模式间距离作为担当图像输入模式的图像数据的 特征，并且将它发送到系统控制器201。
然后，处理进入步骤S207，系统控制器201以与图49的步骤S 185相同 的方式，判定作为音频输入模式特征而获得的音频模式间距离是否等于或小 于(或者小于)预定阈值，或者以与图51的步骤S195相同的方式，判定作为 图像输入模式特征而获得的图像模式间距离是否等于或小于(或者小于)预定 阈值。
当在步骤S207判定音频模式间距离大于预定阈值并且图像模式间距离 也大于预定阈值时，处理跳过步骤S208和S209，并且进入步骤S210。
当在步骤S207判定音频模式间距离等于或小于预定阈值或者图像模式 间距离等于或小于预定阈值，换句话说，可以认为音频输入模式与音频基准 模式匹配或者可以认为图像输入模式与图像基准模式匹配时，处理顺序进入 步骤S208和S209以执行与在图33的步骤S106和S108所执行相同的处理。 然后，处理进入步骤S210。
这样，在主单元1中，当从MPEG音频解码器126输出相同或类似于音 频基准模式的音频数据时，将从MPEG视频解码器125输出的图像数据帧发 送到辅单元2ij，或者当从MPEG视频解码器125输出相同或类似于图像基准 模式的图像数据时，将图像数据帧发送到辅单元2ij。
在步骤S210，判定系统控制器201是否从CPU 129接收到用于指示终止 虚拟多视点显示处理的终止命令。
当在步骤S210判定尚未接收到终止命令时，处理返回到步骤S201，并 且重复相同的过程。
当在步骤S210判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
当主单元1的信号处理部分127如图55所示构造时，辅单元2ij的信号 处理部分147如图34所示构造，并且正在执行图35所示的虚拟多视点显示 处理。因此，在辅单元2ij中，显示以上述方式从主单元1发送的图像数据帧。 更具体地说，在辅单元2ij中，当从MPEG音频解码器126输出相同或类似于 音频基准模式的音频数据时，显示从MPEG视频解码器125输出的图像数据 帧，或者当从MPEG视频解码器125输出相同或类似于图像基准模式的图像 数据时，显示图像数据帧。
在上述情况下，当音频模式间距离等于或小于预定阈值或者图像模式间 距离等于或小于预定阈值时，执行步骤S208和S209的处理。也可以是例如 只有当音频模式间距离等于或小于预定阈值且图像模式间距离等于或小于预 定阈值时，换句话说，当可以认为音频输入模式与音频基准模式匹配并且可 以认为图像输入模式与图像基准模式匹配时，才执行步骤S208和S209的处 理。
在这种情况下，在辅单元2ij中，如果当从MPEG音频解码器126输出相 同或类似于音频基准模式的音频数据时从MPEG视频解码器125输出的图像 数据相同或类似于图像基准模式，则显示图像数据帧。
下一步，图57示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第八示例功能结构。在该图中，相同于图38所用的符号分配 给对应于图38所示的部分，并且如果没有必要，省略其描述。换句话说，图 57所示的信号处理部分127基本上具有与图38所示的信号处理部分127相 同的结构。
下一步，将参照图58所示的流程图描述由图57所示的信号处理部分127 执行的主单元中的虚拟多视点显示处理。
首先，在步骤S221，系统控制器201在组成可扩展电视系统的辅单元2 中指定缺省静止画面辅单元和缺省场景改变辅单元。
静止画面辅单元是用于显示主单元1所显示的图像数据中可以认为是没 有包含(包含很少)运动的静止画面的图像数据的辅单元。场景改变辅单元是用 于显示主单元1所显示的图像数据中紧邻在场景改变之后所获得的图像数据 的辅单元。
在步骤S221，例如，系统控制器201将相邻于主单元1左侧的辅单元221 设为缺省静止画面辅单元，并且将相邻于主单元右侧的辅单元223设为缺省场 景改变辅单元。
然后，处理进入步骤S222，并且系统控制器201判定CPU 129是否已指 定静止画面辅单元。
更具体地说，可以指定已被指定为缺省静止画面辅单元的辅单元221之外 的辅单元2ij作为静止画面辅单元。例如，用户可以操作控制器15(图7)上的 菜单按钮开关84以显示菜单屏幕，并且点击用于指定静止画面辅单元的图标 来指定静止画面辅单元。
在步骤S222，判定是否点击了用于指定静止画面辅单元的图标。
当在步骤S222判定尚未指定静止画面辅单元时，处理跳过步骤S223， 并且进入步骤S224。
当在步骤S222判定已指定静止画面辅单元时，换句话说，当用户操作控 制器15，点击用于指定静止画面辅单元的图标，并且指定辅单元2ij作为静止 画面辅单元，从而，CPU 129将用于指示指定辅单元2ij作为静止画面辅单元 的命令发送到系统控制器201时，处理进入步骤S223，并且系统控制器201 设置指定辅单元2ij(识别它为静止画面辅单元)作为静止画面辅单元。然后， 处理进入步骤S224。
在步骤S224，系统控制器201判定CPU 129是否已指定场景改变辅单元。
更具体地说，可以指定已被指定为缺省场景改变辅单元的辅单元223之外 的辅单元2ij作为场景改变辅单元。例如，用户可以操作控制器15(图7)上的 菜单按钮开关84以显示菜单屏幕，并且点击用于指定场景改变辅单元的图标 来指定场景改变辅单元。
在步骤S224，判定是否点击了用于指定场景改变辅单元的图标。
当在步骤S224判定尚未指定场景改变辅单元时，处理跳过步骤S225， 并且进入步骤S226。
当在步骤S224判定已指定场景改变辅单元时，换句话说，当用户操作控 制器15，点击用于指定场景改变辅单元的图标，并且指定辅单元2ij为场景改 变辅单元，从而CPU 129将用于指示指定辅单元2ij为场景改变辅单元的命令 发送到系统控制器201时，处理进入步骤S225，并且系统控制器201设置指 定辅单元2ij为场景改变辅单元。然后，处理进入步骤S226。
在步骤S226，帧存储器191到193等待从MPEG视频解码器125(图10) 到达作为一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，并且存储亮度 信号Y和色彩信号R-Y与B-Y。处理进入步骤S227。
在步骤S227，差值检测部分198检测在紧邻之前所执行的步骤S101存 储在帧存储器191中的图像数据的亮度信号Y(当前帧中图像数据的亮度信号 Y)与在前一操作中所执行的步骤S101存储在帧存储器191中的图像数据的亮 度信号Y(前一帧中图像数据的亮度信号Y)之间的差值绝对值之和，也就是， 当前帧的差值绝对值之和作为当前帧图像数据的特征，并且将该和发送到系 统控制器201。
然后，处理进入步骤S228。系统控制器201判定当前帧的差值绝对值之 和是否几乎为零，也就是，和是否小于(等于或小于)小的正阈值Th2。
当在步骤S228判定当前帧的差值绝对值之和小于阈值Th2时，也就是， 当当前帧图像与前一帧图像相比变化很小(或者没有变化)，因此可以认为当前 帧图像是静止画面时，处理进入步骤S229，并且系统控制器210控制存储器 控制部分197以将存储在帧存储器191到193中的当前帧的图像数据(其亮度 信号Y和色彩信号R-Y与B-Y)发送到帧存储器194到196，并且以覆写方式 将该数据存储在其中。处理进入步骤S230。
在步骤S230，系统控制器201控制输出控制部分200来读取存储在帧存 储器194到196中的亮度信号Y和色彩信号R-Y与B-Y，并且将它们发送到 CPU 129。另外，在步骤S230，系统控制器201将用于指示在辅单元中显示 图像数据的显示请求命令发送到CPU 129。处理进入步骤S234。
当CPU 129从系统控制器201接收用于指示在静止画面辅单元中进行显 示的显示请求命令时，CPU 129控制IEEE-1394接口133以将从输出控制部 分200发送的一帧图像数据(其亮度信号Y和色彩信号R-Y与B-Y)与用于指 示显示图像数据的显示请求命令一起发送到静止画面辅单元。担当静止画面 辅单元的辅单元2ij的信号处理部分147如图34所示构造，并且正在执行图 35所示的虚拟多视点显示处理。因此，将显示在主单元1中的图像数据中与 前一帧相比变化很小的当前帧的图像数据发送到静止画面辅单元，并在其中 进行显示。
另一方面，当在步骤S228判定当前帧的差值绝对值之和不小于阈值Th2 时，处理进入步骤S231，并且系统控制器201判定当前帧的差值绝对值之和 是否大于(或者等于或大于)阈值Th1，其中，阈值Th1充分大于阈值Th2。
当在步骤S231判定当前帧的差值绝对值之和不大于阈值Th1时，处理 跳过步骤S232和S233，并且进入步骤S234。
当在步骤S231判定当前帧的差值绝对值之和大于阈值Th1时，换句话 说，当当前帧的图像与前一帧的图像相比变化很大，因此当前帧发生场景改 变时，处理进入步骤S232，并且系统控制器210以与步骤S229相同的方式 控制存储器控制部分197，以将存储在帧存储器191到193中的当前帧图像 数据的亮度信号Y和色彩信号R-Y与B-Y发送到帧存储器194到196，并且 以覆写方式将它们存储在其中。处理进入步骤S233。
在步骤S233，系统控制器201控制输出控制部分200以读取存储在帧存 储器194到196中的一帧图像数据的亮度信号Y和色彩信号R-Y与B-Y，并 且将它们发送到CPU 129。另外，在步骤S233，系统控制器201将用于指示 在场景改变辅单元中显示图像数据的显示请求命令发送到CPU 129。处理进 入步骤S234。
当CPU 129从系统控制器201接收用于指示在场景改变辅单元中进行显 示的显示请求命令时，CPU 129控制IEEE-1394接口133以将从输出控制部 分200发送的一帧图像数据(其亮度信号Y和色彩信号R-Y与B-Y)与显示请 求命令一起发送到场景改变辅单元。担当场景改变辅单元的辅单元2ij的信号 处理部分147如图34所示构造，并且正在执行图35所示的虚拟多视点显示 处理。因此，将显示在主单元1中的图像数据中紧邻在场景改变之后所获得 的图像数据发送到场景改变辅单元，并在其中进行显示。
在步骤S234，判定系统控制器201是否从CPU 129接收到用于指示终止 虚拟多视点显示处理的终止命令。
当在步骤S234判定尚未接收到终止命令时，处理返回到步骤S221，并 且以后重复相同的过程。
当在步骤S234判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器201时，在主单元中终止虚拟多视点显示处理。
如上所述，根据图57和图58所示的实施例，将主单元1正在接收的节 目中不包含运动的图像数据显示在静止画面辅单元中，将主单元1正在接收 的节目中场景改变之后所获得的图像数据显示在场景改变辅单元中。
在此，一个辅单元担当静止画面辅单元。可以是多个辅单元担当静止画 面辅单元，并且多个辅单元如参照图37A到图37C所述顺序显示从主单元1 发送的图像数据。这也可以应用于场景改变辅单元。
下一步，图59示出执行虚拟多视点显示处理的主单元1中的信号处理部 分127(图10)的第九示例功能结构。
帧存储器241接收从MPEG视频解码器125(图10)输出的图像数据，并 且临时存储图像数据。更具体地说，帧存储器241具有例如允许存储至少两 帧图像数据的存储容量，并且以最近图像数据覆写时间较旧的帧图像数据的 方式顺序存储图像数据。
在本实施例中，如上所述，MPEG视频解码器125输出亮度信号Y和色 彩信号R-Y与B-Y作为图像数据。在图59中，亮度信号Y和色彩信号R-Y 与B-Y统称作图像数据。
从MPEG视频解码器125输出的图像数据按原样发送到后一级的矩阵电 路128(图10)以及帧存储器241。
在图59所示的实施例中，从MPEG音频解码器126输出的音频数据通 过信号处理部分127发送到后一级的放大器137，但是图59没有示出音频数 据。
N个帧存储器2421到242N临时存储在帧存储器241中存储且从存储器 控制部分243发送的图像数据。
存储器控制部分243由系统控制器247进行控制，并且将存储在帧存储 器241中的当前帧的图像数据(其亮度信号Y和色彩信号R-Y与B-Y)发送到 N个帧存储器2421到242N之一，并且以覆写方式将该数据存储在其中。
静止画面检测部分244在帧存储器241所存储的图像数据中检测静止画 面(可以视作静止画面)，从帧存储器241读取图像数据，并且将它发送到比较 部分245。
更具体地说，静止画面检测部分224例如获取存储在帧存储器241中的 最近帧(当前帧)的图像数据与前一帧的图像数据之间的差值绝对值之和，并且 当差值绝对值之和为零或接近于零时，静止画面检测部分244从帧存储器241 读取当前帧的图像数据作为静止画面(不包含(或者包含很少)运动)，并且将它 发送到比较部分245。
也可以是，当若干连续帧的各差值绝对值之和为零或接近于零时，静止 画面检测部分244检测最后帧的图像数据作为静止画面。
比较部分245比较从静止画面检测部分244发送的静止画面图像数据与 存储在各帧存储器2421到242N中的图像数据(判定两块图像数据的匹配情 况)，并且将比较结果发送到系统控制器247。
更具体地说，比较部分245例如获取从静止画面检测部分244发送的静 止画面图像数据与存储在各帧存储器2421到242N中的图像数据之间的差值绝 对值之和，并且将比较结果发送到系统控制器247。
输出控制部分246在系统控制器247的控制下读取存储在帧存储器242n 中的一帧图像数据，并且将该数据发送到CPU 129。
系统控制器247根据CPU 129的控制和比较部分245的输出，控制存储 器控制部分243和输出控制部分246。
下一步将参照图60的流程图描述由图59所示的信号处理部分127执行 的主单元中的虚拟多视点显示处理。
首先，在步骤S241，系统控制器247将静止画面辅单元的最大数N设为 组成可扩展电视系统的辅单元2的总数。因此，在本实施例中，静止画面辅 单元的最大数N在步骤S241设为8。
然后，处理进入步骤S242，并且系统控制器247分别将表示帧存储器2421 到242N是否已存储图像数据的存储标志flg(1)到flg(N)设为表示尚未存储图像 数据的值，如“0”。处理进入步骤S243。
存储标志flg(1)到flg(N)存储在未示出的存储器中，并且内置于系统控制 器247中。
在步骤S243，系统控制器247判定CPU 129是否已指定静止画面辅单元。
更具体地说，在图60所示的实施例中，组成可扩展电视系统的所有辅单 元2被缺省指定为静止画面辅单元。用户可以指定担当静止画面辅单元的辅 单元2。例如，用户可以操作控制器15(图7)上的菜单按钮开关84来显示菜 单屏幕，并且点击用于指定静止画面辅单元的图标来指定辅单元。在步骤 S243，判定是否点击了用于指定静止画面辅单元的图标。
当在步骤S243判定已指定静止画面辅单元时，换句话说，当用户操作控 制器15，点击用于指定静止画面辅单元的图标，而且指定一个或多个辅单元 2作为静止画面辅单元，从而CPU 129输出用于指示指定一个或多个辅单元2 为静止画面辅单元的命令到系统控制器247时，处理进入步骤S244，并且系 统控制器247设置所指定的一个或多个辅单元2作为静止画面辅单元(识别为 静止画面辅单元)。然后，处理进入步骤S245。
在步骤S245，系统控制器247将静止画面辅单元的最大数N再次设为由 CPU 129指定为静止画面辅单元的辅单元数。处理进入步骤S248。
另一方面，当在步骤S243判定尚未指定静止画面辅单元时，处理进入步 骤S246，并且系统控制器247判定CPU 129是否已发送用于清除存储在帧存 储器242n中的图像数据的清除请求。
如后所述，帧存储器242n存储过去由主单元1接收的静止画面图像数据， 然后，当主单元1新接收与存储在帧存储器242n中的静止画面图像数据类似 的静止画面图像数据时，更新帧存储器242n的存储内容。因此，当帧存储器 242n存储静止画面图像数据时，只将与所存储的静止画面图像数据类似的静 止画面图像数据存储在帧存储器242n中。
在图60所示的实施例中，用户可以操作控制器15来清除帧存储器242n 的存储内容。在步骤S246，判定用户是否已操作控制器15来清除帧存储器 242n，从而CPU 129已将用于清除存储在帧存储器242n中的图像数据的清除 请求发送到系统控制器247。
用于清除帧存储器242n的请求可以例如在菜单屏幕上执行。
当在步骤S246判定尚未发送用于清除帧存储器242n的请求时，处理跳 过步骤S247，并且进入步骤S248。
当在步骤S246判定已发送用于清除帧存储器242n的请求时，换句话说， 当系统控制器247从CPU 129接收到用于指示清除帧存储器242n的命令时， 处理进入步骤S247，并且系统控制器247将存储标志flg(n)设为零。然后， 处理进入步骤S248。
在步骤S248，帧存储器241等待从MPEG视频解码器125(图10)发送新 图像数据帧，并且存储图像数据。处理进入步骤S249。
在步骤S249，判定在紧邻之前的步骤S244由静止画面检测部分244存 储在帧存储器中的当前帧图像数据是否显示静止画面。当判定图像数据不显 示静止画面时，处理跳过步骤S250到S259，并且进入步骤S260。
当在步骤S249判定当前帧的图像数据显示静止画面时，静止画面检测部 分244从帧存储器241读取显示静止画面的当前帧图像数据，并且将它发送 到比较部分245。处理进入步骤S250。在步骤S250，系统控制器247将表示 帧存储器2421到242N中所要处理的帧存储器242n的变量“n”设为零。处理 进入步骤S251。在步骤S251，系统控制器247对变量“n”增1。处理进入 步骤S252。系统控制器247判定存储标志flg(n)是否为零。
当在步骤S252判定存储标志flg(n)为零时，换句话说，当帧存储器242n 尚未存储图像数据时，处理进入步骤S253，并且系统控制器247将存储标志 flg(n)设为表示帧存储器242n已存储静止画面图像数据的值如“1”。处理进入 步骤S254。
在步骤S254，系统控制器247控制存储器控制部分243以将存储在帧存 储器241中的当前帧的图像数据(其亮度信号Y和色彩信号R-Y与B-Y)发送 到帧存储器242n，并且以覆写方式将它存储在其中。处理进入步骤S258。
在步骤S258，系统控制器247控制输出控制部分246以从帧存储器242n 读取一帧图像数据，并且将它发送到CPU 129。另外，在步骤S258，系统控 制器247将用于指示在静止画面辅单元中显示存储在帧存储器242n中的图像 数据的显示请求命令发送到CPU 129。处理进入步骤S259。
当CPU 129从系统控制器247接收用于指示显示存储在帧存储器242n 中的图像数据的显示请求命令时，CPU 129控制IEEE-1394接口133以将从 输出控制部分246发送的一帧图像数据(其亮度信号Y和色彩信号R-Y与B-Y) 与用于指示显示图像数据的显示请求命令一起发送到担当静止画面辅单元的 辅单元2中对应于帧存储器242n的辅单元2ij。
更具体地说，帧存储器2421到242N的数目N等于担当静止画面辅单元 的辅单元2的数目(最大数)N。紧邻在步骤S241或步骤S244之后，系统控制 器247将担当静止画面辅单元的辅单元2之一分配给各帧存储器242n。从而， 一个帧存储器242对应于一个担当静止画面辅单元的辅单元2。
当CPU 129从系统控制器247接收用于指示显示存储在帧存储器242n 中的图像数据的显示请求命令时，CPU 129将显示请求命令发送到对应于帧 存储器242n的辅单元。
担当静止画面辅单元的辅单元2的信号处理部分147如图34所示构造， 并且正在执行图35所示的虚拟多视点显示处理。因此，当辅单元2与显示请 求命令一起接收存储在帧存储器242n中的图像数据时，它显示存储在帧存储 器242n中的图像数据。
另一方面，当在步骤S252判定存储标志flg(n)不为零时，换句话说，当 帧存储器242n已存储图像数据时，处理进入步骤S255，并且比较部分245比 较从静止画面检测部分244发送的显示静止画面的当前帧图像数据与存储在 帧存储器242n中的图像数据，以获取差值绝对值之和(当前帧的差值绝对值之 和)作为当前帧图像数据的特征，并且将该和发送到系统控制器247。
当系统控制器247从比较部分245接收当前帧的差值绝对值之和时，系 统控制器247在步骤S256判定当前帧的差值绝对值之和是否几乎为零，也就 是，等于或小于(或小于)一个小的正阈值。
当在步骤S256判定当前帧的差值绝对值之和既不为零又不接近于零时， 处理跳过步骤S257和S258，并且进入步骤S259。
当在步骤S256判定当前帧的差值绝对值之和为零或接近于零时，换句话 说，当当前帧的图像数据具有类似于存储在帧存储器242n中的图像数据的模 式，因此当前帧的图像数据已由主单元1接收，并且类似于存储在帧存储器 242n中的图像数据时，处理进入步骤S257，并且系统控制器247控制输出控 制部分246以将存储在帧存储器241中的显示静止画面的当前帧图像数据发 送到帧存储器242n，并且以覆写方式存储到其中以更新帧存储器242n的存储 内容。
然后，处理进入步骤S258，并且如上所述，系统控制器247控制输出控 制部分246来读取存储在帧存储器242n中的一帧图像数据，并且将它发送到 CPU 129。另外，在步骤S258，输出控制部分246将存储在帧存储器242n中 的图像数据和用于指示在静止画面辅单元中显示存储在帧存储器242n中的图 像数据的显示请求命令发送到CPU 129。处理进入步骤S259。
这样，如上所述，新存储在帧存储器242n中的当前帧图像数据从主单元 1发送到对应于帧存储器242n的辅单元2，并且进行显示。
在步骤S259，系统控制器247判定变量“n”是否等于静止画面辅单元 的最大数N。当判定它们不相等时，处理返回到步骤S251，并且以后重复相 同的过程。
当在步骤S259判定变量“n”等于静止画面辅单元的最大数N时，换句 话说，当比较部分245完成存储在帧存储器241中的显示静止画面的当前帧 图像数据与存储在各帧存储器2421到242N中的图像数据之间的比较时，处理 进入步骤S260，并且判定系统控制器247是否从CPU 129接收到用于指示终 止虚拟多视点显示处理的终止命令。
当在步骤S260判定尚未接收到终止命令时，处理返回到步骤S243，并 且以后重复相同的过程。
当在步骤S260判定接收到终止命令时，换句话说，例如，当用户操作控 制器15(图7)以在CRT 11上显示菜单屏幕而且在菜单屏幕中再次点击虚拟多 视点显示图标从而指示CPU 129终止虚拟多视点显示处理并且CPU 129将终 止命令发送到系统控制器247时，在主单元中终止虚拟多视点显示处理。
根据图58所示的虚拟多视点显示处理，如图61A所示，例如，在主单 元1开始显示职业棒球比赛的实时节目之后，例如，当主单元1显示以特写 镜头方式表示记分牌的静止画面图像数据时，将记分牌的图像数据存储在帧 存储器2421中，并且还发送到对应于帧存储器2421的静止画面辅单元，并且 进行显示。
具体地说，例如，当对应于帧存储器2421的静止画面辅单元是辅单元211 时，在辅单元211中显示存储在帧存储器2421中的记分牌图像数据帧，如图 61B所示。
此外，然后，例如，如果主单元1显示在采访中以特写镜头方式显示棒 球选手的静止画面图像数据，则将以特写镜头方式显示棒球选手的静止画面 图像数据存储在帧存储器2422中，并且还发送到对应于帧存储器2422的辅单 元，并且进行显示。
具体地说，例如，当对应于帧存储器2422的静止画面辅单元为辅单元212 时，在辅单元212中显示存储在帧存储器2422中的棒球选手图像数据帧，如 图61B所示。
然后，此后，例如，当主单元1再次显示以特写镜头方式表示记分牌的 静止画面图像数据时，将帧存储器2421的存储内容更新为该记分牌图像数据， 并且将帧存储器2421中的更新图像数据发送到对应于帧存储器2421的静止画 面辅单元211，并且进行显示。在这种情况下，显示在辅单元211中的记分牌 图像数据已被更新为最近一个。
因此，用户可以观看显示在主单元1中的各种静止画面的最近图像数据。
下一步，图62示出主单元1的另一示例电气结构。在该图中，相同于图 10所用的符号分配给对应于图10所示的部分，并且如果没有必要，省略其 描述。
图10所示的主单元1是用于接收数字广播的电视接收器，而图62所示 的主单元1是用于接收模拟广播的电视接收器。
调谐器251对预定频道中的模拟电视广播信号进行检测和解调。A/D转 换部分252对调谐器251的输出施加A/D转换，并且将A/D转换结果中的图 像数据发送到Y/C分离部分253，并且将音频数据发送到信号处理部分127。
Y/C分离部分253从调谐器251的输出中分离亮度信号Y和色彩信号 R-Y与B-Y，并且将它们发送到信号处理部分127。
即使以前述方式构造的用于接收模拟广播的电视接收器也可以担当可扩 展电视系统中的主单元1。
如同担当主单元的图62所示的电视接收器，用于接收模拟广播的电视接 收器也可以用作担当辅单元2的电视接收器。
在上述实施例中，组成可扩展电视系统的电视接收器的销售价格可以根 据例如电视接收器是担当主单元还是辅单元以及如果它担当辅单元则在使用 该辅单元之前已使用多少辅单元而不同。
由于如上所述如果没有主单元则不能在可扩展电视系统中提供虚拟多视 点显示功能，因此主单元具有高价值，并且主单元的销售价格可以设高。
可以预料用户在购买主单元之后必要时将额外购买多个辅单元。可以将 开始若干辅单元的销售价格设得例如低于主单元的销售价格，但高于普通电 视接收器的价格。还可以将以后购买的辅单元的销售价格进一步设低。
在上述实施例中，担当可扩展电视系统中的主单元的电视接收器可以例 如通过将信号处理部分127加到普通数字电视接收器并且改变由CPU 129执 行的程序来构造。因此，由于担当可扩展电视系统中的主单元的电视接收器 可以通过使用普通数字电视接收器来相对容易地制造，因此在考虑上述由可 扩展电视系统提供的虚拟多视点显示高级功能的情况下提供高成本效率。这 一点同样适用于担当辅单元的电视接收器。
此外，在上述实施例中，从主单元1发送的图像数据(或者根据从主单元 1发送的冻结命令由调谐器141(图11)接收的图像数据)在辅单元2中以覆写 方式存储在帧存储器214到216(图34)中。可以是辅单元2装备有例如硬盘等， 从主单元1发送的图像数据记录在硬盘中，并且根据用户指令以后再现该图 像数据。
在上述实施例中，主单元1将一帧图像数据发送到辅单元2，并且将它 显示在辅单元2中。可以是主单元1将多帧图像数据发送到辅单元2，并且 辅单元2重复显示由多帧图像数据形成的场景。另外，当根据从主单元1发 送的冻结命令由辅单元2的调谐器(图11)接收的图像数据显示在辅单元2中 时，可以是以相同方式重复显示由多帧图像数据形成的一个场景。一个场景 可以是一帧图像数据或一域(one-field)图像数据，或者可以是从紧邻在场景改 变之后的帧到下一场景改变帧的多帧图像数据。
而且，在上述实施例中，虚拟多视点显示处理应用于由主单元1接收的 电视广播节目。虚拟多视点显示处理也可以应用于例如从作为外部设备的 VTR等发送到主单元1并作显示的图像数据和音频数据。
下一步，图63A和图63B是示出应用本发明的可扩展电视系统的另一个 实施例的示例结构的透视图。在该图中，相同于图1A和图1B所用的符号分 配给对应于图1A和图1B所示的部分，并且如果没有必要，省略其描述。换 句话说，图63A和图63B所示的可扩展电视系统基本上具有与图1A和图1B 所示的可扩展电视系统相同的结构。
在图63A所示的实施例中，可扩展电视系统由九个电视接收器1、211、 212、213、221、223、231、232和233形成。在图63B所示的实施例中，可扩展 电视系统由25个电视接收器1、211、212、213、214、215、221、222、223、224、 225、231、232、234、235、241、242、243、244、245、251、252、253、254和255形 成。
组成可扩展电视系统的电视接收器的数目不限于9或25。换句话说，可 扩展电视系统可以由任意多个电视接收器形成。组成可扩展电视系统的电视 接收器的排列不限于图63A或图63B所示的3×3或5×5水平垂直格式。换 句话说，组成可扩展电视系统的电视接收器的排列可以是其他水平垂直格式， 如1×2、2×1、2×3水平垂直格式。另外，组成可扩展电视系统的电视接收 器的排列形状不限于图63A和63B所示的矩阵形状，而可以是金字塔形状。
由于可扩展电视系统可以这样由水平垂直方向上的排列个数为任意的任 意多个电视接收器构成，因此它可以称作“可扩展”系统。
在组成可扩展电视系统的电视接收器中，存在两种电视接收器：主电视 接收器(必要时以下称作主单元)，可以控制其他电视接收器；以及辅电视接收 器(必要时以下称作辅单元)，可以由另一电视接收器进行控制但不能控制其他 电视接收器。
在任何可扩展电视系统中，如后所述，全屏显示是可能的，其中，在组 成可扩展电视系统的所有电视接收器的所有显示屏幕上显示图像。
为在可扩展电视系统中执行全屏显示，可扩展电视系统需要具有遵循可 扩展电视系统的电视接收器(以下称作可扩展使用单元)，并且其中之一需要是 主单元。因此，在图63A和图63B所示的各实施例中，在组成可扩展电视系 统的电视接收器中，例如位于中央的电视接收器担当主单元1。
由于上述原因，当在组成可扩展电视系统的电视接收器中使用不是可扩 展使用单元的电视接收器时，不能提供全屏显示。另外，即使当组成可扩展 电视系统的所有电视接收器都是可扩展使用单元时，但如果它们全是辅单元， 则也不能提供全屏显示。
因此，为使用可扩展电视系统的全屏显示功能，用户需要购买至少一个 或多个主单元或者一个主单元和一个或多个辅单元。
由于主单元可以担当辅单元，因此在组成可扩展电视系统的电视接收器 中可以使用多个主单元。
在图63A所示的实施例中，3×3电视接收器中位于中央(左起第二且上 起第二)的电视接收器1担当主单元，而其他八个电视接收器211、212、213、 221、223、231、232和233担当辅单元。在图63B所示的实施例中，5×5电视接 收器中位于中央(左起第三且上起第三)的电视接收器1担当主单元，而其他 24个电视接收器211、212、213、214、215、221、222、223、224、225、231、232、 234、235、241、242、243、244、245、251、252、253、254和255担当辅单元。
因此，在图63A和图63B所示的各实施例中，主单元1位于组成可扩展 电视系统的电视接收器的中央。主单元1的位置不限于组成可扩展电视系统 的电视接收器的中央。主单元1可以位于任何位置，如左上角或右下角。
为简化下面描述，假定可扩展电视系统如图63A所示由3×3电视接收 器形成，并且主单元1位于组成可扩展电视系统的电视接收器的中央。
用于组成可扩展电视系统的辅单元2ij中的下缀i和j是指辅单元2ij位于 可扩展电视系统中的第i行和第j列(上起第i行且左起第j列)。
以下，如果没有必要区分辅单元2ij，则它们统称作辅单元2。
由于组成图63A和图63B所示的可扩展电视系统的主单元1和辅单元 2ij的外部结构与参照图2、图3A到图3F、图4以及图5A到图5F所述相同， 因此省略其描述。从而主单元1和辅单元2ij分别具有控制器15(图2)和控制 器35(图4)的附件，由于其结构与参照图7到图9所述相同，因此省略其描述。
下一步，图64示出用于图63A和图63B中的主单元1的示例电气结构。
由未示出的天线接收的电视广播信号发送到调谐器1121，并且在CPU 1129的控制下经过检测和解调。调谐器1121的输出发送到QPSK(正交移相 键控)解调电路1122，并且在CPU 1129的控制下经过QPSK解调。QPSK解 调电路1122的输出发送到纠错电路1123。在CPU 1129的控制下经过错误检 测和纠正，并且将输出发送到解复用器1124。
解复用器1124在CPU 1129的控制下必要时对纠错电路1123的输出进 行解扰，并且提取预定频道中的TS(传输流)分组。然后，解复用器1124将图 像数据(视频数据)TS分组发送到MPEG(运动图象专家组)视频解码器1125， 并且将音频数据(音频数据)TS分组发送到MPEG音频解码器1126。解复用器 1124必要时还将包括在纠错电路1123的输出中的TS分组发送到CPU 1129。 解复用器1124还接收从CPU 1129发送的图像数据或音频数据(包括TS分组 中的那些数据)，并且将它发送到MPEG视频解码器1125或MPEG音频解码 器1126。
MPEG视频解码器1125对从解复用器1124发送的图像数据TS分组进 行MPEG解码，并且发送到选择器1127。MPEG音频解码器1126对从解复 用器1124发送的音频数据TS分组进行MPEG解码。通过在MPEG音频解码 器1126中解码而获得的左声道音频数据和右声道音频数据发送到选择器 1127。
在CPU 1129的控制下，选择器1127选择从MPEG视频解码器1125输 出的图像数据、从CPU 1129输出的图像数据或者从安全系统部分1137发送 的图像数据，并且发送到NTSC(National Television System Committee，国家电 视制式委员会)编码器1128。NTSC编码器1128将从选择器1127发送的图像 数据转换成NTSC图像数据，并且将它发送到CRT 11并且显示在其上。在 CPU 1129的控制下，选择器1127还选择从MPEG音频解码器1126发送的左 声道和右声道音频数据，从CPU 1129发送的音频数据或者从安全系统部分 1137发送的音频数据，并且发送到放大器1138。
CPU 1129根据存储在EEPROM(电可擦除可编程只读存储器)1130和 ROM(只读存储器)1131中的程序执行各种处理，以控制例如调谐器1121、 QPSK解调电路1122、纠错电路1123、解复用器1124、选择器1127、IEEE-1394 接口1133、调制解调器1136以及安全系统部分1137。另外，CPU 1129还将 从解复用器1124发送的数据发送到IEEE-1394接口1133，并且将从IEEE-1394 接口1133发送的数据发送到解复用器1124和选择器1127。此外，CPU 1129 还执行从前面板1134或IR接收部分1135发送的命令所对应的处理。而且， CPU 1129还控制调制解调器1136以通过电话线访问未示出的服务器来获得 更新程序和必要数据。
EEPROM 1130存储即使电源断开之后也需要保存的数据和程序。ROM 1131例如存储IPL(初始程序装载器)程序。存储在EEPROM 1130中的数据和 程序可以通过覆写来更新。
RAM 1132临时存储CPU 1129的操作所需的数据和程序。
IEEE-1394接口1133连接到端子面板21(其IEEE-1394端子2111到2133(图 3F))，并且用作执行遵循IEEE 1394标准的通信的接口。这样，IEEE-1394接 口1133根据IEEE 1394标准将从CPU 1129发送的数据发送到外界，并且根 据IEEE 1394标准接收从外界发送的数据，并且将它发送到CPU 1129。
前面板1134安设在主单元1的正面的某一部位。前面板1134包括为控 制器15(图7)提供的按钮开关的一部分。当操作前面板1134上的按钮开关时， 对应于该操作的操作信号发送到CPU 1129。在这种情况下，CPU 1129执行 从前面板1134发送的操作信号所对应的处理。
IR接收部分1135响应控制器15上的操作，接收从控制器15发送的红 外线(光)。另外，IR接收部分1135对接收红外线进行光电转换，并且将因此 获得的信号发送到CPU 1129。在这种情况下，CPU 1129执行从IR接收部分 1135发送的信号所对应的处理，也就是，控制器15上的操作所对应的处理。
调制解调器1136通过电话线控制通信，从而通过电话线发送从CPU 1129 发送的数据，接收通过电话线发送的数据，并且将它发送到CPU 1129。
安全系统部分1137由安全控制器1137A、无线接口1137B、数据处理部 分1137C以及警告处理部分1137D形成，并且在CPU 1129的控制下执行后 述的用于向用户警告出现紧急状况(异常事情)的各种处理。
更具体地说，安全控制器1137A在CPU 1129的控制下控制无线接口 1137B、数据处理部分1137C和警告处理部分1137D。
无线接口1137B用作执行无线通信的接口，接收从后述摄像机1162(图 67)发送的图像(活动图像)数据和音频数据，并且将它们发送到选择器1127和 数据处理部分1137。例如，可以采用在IEEE 802.11中规定且通过所谓无线 LAN执行通信的NIC(network interface card，网络接口卡)作为无线接口 1137B。
还可以采用根据不同于IEEE 802.11的标准执行无线通信的单元作为无 线接口1137B。然而，最好是无线接口1137B遵循具有足够传输频带用于发 射和接收活动图像数据的标准。
数据处理部分1137C以预定间隔检测从无线接口1137B发送的图像数据 或音频数据的特征量，并且将它发送到警告处理部分1137D。
警告处理部分1137D分析从数据处理部分1137C发送的图像数据或音频 数据特征量在时间上的波动。另外，警告处理部分1137D判定图像数据或音 频数据特征量在时间上的波动是否满足预定条件，并且根据判定结果请求安 全控制器1137A警告用户。
放大器1138必要时对从选择器1127发送的音频数据进行放大，并且将 它发送到扬声器单元12L和12R。放大器1138具有D/A(数字/模拟)转换器， 必要时对音频数据施加D/A转换，并且输出它。
如上所述构造的主单元1以下述方式输出电视广播节目中的图像和声音 (显示图像和输出声音)。
作为由天线接收的电视广播信号的传输流通过调谐器1121、QPSK解调 电路1122和纠错电路1123发送到解复用器1124。解复用器1124从传输流中 提取预定节目的TS分组，将图像数据TS分组发送到MPEG视频解码器1125， 并且将音频数据TS分组发送到MPEG音频解码器1126。
MPEG视频解码器1125对从解复用器1124发送的TS分组进行MPEG 解码。因此获得的图像数据通过选择器1127和NTSC编码器1128从MPEG 视频解码器1125发送到CRT 11以作显示。
MPEG音频解码器1126对从解复用器1124发送的TS分组进行MPEG 解码。因此获得的音频数据通过选择器1127和放大器1138从MPEG音频解 码器1126发送到扬声器单元12L和12R以作输出。
在主单元1中，IEEE-1394接口1133接收从另一单元发送的TS分组。 在TS分组中，图像数据TS分组和音频数据TS分组通过CPU 1129和解复用 器1124发送到MPEG视频解码器1125和MPEG音频解码器1126，并且以与 电视广播信号的图像数据和音频数据相同的方式输出(显示)。
在主单元1中，安全系统部分1137的无线接口1137B接收从另一单元 发送的图像数据和音频数据。由无线接口1137B接收的图像数据通过选择器 1127和NTSC编码器1128发送到CRT 11以作显示。由无线接口1137B接收 的音频数据通过选择器1127和放大器1138发送到扬声器单元12L和12R以 作输出。
因此，在图64所示的实施例中，主单元1具有三个输入系统用于接收图 像数据和音频数据：调谐器1121、IEEE-1394接口1133和无线接口1137B。 虽然未在图64中示出，但是输入端子23如图3F所示安设在主单元上。因此， 当包括输入端子23时，主单元1具有四个输入系统。
提供给主单元1的输入系统的数目不受限制。
下一步，图65示出用于图63A和图63B中的辅单元2的示例电气结构。
由于辅单元2由结构与图64所示的调谐器1121到放大器1138相同的调 谐器1141到放大器1158形成，因此省略其描述。
下一步，图66示出使用图63A和图63B所示的可扩展电视系统的安全 系统的示例结构。
在图66所示的实施例中，安全系统由具有多个电视接收器的可扩展电视 系统1161和三个摄像机(视频摄像机)11621、11622和11623形成。
可扩展电视系统1161例如以与图63A所示的可扩展电视系统相同的方 式来形成。
摄像机11621、11622和11623例如是数字视频摄像机，并且拍摄图像， 采集声音，并且以无线方式将因此获得的图像数据和音频数据发送到组成可 扩展电视系统1161的预定电视接收器。
图66所示实施例中的安全系统由三个摄像机11621到11623形成。包括 在安全系统中的摄像机数目不限于3。安全系统可以装备有一个或多个摄像 机。
在安全系统中，可以从摄像机1162接收图像数据和音频数据的电视接收 器的最大数目等于组成可扩展电视系统1161的电视接收器的数目。因此，当 安全系统装备有其个数超过组成可扩展电视系统1161的电视接收器个数的 摄像机1162时，可扩展电视系统1161不能接收从没有对应于任何电视接收 器的摄像机1162发送的图像数据和音频数据。可扩展电视系统1161的各电 视接收器还可以切换从其接收图像数据和音频数据的摄像机。
以下，如果没有必要区分摄像机11621到11623，则将它们统称作摄像机 1162。
下一步，图67示出图66所示的摄像机1162的示例结构。
来自对象的光入射在由透镜、调焦机构、孔径调节机构等形成的光学系 统1171上，并且聚集在CCD(Charge Coupled Device，电荷耦合器件)1172的 光接收平面上。CCD 1172对从光学系统1171发送的光进行光电转换，并且 将作为图像数据的电信号发送到放大器1173。放大器1173对从CCD 1172发 送的图像数据进行放大，并且将它发送到A/D(模拟/数字)转换部分1174。A/D 转换部分1174对从放大器1173发送的模拟信号图像数据进行采样和量化 (A/D转换)，以转换成数字信号图像数据，并且发送到存储器1175。存储器 1175临时存储从A/D转换部分1174发送的图像数据。
麦克风1176将作为麦克风周围空气振动的声音转换成电信号音频数据， 并且将它发送到放大器1177。放大器1177对从麦克风1176发送的音频数据 进行放大，并且将它发送到A/D转换部分1178。A/D转换部分1178对从放 大器1177发送的模拟信号音频数据施加A/D转换以获得数字音频数据，并且 将它发送到存储器1179。存储器1179临时存储从A/D转换部分1178发送的 音频数据。
无线接口1180是与参照图64所述的无线接口1137B相同的接口，并且 以无线方式将存储在存储器1175和1179中的图像数据和音频数据发送到组 成可扩展电视系统1161的预定电视接收器。
无线接口1137B与1180之间的无线通信可以例如通过 TCP/IP(Transmission Control Protocol/Internet Protocol，传输控制协议/网际协 议)来执行。在这种情况下，IP地址可以用来指定摄像机11621到11623发送 图像数据和音频数据所要抵达的组成可扩展电视系统的电视接收器。
摄像机1162可以是便携式摄像机，在这种情况下，用户可以容易地安装 摄像机1162，从而拍摄所需位置。
还可以是摄像机1162采用MPEG或其他方法对图像数据和音频数据进 行编码，并且发送它们。
下一步将参照图68所示的流程图描述作为组成图66所示的可扩展电视 系统1161的电视接收器的主单元1(图64)的处理。
首先，在步骤S1041，CPU 1129判定是否发生任何单元连接到端子面板 21或者通过IEEE-1394接口1133或IR接收部分1135发送任何命令的事件。 当判定没有发生任何事件时，处理返回到步骤S1041。
当在步骤S1041判定发生一单元连接到端子面板21的事件时，处理进入 步骤S1042，并且CPU 1129执行后述的图69所示的认证处理。然后，处理 返回到步骤S1041。
为判定是否有一单元连接到端子面板21，需要检测该单元已连接到端子 面板21这一状态。该检测例如以下面方式来执行。
当一单元(通过IEEE-1394电缆)连接到为端子面板21(图3F)提供的 IEEE-1394端子21ij时，IEEE-1394端子21ij的端子电压发生变化。IEEE-1394 接口1133被配置为使它将端子电压变化报告给CPU 1129。CPU 1129从 IEEE-1394接口1133接收端子电压变化的报告，以检测新单元已连接到端子 面板21这一状态。CPU 1129还例如通过同一方法来识别一单元已与端子面 板21断连这一状态。
当在步骤S1041判定发生通过IEEE-1394接口1133或IR接收部分1135 发送任何命令的事件时，处理进入步骤S1043，并且主单元1执行对应于该 命令的处理。然后，处理返回到步骤S1041。
下一步，将参照图69所示的流程图描述在图68所示的步骤S1042由主 单元1执行的认证处理。
在由主单元1执行的认证处理中，执行两种认证：新连接到端子面板21 的单元(必要时以下称作连接单元)是否为授权IEEE-1394单元，以及 IEEE-1394单元是否为担当主单元或辅单元的电视接收器(可扩展使用单元)。
更具体地说，在由主单元1执行的认证处理中，首先在步骤S1051，CPU 1129控制IEEE-1394接口1133将用于请求相互认证的认证请求命令发送到连 接单元，并且处理进入步骤S1052。
在步骤S1052，CPU 1129判定是否已从连接单元返回对认证请求命令的 响应。当在步骤S1052判定尚未从连接单元返回对认证请求命令的响应时， 处理进入步骤S1053，并且CPU 1129判定是否发生超时，也就是，是否自从 发送认证请求命令以来已过去预定时间。
当在步骤S1053判定已发生超时，换句话说，即使当发送认证请求命令 到连接单元之后过去预定时间时也没有从连接单元返回对认证请求命令的响 应时，处理进入步骤S1054。CPU 1129判定连接单元不是授权IEEE-1394单 元且认证失败，并且将操作模式设为不与连接单元传输任何数据的独立模式。 处理返回。
因此，主单元1以后不与不是授权IEEE-1394单元的连接单元传输任何 数据，并且不执行IEEE-1394通信。
当在步骤S1053判定尚未发生超时时，处理返回到步骤S1052，并且以 后重复相同的过程。
当在步骤S1052判定已从连接单元返回对认证请求命令的响应，换句话 说，来自连接单元的响应由IEEE-1394接口1133接收并且发送到CPU 1129 时，处理进入步骤S1055，并且CPU 1129根据预定算法生成随机数(伪随机 数)R1，并且通过IEEE-1394接口1133将它发送到连接单元。
然后，处理进入步骤S1056，并且CPU 1129判定是否已从连接单元发送 加密随机数E’(R1)，其中，加密随机数E’(R1)是通过根据预定算法(密钥加密 方法如DES(数据加密标准)、FEAL(快速数据加密算法)或RC5)对在步骤 S1055发送的随机数R1进行加密而获得的。
当在步骤S1056判定尚未从连接单元发送加密随机数E’(R1)时，处理进 入步骤S1057，并且CPU 1129判定是否发生超时，也就是，是否自从发送随 机数R1以来已过去预定时间。
当在步骤S1057判定已发生超时，换句话说，即使当将随机数R1发送 到连接单元之后过去预定时间时也没有从连接单元返回加密随机数E’(R1) 时，处理进入步骤S1054。CPU 1129如上所述判定连接单元不是授权 IEEE-1394单元，并且将操作模式设为独立模式。处理返回。
当在步骤S1057判定尚未发生超时时，处理返回到步骤S1056，并且以 后重复相同的过程。
当在步骤S1056判定已从连接单元返回加密随机数E’(R1)，换句话说， 来自连接单元的加密随机数E’(R1)由IEEE-1394接口1133接收并发送到CPU 1129时，处理进入步骤S1058，并且CPU 1129根据预定加密算法对在步骤 S1055生成的随机数R1进行加密，以生成加密随机数E(R1)。处理进入步骤 S1059。
在步骤S1059，CPU 1129判定从连接单元发送的加密随机数E’(R1)是否 等于在步骤S1058由CPU 1129生成的加密随机数E(R1)。
当在步骤S1059判定加密随机数E’(R1)不等于加密随机数E(R1)，换句 话说，连接单元所采用的加密算法(必要时包括用于加密的密钥)不同于CPU 1129所采用的加密算法时，处理进入步骤S1054，并且CPU 1129如上所述判 定连接单元不是授权IEEE-1394单元，并且将操作模式设为独立模式。处理 返回。
当在步骤S1059判定加密随机数E’(R1)等于加密随机数E(R1)，换句话 说，连接单元所采用的加密算法与CPU 1129所采用的加密算法相同时，处理 进入步骤S1060，并且CPU 1129判定是否已从连接单元发送由连接单元用来 认证主单元1的随机数R2。
当在步骤S1060判定尚未接收到随机数R2时，处理进入步骤S1061，并 且CPU 1129判定是否发生超时，也就是，例如，是否在步骤S1059判定加 密随机数E’(R1)等于加密随机数E(R1)之后已过去预定时间。
当在步骤S1061判定已发生超时，换句话说，即使当过去预定时间时也 没有从连接单元发送随机数R2时，处理进入步骤S1054，并且CPU 1129如 上所述判定连接单元不是授权IEEE-1394单元，并且将操作模式设为独立模 式。处理返回。
另一方面，当在步骤S1061判定尚未发生超时时，处理返回到步骤S1052， 并且以后重复相同的过程。
当在步骤S1060判定已从连接单元发送随机数R2，换句话说，来自连接 单元的随机数R2由IEEE-1394接口1133接收并发送到CPU 1129时，处理 进入步骤S1062，并且CPU 1129根据预定加密算法对随机数R2进行加密， 以产生加密随机数E(R2)，并且通过IEEE-1394接口1133将它发送到连接单 元。
当在步骤S1060判定已从连接单元发送随机数R2时，连接单元被成功 认证为IEEE-1394单元。
然后，处理进入步骤S1063，并且CPU 1129控制IEEE-1394接口1133 以将用于请求连接单元的单元ID和功能信息的功能-信息请求命令以及主单 元1的单元ID和功能信息发送到连接单元。
单元ID是标识担当主单元1或辅单元2的电视接收器的唯一ID。
功能信息是与拥有功能相关的信息，并且包括例如要从外界接收的命令 的类型(例如，要从外界接收用于控制电源开关、音量调节、频道、亮度和锐 度的命令中的哪一个)、是否允许屏显(OSD显示)、是否允许静音状态，以及 是否允许睡眠状态。另外，功能信息还包括单元是否具有主单元的功能或辅 单元的功能。
主单元1可以将单元ID和功能信息例如存储在EEPROM 1130或图15 所示的配置ROM的vendor_dependent_information(厂商相关信息)字段中。
然后，处理进入步骤S1064，并且CPU 1129等待响应在步骤S1063发送 到连接单元的功能-信息请求命令而到达连接单元的单元ID和功能信息。CPU 1129通过IEEE-1394接口1133接收单元ID和功能信息，并且将它们存储在 EEPROM 1130中，并且处理进入步骤S1065。
在步骤S1065，CPU 1129参考存储在EEPROM 1130中的功能信息，以 判定连接单元是否为辅单元。当在步骤S1065判定连接单元是辅单元，换句 话说，连接单元被成功认证为辅单元时，处理跳过步骤S1066和S1067，并 且进入步骤S1068。CPU 1129将操作模式设为允许全屏显示的全屏显示可能 模式。处理返回。
另一方面，当在步骤S1065判定连接单元不是辅单元时，处理进入步骤 S1066，并且CPU 1129参考存储在EEPROM 1130中的功能信息以判定连接 单元是否为主单元。当在步骤S1066判定连接单元是主单元，换句话说，连 接单元被成功认证为主单元时，处理进入步骤S1067，并且CPU 1129与担当 主单元的连接单元执行主单元与辅单元调整处理。
具体地说，在这种情况下，由于主单元1连接到另一主单元，因此组成 可扩展电视系统的电视接收器中存在两个电视接收器担当主单元。在本实施 例中，要求可扩展电视系统中仅有一个主单元。因此，在步骤S1067，执行 主单元与辅单元调整处理，其中，判定是主单元1还是担当主单元的连接单 元用作担当主单元的电视接收器。
更具体地说，例如，判定最早成为可扩展电视系统一部分的那个主单元， 也就是，本实施例中的主单元1，用作担当主单元的电视接收器。没有判定 为用作主单元的其他主单元用作辅单元。
在步骤S1067执行主单元与辅单元调整处理之后，处理进入步骤S1068， 并且CPU 1129如上所述将操作模式设为全屏显示可能模式，并且处理返回。
当在步骤S1066判定连接单元不是主单元，换句话说，连接单元既不是 主单元又不是辅单元，因此连接单元没有被认证为主单元或辅单元时，处理 进入步骤S1069，并且CPU 1129将操作模式设为通常功能命令接收/提供模 式，其中，可以与连接单元传输现有AV/C命令集，但是不能传输用于提供 全屏显示功能的控制命令，并且处理返回。
换句话说，在这种情况下，由于连接单元既不是主单元又不是辅单元， 因此即使当该连接单元连接到主单元1时，也不提供全屏显示功能。然而， 在这种情况下，由于连接单元是授权IEEE-1394单元，因此允许在主单元1 与连接单元之间传输现有AV/C命令集。从而，在这种情况下，在主单元1 与连接单元之间，一个(或连接到主单元1的另一IEEE-1394单元)可以通过现 有AV/C命令集控制另一个。
下一步将参照图70所示的流程图描述作为组成图66所示的可扩展电视 系统的电视单元的辅单元2(图65)的处理。
首先，在步骤S1071，CPU 1149判定是否发生任何单元连接到端子面板 41或者通过IEEE-1394接口1153或IR接收部分1155发送任何命令的事件。 当判定没有发生任何事件时，处理返回到步骤S1071。
当在步骤S1071判定发生一单元连接到端子面板41的事件时，处理进入 步骤S1072，并且CPU 1149执行后述的图71所示的认证处理。然后，处理 返回到步骤S1071。
为判定是否有一单元连接到端子面板41，则需要检测该单元已连接到端 子面板41这一状态。该检测例如以与图68所示的步骤S1041所述相同的方 式来执行。
当在步骤S1071判定发生通过IEEE-1394接口1153或IR接收部分1155 发送任何命令的事件时，处理进入步骤S1073，并且辅单元2执行对应于该 命令的处理。然后，处理返回到步骤S1071。
下一步，将参照图71所示的流程图描述在图70所示的步骤S1072由辅 单元2执行的认证处理。
在由辅单元2执行的认证处理中，执行两种认证：新连接到端子面板41 的单元(必要时以下称作连接单元)是否为授权IEEE-1394单元，以及 IEEE-1394单元是否为主单元。
更具体地说，在由辅单元2执行的认证处理中，首先在步骤S1081，CPU 1149判定是否已从连接单元发送用于请求相互认证的认证请求命令。当判定 尚未发送该命令时，处理进入步骤S1082。
在步骤S1082，CPU 1149判定是否发生超时，也就是，是否自从开始认 证处理以来已过去预定时间。
当在步骤S1082判定已发生超时，换句话说，即使当开始认证请求命令 之后过去预定时间时也没有从连接单元发送认证请求命令时，处理进入步骤 S1083。CPU 1149判定连接单元不是授权IEEE-1394单元且认证失败，并且 将操作模式设为不与连接单元传输任何数据的独立模式。处理返回。
因此，辅单元2以与主单元1相同的方式，不与不是授权IEEE-1394单 元的连接单元传输任何数据，并且不执行IEEE-1394通信。
当在步骤S1082判定尚未发生超时时，处理返回到步骤S1081，并且以 后重复相同的过程。
当在步骤S1081判定已从连接单元发送认证请求命令，换句话说，在图 69所示的步骤S1051从担当连接单元的主单元1发送的认证命令由 IEEE-1394接口1153接收并发送到CPU 1149时，处理进入步骤S1084，并且 CPU 1149控制IEEE-1394接口1153以将对认证请求命令的响应发送到连接 单元。
在本实施例中，主单元1执行图69所示的步骤S1051到S 1053的处理， 并且辅单元2执行图71所示的步骤S1081、S1082和S1084的处理。还可以 是辅单元2执行图69所示的步骤S1051到S1053的处理并且主单元1执行图 71所示的步骤S1081、S1082和S1084的处理。
然后，处理进入步骤S1085，并且CPU 1149判定是否已从连接单元发送 随机数R1。当判定尚未发送随机数R1时，处理进入步骤S1086。
在步骤S1086，CPU 1149判定是否发生超时，也就是，是否自从CPU 1149 在步骤S1084发送对认证请求命令的响应以来已过去预定时间。
当在步骤S1086判定已发生超时，换句话说，即使当CPU 1149发送对 认证命令的响应之后过去预定时间时也没有从连接单元发送随机数R1时，处 理进入步骤S1083。CPU 1149如上所述判定连接单元不是授权IEEE-1394单 元，并且将操作模式设为不与连接单元传输任何数据的独立模式。处理返回。
当在步骤S1086判定尚未发生超时时，处理返回到步骤S1085，并且以 后重复相同的过程。
当在步骤S1085判定已从连接单元发送随机数R1，换句话说，在图69 所示的步骤S1055从担当连接单元的主单元1发送的随机数R1由IEEE-1394 接口1153接收并发送到CPU 1149时，处理进入步骤S1087，并且CPU 1149 根据预定加密算法对随机数R1进行加密，以生成加密随机数E’(R1)。另外， 在步骤S1087，CPU 1149控制IEEE-1394接口1153以将加密随机数E’(R1) 发送到连接单元。处理进入步骤S1089。
在步骤S1089，CPU 1149生成随机数(伪随机数)R2，并且控制IEEE-1394 接口1153以将随机数R2发送到连接单元。处理进入步骤S1090。
在步骤S1090，CPU 1149判定是否已从连接单元发送加密随机数E(R2)， 其中，加密随机数E(R2)是通过对随机数R2加密而在图69所示的步骤S1062 由担当连接单元的主单元1生成的。
当在步骤S1090判定尚未接收加密随机数E(R2)时，处理进入步骤S1091， 并且CPU 1149判定是否发生超时，也就是，是否CPU 1149发送随机数R2 之后已过去预定时间。
当在步骤S1091判定已发生超时，换句话说，即使当CPU 1149发送随 机数R2到连接单元之后过去预定时间时也没有从连接单元发送加密随机数 E(R2)时，处理进入步骤S1083，并且CPU 1149如上所述判定连接单元不是 授权IEEE-1394单元，并且将操作模式设为独立模式。处理返回。
另一方面，当在步骤S1091判定尚未发生超时时，处理返回到步骤S1090， 并且以后重复相同的过程。
当在步骤S1090判定已从连接单元发送加密随机数E(R2)，换句话说， 来自连接单元的加密随机数E(R2)由IEEE-1394接口1153接收并发送到CPU 1149时，处理进入步骤S1092，并且CPU 1149根据预定加密算法对在步骤 S1089生成的随机数R2进行加密，以生成加密随机数E’(R2)。处理进入步骤 S1093。
在步骤S1093，CPU 1149判定从连接单元发送的加密随机数E(R2)是否 等于在步骤S1092由辅单元2生成的加密随机数E’(R2)。
当在步骤S1093判定加密随机数E(R2)不等于加密随机数E’(R2)，换句 话说，连接单元所采用的加密算法(必要时包括用于加密的密钥)不同于CPU 1149所采用的加密算法时，处理进入步骤S1083，并且CPU 1149如上所述判 定连接单元不是授权IEEE-1394单元，并且将操作模式设为独立模式。处理 返回。
当在步骤S1093判定加密随机数E(R2)等于加密随机数E’(R2)，换句话 说，连接单元所采用的加密算法与CPU 1149所采用的加密算法相同从而连接 单元被成功认证为授权IEEE-1394单元时，处理进入步骤S1094，并且CPU 1149通过IEEE-1394接口1153接收在图69所示的步骤S1063由担当连接单 元的主单元1与功能-信息请求命令一起发送的单元ID和功能信息，并且将 它们存储在EEPROM 1150中。
然后，处理进入步骤S1095，并且CPU 1149控制IEEE-1394接口1153 以响应在步骤S1094从连接单元接收的功能-信息请求命令而将辅单元2的单 元ID和功能信息发送到连接单元。然后，处理进入步骤S1096。
辅单元2可以采用相同于参照图69所述的主单元1的方式，将单元ID 和功能信息存储在EEPROM 1150或图15所示的配置ROM的 vendor_dependent_information(厂商相关信息)字段中。
在步骤S1096，CPU 1149参考存储在EEPROM 1150中的功能信息，以 判定连接单元是否为主单元。当在步骤S1096判定连接单元是主单元，换句 话说，连接单元被成功认证为主单元时，处理进入步骤S1097，并且CPU 1149 将操作模式设为图69的步骤S1068所述的全屏显示可能模式。处理返回。
另一方面，当在步骤S1096判定连接单元不是主单元，换句话说，连接 单元没有被认证为主单元时，处理进入步骤S1098，并且CPU 1149将操作模 式设为通常功能命令接收/提供模式，其中，可以与连接单元传输现有AV/C 命令集，但是不能传输用于提供全屏显示功能的控制命令，并且处理返回。
换句话说，在这种情况下，由于连接单元不是主单元，因此即使该连接 单元连接到辅单元2，也不提供全屏显示功能。因此，仅通过将另一辅单元 连接到辅单元2，不提供全屏显示功能。然而，在这种情况下，由于连接单 元是授权IEEE-1394单元，因此允许在辅单元2与连接单元之间传输现有 AV/C命令集。从而，在这种情况下，在辅单元2与连接单元(包括其他辅单 元)之间，一个可以通过现有AV/C命令集控制另一个。
下一步，当作为组成图66所示的可扩展电视系统的电视接收器的主单元 1和辅单元2分别成功完成参照图69和图71所述的认证处理并且主单元1 和辅单元2将它们的操作模式设为全屏显示可能模式时，可扩展电视系统 1161可以执行如图72A和图72B所示的全屏显示。
换句话说，例如，当主单元1如图72A所示显示图像数据时，如果操作 控制器15(或35)来指示执行全屏显示，则可扩展电视系统1161在组成可扩展 电视系统的电视接收器的全部显示屏上显示主单元1所显示的图像数据，如 图72B所示。
具体地说，当主单元1输出节目图像和声音(显示图像和输出声音)时， 例如，如果用户操作控制器15(图7)中的菜单按钮开关54从而接通该开关时， 控制器15发射对应于用户操作的红外线。红外线由主单元1(图64)的IR接收 部分1135接收，并且在主单元1的CRT 11上显示菜单屏幕。表示全屏显示 的图标(必要时以下称作全屏显示图标)例如显示在菜单屏幕上。当用户操作控 制器15来点击全屏显示图标时，主单元1和辅单元2执行全屏显示。
换句话说，在这种情况下，主单元1的CPU 1129(图64)在显示在CRT 11 上的图像数据区域中获取要由主单元1显示的图像数据区域和要由各辅单元 2ij显示的图像数据区域。另外，主单元1的CPU 1129控制IEEE-1394接口 1133以将要在各辅单元2ij中显示的图像数据与用于指示执行全屏显示的全屏 显示命令一起发送到辅单元2ij。主单元1的CPU 1129例如通过插值将要由 主单元1显示的区域的图像数据转换成具有CRT 11的全屏尺寸的图像数据， 并且通过选择器1127和NTSC编码器1128将它发送到CRT 11，并且显示在 其上。根据从主单元1发送的全屏显示命令，各辅单元2ij执行与主单元1相 同的处理，以在整个CRT 31上显示从主单元1发送的图像数据。
通过前述操作，组成可扩展电视系统1161的电视接收器在全部显示屏幕 上显示图像数据，如图72B所示。
当显示在组成可扩展电视系统1161的电视接收器的全部显示屏幕上的 图像数据称作全屏图像数据时，可扩展电视系统1161不显示全屏图像数据的 一部分。由于可扩展电视系统1161实际上具有组成可扩展电视系统1161的 电视接收器的机壳，因此，机壳位于相邻电视接收器的边界处，并且在这些 边界处不显示图像。在图72A和图72B中，为简化这些图，省略位于相邻电 视接收器的边界处的机壳。实际上，机壳存在于相邻电视接收器的边界处， 因此，尽管机壳只是电视接收器的一部分，但在电视接收器的机壳上不显示 全屏图像数据，并且图像数据被划分。
然而，由于人的视觉具有从图像的周围部分对被细线隐藏的图像一部分 进行插值的插值功能，因此当观看全屏图像数据时上述问题不是一个大问题。
在如上所述显示全屏图像数据之后，当用户操作控制器15(图7)来在CRT 11上显示菜单屏幕，而且在菜单屏幕上点击全屏显示图标，从而控制器15 上的操作所对应的表示用于指示终止全屏显示的全屏显示终止命令的红外线 从控制器15发射，由IR接收部分1135接收并发送到CPU 1129时，例如， 主单元1的显示返回到如图72A所示的通常尺寸显示。在这种情况下，通过 IEEE-1394接口1133将全屏显示终止命令从主单元1发送到各辅单元2ij，从 而各辅单元2ij的显示返回到原始状态。
在本实施例中，只有当成功执行参照图69和图71所述的认证时，才提 供全屏显示功能。即使当认证失败时，也可以提供全屏显示功能。
下一步，将描述由主单元1中的安全系统部分1137(图64)执行的用于向 用户警告出现紧急状况的处理。
辅单元2的安全系统部分1157(图65)也执行用于向用户警告出现紧急状 况的处理。由于该处理与由主单元1的安全系统部分1137所执行相同，因此 省略其描述。
用于向用户警告出现紧急状况的处理可以由担当主单元1或辅单元的电 视接收器单独执行。以与提供全屏显示功能时相同的方式，可以是只有当成 功执行参照图69和图71所述的认证时才执行该处理。
图73示出图64所示的安全系统部分1137的数据处理部分1137C的示 例结构。
在安全系统部分1137中，从摄像机1162发送且由无线接口1137B接收 的图像数据和音频数据发送到图像处理部分1191和音频处理部分1192。
图像处理部分1191例如在每一帧或每一域中检测从无线接口1137B发 送的图像数据的特征量，并且将它发送到波动计算部分1194。
更具体地说，图像处理部分1191由帧存储器1201、差值运算部分1202 和差值存储器1203形成。帧存储器1201根据存储器控制器1193的控制，临 时存储从无线接口1137B发送的图像数据。差值运算部分1202将存储在帧存 储器1201中的图像数据时间顺序帧之一顺序设为指定帧，并且计算指定帧的 图像数据与比指定帧早一帧的帧(必要时以下称作前一帧)的图像数据之间的 差值，并且将由差值形成的差值图像数据发送到差值存储器1203。差值存储 器1203临时存储从差值运算部分1202发送的以帧为单位的差值图像数据。
音频处理部分1192每隔预定数目的帧检测从无线接口1137B发送的音 频数据的特征量，并且将它发送到波动计算部分1194。
更具体地说，音频处理部分1192由环形缓冲器1206、积分运算部分1207 和积分存储器1208形成。环形缓冲器1206根据存储器控制器1193的控制， 临时存储从无线接口1137B发送的音频数据。积分运算部分1207将存储在环 形缓冲器1206中的均由预定数目的时间顺序音频数据样本形成的多个帧之 一顺序设为指定帧，积分(相加)组成指定帧的音频数据样本，并且将积分值发 送到积分存储器1208。积分存储器1208临时存储从积分运算部分1207发送 的以帧为单位的音频数据积分值。
积分运算部分1207计算以帧为单位的音频数据的积分值，并且还例如可 以提取组成帧的音频数据的一个预定样本。
存储器控制器1193为图像处理部分1191的帧存储器1201和音频处理部 分1192的环形缓冲器1206控制写入地址和读取地址。
波动计算部分1194从图像处理部分1191的差值存储器1203读取以帧为 单位的差值图像数据作为帧图像数据的特征量，并且还从音频处理部分1192 的积分存储器1208读取以帧为单位的积分值作为帧音频数据的特征量。另 外，波动计算部分1194获取图像数据特征量中的波动分量和音频数据特征量 中的波动分量，并且将它们作为波动信息发送到后一级的警告处理部分 1137D(图64)。
在以前述方式构造的数据处理部分1137C中，执行用于处理从无线接口 1137B发送的图像数据和音频数据的图像数据处理和音频数据处理。
将参照图74A和图74B所示的流程图描述由数据处理部分1137C执行的 图像数据处理和音频数据处理。
首先将参照图74A的流程图描述图像数据处理。
在图像数据处理中，首先在步骤S1101，帧存储器1201存储从无线接口 1137B发送的一帧图像数据。处理进入步骤S1102。在步骤S1102，差值运算 部分1202将在紧邻之前的步骤S1101的处理中存储在帧存储器1201中的图 像数据帧设为指定帧，并且读取指定帧的图像数据，以及读取前一次在步骤 S1101的处理中存储在帧存储器1201中的前一帧的图像数据。此外，在步骤 S1102，差值运算部分1202从组成指定帧图像数据的各像素的像素值中减去 组成前一帧图像数据的对应像素的像素值，并且获取所获得差值的绝对值以 生成以这些绝对值为像素值的差值图像数据。指定帧的差值图像数据发送到 差值存储器1203并且存储在其中。
然后，处理进入步骤S1103，并且波动计算部分1194从差值存储器1203 中读取指定帧的差值图像数据，并且对它进行二值化。更具体地说，波动计 算部分1194比较组成差值图像数据的各像素的像素值与预定阈值。此外，当 像素值大于(或者等于或大于)预定阈值时，波动计算部分1194将像素值设为 例如“1”，而当像素值等于或小于(小于)预定阈值时，波动计算部分1194将 像素值设为例如“0”。处理进入步骤S1104。
在步骤S1104，波动计算部分1194对指定帧中如上所述具有像素值“0” 和“1”的图像数据(必要时以下称作二值化图像数据)的特定像素进行计数。 更具体地说，波动计算部分1194对二值化图像数据中像素值例如为“0”和 “1”中的“1”的像素计数，并且将它输出到警告处理部分1137D作为指定 帧图像数据的波动信息。
然后，等待从无线接口1137B发送下一帧的图像数据。处理进入步骤 S1101，并且以后重复相同的过程。
下一步将参照图74B所示的流程图描述音频数据处理。
在音频数据处理中，首先，在步骤S1111，环形缓冲器1206存储从无线 接口1137B发送的一帧音频数据。处理进入步骤S1112。在步骤S1112，积分 运算部分1207将在紧邻之前的步骤S1111的处理中存储在环形缓冲器1206 中的音频数据帧设为指定帧，读取指定帧的音频数据，并且计算指定帧的音 频数据样本之和，也就是，其积分。音频数据的积分值发送到积分存储器1208 并且存储在其中。
然后，处理进入步骤S1113，并且波动计算部分1194读取指定帧的音频 数据和比指定帧早一帧的帧(前一帧)的音频数据的积分值，并且获取它们之间 的差值。波动计算部分1194输出该差值到警告处理部分1137D作为指定帧音 频数据的波动信息。
然后，等待从无线接口1137B发送下一帧的音频数据。处理进入步骤 S1111，并且以后重复相同的过程。
下一步，图75示出图64所示的警告处理部分1137D的示例结构。
波动信息存储部分1211临时存储如参照图73、图74A和图74B所述从 数据处理部分1137C发送的图像数据和音频数据的波动信息。
波动信息分析部分1212分析存储在波动信息存储部分1211中的图像数 据和音频数据的波动信息，以获取图像数据和音频数据的特征量在时间上的 波动分量，并且将它们发送到异常事情判定部分1213。
异常事情判定部分1213判定从波动信息分析部分1212发送的图像数据 和音频数据的特征量在时间上的波动分量是否满足存储在异常事情条件存储 部分1214中的异常事情条件，并且将判定结果发送到警告处理请求部分 1215。
警告处理请求部分1215请求安全控制器1137(图64)根据从异常事情判 定部分1213发送的判定结果，执行用于向用户警告出现紧急状况(异常事情) 的警告处理。
异常事情条件存储部分1214存储当异常事情判定部分1213判定发生异 常事情时图像数据和音频数据的特征量在时间上的波动分量应满足的异常事 情条件。
在异常事情条件存储部分1214中，可以预先指定错误条件，或者可以存 储由用户指定的异常事情条件。具体地说，用户可以操作例如控制器15以输 入异常事情条件。通过操作控制器15输入的异常事情条件通过IR接收部分 1135、CPU 1129和安全控制器1137A发送到警告处理部分1137D的异常事 情条件存储部分1214，并且存储在其中。
在如上所述构造的警告处理部分1137D中，根据图像数据和音频数据的 波动信息判定是否发生异常事情，并且当发生异常事情时，执行用于向用户 警告异常事情的异常事情判定/警告处理。
将参照图76所示的流程图描述由警告处理部分1137D执行的异常事情 判定/警告处理。
波动信息存储部分1211连续接收从前一级的数据处理部分1137C输出 的图像数据和音频数据的波动信息，并且临时存储波动信息。
在步骤S1121，波动信息分析部分1212分析存储在波动信息存储部分 1211中的图像数据和音频数据的波动信息，以获取图像数据和音频数据的特 征量在时间上的波动分量，并且将它们发送到异常事情判定部分1213。处理 进入步骤S1122。
在步骤S1122，异常事情判定部分1213判定从波动信息分析部分1212 发送的图像数据和音频数据的特征量在时间上的波动分量是否满足存储在异 常事情条件存储部分1214中的异常事情条件。
当在步骤S1122判定从波动信息分析部分1212发送的图像数据和音频数 据的特征量在时间上的波动分量不满足异常事情条件时，等待将下一图像数 据和音频数据的波动信息存储在波动信息存储部分1211中。处理进入步骤 S1121。
当在步骤S1122判定从波动信息分析部分1212发送的图像数据和音频数 据的特征量在时间上的波动分量满足异常事情条件时，异常事情判定部分 1213将表示满足异常事情条件的判定结果发送到警告处理请求部分1215。处 理进入步骤S1123。
在步骤S1123，响应从异常事情判定部分1213发送的表示满足异常事情 条件的判定结果，警告处理请求部分1215请求安全系统部分1137(图64)执行 用于向用户警告出现紧急状况的警告处理。等待将下一图像数据和音频数据 的波动信息存储在波动信息存储部分1211中，并且处理返回到步骤S1121。
下一步，将参照图77A到图77D和图78A到图78I进一步描述异常事情 判定部分1213的处理。
异常事情判定部分1213判定当图像数据和音频数据的波动信息例如以 不同于以前的方式变化时满足异常事情条件。
具体地说，例如，当不大幅变化的波动信息突然大幅变化时或者当在一 定程度上变化的波动信息突然不变化时，波动信息分析部分1212判定满足异 常事情条件。
例如，当波动信息分析部分1212对波动信息求微分(顺序计算相邻的时 间连续波动信息之间的差值)，并且异常事情判定部分1213判定微分绝对值 是否等于或大于预定阈值时，可以判定不大幅变化的波动信息是否突然大幅 变化。在这种情况下，预定阈值作为异常事情条件存储在异常事情条件存储 部分1214中。
例如，当异常事情判定部分1213判定波动信息是否在等于或长于预定时 间的时间内持续具有接近于零的值时，可以判定在一定程度上变化的波动信 息是否突然不变化。在这种情况下，预定时间作为异常事情条件存储在异常 事情条件存储部分1214中。
图77A到图77D示出由摄像机1162拍摄的图像数据及其波动信息的例 子。
例如，如图77A所示，当摄像机1162正在拍摄正在屋内行走的老年人 的图像时，图像数据的波动信息缓和变化，如图77B所示。例如，如图77C 所示，当摄像机1162拍摄到一直在行走但突然跌倒的老年人的图像时，图像 数据的波动信息大幅变化，并且以后几乎为零，如图77D所示。
因此，当将图像数据的波动信息突然超过预定阈值的状态，也就是，图 像数据的波动信息的微分值变得等于或大于预定阈值的状态设为异常事情条 件时，可以检测老年人跌倒的异常状态。通过向用户警告该异常状态，老年 人可以得到快速的护理(拯救)。
如图77C所示，如果一个人突然跌倒，则图像数据的波动信息突然超过 预定阈值，并且以后变得接近于零。因此，图像数据的波动信息的微分值变 得等于或大于预定阈值，并且以后图像数据的波动信息变得接近于零。当将 波动信息在预定时间或更长时间内持续接近于零的状态设为异常事情条件 时，可以检测一个人跌倒的异常状态。
图78A到图78I示出由摄像机1162拍摄的图像数据和音频数据及其波动 信息的例子。
例如，如图78A所示，当摄像机1162正在拍摄正在屋内爬行的婴儿的 图像时，图像数据和音频数据的波动信息缓和变化，如图78B和图78C所示。 例如，如图77D所示，当摄像机1162拍摄到一直在屋内爬行但进入睡眠的婴 儿的图像时，图像数据和音频数据的波动信息变得几乎为零，并且变化很小， 如图78E和图78F所示。
因此，在这种情况下，当将图像数据和音频数据的波动信息变得接近于 零并且在预定时间内持续接近于零的状态设为异常事情条件时，可以检测婴 儿进入睡眠的异常状态。通过向用户警告该异常状态，用户可以迅速采取某 行动如给婴儿盖一个毯子。
如图78G所示，如果一直在睡觉的婴儿突然醒来并且开始啼哭，则由摄 像机1162拍摄的图像数据和音频数据的波动信息变得如同图78H和图78I 所示。
在这种情况下，正在啼哭的婴儿比睡觉时活动多，但是比爬行时活动少， 图像数据的波动信息变化不大，如图78H所示。
然而，当正在睡觉的婴儿开始啼哭时，由于婴儿的啼哭是间断性的，因 此音频数据的波动信息突然变成大值，并且在特定时间内持续具有大值，如 图78I所示。
因此，在这种情况下，当将音频数据的波动信息突然变成大值并且在特 定时间内持续具有大值的状态设为异常事情条件时，可以检测婴儿醒来并在 啼哭的异常状态。通过向用户警告该异常状态，可以迅速报告婴儿已醒。
下一步，如参照图75和76所述，当出现满足异常事情条件的异常事情 状态时，警告处理部分1137D请求安全控制器1137A(图64)执行用于向用户 警告出现紧急状况的警告处理。将参照图79A和图79B以及图80A和图80B 描述当安全控制器1137A接收到警告处理请求时由它执行的警告处理。
当安全控制器1137A接收到警告处理请求时，例如，安全控制器1137A 请求CPU 1129使选择器1127选择从无线接口1137B输出的图像数据和音频 数据。
这样，选择器1127选择从无线接口1137B输出的图像数据和音频数据， 并且将它们发送到NTSC编码器1128和放大器1138。发送到NTSC编码器 1128的图像数据发送到CRT 11，并且显示在其上。发送到放大器1138的音 频数据发送到扬声器单元12L和12R，并且从其输出。
结果，CRT 11显示从摄像机1162发送且由无线接口1137B接收的图像 数据，并且扬声器单元12L和12R输出从摄像机1162发送且由无线接口 1137B接收的音频数据。
具体地说，例如，当组成可扩展电视系统1161的主单元1和辅单元2ij 如图79A所示输出电视广播节目的特定频道图像数据和音频数据时，如果辅 单元213的警告处理部分1157D将警告处理请求输出到安全控制器1157A，则 辅单元213的CRT 31上的显示从目前所接收的电视广播节目图像数据变成从 正在发送图像数据和音频数据到辅单元213的摄像机1162发送的图像数据， 如图79B所示。在图79A和图79B所示的实施例中，辅单元213的CRT 31 上的显示从电视广播节目图像数据变成从摄像机1162发送的显示一个人跌 倒的图像数据。
此外，在在这种情况下，在辅单元213中，从扬声器单元32L和32R(图 65)输出从摄像机1162发送的音频数据。
在这种情况下，即使当用户正在观看电视广播节目时，也可以在正在发 送图像数据和音频数据到辅单元213的摄像机1162正在摄像的情况下立即知 道发生异常事情。
可以是扬声器单元32L和32R输出预定警告音(pipipi...)来代替从摄像机 1162发送的音频数据，如图79B所示。
在上述情况下，辅单元213的CRT 31上的显示从所接收的电视广播节目 图像数据变成从摄像机1162发送的图像数据，如图79B所示。例如，当辅单 元213的电源断开时，可以先接通辅单元213的电源，然后将从摄像机1162发 送的图像数据显示在CRT 31上。
此外，在可扩展电视系统1161中，从正在对发生异常事情的环境进行摄 像的摄像机1162发送的图像数据显示在一直在接收从摄像机1162发送的图 像数据和音频数据的电视接收器上。另外，如图80A和80B所示，可以是以 全屏方式显示从摄像机1162发送的图像数据。
具体地说，例如，当组成可扩展电视系统1161的主单元1和辅单元2ij 如图80A所示输出电视广播节目的特定频道图像数据和音频数据时，如果组 成可扩展电视系统1161的任一电视接收器输出警告处理请求，则切换组成可 扩展电视系统1161的所有电视接收器的显示，并且可以以全屏方式显示输出 警告处理请求的电视接收器正在接收的从摄像机1162发送的图像数据，如图 80B所示。
同样在这种情况下，用户可以立即知道发生异常事情。
当执行全屏显示时，由于不知道是在哪一个摄像机1162正在摄像的环境 中发生异常事情，因此最好是在可扩展电视系统1161中一直在接收从正在拍 摄发生异常事情的环境的摄像机1162发送的图像数据和音频数据的电视接 收器的全部或部分显示屏幕上，显示表示正在发生异常事情的消息等。
全屏显示可以例如在发生紧急级别高的异常事情时执行。具体地说，当 发生紧急级别不高的异常事情时，只有一直在接收从正在对发生异常事情的 环境摄像的摄像机1162发送的图像数据和音频数据的电视接收器才切换其 显示，如参照图79A和图79B所述，并且当发生紧急级别高的异常事情时， 切换组成可扩展电视系统1161的所有电视接收器的显示，并且实现全屏显 示，如图80A和图80B所示。由于图像在全屏显示中是大幅显示的，因此可 以使用户知道发生紧急级别高的异常事情。
还可以是从正在对发生异常事情的环境摄像的摄像机1162发送的图像 数据(必要时以下称作紧急图像数据)的尺寸根据异常事情的紧急级别而在可 扩展电视系统1161上变化。具体地说，当紧急级别低时，紧急图像数据可以 采用与组成可扩展电视系统1161的一个电视接收器的显示屏幕的尺寸来显 示，当紧急级别中等时，可以采用2×2相邻电视接收器的显示屏幕的尺寸来 显示，而当紧急级别高时，可以采用3×3相邻电视接收器的显示屏幕的尺寸 来显示。
紧急级别可以与异常事情条件一起存储在异常事情条件存储部分 1214(图75)中。在这种情况下，可以根据所满足的异常事情条件来识别紧急 级别。
下一步，图81示出担当组成可扩展电视系统1161的主单元1的电视接 收器的另一示例结构。在该图中，相同于图64所用的符号分配给对应于图 64所示的部分，并且如果没有必要，省略其描述。换句话说，除了新提供警 告显示部分1139之外，图81所示的主单元1基本上以与图64相同的方式来 构造。
警告显示部分1139根据CPU 1129的控制来接通或闪烁。
担当图65所示的辅单元2的电视接收器也可以采用与图81所示的主单 元1相同的方式，装备有警告显示部分。
当在可扩展电视系统1161中主单元1装备有警告显示部分1139并且辅 单元2也装备有警告显示部分时，如果发生异常事情，警告显示部分1139可 以接通或闪烁，如图82A和图82B所示。
具体地说，例如，当组成可扩展电视系统1161的主单元1和辅单元2ij 如图82A所示输出电视广播节目的特定频道图像数据和音频数据时，如果主 单元1的警告处理部分1137D将警告处理请求输出到安全控制器1137A，则 主单元1的CRT 11上的显示从目前所接收的电视广播节目图像数据变成从正 在发送图像数据和音频数据到主单元1的摄像机1162发送的图像数据(紧急 图像数据)，如图82B所示。
此外，安全控制器1137A请求CPU 1129接通或闪烁警告显示部分1139， 从而通常断开的警告显示部分1139如图82B所示接通或闪烁。
另外在这种情况下，即使当用户正在观看电视广播节目时，用户也可以 立即知道在正在发送图像数据和音频数据到主单元1的摄像机1162正在摄像 的环境中发生异常事情。
当紧急级别低时，可以仅接通或闪烁警告显示部分1139或者仅输出报警 音而不切换到紧急图像数据的显示。
下一步，图83示出担当组成可扩展电视系统1161的主单元1的电视接 收器的另一示例结构。在该图中，相同于图64所用的符号分配给对应于图 64所示的部分，并且如果没有必要，省略其描述。
具体地说，图64所示的主单元1是用于接收数字广播的电视接收器，而 图83所示的主单元1是用于接收模拟广播的电视接收器。
调谐器1221对预定频道中的模拟电视广播信号进行检测和解调。调谐器 1221将通过解调而获得的图像数据发送到Y/C分离部分1222，并且将音频数 据发送到选择器1127。
Y/C分离部分1222从调谐器1221的输出中分离亮度信号Y和色彩信号 R-Y与B-Y，并且将它们发送到选择器1127。
矩阵电路1223必要时将转换从选择器1127发送的图像数据的色彩空间， 并且将它发送到CRT 11。
即使以前述方式构造的用于接收模拟广播的电视接收器也可以用来组成 可扩展电视系统1161。
担当辅单元2的电视接收器也可以采用与担当图83所示的主单元1的电 视接收器相同的方式，作为用于接收模拟广播的电视接收器来构造。
上述处理序列可以采用硬件或软件来实现。当采用软件来实现这些处理 序列时，组成软件的程序安装到通用计算机等中。
图84示出根据一个实施例的其中安装有用于执行上述处理序列的程序 的计算机的示例结构。
程序可以预先记录在担当内置于计算机的记录介质的硬盘305或ROM 303中。
或者，程序可以临时性或永久性地记录到可移动记录介质311如软盘、 CD-ROM(compact disc read-only memory，光盘只读存储器)、 MO(magneto-optical，磁光)盘、DVD(digital versatile disk，数字多功能盘)、磁 盘或半导体存储器中。该可移动记录介质311可以作为所谓的软件包来提供。
程序可以从如上所述的可移动记录介质311安装到计算机中。另外，程 序可以通过用于数字卫星广播的人造卫星以无线方式从下载站点传输到计算 机，或者通过网络如LAN(局域网)或因特网以有线方式传输到计算机；并且 以这种方式传输的程序可以由通信部分308接收，并且安装到内置于计算机 的硬盘305中。
计算机包括CPU(中央处理单元)302。CPU 302通过总线301连接到输入 输出接口310。当用户操作由键盘、鼠标、麦克风等形成的输入部分307来 通过输入输出接口310输入命令时，CPU 302根据该命令执行存储在ROM(只 读存储器)303中的程序。或者，CPU 302将存储在硬盘305中的程序；通过 卫星或网络传输、由通信部分308接收且安装到硬盘305中的程序；或者从 可移动记录介质311读取且安装到硬盘305中的程序载入到RAM(随机访问 存储器)304中，并且执行它。这样，CPU 302执行基于上述流程图的处理或 者通过上述方框图的结构执行的处理。然后，CPU 302根据需要例如从由 LCD(liquid-crystal display，液晶显示器)、扬声器等形成的输出部分306通过 输入输出接口310输出处理结果；从通信部分308发送处理结果；或者将处 理结果记录在硬盘305中。
在本说明书中，描述用于使计算机执行各种处理的处理步骤不一定按照 流程图中所述的次序以时间顺序方式来处理，并且包括以并行或独立方式执 行的处理(如并行处理或对象处理)。
程序可以由一个计算机处理，或者可以通过分布处理由多个计算机执行。 此外，程序可以传输到远端计算机来执行。
组成可扩展电视系统的电视接收器的销售价格可以例如根据电视接收器 是担当主单元还是辅单元以及如果它担当辅单元则在使用该辅单元之前已使 用多少辅单元而不同。
具体地说，由于如上所述如果没有主单元则不能在可扩展电视系统中提 供全屏显示功能，因此主单元具有高价值，并且主单元的销售价格可以设高。
可以预料用户在购买主单元之后必要时将额外购买多个辅单元。可以将 开始若干辅单元的销售价格设得例如低于主单元的销售价格，但高于普通电 视接收器的价格。还可以将以后购买的辅单元的销售价格进一步设低。
担当可扩展电视系统中的主单元的电视接收器可以例如通过将安全系统 部分1137加到普通数字电视接收器并且改变由CPU 1129执行的程序来构造。 因此，由于担当可扩展电视系统中的主单元的电视接收器可以通过使用普通 数字电视接收器来相对容易地制造，因此在考虑如上所述的全屏显示功能和 警告功能的情况下提供高成本效率。这一点同样适用于担当辅单元的电视接 收器。
本发明还可以应用于不带用于输出从外界发送的图像和声音的调谐器的 显示设备，以及作为具有内置调谐器的显示设备的电视接收器。
此外，在图66所示的安全系统中，图像数据和音频数据可以不是以无线 方式而是有线方式(如IEEE-1394通信或USB(universal serial bus，通用串行总 线)通信)从摄像机1162发送到组成可扩展电视系统1161的电视接收器。
除了为安全系统准备的摄像机之外，例如，还可以采用已经安装的用于 所谓“门内外通话器(Doorphone)”的摄像机和监视摄像机作为摄像机1162。
此外，安全系统可以用于监视婴儿和老年人，以及监视提供给浴缸的热 水量，以及当水煮沸时发出报警声的水壶中的水煮沸情况。
在本实施例中，处理应用于由普通摄像机1162拍摄的图像数据。可以采 用例如热感摄像机作为摄像机1162，并且处理可以应用于从摄像机获得的表 示温度分布的图像数据。
此外，还可以感测红外线来监测温度变化，并且发出警告。
工业应用性
如上所述，根据本发明，当连接和使用大量显示设备时，实现比当单独 使用显示设备时更高级的功能。
此外，根据本发明，用户可以通过现有电视接收器等来容易地识别异常 事情(紧急状况)，这样，可以有效使用现有电视接收器。
本申请是申请日为2002年12月12日、申请号为02807430.0、发明名称 为“显示设备和控制方法”的发明专利申请的分案申请。