无线装置转让专利

申请号 : CN201610437788.1

文献号 : CN107135193B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 裵京南黄正焕申致镐黄善晧

申请人 : LG电子株式会社

摘要 :

一种支持Wi‑Fi直连服务的无线装置,该无线装置包括:显示器;通信单元;以及控制器,该控制器被配置为使得:将包括受所述无线装置支持的多个分辨率在内的分辨率信息发送到第二无线装置;如果第一图像的分辨率不是所述多个分辨率中的一个,则从所述第二无线装置接收包括所述第一图像和第二图像在内的整个图像;当接收到所述整个图像时通过将所述第二图像从所接收的整个图像中去除来显示所述第一图像;并且如果所述第一图像的分辨率被包括在所述分辨率信息中,则从所述第二无线装置接收所述第一图像,而无需所述第二图像,所述第二图像是被添加到所述第一图像以使得所接收的整个图像的分辨率与所述多个分辨率中的一个对应的图像。

权利要求 :

1.一种支持Wi-Fi直连服务的第一无线装置,该第一无线装置包括:显示器;

通信单元,该通信单元被配置为与第二无线装置通信;以及

控制器,该控制器被配置为:

通过使用实时流协议RTSP来将分辨率信息发送到所述第二无线装置,所述分辨率信息包括所述第一无线装置所支持的多个分辨率;

如果第一图像的分辨率不是所述多个分辨率中的一个,则从所述第二无线装置接收包括所述第一图像和第二图像在内的整个图像,且通过将所述第二图像从所接收的整个图像中去除来显示所述第一图像;并且如果所述第一图像的分辨率被包括在所述分辨率信息中,则从所述第二无线装置接收所述第一图像,而无需所述第二图像,其中,所述第二图像是被添加到所述第一图像以使得所接收的整个图像的分辨率与所述多个分辨率中的一个对应的图像。

2.根据权利要求1所述的第一无线装置,其中,由所述第二无线装置从所述多个分辨率中选择所述整个图像的分辨率。

3.根据权利要求2所述的第一无线装置,其中,所述控制器还被配置为使得所述通信单元从所述第二无线装置接收指示要通过使用所述实时流协议来递送具有从所述多个分辨率中选择的分辨率的图像的消息。

4.根据权利要求1所述的第一无线装置,其中,所述第二图像是黑色图像。

5.根据权利要求1所述的第一无线装置,其中,所述第一图像是当接收所述整个图像或所述第一图像时由所述第二无线装置当前显示的图像。

6.根据权利要求1所述的第一无线装置,其中,所述控制器还被配置为使得所述显示器:在从所述第二无线装置接收所述整个图像之前,经由所述显示器的整个屏幕来显示媒体内容的图像;并且在接收到所述整个图像之后,通过将所述第二图像去除,经由所述显示器的部分屏幕来显示所述第一图像。

7.根据权利要求6所述的第一无线装置,其中,所述第一图像被显示为与所述媒体内容的图像交叠。

8.根据权利要求7所述的第一无线装置,其中,所述控制器还被配置为使得所述显示器显示用于控制所述第一图像的尺寸或透明度中的至少一个的图像调整窗口,使得当在所述显示器的第二区域上显示所述第一图像时,在所述显示器的第一区域上显示所述图像调整窗口。

9.根据权利要求8所述的第一无线装置,其中,所述控制器还被配置为使得所述第一图像响应于经由所述图像调整窗口施加的输入而减小所述第一图像的大小,使得大小被减小的第一图像部分地与所述媒体内容的图像交叠。

10.根据权利要求8所述的第一无线装置,其中,所述控制器还被配置为使得所述第一图像响应于经由所述图像调整窗口施加的输入而增加所述第一图像的透明度,使得所述媒体内容的图像通过具有被增加的透明度的所述第一图像是可见的。

11.根据权利要求6所述的第一无线装置,其中,所述控制器还被配置为:使得所述显示器当在所述显示器的第二区域上显示所述第一图像的同时在所述显示器的第一区域上显示控制窗口,该控制窗口包括用于控制所述第二无线装置的操作的至少一个虚拟按钮;以及响应于经由所述至少一个虚拟按钮施加的输入来控制所述第二无线装置的操作。

12.根据权利要求6所述的第一无线装置,其中,所述控制器还被配置为使得所述显示器响应于用于选择经由所述部分屏幕显示的所述第一图像的输入来显示在所述第一图像的顶部和底部处或所述第一图像的左部和右部处恢复的所述第二图像。

13.根据权利要求12所述的第一无线装置,其中,所述控制器还被配置为:使得所述显示器在所述第二图像的区域上显示控制窗口,该控制窗口包括用于控制所述第二无线装置的操作的至少一个虚拟按钮;以及响应于经由所述至少一个虚拟按钮施加的输入来控制所述第二无线装置的操作。

14.根据权利要求1所述的第一无线装置,其中,所述控制器还被配置为使得所述显示器:在所述显示器的整个屏幕上显示所述第一图像,而无需显示所述第二图像;以及显示用于调整所述第一图像的大小或位置的至少一个图像调整窗口,所述至少一个图像调整窗口与所述第一图像交叠。

15.根据权利要求1所述的第一无线装置,其中,当所述第二无线装置的显示模式是肖像模式时,由所述第二无线装置当前显示的所述第一图像的分辨率不被包括在所述多个分辨率中。

16.根据权利要求15所述的第一无线装置,其中,所述控制器还被配置为当所述第二无线装置的所述显示模式从所述肖像模式被切换到风景模式时,自动地将所述第一图像切换到所述风景模式。

17.根据权利要求1所述的第一无线装置,其中,能够由所述第一无线装置支持的分辨率中的每一个与水平长度比垂直长度更长的宽高比对应。

18.根据权利要求1所述的第一无线装置,其中,所述控制器还被配置为在执行连接建立以与所述第二无线装置通信之前,检测所述第二无线装置。

19.一种用于控制支持Wi-Fi直连服务的第一无线装置的方法,该方法包括以下步骤:经由通信单元与第二无线装置通信;

通过使用实时流协议RTSP来将分辨率信息发送到所述第二无线装置,所述分辨率信息包括所述第一无线装置所支持的多个分辨率;

如果由所述第二无线装置当前显示的第一图像的分辨率不是所述多个分辨率中的一个,则从所述第二无线装置接收包括所述第一图像和第二图像在内的整个图像;以及通过将所述第二图像从所接收的整个图像中去除而在显示器上显示所述第一图像,其中,所述第二图像是被添加到所述第一图像以使得所接收的整个图像的分辨率与所述多个分辨率中的一个对应的图像。

说明书 :

无线装置

技术领域

[0001] 本公开涉及一种无线装置。

背景技术

[0002] 随着信息通信技术的最近发展,正在开发各种无线通信技术。在这些无线通信技术当中,无线局域网(WLAN)是一种通过使用诸如个人数字助理(PDA)、膝上型计算机和便携式多媒体播放器(PMP)的便携式终端、基于无线频率技术在家中、商务场所或特定服务提供区域中无线地接入互联网的技术。
[0003] 作为用于允许装置无需在WLAN系统中需要的接入点(AP)而很容易地彼此连接的直接通信技术,讨论了Wi-Fi直连或Wi-Fi对等(P2P)的引入。根据Wi-Fi直连标准技术,装置在无需复杂的设置过程的情况下被连接,并且为了向用户提供各种服务,可以支持按照典型WLAN系统的通信速度的数据交换操作。
[0004] 近来已使用了各种Wi-Fi支持装置,并且在这些装置当中,用于在无需AP的情况下在Wi-Fi装置之间通信的Wi-Fi直连支持装置的数量正在持续增加。Wi-Fi联盟(WFA)讨论了用于引入一种使用Wi-Fi直连链路来支持各种服务(例如,发送、播放、显示和打印)的平台的技术。这可以被称为Wi-Fi直连服务(WFDS)。
[0005] WFDS中的显示服务是用于允许P2P装置之间的屏幕共享的服务。由于无线装置通过图像传输来显示同一图像,所以屏幕共享服务也被称为屏幕镜像技术。
[0006] 然而,由于在P2P装置之间的图像传输期间宽高比或分辨率不适合,所以现有的屏幕共享服务在顶部/底部或左侧/右侧包括并递送诸如黑色图像(或信箱)的不必要图像。因此,由于除了由源装置显示的图像之外显示的不必要图像,其妨碍了用户观看图像。
[0007] 另外,在屏幕镜像期间,诸如移动电话的无线装置可以从一开始递送不包括黑色图像的图像。然而,如果移动电话被设置在水平方向上,则它在被设置在垂直方向上的状态下仅发送垂直画面并且不发送水平画面。

发明内容

[0008] 实施方式将当在两个无线装置之间的Wi-Fi直连服务期间提供屏幕共享服务时由于分辨率或宽高比的不匹配而插入的不必要图像去除。
[0009] 如果在Wi-Fi直连服务期间提供屏幕共享服务,则实施方式提供与无线装置的放置方向对应的图像。
[0010] 在一种实施方式中,一种用于支持Wi-Fi直连服务的第一无线装置包括:显示器;通信单元,该通信单元被配置为与第二无线装置通信;以及控制器,该控制器被配置为:使得所述通信单元通过使用实时流协议(RTSP)来将分辨率信息发送到所述第二无线装置,所述分辨率信息包括受所述第一无线装置支持的多个分辨率;如果第一图像的分辨率不是所述多个分辨率中的一个,则使得所述通信单元从所述第二无线装置接收包括所述第一图像和第二图像在内的整个图像;使得所述显示器通过将所述第二图像从所接收的整个图像中去除来显示所述第一图像;并且如果所述第一图像的分辨率被包括在所述分辨率信息中,则使得所述通信单元从所述第二无线装置接收所述第一图像,而无需所述第二图像,其中,所述第二图像是被添加到所述第一图像以使得所接收的整个图像的分辨率与所述多个分辨率中的一个对应的图像。
[0011] 在一方面,由所述第二无线装置从所述多个分辨率中选择所述整个图像的分辨率。
[0012] 所述控制器还可以被配置为使得所述通信单元从所述第二无线装置接收指示要通过使用所述RTSP来递送具有从所述多个分辨率中选择的分辨率的图像的消息。
[0013] 在一方面,所述第二图像可以是黑色图像。
[0014] 在一方面,所述第一图像可以是当接收所述整个图像或所述第一图像时由所述第二无线装置当前显示的图像。
[0015] 所述控制器还可以被配置为使得所述显示器:在从所述第二无线装置接收所述整个图像之前,经由所述显示器的整个屏幕来显示媒体内容的图像;并且在接收到所述整个图像之后,通过将所述第二图像去除,经由所述显示器的部分屏幕来显示所述第一图像。
[0016] 在一方面,所述第一图像可以被显示为与所述媒体内容的图像交叠。
[0017] 所述控制器还可以被配置为使得所述显示器显示用于控制所述第一图像的尺寸或透明度中的至少一个的图像调整窗口,使得当在所述显示器的第二区域上显示所述第一图像时,在所述显示器的第一区域上显示所述图像调整窗口。
[0018] 所述控制器还可以被配置为使得所述第一图像响应于经由所述图像调整窗口施加的输入而减小所述第一图像的大小,使得大小被减小的第一图像部分地与所述媒体内容的图像交叠。
[0019] 所述控制器还可以被配置为使得所述第一图像响应于经由所述图像调整窗口施加的输入而增加所述第一图像的透明度,使得所述媒体内容的图像通过具有被增加的透明度的所述第一图像是可见的。
[0020] 所述控制器还可以被配置为:使得所述显示器当在所述显示器的第二区域上显示所述第一图像的同时在所述显示器的第一区域上显示包括用于控制所述第二无线装置的操作的至少一个虚拟按钮的控制窗口;以及响应于经由所述至少一个虚拟按钮施加的输入来控制所述第二无线装置的操作。
[0021] 所述控制器还可以被配置为使得所述显示器响应于用于选择经由所述部分屏幕显示的所述第一图像的输入来显示在所述第一图像的顶部/底部或左部/右部处恢复的所述第二图像。
[0022] 所述控制器还可以被配置为:使得所述显示器在所述第二图像的区域上显示包括用于控制所述第二无线装置的操作的至少一个虚拟按钮的控制窗口;以及响应于经由所述至少一个虚拟按钮施加的输入来控制所述第二无线装置的操作。
[0023] 所述控制器还可以被配置为使得所述显示器:在所述显示器的整个屏幕上显示所述第一图像,而无需所述第二图像;以及显示用于调整所述第一图像的大小或位置的至少一个图像调整窗口,所述至少一个图像调整窗口与所述第一图像交叠。
[0024] 在一方面,当所述第二无线装置的显示模式是肖像模式时,由所述第二无线装置当前显示的所述第一图像的分辨率不被包括在所述多个分辨率中。
[0025] 所述控制器还可以被配置为当所述第二无线装置的所述显示模式从所述肖像模式被切换到风景模式时,自动地将所述第一图像切换到所述风景模式。
[0026] 在一方面,由所述第一无线装置可支持的分辨率中的每一个与水平长度比垂直长度更长的宽高比对应。
[0027] 所述控制器还可以被配置为在执行连接建立以与所述第二无线装置通信之前,检测所述第二无线装置。
[0028] 在另一实施方式中,一种用于控制支持Wi-Fi直连服务的第一无线装置的方法包括以下步骤:经由通信单元与第二无线装置通信;通过使用实时流协议(RTSP)来将分辨率信息发送到所述第二无线装置,所述分辨率信息包括受所述第一无线装置支持的多个分辨率;如果由所述第二无线装置当前显示的第一图像的分辨率不是所述多个分辨率中的一个,则从所述第二无线装置接收包括所述第一图像和第二图像在内的整个图像;以及通过将所述第二图像从所接收的整个图像中去除而在显示器上显示所述第一图像,其中,所述第二图像是被添加到所述第一图像以使得所接收的整个图像的分辨率与所述多个分辨率中的一个对应的图像。

附图说明

[0029] 图1是例示根据本发明的实施方式的显示装置的配置的框图。
[0030] 图2是例示根据本发明的实施方式的远程控制装置的框图。
[0031] 图3是例示根据本发明的实施方式的远程控制装置的实际配置的视图。
[0032] 图4是根据本发明的实施方式的利用远程控制装置的视图。
[0033] 图5是例示根据本发明的实施方式的移动终端的框图。
[0034] 图6是例示根据本发明的实施方式的在WFD源与WFD宿(sink)之间建立WFD会话并且提供屏幕共享服务的处理的梯形图。
[0035] 图7A、图7B、图7C和图7D是例示根据本发明的实施方式的WFD宿向WFD源发送的分辨率信息的表格。
[0036] 图8A、图8B和图8C是如果提供用于允许WFD源和WFD宿共享屏幕的显示服务,则包括除了WFD源当前显示的图像之外的图像并将该图像发送到WFD宿的视图。图8D是在不遵循Wi-Fi显示标准的智能电话与PC之间共享图像的视图。
[0037] 图9A、图9B、图9C和图9D是例示根据本发明的实施方式的用于在从WFD源接收的整个图像中仅显示WFD源显示的图像的处理的视图。
[0038] 图10A和图10B是根据本发明的实施方式的调整使第二图像从自WFD源接收的整个图像中被去除的第一图像的视图。
[0039] 图11是例示根据本发明的实施方式的用于在显示从WFD源中流出的第一图像的同时返回至包括第二图像的图像的处理的视图。
[0040] 图12A、图12B和图12C是例示根据本发明的实施方式的用于控制从WFD源接收图像的处理的视图。
[0041] 图13A、图13B和图13C是例示根据本发明的实施方式的用于如果在WFD宿的分割屏幕上显示从WFD源接收的第一图像,则调整在去除第二图像时发生的第一图像的失真的处理的视图。
[0042] 图14是例示根据本发明的实施方式的无线装置的配置的视图。

具体实施方式

[0043] 在下文中,将参照附图详细地描述与本发明有关的实施方式。针对在下面的描述中所用的组件的后缀“模块”和“单元”是在考虑到说明书撰写的容易性的情况下被分配或混用的,并且它们本身并不具有特别的含义或作用。
[0044] 根据本发明的实施方式的显示装置例如作为将计算机支持功能添加到广播接收功能的人工显示装置,可以具有诸如书写输入装置的易于使用的界面、触摸屏或者在实现广播接收功能的同时添加互联网功能的空间遥控器。然后,在对有线或无线互联网功能的支持下,可以在对互联网和计算机的接入中执行电子邮件、网络浏览、银行业务或游戏功能。为了执行这些各种功能,可以使用标准化的通用OS。
[0045] 因此,由于在通用OS内核上自由地添加或删除各种应用,所以本文中描述的显示装置例如能够执行各种用户友好型功能。更详细地,显示装置可以是网络TV、混合广播宽带TV(HBBTV)、智能TV、发光二极管(LED)TV、有机发光二极管(OLED)TV等,并且在某些情况下,可以被应用于智能电话。
[0046] 图1是例示根据本发明的实施方式的显示装置的配置的框图。
[0047] 参照图1,显示装置100可以包括广播接收单元130、外部装置接口单元135、存储单元140、用户输入接口单元150、控制单元170、无线通信单元173、显示单元180、音频输出单元185和供电单元190。
[0048] 广播接收单元130可以包括调谐器131、解调单元132和网络接口单元133。
[0049] 调谐器131可以根据信道选择命令来选择特定的广播信道。调谐器131可以接收针对所选择的特定广播信道的广播信号。
[0050] 解调单元132可以将所接收的广播信号划分成视频信号、音频信号和广播节目相关的数据信号,并且将所划分的视频信号、音频信号和数据信号恢复成输出有效的形式。
[0051] 外部装置接口单元135可以在相邻的外部装置中接收应用或应用列表,并且将该应用或应用列表递送到控制单元170或存储单元140。
[0052] 外部装置接口单元135可以在显示装置100与外部装置之间提供连接路径。外部装置接口单元135可以接收从无线或有线地与显示装置100连接的外部装置输出的图像和音频中的至少一个,并且将该图像和音频中的至少一个递送到控制单元170。外部装置接口单元135可以包括多个外部输入端。多个外部输入端可以包括RGB端子、至少一个高清晰度多媒体接口(HDMI)端子和组件端子。
[0053] 通过外部装置接口单元135输入的外部装置的图像信号可以通过显示单元180被输出。通过外部装置接口单元135输入的外部装置的声音信号可以通过音频输出单元185被输出。
[0054] 可以与外部装置接口单元130连接的外部装置可以是机顶盒、蓝光播放器、DVD播放器、游戏控制台、条状音箱、智能电话、PC、USB存储器以及家庭影院系统中的一个,但这仅是示例性的。
[0055] 网络接口单元133可以提供用于将显示装置100连接到包括互联网网络在内的有线/无线网络的接口。网络接口单元133可以通过所接入的网络或与所接入的网络链接的其它网络来向其它用户或其它电子装置发送数据或者从其它用户或其它电子装置接收数据。
[0056] 另外,存储在显示装置100中的一些内容数据可以被发送到用户或电子装置,该用户或电子装置是从预先登记在显示装置100中的其它用户或其它电子装置中选择的。
[0057] 网络接口单元133可以通过所接入的网络或与所接入的网络链接的其它网络来访问预定网页。即,网络接口单元133可以通过经由网络访问预定网页而将数据发送到相应服务器或者从相应服务器接收数据。
[0058] 然后,网络接口单元133可以接收从内容提供方或网络运营方提供的内容或数据。即,网络接口单元133可以通过网络和与网络相关的信息来接收从内容提供方或网络提供方提供的诸如电影、广告、游戏、VOD和广播信号的内容。
[0059] 另外,网络接口单元133可以接收固件更新信息并且对从网络运营方提供的文件进行更新,且将数据发送到互联网或内容提供方或者网络运营方。
[0060] 网络接口单元133可以通过网络在向公众开放的应用当中选择并接收期望的应用。
[0061] 存储单元140可以存储经信号处理的图像、语音或者由程序存储的数据信号,以便用于在控制单元170中的各种信号处理和控制。
[0062] 另外,存储单元140可以执行用于临时存储从外部装置接口单元135或网络接口单元133输出的图像、语音或数据信号的功能,并且可以通过信道记忆功能来存储与预定图像有关的信息。
[0063] 存储单元140可以存储从外部装置接口单元135或网络接口单元133输入的应用或应用列表。
[0064] 显示装置100可以播放在存储单元140中存储的内容文件(例如,视频文件、静态图像文件、音乐文件、文档文件、应用文件等),并且将这些内容文件提供给用户。
[0065] 用户接口单元150可以将由用户输入的信号递送到控制单元170或者将信号从控制单元170递送到用户。例如,用户接口单元150可以根据诸如蓝牙、超宽带(WB)、紫蜂(ZigBee)、射频(RF)和IR的各种通信方法,从远程控制装置200接收诸如开启/关闭、信道选择和屏幕设置的控制信号或对这些控制信号进行处理,或者将控制信号从控制单元170发送到远程控制装置200。
[0066] 另外,用户接口单元150可以将从诸如电源键、频道键、音量键和设置键的本地键(未示出)输入的控制信号递送到控制单元170。
[0067] 在控制单元170中被图像处理的图像信号可以被输入到显示单元180中,并且作为与相应图像信号对应的图像来显示。另外,在控制单元170中被图像处理的图像信号可以通过外部装置接口单元135被输入到外部输出装置。
[0068] 在控制单元170中被处理的语音信号可以被输出到音频输出单元185。另外,在控制单元170中被处理的语音信号可以通过外部装置接口单元135被输入到外部输出装置。
[0069] 除此之外,控制单元170还可以控制显示装置100中的整体操作。另外,控制单元170可以通过经由用户接口单元150输入的用户命令或内部程序来控制显示装置100,并且将期望的应用或应用列表下载到接入到网络的显示装置100中。
[0070] 控制单元170可以通过显示单元180或音频输出单元185将由用户选择的信道信息与经处理的图像或语音信号一同输出。
[0071] 另外,根据通过用户接口单元150接收的外部装置图像播放命令,控制单元170可以通过显示单元180或音频输出单元185来输出通过外部装置接口单元135输入的诸如相机或摄影机的外部装置的图像信号或语音信号。
[0072] 此外,控制单元170可以控制显示单元180来显示图像,并且控制通过调谐器131输入的广播图像、通过外部装置接口单元135输入的外部输入图像、通过网络接口单元输入的图像或者在存储单元140中存储的图像在显示单元180上显示。在这种情况下,在显示单元180上显示的图像可以是静态图像或视频,并且还可以是2D图像或3D图像。
[0073] 另外,控制单元170可以播放在显示装置100中存储的内容、所接收的广播内容以及从外部输入的外部输入内容,并且该内容可以按照诸如广播图像、外部输入图像、音频文件、静态图像、所接入的网络画面和文档文件的各种格式。
[0074] 此外,无线通信单元173可以执行与外部电子装置的有线或无线通信。无线通信单TM元173可以执行与外部装置的短距离通信。为此,无线通信单元173可以通过使用蓝牙 、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连以及无线通用串行总线(USB)技术中的至少一种来支持短距离通信。
无线通信单元173可以通过无线区域网络来支持显示装置100与无线通信系统之间的、显示装置100与另一显示装置100之间的、或者包括显示装置100和另一显示装置100(或外部服务器)在内的网络之间的无线通信。无线区域网络可以是无线个人区域网络。
[0075] 在本文中,另一显示装置100可以是能够与显示装置100交换数据(或交互工作)的诸如可穿戴装置(例如,智能手表、智能眼镜和头戴式显示器(HMD))或智能电话的移动终端。无线通信单元173可以检测(或识别)显示装置100周围的可进行通信的可穿戴装置。此外,如果所检测的可穿戴装置是被认证为与显示装置100通信的装置,则控制单元170可以通过无线通信单元173将在显示装置100中被处理的数据的至少一部分发送到可穿戴装置。因此,可穿戴装置的用户可以通过该可穿戴装置来使用在显示装置100中被处理的数据。
[0076] 显示单元180可以将在控制单元170中被处理的图像信号、数据信号或屏上显示(OSD)信号或者在外部装置接口单元135中接收的图像信号或数据信号转换成R、G和B信号,以生成驱动信号。
[0077] 此外,图1中所示的显示装置100仅是本发明的一种实施方式,且因此根据实际实现的显示装置100的规格,所示组件中的一些可以被集成、添加或省略。
[0078] 即,如果必要,则两个或更多个组件可以被集成为一个组件,或者一个组件可以被分成两个或更多个组件并且被配置。另外,由每个块执行的功能将对本发明的实施方式进行描述,并且其特定操作或装置并不限制本发明的范围。
[0079] 根据本发明的另一实施方式,与图1不同,显示装置100可以在不包括调谐器131和解调单元132的情况下通过网络接口单元133或外部装置接口单元135来接收图像,并且播放这些图像。
[0080] 例如,显示装置100可以被划分为用于根据各种网络服务接收广播信号或内容的诸如机顶盒的图像处理装置和用于播放从图像处理装置输入的内容的内容播放装置。
[0081] 在这种情况下,可以通过参照图1描述的显示装置、诸如分离的机顶盒的图像处理装置和包括显示单元180和音频输出单元185在内的内容播放装置中的一个来执行下面所描述的根据本发明的实施方式的显示装置的操作方法。
[0082] 然后,参照图2和图3,根据本发明的实施方式来描述远程控制装置。
[0083] 图2是例示根据本发明的实施方式的远程控制装置的框图,以及图3是例示根据本发明的实施方式的远程控制装置的实际配置的视图。
[0084] 首先,参照图2,远程控制装置200可以包括指纹识别单元210、无线通信单元220、用户输入单元230、传感器单元240、输出单元250、供电单元260、存储单元270、控制单元280和声音获取单元290。
[0085] 参照图2,无线通信单元220根据本发明的上述实施方式向显示装置中的任意的任一个发送信号/从显示装置中的任意的任一个接收信号。
[0086] 远程控制装置200可以包括用于根据RF通信标准向显示装置100发送信号/从显示装置100接收信号的射频(RF)模块221和用于根据IR通信标准向显示装置100发送信号/从显示装置100接收信号的IR模块223。另外,远程控制装置200可以包括用于根据蓝牙通信标准向显示装置100发送信号/从显示装置100接收信号的蓝牙模块225。另外,远程控制装置200可以包括用于根据NFC通信标准向显示装置100发送信号/从显示装置100接收信号的近场通信(NFC)模块227和用于根据无线LAN(WLAN)通信标准向显示装置100发送信号/从显示装置100接收信号的WLAN模块229。
[0087] 另外,远程控制装置200可以通过无线通信单元220将包含与远程控制装置200的移动有关的信息的信号发送到显示装置100。
[0088] 此外,远程控制装置200可以通过RF模块221来接收从显示装置100发送的信号,并且如果必要,可以通过IR模块223将与开启/关闭、频道更改和音量更改有关的命令发送到显示装置100。
[0089] 用户输入单元230可以被配置有键盘按钮、触摸板或触摸屏。用户可以操纵用户输入单元230以将关于显示装置100的命令输入到远程控制装置200。如果用户输入单元230包括硬键按钮,则用户可以通过该硬键按钮的按压操作来将关于显示装置100的命令输入到远程控制装置200。将参照图3对其进行描述。
[0090] 参照图3,远程控制装置200可以包括多个按钮。多个按钮可以包括指纹识别按钮212、电源按钮231、主屏幕按钮232、直播按钮233、外部输入按钮234、语音调整按钮235、语音识别按钮236、频道更改按钮237、检查按钮238以及返回按钮239。
[0091] 指纹识别按钮212可以是用于识别用户的指纹的按钮。根据本发明的实施方式,指纹识别按钮212可以执行按压操作并且接收按压操作和指纹识别操作。电源按钮231可以是用于开启/关闭显示装置100的电源的按钮。主屏幕按钮232可以是用于转到显示装置100的主屏幕的按钮。直播按钮233可以是用于显示直播节目的按钮。外部输入按钮234可以是用于接收与显示装置100连接的外部输入的按钮。语音调整按钮235可以是用于调整从显示装置100输出的音量的大小的按钮。语音识别按钮236可以是用于接收用户的语音并识别所接收的语音的按钮。频道更改按钮237可以是用于接收特定广播信道的广播信号的按钮。检查按钮238可以是用于选择特定功能的按钮,以及返回按钮239可以是用于返回至之前的屏幕的按钮。
[0092] 再参照图2,如果用户输入单元230包括触摸屏,则用户可以触摸触摸屏的软键以将关于显示装置100的命令输入到远程控制装置200。另外,用户输入单元230可以包括由用户操纵的各种输入装置,例如滚动键和柄式控制键,并且本实施方式不限制本发明的范围。
[0093] 传感器单元240可以包括陀螺仪传感器241或加速度传感器243,并且陀螺仪传感器241可以感测与远程控制装置200的移动有关的信息。
[0094] 例如,陀螺仪传感器241可以在x轴、y轴和z轴的基础上感测与远程控制装置200的操作有关的信息,并且加速度传感器243可以感测与远程控制装置200的移动速度有关的信息。此外,远程控制装置200还可以包括距离测量传感器并且感测相对于显示装置100的显示单元180的距离。
[0095] 输出单元250可以响应于用户输入单元230的操纵来输出图像或语音信号,或者输出与从显示装置100发送的信号对应的图像或语音信号。用户可以通过输出单元250来识别是否操纵了用户输入单元230或者是否控制了显示装置100。
[0096] 例如,如果操纵了用户输入单元230或者通过无线通信单元220向显示装置100发送信号/从显示装置100接收信号,则输出单元250可以包括用于闪光的LED模块251、用于生成振动的振动模块253、用于输出声音的声音输出模块255或者用于输出图像的显示模块257。
[0097] 另外,供电单元260向远程控制装置200供应电力,并且如果远程控制装置200在预定时间内不动,则供电单元260停止电力供应,使得可以减少电力浪费。如果设置在远程控制装置200处的预定键被操纵,则供电单元260可以恢复电力供应。
[0098] 存储单元270可以存储用于控制或操作远程控制装置200所需的各种程序和应用数据。如果远程控制装置200通过RF模块221与显示装置100无线地发送/接收信号,则远程控制装置200和显示装置100通过预定的频带来发送/接收信号。
[0099] 远程控制装置200的控制单元280可以将与用于向与远程控制装置200配对的显示装置100发送信号/从该显示装置100接收信号的频带有关的信息存储在存储单元270中,并且参考该信息。
[0100] 控制单元280控制与远程控制装置200的控制相关的一般事项。控制单元280可以通过无线通信单元220将与用户输入单元230的预定键操纵对应的信号或与由传感器单元240感测的与远程控制装置200的移动对应的信号发送到显示装置100。
[0101] 另外,远程控制装置200的声音获取单元290可以获取语音。声音获取单元290可以包括至少一个麦克风,并且通过该麦克风获取语音。
[0102] 图4是根据本发明的实施方式的利用远程控制装置的视图。图4的(a)例示了在显示单元180上显示与远程控制装置200对应的指针205。
[0103] 用户可以使远程控制装置200垂直地或水平地移动或转动。在显示装置100的显示单元180上显示的指针205对应于远程控制装置200的移动。由于如附图中所示,相应的指针205根据在3D空间上的移动而被移动和显示,远程控制装置200可以被称为空间遥控器。
[0104] 图4的(b)例示了如果用户移动远程控制装置200,则在显示装置100的显示单元180上显示的指针205根据远程控制装置200的移动被移动到左侧。
[0105] 通过远程控制装置200的传感器检测的与远程控制装置200的移动有关的信息被发送到显示装置100。显示装置100可以根据与远程控制装置200的移动有关的信息计算出指针205的坐标。显示装置100可以将指针205显示为与所计算的坐标相匹配。
[0106] 图4的(c)例示了当远程控制装置200中的特定按钮被按下时,用户使远程控制装置200远离显示单元180而移动。因此,显示单元180中的与指针205对应的选择区域可以被放大并且被显示得更大。
[0107] 另一方面,如果用户使远程控制装置200移动以靠近显示单元180,则显示单元180中的与指针205对应的选择区域可以被缩小并且以缩小的尺寸进行显示。
[0108] 另一方面,如果远程控制装置200被移动以远离显示单元180,则选择区域可以被缩小,并且如果远程控制装置200被移动以更靠近显示单元180,则选择区域可以被放大。
[0109] 另外,如果远程控制装置200中的特定按钮被按下,则可以排除对垂直或水平移动的识别。即,如果远程控制装置200被移动以远离或更靠近显示单元180,则不能识别上、下、左或右移动,并且仅能够识别前后移动。当远程控制装置200中的特定按钮未被按下时,根据远程控制装置200的上、下、左或右移动来仅使指针205移动。
[0110] 此外,指针205的移动速度或移动方向可以对应于远程控制装置200的移动速度或移动方向。
[0111] 此外,在本说明书中的指针是指响应于远程控制装置200的操作而在显示单元180上显示的对象。因此,除了附图中作为指针205显示的箭头形式以外,各种形式的对象都是可行的。例如,上述概念包括点、光标、提示符和粗轮廓。然后,指针205可以与水平轴和垂直轴的一个点相对应地被显示在显示单元180上,并且还可以与诸如线和面的多个点相对应地被显示。
[0112] 然后,将参照图5来描述根据本发明的实施方式的移动终端的配置。图5是例示根据本发明的实施方式的移动终端的框图。
[0113] 移动终端500可以包括无线通信单元510、输入单元520、感测单元540、输出单元550、接口单元560、存储器单元570、控制单元580以及供电单元590。在实现移动终端时,图5中所示的全部组件可能不是必需的,从而本说明书中描述的移动终端可以包括比以上所列出的组件更少或更多的组件。
[0114] 更详细地,这些组件中的无线通信单元510可以包括至少一个模块,该至少一个模块允许在移动终端500与无线通信系统之间的、在移动终端500与另一移动终端500之间的、或者在移动终端500与外部服务器之间的无线通信。另外,无线通信单元510可以包括将移动终端500连接到至少一个网络的至少一个模块。
[0115] 无线通信单元510可以包括以下项中的至少一个:广播接收模块511、移动通信模块512、无线互联网模块513、短距离通信模块514以及位置信息模块515。
[0116] 输入单元520可以包括用于图像信号输入的相机521或图像输入单元、用于接收音频信号输入的麦克风522或音频输入单元、以及用于接收来自用户的信息的用户输入单元523(例如,触摸键和机械键)。对通过输入单元520收集的语音数据或图像数据进行分析和处理以作为用户的控制命令。
[0117] 感测单元540可以包括用于感测以下项中的至少一个的至少一个传感器:移动终端中的信息、移动终端周围的环境信息以及用户信息。例如,感测单元540可以包括以下项中的至少一个:接近传感器541、照度传感器542、触摸传感器、加速度传感器、磁性传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外线(IR)传感器、手指扫描传感器、超声波传感器、光学传感器(例如,相机521)、麦克风(例如,麦克风522)、电池量表、环境传感器(例如,气压计、湿度计、温度计、辐射传感器、热传感器和气体传感器)或者化学传感器(例如,电子鼻、健康护理传感器和生物传感器)。此外,本说明书中公开的移动终端可以将通过这些传感器当中的至少两个或更多个传感器感测的信息结合,并且利用该信息。
[0118] 输出单元550被用来生成视觉、听觉或触觉输出,并且可以包括显示单元551、声音输出模块552、触觉模块553和光输出单元554中的至少一个。显示单元551可以与触摸传感器一起被形成为多层结构或者一体地被形成,使得可以实现触摸屏。这种触摸屏可以用作用户输入单元523,该用户输入单元523同时提供移动终端500与用户之间的输入接口和移动终端500与用户之间的输出接口。
[0119] 接口单元560可以用作通向与移动终端500连接的各种外部装置的路径。接口单元560可以包括以下项中的至少一个:有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、连接配备有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口或耳机端口。当外部装置与接口单元560连接时,移动终端500可以执行与所连接的外部装置相关的适当控制。
[0120] 另外,存储器单元570可以存储支持移动终端500的各种功能的数据。存储器单元570可以存储在移动终端500上运行的多个应用程序(例如,应用程序或应用),以及还存储用于移动终端500的操作的数据和命令。可以通过无线通信从外部服务器下载这种应用程序的至少一部分。另外,为了执行移动终端500的基本功能(例如,来电呼叫、发送功能和消息接收),可以从装运时起将这种应用程序的至少一部分包括在移动终端500中。此外,可以将应用程序存储在存储器单元570中并且安装到移动终端500上,使得可以运行该应用程序以通过控制单元580来执行移动终端500的操作(或功能)。
[0121] 控制单元580除了控制与应用程序相关的操作之外,通常还可以控制移动终端500的整体操作。控制单元580可以向用户提供适当的信息或功能,或者通过处理经由上述组件输入/输出的信号、数据和信息或者执行存储在存储器单元570中的应用程序来处理这些信息或功能。
[0122] 另外,为了执行存储在存储器单元570中的应用程序,控制单元580可以控制图5中所示的组件的至少一部分。此外,为了执行应用程序,控制单元580可以将移动终端500中的至少两个组件进行结合,并且对其进行操作。
[0123] 供电单元590可以在控制单元580的控制下接收外部电力或内部电力,并且向移动终端500中的各个组件提供电力。供电单元590包括电池,并且该电池可以是内置电池或可替换电池。
[0124] 根据下面描述的本发明的各种实施方式,为了实现移动终端500的操作、控制或控制方法,各个组件的至少一部分可以协同地操作。另外,可以通过执行存储在存储器单元570中的至少一个应用程序而在移动终端500上实现移动终端500的操作、控制或控制方法。
[0125] 下文中,在审视通过移动终端500实现的各种实施方式之前,将参照图5更加详细地描述以上所列出的组件。
[0126] 首先,在描述无线通信单元510时,无线通信单元510的广播接收模块511可以通过广播信道从外部广播管理服务器接收广播信号和/或广播相关的信息。广播信道可以包括卫星信道和地面信道。可以向移动终端500提供用于针对至少两个广播信道或广播信道切换的同时的广播接收的至少两个广播接收模块。
[0127] 移动通信模块512可以向以下项中的至少一个发送无线信号/从该至少一个接收无线信号:根据用于移动通信的技术标准或通信方法(例如,全球移动通信系统(GSM)、码分多址(CDMA)、码分多址2000(CDMA2000)、增强语音-数据优化或仅增强语音-数据(EV-DO)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)以及高级长期演进(LTE-A))而建立的移动通信网络上的基站、外部终端以及服务器。
[0128] 根据语音呼叫信号、视频呼叫信号或文本/多媒体消息发送,无线信号可以包括各种类型的数据。
[0129] 无线互联网模块513是指用于无线互联网接入的模块,并且可以被内置或外置于移动终端500。无线互联网模块513可以被配置为根据无线互联网技术在通信网络中发送/接收无线信号。
[0130] 无线互联网技术可以包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)和高级长期演进(LTE-A),并且无线互联网模块513根据包括以上未列出的任何互联网技术的至少一种无线互联网技术来发送/接收数据。
[0131] 从通过移动通信网络来实现通过WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE和LTE-A的无线互联网接入的观点来看,通过移动通信网络执行无线互联网接入的无线互联网模块513可以被理解为移动通信模块512的一种类型。
[0132] 短距离通信模块514可以通过使用以下项中的至少一个来支持短距离通信:蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连以及无线通用串行总线(USB)技术。短距离通信模块514可以通过无线区域网络来支持移动终端500与无线通信系统之间的、移动终端500与另一移动终端500之间的、或者包括移动终端500和另一移动终端500(或外部服务器)在内的网络之间的无线通信。无线区域网络可以是无线个人区域网络。
[0133] 这里,其它移动终端500可以是能够与移动终端500交换数据(或交互工作)的可穿戴装置(例如,智能手表、智能眼镜和HMD)。短距离通信模块514可以检测(或识别)移动终端500周围的可穿戴装置,该可穿戴装置能够与移动终端500通信。此外,如果检测到的可穿戴装置是被认证为与移动终端500进行通信的装置,则控制单元580可以通过短距离通信模块
514向该可穿戴装置发送在移动终端500中被处理的数据的至少一部分。因此,可穿戴装置的用户可以通过该可穿戴装置来使用在移动终端500中被处理的数据。例如,据此,如果通过移动终端500接收到呼叫,则用户可以通过该可穿戴装置执行电话呼叫,或者如果通过移动终端500接收到消息,则用户可以查看接收到的消息。
[0134] 位置信息模块515是用于获得移动终端的位置(或当前位置)的模块,并且其代表性示例包括全球定位系统(GPS)模块或Wi-Fi模块。例如,移动终端500可以通过使用从GPS卫星通过GPS模块发送的信号来获得其位置。作为另一示例,移动终端500可以通过Wi-Fi模块基于向Wi-Fi模块发送无线信号/从Wi-Fi模块接收无线信号的无线接入点(AP)的信息来获得其位置。如果必要,为了替代性地或附加地获得与移动终端的位置有关的数据,位置信息模块515可以执行无线通信单元510中的另一模块的功能。位置信息模块515是用于获得移动终端的位置(或当前位置)的模块,并且不限于直接地计算并获得移动终端的位置的模块。
[0135] 随后,输入单元520被用于输入图像信息(或信号)、音频信息(或信号)、数据或从用户输入的信息,并且为了输入图像信息,移动终端500可以包括至少一个相机521。相机521处理由图像传感器在视频呼叫模式或拍摄模式下获得的诸如静态图像或视频的图像帧。经处理的图像帧可以被显示在显示单元551上或者存储在存储器单元570中。此外,可以将在移动终端500中配备的多个相机521布置成矩阵结构,并且通过具有这种矩阵结构的相机521,可以向移动终端500输入具有各种角度或焦距的多个图像信息。另外,可以按照立体结构来布置所述多个相机521,以获得用于实现三维图像的左图像和右图像。
[0136] 麦克风522将外部声音信号处理成电子语音数据。可以根据在移动终端500中正在执行的功能(或正在执行的应用程序)来不同地利用经处理的语音数据。此外,可以在麦克风522中实现用于去除在接收外部声音信号期间出现的噪声的各种噪声消除算法。
[0137] 用户输入单元523用于接收来自用户的信息,并且如果通过用户输入单元523来输入信息,则控制单元580可以根据所输入的信息来控制移动终端500的操作。用户输入单元523可以包括机械输入装置(或机械键,例如在移动终端500的前、后或侧面的按钮、圆顶开关、滚轮以及触合式开关)和触摸式输入装置。作为一个示例,触摸式输入装置可以包括通过软件处理显示在触摸屏上的虚拟键、软键或视觉键或者可以包括设置在除了触摸屏以外的部分处的触摸键。此外,虚拟键或视觉键可以具有各种形式并且可以被设置在触摸屏上,并且例如可以包括图形、文本、图标、视频或其组合。
[0138] 此外,感测单元540可以感测移动终端中的信息、移动终端周围的环境信息和用户信息中的至少一个,并且然后可以生成与其对应的感测信号。基于这种感测信号,控制单元580可以控制移动终端500的驱动或控制,或者可以执行与安装在移动终端500中的应用程序相关的数据处理、功能或操作。将更详细地描述在包括在感测单元540中的各种传感器当中的代表性传感器。
[0139] 首先,接近传感器541是指在没有机械接触的情况下通过使用电磁场或红外线的强度来检测是否存在接近预定检测表面的物体或者周围是否存在物体的传感器。接近传感器541可以设置在被触摸屏包围或者触摸屏周围的移动终端的内部区域中。
[0140] 接近传感器541的示例可以包括透射型光电传感器、直接反射型光电传感器、镜面反射型光电传感器、高频振荡型接近传感器、电容式接近传感器、磁式接近传感器和红外线接近传感器。如果触摸屏是电容式触摸屏,则接近传感器541可以被配置为通过根据具有导电性的物体的接近而导致的电场的变化来检测物体的接近。在这种情况下,触摸屏(或触摸传感器)本身可以被归类为接近传感器。
[0141] 此外,为便于描述,将用于在物体靠近触摸屏而不接触触摸屏时识别物体在触摸屏上的位置的动作称为“接近触摸”,并且将物体实际接触触摸屏的动作称为“接触触摸”。物体在触摸屏上进行接近触摸的位置是在物体进行接近触摸时物体与触摸屏垂直对应的位置。接近传感器541可以检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸方向、接近触摸速度、接近触摸时间、接近触摸位置和接近触摸运动状态)。此外,控制单元580处理通过接近传感器541检测到的、与接近触摸操作和接近触摸模式对应的数据(针对信息),而且,可以在触摸屏上输出与所处理的数据对应的可视信息。此外,根据针对触摸屏上的相同点的触摸是接近触摸还是接触触摸,控制单元580可以控制移动终端500来处理不同的操作或数据(或信息)。
[0142] 触摸传感器通过使用各种触摸方法(例如电阻膜法、电容法、红外法、超声法和磁场法)中的至少一种方法来检测施加于所述触摸屏(或显示单元551)的触摸(或触摸输入)。
[0143] 例如,触摸传感器可以被配置为将施加于触摸屏的特定部分的压力或者在特定部分处发生的电容的变化转变成电输入信号。触摸传感器可以被配置为检测在触摸屏上施加触摸的触摸目标触摸该触摸传感器的位置和区域、触摸时的压力以及触摸时的电容。这里,作为在触摸传感器上施加触摸的物体,触摸目标例如可以是手指、触摸笔、手写笔或指针。
[0144] 以这样的方式,如果在触摸传感器上存在触摸输入,则与该触摸输入对应的信号被发送给触摸控制器。触摸控制器处理所述信号,并且然后将相应数据发送给控制单元580。因此,控制单元580可以识别出显示单元551的哪个区域被触摸。本文中,触摸控制器可以是与控制单元580分开的附加组件,或者可以是控制单元580本身。
[0145] 此外,控制单元580可以根据触摸触摸屏(或与触摸屏分开配备的触摸键)的触摸目标的类型来执行不同的控制或相同的控制。可以根据移动终端500的当前操作状态或在执行中的应用程序来确定根据触摸目标的类型执行不同的控制还是相同的控制。
[0146] 此外,上述触摸传感器和接近传感器单独被设置或被结合,并且因此可以感测针对触摸屏的各种类型的触摸,例如,短(或敲击)触摸、长触摸、多触摸、拖动触摸、轻拂触摸、捏进(pinch-in)触摸、划出(pinch-out)触摸、滑动触摸和悬停触摸。
[0147] 超声波传感器可以通过利用超声波来识别检测目标的位置信息。此外,控制单元580可以通过由光学传感器和多个超声波传感器检测到的信息来计算波源的位置。可以通过利用光比超声波快得多(即,光到达光学传感器的时间比超声波到达超声波传感器的时间短得多)的特性来计算波源的位置。更详细地,可以通过利用与通过使用光作为参考信号的超声波到达时间的时间差来计算波源的位置。
[0148] 此外,被描述为输入单元520的配置的相机521可以包括相机传感器(例如,CCD和CMOS)、光传感器(或图像传感器)和激光传感器中的至少一个。
[0149] 可以将相机521和激光传感器进行结合,以检测针对三维图像的检测目标的触摸。光传感器可以被层叠在显示装置上,并且被配置为扫描靠近触摸屏的检测目标的移动。更详细地,光传感器按照行/列来安装光二极管和晶体管(TR),并且通过利用根据施加于光二极管的光的量而改变的电信号来扫描设置在光传感器上的内容。即,光传感器可以根据光的变化量来计算检测目标的坐标,并且通过检测目标的坐标,可以获得检测目标的位置信息。
[0150] 显示单元551可以显示(输出)在移动终端500中处理的信息。例如,显示单元551可以显示在移动终端500上运行的应用程序的执行画面信息或者根据这种执行画面信息来显示用户界面(UI)和图形用户界面(GUI)信息。
[0151] 另外,显示单元551可以被配置为显示三维图像的三维显示单元。
[0152] 可以对三维显示单元应用三维显示方法,例如,立体方法(眼镜方法)、自动立体方法(无眼镜方法)、投影方法(全息方法)。
[0153] 声音输出单元552可以在呼叫信号接收或呼叫模式、记录模式、语音识别模式或广播接收模式下,输出从无线通信单元510接收的或存储在存储器单元570中的音频数据。声音输出单元552可以输出与由移动终端500执行的功能(例如,呼叫信号接收声音和消息接收声音)相关的声音信号。声音输出单元552可以包括接收器、扬声器和蜂鸣器。
[0154] 触觉模块553产生用户能够感觉到的各种触觉效果。触觉模块553产生的触觉效果的代表性示例是振动。可以通过用户的选择或控制单元的设置来控制由触觉模块553产生的振动的强度和模式。例如,触觉模块553可以合成并输出不同的振动,或者连续地输出不同的振动。
[0155] 触觉模块553可以产生各种触觉效果,例如,通过向接触皮肤表面竖直移动的针布置、通过注射口或吸入口的空气的注射力和吸入力、摩擦皮肤表面、电极接触、静电力的刺激的效果,以及通过使用吸收热或散发热的装置来再现冷/暖感觉的效果。
[0156] 触觉模块553可以被实现为通过直接接触来传递触觉效果,并且还使得用户能够通过诸如手指或手臂的肌肉感来感觉触觉效果。根据移动终端500的配置方面,触觉模块553可以是多于两个。
[0157] 光输出单元554输出用于通过利用移动终端500的光源的光来通知事件发生的信号。移动终端500中发生的事件的示例包括消息接收、呼叫信号接收、未接呼叫、警报、日程通知、电子邮件接收以及通过应用的信息接收。
[0158] 当移动终端向前或向后发射多颜色中的单一颜色时,实现了从光输出单元554输出的信号。如果移动终端检测到用户的事件确认,则可以终止该信号输出。
[0159] 接口单元560可以用作通向与移动终端500连接的所有外部装置的路径。接口单元560可以从外部装置接收数据,接收电力并将其传递给移动终端500中的各个组件,或者将移动终端500中的数据发送给外部装置。例如,接口单元560可以包括有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、连接配备有识别模块的装置的端口、音频I/O端口、视频I/O端口以及耳机端口。
[0160] 此外,作为存储用于验证移动终端500的使用权限的各种信息的芯片,识别模块可以包括用户身份模块(UIM)、订户身份模块(SIM)和通用订户身份模块(USIM)。配备有识别模块的装置(以下被称为识别装置)可以以智能卡形式来制造。因此,识别装置可以通过接口单元560与终端500连接。
[0161] 另外,如果移动终端500与外部托架连接,则接口单元560可以成为托架的电力被供应到移动终端500所通过的路径或者由用户从托架输入的各种命令信号被传递到移动终端500所通过的路径。从托架输入的各种命令信号或电力可以操作为用于识别移动终端500被准确地安装在托架上的信号。
[0162] 存储器单元570可以存储用于控制单元580的操作的程序,并且可以暂时地存储输入/输出数据(例如,电话本、消息、静态图像和视频)。存储器单元570可以存储与在触摸屏上输入触摸期间输出的各种模式的振动和声音有关的数据。
[0163] 存储器单元570可以包括以下项当中的至少一种类型的存储介质:闪存存储器类型、硬盘类型、固态硬盘(SSD)类型、硅磁盘驱动器(SDD)类型、微型多媒体卡类型、卡存储器类型(例如,SD或XD存储器类型)、随机存取存储器(RAM)类型、静态随机存取存储器(SRAM)类型、只读存储器(ROM)类型、电可擦除可编程只读存储器(EEPROM)类型、可编程只读存储器(PROM)类型、磁存储器类型、磁盘类型以及光盘类型。移动终端500可以与在互联网上执行存储器单元570的存储功能的网络存储器相关地操作。
[0164] 此外,如上所述,控制单元580通常可以控制与应用程序相关的操作以及移动终端500的整体操作。例如,如果移动终端500的状态满足设置条件,则控制单元580可以执行或解除(release)限制用户针对应用的控制命令的输出的锁定状态。
[0165] 另外,控制单元580可以执行与语音呼叫、数据通信和视频呼叫相关的控制或处理,并且可以执行用于将在触摸屏上的手写输入或绘画输入分别识别为文本和图像的模式识别处理。此外,为了在移动终端500上实现下面所描述的各种实施方式,控制单元580可以使用上述组件的至少一个或组合来执行控制。
[0166] 供电单元590可以在控制单元580的控制下接收外部电力或内部电力,并且随后可以供应对于各个组件的操作所需的电力。供电单元590包括电池。该电池是可再充电的内置电池,并且可以可拆卸地联接于终端主体,以便用于充电。
[0167] 另外,供电单元590可以包括连接端口,并且该连接端口可以被配置为提供用于对电池进行充电的电力的外部充电器电连接至的接口单元560的一个示例。
[0168] 作为另一示例,供电单元590可以被配置为在不使用连接端口的情况下通过无线方法对电池进行充电。在这种情况下,供电单元590可以通过基于磁感应现象的电感耦合方法和基于电磁共振现象的磁共振耦合方法中的至少一种方法从外部无线电力传输装置接收电力。
[0169] 此外,可以通过使用软件、硬件或其组合在计算机或与之类似的装置可读的介质中实现下面的各种实施方式。
[0170] 然后,根据本发明的实施方式来描述使用移动终端500的通信系统。
[0171] 首先,通信系统可以使用不同的无线接口和/或物理层。例如,对于通信系统可用的无线接口可以包括频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动电信系统(UMTS)(特别地,长期演进(LTE)、高级长期演进(LTE-A)和全球移动通信系统(GSM))。
[0172] 下文中,为便于描述,使描述限于CDMA。然而,显而易见的是,除了CDMA无线通信系统以外,本发明还适用于包括正交频分复用(OFDM)无线通信系统在内的全部通信系统。
[0173] CDMA无线通信系统可以包括至少一个终端100、至少一个基站(BS)(基站可以被称为节点B或演进节点B)、至少一个基站控制器(BSC)以及移动交换中心(MSC)。MSC可以被配置为与公用交换电话网(PSTN)和BSC连接。BSC可以被连接成通过回程线路与BS配对。可以根据E1/T1、ATM、IP、PPP、帧延迟、HDSL、ADSL和xDSL中的至少一个来设置回程线路。因此,CDMA无线通信系统中可以包括多个BSC。
[0174] 多个BS中的每一个可以包括至少一个传感器,并且每个传感器可以包括全向天线或指示从BS起的特定径向方向的天线。另外,每个传感器可以包括各种形式的至少两个天线。每个BS可以被配置为支持多个频率分配,并且多个频率分配中的每一个可以具有特定频谱(例如,1.25MHz、5MHz等)。
[0175] 扇区和频率分配的交叉可以被称为CDMA信道。BS可以被称为基站收发子系统(BTS)。在这种情况下,一个BSC和至少一个BS一起可以被称为“BS”。BS还可以表示“小区站点”。另外,针对特定BS的多个扇区中的每一个可以被称为多个小区站点。
[0176] 广播发送器(BT)将广播信号发送到在系统中操作的终端500。图5中所示的广播接收模块511被设置在终端500中,以用于接收从BT发送的广播信号。
[0177] 另外,GPS可以被链接到CDMA无线通信系统,以便检查移动终端500的位置。然后,卫星有助于获得移动终端500的位置。可以通过至少一个卫星来获得有用的位置信息。在本文中,可以通过使用除了GPS追踪技术以外的用于对位置进行追踪的全部技术来对移动终端500的位置进行追踪。另外,至少一个GPS卫星可以选择性或另外地负责卫星DMB发送。
[0178] 移动终端500中的位置信息模块515用于检测并计算移动终端的位置,并且其代表性示例可以包括GPS模块和WiFi模块。如果必要,为了替代性地或附加地获得与移动终端的位置有关的数据,位置信息模块515可以执行无线通信单元510中的另一模块的功能。
[0179] 诸如GPS模块的位置信息模块115可以计算与到至少三个卫星的距离有关的信息以及准确的时间信息,并且然后对所计算的信息应用三角测量,以便根据纬度、经度和高度来精确计算3D当前位置信息。广泛使用一种用于通过使用三个卫星来计算位置和时间信息以及通过使用另一卫星来校正所计算的位置和时间信息的误差的方法。另外,GPS模块515可以在持续计算当前位置时实时地计算速度信息。然而,在诸如房间的卫星信号的遮蔽区域中难以通过使用GPS模块来精确测量移动终端的位置。因此,为了补偿GPS方法的测量,可以利用WiFi定位系统(WPS)。
[0180] WPS是一种用于通过使用移动终端500中的WiFi模块和用于向WiFi模块发送无线信号或从WiFi模块接收无线信号的无线接入点(AP)来对移动终端500的位置进行追踪的技术,并且可以表示使用WiFi的基于无线局域网(WLAN)的位置测量技术。
[0181] WiFi位置追踪系统可以包括WiFi位置测量服务器、移动终端500、与移动终端500连接的无线AP以及用于存储任意无线AP信息的数据库。
[0182] 接入到无线AP的移动终端500可以向WiFi位置测量服务器发送位置信息请求消息。
[0183] WiFi位置测量服务器基于移动终端500的位置信息请求消息(或信号)来提取与移动终端500连接的无线AP的信息。与移动终端500连接的无线AP的信息可以通过移动终端500被发送到WiFi位置测量服务器,或者可以从无线AP被发送到WiFi位置测量服务器。
[0184] 基于移动终端500的位置信息请求消息,所提取的无线AP的信息可以是以下项中的至少一个:MAC地址、服务集识别(SSID)、接收信号强度指示符(RSSI)、参考信号接收功率(RSRP)、参考信号接收质量(RSRQ)、信道信息、隐私、网络类型、信号强度和噪声强度。
[0185] 如上所述,WiFi位置测量服务器可以通过使用与移动终端500连接的无线AP的信息从预先建立的数据库中提取与移动终端500所接入的无线AP对应的无线AP信息。在这一点上,存储在数据库中的任意无线AP的信息可以是诸如MAC地址、SSID、信道信息、隐私、网络类型、无线AP的经纬度坐标、无线AP所位于的建筑物名称、楼层的数目、室内具体位置(可用的GPS坐标)、AP的拥有者的地址以及电话号码的信息。在这一点上,为了将在测量处理期间使用非法MAC地址提供的移动AP或无线AP去除,WiFi位置测量服务器可以按照高RSSI次序仅提取预定数目的无线AP信息。
[0186] 然后,WiFi位置测量服务器可以通过使用从数据库中提取的至少一个无线AP信息来提取(或分析)移动终端500的位置信息。通过将所包括的信息与所接收的无线AP信息进行比较,来提取(或分析)移动终端500的位置信息。
[0187] 作为提取(或分析)移动终端500的位置信息的方法,可以使用小区ID方法、指纹方法、三角测量方法以及地标方法。
[0188] 小区ID方法是用于确定移动终端收集的相邻无线AP信息中具有最强信号强度的无线AP的位置作为移动终端的位置的方法。实现是简单的,不需要额外成本,并且快速获得位置信息,但是如果无线AP的安装密度较低,则测量精确度较差。
[0189] 指纹方法是用于通过从服务区域中选择参考位置来收集信号强度信息以及基于所收集的信息通过从移动终端发送的信号强度信息来估计位置的方法。为了使用指纹方法,需要提前提供用于存储传播特性的数据库。
[0190] 三角测量方法是用于基于在至少三个无线AP的坐标与移动终端之间的距离来计算移动终端的位置的方法。为了测量移动终端与无线AP之间的距离,可以使用被转换成距离信息的信号强度、到达时间(ToA)、到达时间差(TDoA)和到达角(AoA)。
[0191] 地标方法是用于通过使用知晓位置的地标发送器来测量移动终端的位置的方法。
[0192] 除了所列方法以外,还可以利用各种算法作为用于提取(或分析)移动终端的位置信息的方法。
[0193] 由于所提取的移动终端500的位置信息通过WiFi位置测量服务器被发送到移动终端500,所以移动终端500可以获得该位置信息。
[0194] 由于与至少一个无线AP连接,移动终端500可以获得位置信息。在这一点上,用于获得移动终端500的位置信息所需的无线AP的数目可以根据移动终端500所位于的无线通信环境而改变。
[0195] 然后,参照图6,描述了在WFD源和WFD宿之间建立WFD会话以及提供屏幕共享服务的示例。图6是例示根据本发明的实施方式的在WFD源和WFD宿之间建立WFD会话并且提供屏幕共享服务的处理的梯形图。
[0196] 图6中所示的操作中的至少一个可以受一个或更多个Wi-Fi直连标准文档支持。
[0197] WFDS中的显示服务可以指用于允许P2P装置之间的屏幕共享的服务和应用。使用显示服务的P2P服务可以被称为WFD装置;用于通过在WFD装置间的装置P2P链接来支持多媒体内容的流动的装置可以被称为WFD源;并且用于通过P2P链接从WFD源装置接收多媒体内容并且渲染该多媒体内容的装置可以被称为WFD宿。
[0198] WFD源10可以是图5中所示的移动终端500。因此,WFD源10可以包括图5中所示的移动终端500的全部组件。
[0199] WFD宿20可以是图1中所示的显示装置100。因此,WFD宿20可以包括图1中所示的显示装置100的全部组件。
[0200] 参照图6,WFD源10可以在操作S600中在屏幕上显示图像。
[0201] 根据实施方式,在屏幕上显示的图像可以是多媒体内容的图像。
[0202] 根据另一实施方式,如果WFD源10是图5中所示的移动终端500,则在屏幕上显示的图像可以是通过移动终端500显示的图像,例如,移动终端500的主屏幕或者安装在移动终端500上的应用的执行画面或者媒体内容的视频。
[0203] 然后,WFD源10和WFD宿20可以通过WFD装置发现在WFD连接建立之前首先发现彼此的存在(S601)。更详细地,WFD装置可以通过包括WFD信息元素(IE)的探测请求帧以及探测应答帧来识别彼此的存在。WFD IE可以包括用于在WFD装置之间建立优化连接的基本信息,例如装置类型和装置状态。如果WFD装置接收到包括WFD IE在内的探测请求帧,则响应于此,WFD装置可以发送包括其WFD IE在内的探测应答帧。如果WFD装置被链接到AP并且作为Wi-Fi P2P装置进行操作,则超过两个的Wi-Fi收发器在逻辑上在一个物理装置中进行操作。在这一点上,为了用于WFD装置发现,使用Wi-Fi直连收发器。用于WFD装置发现的探测请求帧除了WFD IE以外还可以包括P2P IE,并且它们可以通过Wi-Fi直连收发器进行解码。
[0204] 然后,WFD源10和WFD宿20可以在WFD连接建立之前发现彼此的服务能力(S603)。更详细地,如果一个WFD装置发送作为信息子元素而包括WFD能力的服务发现请求帧,则响应于此,另一WFD装置可以发送作为信息子元素而包括其WFD能力的服务发现应答帧。关于服务发现过程,用于支持服务发现过程作为选择过程的WFD装置可以利用用于支持服务发现过程的已发现WFD装置来执行服务发现过程。为了执行服务发现过程,用于装置发现过程的探测请求帧和应答帧可以包括用于指示WFD装置是否具有用于支持服务发现过程的能力的信息。
[0205] 然后,WFD源10或WFD宿20可以选择对等WFD装置以用于WFD连接建立。可以通过用户的输入来选择用于对WFD连接建立进行处理的对等WFD装置,或者可以根据策略来自动地选择用于对WFD连接建立进行处理的对等WFD装置。
[0206] 然后,在操作S605中,WFD装置可以选择用于与所选择的对等WFD装置的WFD连接建立的方法。更详细地,WFD装置可以通过Wi-Fi P2P和隧穿直接链路建立(TDLS)中的一个的连接方案来建立WFD连接。WFD装置可以基于优选的连接信息以及除了WFD IE之外还递送的所链接的BSSID子元素来确定连接方案。
[0207] 如果通过使用WFD装置之间的Wi-Fi P2P或TDLS来成功执行WFD建立,则在操作S607中WFD装置可以对WFD能力协商进行处理。更详细地,WFD源10和WFD宿20可以通过使用实时流协议(RTSP)来交换消息,以确定用于限定在WFD会话期间的音频/视频有效载荷的参数集。WFD源10和WFD宿20可以交换其规格信息。WFD源10可以通过使用RTSP协议来询问WFD宿20的能力,并且响应于此,WFD宿20可以将其能力信息发送到WFD源10。例如,WFD宿20可以将包括其可支持的分辨率在内的分辨率信息发送到WFD源10。例如,WFD宿20可以将其可支持的分辨率包括与16:9或4:3宽高比对应的分辨率的分辨率信息发送到WFD源10。在本文中,与16:9或4:3对应的分辨率仅是一个示例,并且可以是与水平长度比垂直长度更长的宽高比对应的分辨率。
[0208] 另一方面,WFD源10还可以将包括其可支持的分辨率在内的分辨率信息发送到WFD宿20。
[0209] 图7A至图7C是例示根据本发明的实施方式的WFD宿发送到WFD源的分辨率信息的视图。
[0210] WFD宿20可以将图7A至图7C中所示的分辨率表格中的至少一个发送到WFD源10。即,WFD宿20可以将与16:9或4:3宽高比对应的分辨率以及与水平长度比垂直长度更长的宽高比对应的分辨率发送到WFD源10。
[0211] 图7A中所示的分辨率表格可以是表示受WFD装置支持的手持式装置支持的一组分辨率以及与分辨率对应的刷新率的表格。
[0212] 图7B中所示的分辨率表格可以是表示受WFD装置支持的一组消费者电子协会(CEA)分辨率以及与分辨率对应的刷新率的表格。
[0213] 图7C中所示的分辨率表格可以是表示受WFD装置支持的一组视频电子标准协会(VESA)分辨率以及与分辨率对应的刷新率的表格。
[0214] 图7D是例示WFD源询问WFD宿的能力以及WFD宿包括与此相对应的其能力信息的消息的视图。
[0215] 在执行与WFD宿20的连接建立之后,WFD源10可以通过使用RTSP协议来发送用于询问WFD宿20的能力的请求消息M3。参照图7D,WFD源10可以将包括wfd视频格式参数730在内的请求消息发送到WFD宿20。wfd视频格式参数730可以是WFD宿20询问可支持的视频分辨率的参数。响应于从WFD源10接收的请求消息,WFD宿20可以将包括图7A至图7C中所示的分辨率信息在内的请求消息M3发送到WFD源10。分辨率信息可以包括图7A至图7C中所示的分辨率表格。这可以通过重放消息中的视频格式参数730的值来进行检查。
[0216] 再次对图6进行描述。
[0217] 在与WFD宿20的WFD能力协商处理期间,WFD源10可以通过使用RTSP协议来将必要的请求消息发送到WFD宿20。例如,WFD源10可以通过使用RTSP协议来将包括基于从WFD宿20接收的分辨率信息要递送与特定分辨率对应的视频内容的图像的内容在内的消息发送到WFD宿20。更详细地,WFD源10可以通过使用RTSP协议来将包括基于从WFD宿20接收的分辨率信息要递送与特定分辨率对应的视频内容的图像的内容在内的消息发送到WFD宿20。即,WFD源10可以选择图7A至图7C中所示的分辨率信息中包括的多个分辨率中的一个,并且将表示要发送所选择的分辨率的图像的消息发送到WFD宿20。如稍后所描述,WFD源10所选择的分辨率不能对应于WFD源10当前显示的图像的分辨率。
[0218] 在操作S611中,WFD宿20可以基于从WFD源10接收的请求消息、通过RTSP协议来发送应答消息。
[0219] 根据本发明的实施方式,WFD源10选择的分辨率不能被包括在WFD源10支持的分辨率中。即,WFD源10当前显示的分辨率不能被包括在WFD宿20支持的分辨率中。操作S609和操作S611可以被包括在操作S607中,以用于WFD能力协商。
[0220] 如果成功终止WFD能力协商操作,则在WFD源10和WFD宿20之间建立WFD会话(或米拉(Mira)多播会话),并且在操作S613中可以将音频和视频内容从WFD源10流向WFD宿20。
[0221] 根据实施方式,从WFD源10接收的视频内容的全部图像可以包括WFD源10当前在屏幕上显示的第一图像以及除了第一图像以外的第二图像。由于WFD源10的输出分辨率不被包括在WFD宿20的可支持的分辨率中,所以第二图像可以是WFD源10插入的图像。输出分辨率可以表示WFD源10显示的第一图像的分辨率。即,第二图像可以是被插入以将WFD源10当前显示的第一图像的分辨率转换成WFD宿20的可支持的分辨率的图像。WFD源10可以将第二图像插入到第一图像中,以便发送符合WFD宿20的宽高比的图像并将其发送到WFD宿20。
[0222] 根据实施方式,第二图像可以是黑色图像。即,黑色图像可以是信箱(Letterbox)、邮箱(Pillarbox)和窗口箱(windowbox)中的一个。信箱可以是包括在顶部和底部的黑色图像,以便使第一宽高比的图像与第二宽高比的图像相匹配。邮箱可以是包括在左侧和右侧的黑色图像,以便使第一宽高比的图像与第二宽高比的图像相匹配。窗口箱可以是包括在顶部和底部以及左侧和右侧的黑色图像,以便使第一宽高比的图像与第二宽高比的图像相匹配。
[0223] 根据本发明的实施方式,假设第二图像是黑色图像,但本发明不限于此,并且第二图像可以是背景图像、观看屏幕图像或者不显示信息的图像,并且其形式并不重要。
[0224] 在附图中,WFD源10可以是图5中所示的移动终端500,并且WFD宿20可以是图1中所示的显示装置100,但是这仅是示例。
[0225] 图8A至图8C是如果提供用于允许WFD源和WFD宿共享屏幕的显示服务则包括除了WFD源当前显示的图像之外的图像并且该图像被发送到WFD宿的视图。图8D是在不遵循Wi-Fi显示标准的智能电话与PC之间共享图像的视图。
[0226] 特别地,图8A和图8B是当通过WFD源10在垂直屏幕上播放第一图像810时执行镜像功能的示例,以及图8C是当通过WFD源10在水平屏幕上播放第一图像810时执行镜像功能的示例。通过WFD源10在垂直屏幕上显示图像可以表示以肖像模式来显示图像。另外,通过WFD源10在水平屏幕上显示图像可以表示以风景模式来显示图像。
[0227] 参照图8A,当通过显示单元551显示媒体内容的第一图像810时,WFD源10可以通过屏幕共享服务将媒体内容的图像810发送到WFD宿20。即,WFD源10和WFD宿20可以通过参照图6描述的操作S601至操作S613来共享屏幕。WFD宿20可以通过能力协商操作来将包括图7A至图7C中所示的分辨率表格在内的分辨率信息发送到WFD源10。WFD源10可以基于所接收的分辨率信息来选择特定分辨率,并且将具有所选择的分辨率的第一图像810发送到WFD宿20。例如,WFD源10可以将具有与16:9或4:3宽高比对应的分辨率的图像发送到WFD宿20。在该处理期间,WFD源10可以包括除了第一图像810以外的第二图像830,并且将该第二图像
830发送到WFD宿20。第二图像830可以是被包括以将具有由于在操作S609中由WFD源10选择的分辨率不与WFD源10的输出分辨率对应而选择的分辨率的第一图像810发送到WFD宿20的图像。WFD源10选择的分辨率可以是与16:9或4:3宽高比对应的分辨率,但是不限于此,并且可以是图7A至图7C中所示的多个分辨率中的一个。结果,WFD源10显示的第一图像810的分辨率不能被包括在WFD宿20所支持的分辨率中。WFD源10可以在第一图像810中包括第二图像830以具有与16:9或4:3宽高比对应的分辨率,并发送该第二图像830。
[0228] 第二图像830可以是邮箱。即,第二图像830可以包括左黑色图像831和右黑色图像833。
[0229] WFD宿20可以通过显示单元180在整个屏幕上显示从WFD源10接收的第一图像810和第二图像830。
[0230] 此外,如图8B所示,WFD宿20可以在除了显示单元180的整个屏幕以外的部分屏幕上显示从WFD源10接收的第一图像810和第二图像830。即,如果在显示另一媒体内容的图像850时从WFD源10接收第一图像810和第二图像830,则WFD宿20可以在显示单元180的部分屏幕上显示第一图像810和第二图像830。
[0231] 观看者可以通过WFD宿20来观看在WFD源10的屏幕上显示的第一图像810,但是由于存在作为黑色图像的第二图像830,观看第一图像810时感到不舒服。特别地,如果通过WFD宿20执行除了屏幕共享服务以外的另一任务(例如,观看另一媒体内容的图像850),则由于黑色图像,用户可能受到干扰。
[0232] 此外,参照图8C,WFD源10可以在被设置在水平屏幕中的状态下与WFD宿20共享第一图像870。在图8C中,WFD源10选择的分辨率不能与WFD源10的输出分辨率不同。更详细地,设置在水平长度比垂直长度更长的状态下的WFD源10的宽高比可以与和WFD宿20所支持的分辨率对应的宽高比不同。即,与设置在水平长度比垂直长度更长的状态下的WFD源10的宽高比对应的分辨率不能被包括在与WFD宿20所支持的宽高比对应的分辨率中。WFD源10可以包括除了第一图像870以外的第二图像890,并且将该第二图像890发送到WFD宿20,以便将水平宽高比的第一图像870与和所选择的分辨率对应的宽高比相匹配。
[0233] 在图8C中,第二图像890可以是信箱。即,第二图像890可以包括顶部黑色图像891和底部黑色图像893。
[0234] WFD宿20可以通过显示单元180在整个屏幕上显示从WFD源10接收的第一图像870和第二图像890。在这种情况下,由于存在第二图像890,所以用户观看第一图像870可能感到不舒服。
[0235] 因此,WFD宿20可以将除了WFD源10当前显示的图像以外的黑色图像去除。
[0236] 此外,在图8D的情况下,如果其不遵循Wi-Fi显示标准,则对智能电话与PC之间的屏幕镜像功能的情况进行描述。在这种情况下,智能电话可以将第一图像870发送到PC。即,可以仅发送不包括黑色图像的图像。智能电话可以被设置在水平方向上,以将第一图像870发送到PC。然而,如果将在水平方向上显示的第一图像870发送到PC,则智能电话可以将垂直方向上的第一图像870发送到PC。因此,PC可以将垂直方向上的第一图像870显示在屏幕上。为了在水平方向上观看第一图像870,要求用户不方便地执行附加的图像转动操作。
[0237] 再次对图6进行描述。
[0238] WFD宿20可以将除了WFD源10当前在屏幕上显示的第一图像以外的第二图像从由WFD源10接收的整个图像中去除(S615)。WFD宿20从WFD源10接收的整个图像可以包括第一图像和第二图像。第一图像可以是WFD源10当前在屏幕上显示的图像。第二图像可以是被插入以将WFD源10当前显示的第一图像调整为与WFD源10选择的分辨率对应的宽高比的图像。WFD宿20可以从由WFD源10接收的整个图像中提取除了WFD源10当前显示的第一图像以外的剩余的第二图像,并且将所提取的第二图像去除。
[0239] 根据实施方式,WFD宿20可以计算颜色标准偏差,以从由WFD源10接收的整个图像中提取黑色图像。更详细地,如果黑色图像是信箱,则WFD宿20将整个图像划分成中心区域以及顶部区域和底部区域,来计算每个区域中的颜色标准偏差,并且如果中心区域的标准偏差与顶部区域和底部区域的标准偏差相差超过预定值,则确定信箱被插入到顶部区域和底部区域中。WFD宿20可以将所插入的信箱去除。
[0240] 根据另一实施方式,WFD宿20可以通过帧的边缘检测来检测黑色区域。更详细地,通过将从WFD源10接收的整个图像的I帧经过滤波器,可以提取边缘,并且可以基于所提取的边缘来检测信箱。
[0241] 根据另一实施方式,WFD宿20可以通过帧标识符来提取第二图像。即,WFD宿20可以基于从WFD源10接收的第一图像的帧标识符和第二图像的帧标识符来提取第二图像。即,WFD源10当前显示的第一图像的帧标识符可以与第二图像的帧标识符不同。WFD宿20可以通过使用帧标识符来提取除了第一图像以外的第二图像。
[0242] 如上所述,提取并去除黑色图像的技术仅是示例性的,并且可以使用各种已知技术。
[0243] WFD宿20可以在第二图像在操作S617中被去除的情况下显示第一图像。根据本发明的实施方式,WFD宿20可以将使第二图像从由WFD源10接收的整个图像中被去除的第一图像显示在显示单元180的整个屏幕上。即,WFD宿20可以缩放第一图像以符合显示单元180的宽高比,并且将其输出在显示单元180的整个屏幕上。
[0244] 根据本发明的另一实施方式,WFD宿20可以将使第二图像从由WFD源10接收的整个图像中被去除的第一图像显示在显示单元180的部分屏幕上。例如,WFD宿20可以仅将使第二图像从由WFD源10接收的整个图像中被去除的第一图像显示在显示单元180的部分屏幕上。在这种情况下,可以按照画中画(PIP)形式来显示第一图像。
[0245] 将参照附图来描述操作S617。
[0246] 图9A至图9D是例示根据本发明的实施方式的用于仅显示WFD源在从WFD源接收的整个图像中显示的图像的处理的视图。
[0247] 图9A对应于图8A,图9B对应于图8B,以及图9C对应于图8C。
[0248] 在图9A至图9C中,除了由WFD宿20执行的任务(例如,应用执行或广播节目显示)以外,WFD宿20还输出从WFD源10接收的数据。为了防止所接收的数据覆盖由WFD宿20正在执行的现有任务,WFD宿20可以半透明地显示所接收的数据。此外,WFD宿20可以显示用于调整所接收的数据的透明度的透明度调整条。另外,WFD宿20还可以显示用于调整是否将所接收的数据显示在整个屏幕上的按钮、用于调整是否使所接收的数据最小化的按钮、以及用于确定是否使所接收的数据终止的按钮。显而易见的是,可以通过用户输入来改变所显示的位置和所接收数据的大小。稍后将对其进行描述。
[0249] 参照图9A,WFD源10可以将第二图像830插入到通过显示单元551显示的第一图像810中,以将其发送到WFD宿20。通过WFD源10显示的第一图像810可以是具有水平长度比垂直长度更长的宽高比的图像。与受WFD宿20支持的分辨率对应的宽高比可以是水平长度比垂直长度长的比率。WFD源10可以插入第二图像830,以便发送适合于WFD宿20的宽高比的第一图像810。
[0250] WFD宿20可以从由WFD源10接收的整个图像中仅提取第二图像830,并且将所提取的第二图像830去除。即,WFD宿20可以从整个图像中裁切出第一图像810的左黑色图像831和第一图像810的右黑色图像833。然后,WFD宿20可以在使第二图像830被去除的状态下缩放第一图像810,以适合于显示单元180的宽高比,并将其输出。
[0251] 参照图9B,WFD宿20可以将第一图像810的左黑色图像831和第一图像810的右黑色图像833从整个图像中去除,并且仅将第一图像810原样显示在显示单元180上。即,与图9A的实施方式不同,WFD宿20不能使第一图像810放大并显示在整个屏幕上,而是将其原样显示在显示单元180的部分屏幕上。即,在这种情况下,可以按照PIP形式来显示在WFD宿20上显示的第一图像810。WFD宿20可以在从WFD源10接收第一图像810和第二图像830之前正在显示另一媒体内容的图像850。如果在显示其它媒体内容的图像850的同时通过屏幕共享服务从WFD源10接收整个图像,则WFD宿20可以将第二图像830去除以仅将第一图像810交叠在其它媒体内容的图像850上,并显示该第一图像810。
[0252] 观看者可以基于屏幕共享服务在没有黑色图像的情况下观看从WFD源10接收的图像,并且在没有干扰的情况下通过WFD宿20来观看其它媒体内容的图像850。
[0253] 此外,参照图9C,设置在水平屏幕中的WFD源10基于屏幕共享服务可以包括除了第一图像870以外的第二图像890,并且将该第二图像890发送到WFD宿20。第二图像890可以是信箱。WFD宿20可以仅将第二图像890从由WFD源10接收的第一图像870和第二图像890中去除。在将第二图像890去除之后,WFD宿20可以缩放第一图像870,以适合于显示单元180的整个屏幕尺寸,并输出该第一图像870。
[0254] 在图9B中,WFD源10可以将根据其放置状态而显示的第一图像810原样发送到WFD宿20。WFD源10可以识别其屏幕显示方向,并且将与所识别的方向对应的图像发送到WFD宿20。WFD源10通过陀螺仪传感器可以识别出其被设置在水平方向或垂直方向上。如果WFD源
10被设置在垂直长度比水平长度更长的垂直方向上,则其可以将垂直方向上的第一图像
810发送到WFD宿20。WFD宿20可以在第二图像830被去除的状态下显示垂直方向的第一图像
810。
[0255] 在图9C中,由于WFD源10被设置在水平长度比垂直长度更长的水平方向上,则其可以将水平方向上的第一图像870发送到WFD宿20。WFD宿20可以在第二图像890被去除的状态下显示水平方向的第一图像870。即,WFD源10将适合于其放置方向的图像发送到WFD宿20,使得WFD宿20可以显示图像以对应于WFD源10的放置方向。因此,如参照图8D所描述,不考虑智能电话的放置方向,与始终在垂直方向上发送图像的情况不同的是,不要求附加的图像方向切换任务。根据本发明的另一实施方式,在图9C中,设置在水平方向上的WFD源10可以将垂直方向上的第一图像870发送到WFD宿20。WFD宿20可以识别出WFD源10被设置在水平方向上,并且自动地将第一图像810的垂直方向切换成水平方向。
[0256] 此外,如果WFD源10的显示模式被从肖像模式变成风景模式,则可以自动地对在WFD宿20上显示的第一图像进行切换。
[0257] 参照图9D,WFD源10在肖像模式下显示第一图像810。WFD宿20可以显示使第二图像被去除的图像850,以被层叠在另一媒体内容的图像850上。即,可以按照PIP形式来显示第一图像810。在这一点上,可以按照肖像形式来显示在WFD宿20上显示的第一图像810。如果WFD源10的显示模式被从肖像模式变成风景模式,则WFD宿20还可以将第一图像810切换成风景模式,并显示该第一图像810。WFD宿20可以将第一图像810显示在显示单元180的整个屏幕上。
[0258] 如果WFD源10在肖像模式下发送第一图像810,如图9A和图9B所示,则其可以将黑色图像插入到第一图像810中并且将其发送到WFD宿20。WFD宿20可以提取所插入的黑色图像并且将所提取的黑色图像去除,以便仅显示第一图像810。如果WFD源10被从肖像模式变成风景模式,则其可以将不包括黑色图像的第一图像810发送到WFD宿20。即,在这种情况下,WFD源10的输出分辨率可以被包括在与WFD宿20所支持的宽高比对应的分辨率中,使得黑色图像不能被包括在要被发送的图像中。如果WFD源10的显示模式如图9D所示被变成风景模式,则假设并描述WFD宿20将第一图像810显示在整个屏幕上,但是本发明不限于此。可以按照PIP形式来显示第一图像810。
[0259] 此外,根据本公开的实施方式,可以对使第二图像被去除的第一图像进行调整。
[0260] 图10A和图10B是根据本发明的实施方式的调整使第二图像从由WFD源接收的整个图像中被去除的第一图像的视图。
[0261] 参照图10A,WFD宿20的显示单元180将从WFD源10流出的整个图像中的第一图像810显示在整个屏幕上。即,WFD宿20可以显示使第二图像(例如,黑色图像)被去除的第一图像810。第一图像810可以被显示为层叠在另一媒体内容的图像850上,在接收第一图像810之前通过WFD宿20的显示单元180来显示该图像850。
[0262] WFD宿20还可以在屏幕上显示镜像图像调整窗口1000。镜像图像调整窗口1000可以是用于调整第一图像810的大小或透明度的窗口。如果通过显示单元180显示第一图像810或者在屏幕共享服务开始时接收到第一图像810,则可以显示镜像图像调整窗口1000。
镜像图像调整窗口1000可以包括大小调整项1010。大小调整项1010可以是用于调整从WFD源10接收的第一图像810的大小的项。大小调整项1010可以包括大小调整条。WFD宿20可以基于从远程控制装置200接收的控制指令来调整第一图像810的大小。更详细地,WFD宿20还可以根据从远程控制装置200接收的指令来显示指针205,并且通过使用指针205来调整第一图像810的大小。在图10A中仅示出了大小调整项1010,但是本发明不限于此,并且如果第一图像810的大小被减小,则还可以显示用于调整被减小的第一图像810的位置的项。
[0263] 参照图10B,WFD宿20的显示单元180可以将从WFD源10流出的第一图像810显示在部分屏幕上。按照相同的方式,WFD宿20可以显示使第二图像(例如,黑色图像)被去除的第一图像810。WFD宿20可以将在屏幕共享服务之前播放的媒体内容的图像850显示在显示单元180的整个屏幕上,并且显示层叠在媒体内容的图像850上的第一图像810。WFD宿20如果将第一图像810显示在显示单元180的屏幕上或者接收第一图像810,则可以显示镜像图像调整窗口1000。根据实施方式,镜像图像调整窗口1000可以被设置成在第一图像810周围。可以按照OSD形式来显示镜像图像调整窗口1000。根据另一实施方式,镜像图像调整窗口
1000可以被设置成层叠在第一图像810上。
[0264] 镜像图像调整窗口1000可以显示大小调整项1010和透明度调整项1030中的至少一个。透明度调整项1030可以是用于调整第一图像810的透明度的项。如果在媒体内容的图像850的显示期间通过镜像功能或屏幕共享服务从WFD源10接收第一图像810,则用户可以在没有干扰的情况下通过调整第一图像810的透明度来观看媒体内容的图像850。在本文中,假设并描述在屏幕共享服务之前在WFD宿20的显示单元180上显示的图像850是媒体内容的图像,但是本发明不限于此,并且图像850可以是诸如主屏幕画面、菜单画面以及应用的执行画面的各种形式的画面。用户可以调整第一图像810的透明度以用于多任务。
[0265] 在图10B中仅示例性地描述了大小调整项1010和透明度调整项1030,但是本发明不限于此,并且还可以显示用于改变第一图像810的位置的项。
[0266] 图11是例示根据本发明的实施方式的用于在显示从WFD源中流出的第一图像的同时返回至包括第二图像的图像的处理的视图。
[0267] 对与图9B相关的图11的一部分的描述被省略。
[0268] 参照图11,WFD宿20可以将使第二图像从由WFD源10接收的整个图像中被去除的第一图像810显示在显示单元180的部分屏幕上。即,可以按照PIP形式来显示第一图像810。WFD宿20可以接收用于选择第一图像810的指令。WFD宿20可以基于所接收的指令来显示第一图像810和第二图像830。即,由于选择了按照PIP形式显示的第一图像810,所以WFD宿20可以原样显示从WFD源10接收的整个图像本身。即,WFD宿20可以恢复作为被去除的黑色图像的第二图像。可以从远程控制装置200接收用于选择第一图像810的指令。
[0269] 图12A至图12C是例示根据本发明的实施方式的用于控制从WFD源接收的图像的处理的视图。
[0270] 参照图12A,假设WFD宿20在显示媒体内容的图像850的同时将从WFD源10接收的第一图像810和第二图像830显示在显示单元180的整个屏幕上。图12A可以表示所去除的第二图像830被恢复的状态。根据实施方式,可以在第二图像830上显示包括用于控制WFD源10的操作的多个虚拟按钮的源控制窗口1100。WFD宿20可以从由WFD源10接收的整个图像中识别出第二图像830,并且将源控制窗口1100显示在显示有所识别的第二图像830的区域上。可以在源控制窗口1100上显示以下项中的至少一个:虚拟镜像打开按钮1110、虚拟主屏幕按钮1120、虚拟菜单按钮1130、虚拟取消按钮1140、虚拟电源按钮1150和虚拟音量调整按钮1160。每个按钮可以对应于设置在WFD源10处的物理键按钮。即,虚拟主屏幕按钮1120可以对应于WFD源10的主屏幕按钮;虚拟菜单按钮1130可以对应于菜单按钮;虚拟取消按钮1140可以对应于取消按钮;虚拟电源按钮1150可以对应于电源按钮;以及虚拟音量调整按钮
1160可以对应于音量调整按钮。当选择每个虚拟按钮时,可以执行实际物理键按钮的功能。
可以通过远程控制装置200的指针来选择每个虚拟按钮。
[0271] 虚拟镜像关闭按钮1110可以是用于允许WFD宿20停止与WFD源10的屏幕共享服务或服务镜像服务的按钮。如果选择虚拟镜像关闭按钮1110,则WFD宿20不能显示第一图像810和第二图像830。即,WFD宿20可以将用于停止屏幕共享服务的请求消息发送到WFD源10。
WFD源10可以响应于所接收的请求消息来停止向WFD宿20发送第一图像810和第二图像830。
因此,用户可以以现有的视角来观看媒体内容的图像850。
[0272] 此外,如果选择虚拟主屏幕按钮1120,则WFD宿20可以将用于显示主屏幕画面的请求消息发送到WFD源10。WFD源10可以响应于所接收的请求消息来显示主屏幕画面,而不在回放中显示第一图像810。同时,WFD源10可以将与显示器中的主屏幕画面有关的信息发送到WFD宿20。WFD宿20可以通过使用所接收的与主屏幕画面有关的信息将第一图像810切换到主屏幕画面,并且显示该主屏幕画面。
[0273] 如果选择虚拟菜单按钮1130,则WFD源10可以显示菜单画面,并且WFD宿20也可以显示菜单画面。
[0274] 如果选择虚拟取消按钮1140,则WFD源10可以显示之前所执行的任务,并且因此,WFD宿20还可以显示之前的任务。
[0275] 如果选择虚拟电源按钮1150,则可以控制WFD源10的电源。
[0276] 如果选择虚拟音量调整按钮1160,则可以调整从WFD源10输出的音量的大小。
[0277] 根据本发明的实施方式,虚拟主屏幕按钮1120、虚拟菜单按钮1130、虚拟取消按钮1140、虚拟电源按钮1150以及虚拟音量调整按钮1160可以被显示为对应于设置在移动终端处的键按钮的位置。即,如图12A所示,虚拟主屏幕按钮1120、虚拟菜单按钮1130、虚拟取消按钮1140、虚拟电源按钮1150以及虚拟音量调整按钮1160可以被显示在源控制窗口1100上,以对应于设置在移动终端处的实际键按钮的位置。
[0278] 此外,源控制窗口1100可以被设置在附加区域上。参照图12B,WFD宿20将媒体内容的图像850显示在显示单元180的整个屏幕上,并且WFD宿20仅将从WFD源10接收的第一图像810显示在部分屏幕上。即,其处于所插入的第二图像830被去除的状态。源控制窗口1100可以被设置在显示有第一图像810的区域或与显示有第一图像810的区域分离的区域上。如果第一图像810被显示在WFD宿20上,则可以显示源控制窗口1100。WFD宿20可以按照OSD形式来显示源控制窗口1100。
[0279] 如果选择虚拟镜像关闭按钮1110,则如图12C所示,WFD宿20可以允许第一图像810消失。同时,WFD宿20可以显示用于再次显示镜像画面的指示符1130。即,如果接收到用于选择指示符1130的指令,则WFD宿20可以将第一图像810再次显示在显示单元180的部分屏幕上。指示符1130可以被用来恢复与WFD源10的屏幕共享服务或屏幕镜像服务。
[0280] 图13A至图13C是例示根据本发明的实施方式的用于如果在WFD宿的分割屏幕上显示从WFD源接收的第一图像则调整当去除第二图像时发生的第一图像的失真的处理的视图。
[0281] 图13A借鉴图9A的描述,并且将仅对不同的部分进行描述。另外,图13B借鉴图9B的描述,并且将仅对不同的部分进行描述。
[0282] 参照图13A,WFD宿20可以在整个屏幕的各自两个分割的屏幕上显示媒体内容的图像850以及第一图像810。这可以对应于部分镜像。在这种情况下,第一图像810的分辨率不与WFD宿20的分辨率相匹配,使得第一图像810可能失真并被显示。即,由于WFD源10被设置在垂直屏幕中(例如,在肖像模式下操作),所以与此相对应的第一图像810的输出分辨率不被包括在受WFD宿20支持的分辨率中,使得第一图像810可能失真并被显示。在图13A中,WFD宿20还可以显示根据远程控制装置200的移动而移动的指针205。用户可以通过指针205来操纵第一图像810和媒体内容的图像850的边界K的位置,以调整第一图像810的大小。
[0283] 通过相同的方式,如图13B所示,如果WFD源10被设置在水平屏幕中,则使黑色图像被去除的第一图像870也可能失真并被显示。
[0284] 为了防止第一图像870失真并被显示,如图13C所示,WFD宿20可以在不失真的状态下显示第一图像810。即,WFD宿20可以使第一图像810在分割的屏幕上匹配,以在没有失真的情况下在屏幕上仅显示使第二图像被去除的第一图像810。另外,如图13C所示,WFD宿20可以将镜像图像调整窗口1000显示在显示有第一图像810的区域上。用户可以通过使用镜像图像调整窗口1000来调整作为镜像画面的第一图像810的大小和透明度。
[0285] 图14是例示根据本发明的实施方式的无线装置的配置的视图。
[0286] 图14中所示的无线装置可以是WFD源10和WFD宿20中的一个。
[0287] 参照图14,无线装置1可以包括通信单元2、存储器3、显示单元4和处理器9。
[0288] 通信单元2可以发送/接收无线信号,并且例如,可以根据IEEE 802系统来实现物理层。通信单元2可以被称为收发器。
[0289] 处理器9可以控制通信单元2、存储器3和显示单元4的操作。处理器9可以与通信单元2电连接,以根据IEEE 802系统来实现物理层和/或MAC层。另外,处理器9可以被配置为执行音频/视频编码和解码操作以用于WFD服务。另外,用于根据本发明的上述各种实施方式来实现无线装置的操作的模块可以被存储在存储器3中,并且可以由处理器9来执行。存储器3可以被包括在处理器9中,或者被安装在处理器9的外部以通过已知方式与处理器9连接。虽然附图中未示出,但无线装置1还可以包括声音输出单元,以输出声音。
[0290] 如果无线装置1是WFD源10,则WFD源10可以包括图5中所示的移动终端500的全部组件。在这种情况下,无线装置1的通信单元2可以执行无线通信单元510的全部功能。特别地,通信单元2可以包括无线通信单元510中包括的短距离通信模块514的全部功能。另外,无线装置1的存储器3可以对应于图5的存储器570,且显示单元4可以对应于图5的显示单元551。另外,处理器1可以执行图5的控制单元580的全部功能。
[0291] 如果无线装置1是WFD宿20,则WFD宿20可以包括图1中所示的显示装置100的全部组件。在这种情况下,无线装置1的通信单元2可以对应于图1的无线通信单元173;无线装置1的存储器3可以对应于图1的存储单元140;无线装置1的显示单元4可以对应于图1的显示单元180;以及无线装置1的处理器9可以对应于图1的控制单元170。
[0292] 根据本发明的另一实施方式,WFD宿20通过黑色图像去除模式的设置将或者不将从WFD源10接收的整个图像中的黑色图像去除。例如,WFD宿20可以显示用于黑色图像去除模式的设置的菜单设置画面,并且通过菜单设置画面来设置是否去除黑色图像。
[0293] 本发明的实施方式可以得到关于诸如IEEE 802系统、3GPP系统、3GPP LTE和高级LTE(LTE-A)系统、3GPP2系统和Wi-Fi联盟(WFA)系统的至少一个无线接入系统所公开的标准文献支持。即,没有在本发明的实施方式中进行描述以清楚地揭示本发明的技术范围的步骤或部件可以得到上述文献支持。另外,可以通过上述标准文献来对本说明书中的全部术语进行描述。
[0294] 根据本发明的实施方式,上述方法可以被具体化为在其上具有程序的非临时性计算机可读记录介质上的计算机可读代码。计算机可读记录介质的示例包括ROM、RAM、CD-ROM、磁带、软盘和光学数据存储装置,并且还包括载波(例如,通过互联网的发送)。
[0295] 上述显示装置不限于上述实施方式的配置和方法的应用,并且实施方式的全部或部分可以选择性地进行组合并且被配置为允许各种修改。