用于处理装置中的图像的设备和方法转让专利
申请号 : CN202010264542.5
文献号 : CN111479054B
文献日 : 2021-10-01
发明人 : 金汶洙 , 崔烘硕
申请人 : 三星电子株式会社
摘要 :
权利要求 :
1.一种电子装置,包括:
图像传感器;
触摸屏显示器;
处理器,被配置为:
在所述触摸屏显示器的第一区域上实时显示通过所述图像传感器获得的预览图像,响应于第一用户输入,从所述图像传感器生成第一静止图像,在保持在所述第一区域上显示所述预览图像的同时,在所述触摸屏显示器的与所述第一区域分开的第二区域上显示所述第一静止图像,响应于在所述第一区域上显示所述预览图像并且在所述第二区域上显示所述第一静止图像的同时接收到第二用户输入,从所述图像传感器生成第二静止图像,以及在所述触摸屏显示器的所述第二区域上显示所述第一静止图像,并且在所述触摸屏显示器的第三区域上显示所述第二静止图像。
2.如权利要求1所述的电子装置,其中,所述图像传感器包括多个图像传感器,并且其中,所述处理器还被配置为:使用所述多个图像传感器中的第一图像传感器显示第一预览图像,以及使用所述多个图像传感器中的第二图像传感器显示第二预览图像。
3.如权利要求1所述的电子装置,其中,所述处理器还被配置为:在显示所述预览图像之前,经由所述触摸屏显示器接收用于操作所述图像传感器的另一用户输入。
4.如权利要求1所述的电子装置,其中,所述处理器还被配置为:响应于另一用户输入,改变所述第二区域和所述第三区域的位置和尺寸。
5.如权利要求1所述的电子装置,其中,所述第二区域与所述第三区域是分开的,并且位于所述第三区域附近。
6.如权利要求1所述的电子装置,其中,所述处理器还被配置为:组合包括所述第一静止图像和所述第二静止图像的至少两个图像,以及将组合的图像存储在存储器中。
7.如权利要求6所述的电子装置,其中,所述处理器还被配置为:响应于用户输入,显示所述组合的图像。
8.一种使用电子装置处理图像的方法,所述方法包括:在触摸屏显示器的第一区域上实时显示通过图像传感器获得的预览图像;
响应于第一用户输入,从所述图像传感器生成第一静止图像;
在保持在所述第一区域上显示所述预览图像的同时,在所述触摸屏显示器的第二区域上显示所述第一静止图像;
响应于在所述第一区域上显示所述预览图像并且在所述第二区域上显示所述第一静止图像的同时接收到第二用户输入,从所述图像传感器生成第二静止图像;以及在所述触摸屏显示器的所述第二区域上显示所述第一静止图像,并且在所述触摸屏显示器的第三区域上显示所述第二静止图像。
9.如权利要求8所述的方法,其中,所述电子装置包括多个图像传感器,并且显示所述预览图像的步骤包括:使用所述多个图像传感器中的第一图像传感器显示第一预览图像以及使用所述多个图像传感器中的第二图像传感器显示第二预览图像。
10.如权利要求8所述的方法,还包括:在显示所述预览图像之前,经由所述触摸屏显示器接收用于操作所述图像传感器的另一用户输入。
11.如权利要求8所述的方法,还包括:响应于另一用户输入,改变所述第二区域和所述第三区域的位置和尺寸。
12.如权利要求8所述的方法,其中,所述第二区域与所述第三区域是分开的,并且位于所述第三区域附近。
13.如权利要求8所述的方法,还包括:组合包括所述第一静止图像和所述第二静止图像的至少两个图像,以及存储组合的图像。
14.如权利要求13所述的方法,还包括:响应于用户输入,显示所述组合的图像。
说明书 :
用于处理装置中的图像的设备和方法
技术领域
方法。
背景技术
码,并将图像数据存储在存储器中。
多个相机(即,双相机)的相机装置或便携式终端可通过独立选择正面相机和背面相机来拍
摄正面对象或背面对象。也就是说,包括多个相机的相机装置或便携式终端可分别拍摄不
同图像,并分别地存储和管理拍摄的图像。
发明内容
摄从多个相机输出的图像。因此,可通过控制包括多个图像传感器的装置中的各个图像传
感器来按照期望形式拍摄从各个图像传感器拍摄的图像。
多个图像时提高用户便利性的设备和方法。
法。
一拍摄操作,并通过在特定动作被感测到时运行定时器执行拍摄操作。
至少一部分和通过第二图像传感器获得的第二图像的至少一部分;存储第一图像的所述至
少一部分;响应于检测到信号,存储第二图像的所述至少一部分;存储第一图像的所述至少
一部分和第二图像的所述至少一部分以将它们同时重现为至少一个图像。
图像的至少一部分和通过第二图像传感器获得的第二图像的至少一部分;存储第一图像的
所述至少一部分;如果检测到信号,则在经过第二时间段之后存储第二图像的至少一部分;
如果在从存储第一图像的所述至少一部分起的第一时间段内没有感测到所述信号,则存储
第二图像的所述至少一部分;将第一图像的所述至少一部分和第二图像的所述至少一部分
同时重现为至少一个图像。
能性地连接到电子装置的显示单元来显示通过第一传感器获得的第一图像的至少一部分
和通过第二图像传感器获得的第二图像的至少一部分,存储第一图像的所述至少一部分,
响应于检测到信号来存储第二图像的所述至少一部分,并将第一图像的所述至少一部分和
第二图像的所述至少一部分同时重现为一个图像。
附图说明
具体实施方式
例性的。相应地,本领域普通技术人员将意识到:在不脱离本公开的范围和精神的情况下可
对描述在此的各种实施例进行各种改变和修改。此外,为了清楚和简明,可省略对公知功能
和结构的描述。
种实施例的以下描述仅用于示意性的目的而并非为了限制由权利要求和它们的等同物限
定的本公开的目的。
屏幕显示在显示单元上。同样地,如果在如上所述显示预览图像的状态下请求拍摄操作,则
根据本公开的实施例的配备有相机的装置可首先捕捉主屏幕图像和子屏幕图像,合成捕捉
的主屏幕图像和子屏幕图像,并存储合成后的图像。在以下的描述中,相机装置或配备有相
机的装置将被描述为电子装置,电子装置可包括智能电话、平板电脑和包括相机装置的装
置等。此外,电子装置可以是包括两个或更多个图像传感器的装置。
生子屏幕图像的图像传感器输出的子屏幕图像显示为预览图像。如果感测到动作,则电子
装置可运行定时器,并在定时器到期时捕捉从产生子屏幕图像的图像传感器输出的子屏幕
图像。电子装置可合成捕捉的主屏幕图像和子屏幕图像,处理合成后的图像并存储处理后
的图像。主屏幕可以是第一屏幕,第二屏幕可以是子屏幕。
幕图像的图像传感器输出的图像,并运行定时器。此外,当定时器到期时,电子装置可捕捉
从产生子屏幕图像的第二图像传感器输出的子屏幕图像。电子装置可合成由定时器捕捉的
主屏幕图像和子屏幕图像,处理合成后的图像并存储处理后的图像。
于显示单元的边框区域。安装在电子装置的背面的图像传感器可以是安装在电子装置的第
一面上的第一相机,而安装在电子装置的正面上的正面相机可以是安装在第二面上的第二
相机。
元。此外,在双拍摄模式的预览模式下,电子装置可将从第一图像传感器获得的图像显示为
主屏幕,并将从第二图像传感器获得的图像显示为主屏幕的子屏幕。电子装置可将从第一
图像传感器获得的主屏幕图像显示在显示单元的整个屏幕上,或可将主屏幕图像部分地显
示在显示单元上。此外,在电子装置中,可以以主屏幕的PIP的形式或并列地显示从第二图
像传感器获得的子屏幕图像。
像,合成并存储第一图像和第二图像。顺序拍摄方法可由定时器设置,如果在捕捉主屏幕图
像之后感测到动作,则可运行定时器,并且当定时器到期时,在顺序拍摄方法中可自动捕捉
子屏幕。
120可以是比第二图像传感器125的像素密度更高的图像传感器。第一图像传感器120和第
二图像传感器125可在控制器100的控制下独立运行,或可顺序运行。此外,第一图像传感器
120和第二图像传感器125可在控制器100的控制下拍摄静止图像或运动图像。
幕和子屏幕,并对双屏幕进行拍摄和编辑。
感测单元115控制第一图像传感器120和第二图像传感器125的同时拍摄主屏幕图像和子屏
幕图像,合成并存储拍摄的图像。
配置有LCD或OLED。输入单元140可产生用于控制电子装置的拍摄模式的输入。显示单元130
和输入单元140可被形成为集成触摸屏。
旋转和/或放置状态的改变的信号,并将信号输出到控制器100。
屏幕和子屏幕。控制器100可根据用户的选择来改变主屏幕和子屏幕。此外,当在双模式(双
镜头拍摄)下请求拍摄操作时,电子装置可通过根据顺序运行第一图像传感器120和第二图
像传感器125来拍摄,并合成拍摄的主屏幕图像和子屏幕图像以产生一个静止图像。
预览显示从产生子屏幕图像的图像传感器输出的子屏幕图像。如果动作感测单元115感测
到动作,则控制器100运行定时器113,并且当定时器113到期时,控制器110可捕捉从产生子
屏幕图像的图像传感器输出的子屏幕图像。电子装置可合成捕捉的主屏幕图像和子屏幕图
像,处理并存储处理后的图像。
产生子屏幕图像的图像传感器输出的图像,并运行定时器113。此外,如果定时器113到期,
则控制器100可捕捉从产生子屏幕图像的第二图像传感器输出的子屏幕图像。控制器100可
合成捕捉的主屏幕图像和子屏幕图像,处理并存储合成后的图像。
二图像传感器125中产生子屏幕图像的示例。然而,根据用户的选择,主屏幕图像可以在第
二图像传感器125中产生,子屏幕图像可以在第一图像传感器120中产生。
拍摄标号220所示的第二图像(即,拍摄者的图像)。控制器100可如图2B中所示,将从第一图
像传感器120获得的第一图像210显示为主屏幕,并可将从第二图像传感器125获得的第二
图像220显示为子屏幕。
运行定时器。控制器100可将捕捉的主屏幕图像显示在显示单元130上,显示如标号277所示
的子屏幕的预览图像,并显示如标号275所示的定时器的操作。如果定时器到期,则控制器
100可捕捉子屏幕图像277。在这种情况下,捕捉的图像可以是如标号280所示的图像。
区域。例如,子屏幕显示区域可被显示在与图像传感器(例如,第二图像传感器125)相邻的
区域上。在双模式下,第二图像传感器125拍摄用户的图像,并在这种情况下,如果子屏幕显
示区域被设置在与第二图像传感器125相邻的位置,则可获得自然的子屏幕图像。
自然的用户图像。同样地,如果如上所述显示子屏幕图像,则控制器100可捕捉当请求拍摄
操作时在预览模式下显示的子屏幕图像,并可将捕捉的子屏幕图像移动到作为当合成图像
时的初始子屏幕区域的子屏幕区域以与主屏幕图像合成图像。
是用于选择拍摄被显示为主屏幕的图像的图像传感器的按钮,双按钮是用于选择双镜头打
开(dual‑on)模式和双镜头关闭(dual‑off)模式的按钮。图像传感器选择按钮和双按钮可
以是切换式运行的按钮。
器。此外,如果在第一图像传感器120被选择的状态下用户触摸双按钮,则控制器100在操作
415感测双镜头打开模式,并在操作417运行第二图像传感器125。控制器100可在操作417处
理从第一图像传感器120获得的图像,将处理后的图像作为主屏幕显示在显示单元130上,
处理从第二图像传感器125获得的图像并对其调整大小,并将处理并调整大小后的图像作
为子屏幕显示在显示单元130的位置上。
小,显示位置和/或显示大小可根据用户的选择而改变。然而,如果在第一图像传感器120被
选择的状态下通过双按钮关闭双模式(双镜头关闭),则控制器100可在操作415感测到双镜
头关闭,并在操作419处理从第一图像传感器120获得的图像并将处理后的图像显示在显示
单元130。第二图像传感器125的操作可以是关闭状态。
头关闭状态,则控制器100可在操作421感测双镜头关闭状态,并且在操作425运行第二图像
传感器125并关闭第一图像传感器120的操作。此外,控制器100可处理从第二图像传感器
125获得的图像并输出到显示单元130。第一图像传感器120的操作可处于关闭状态。
器120来执行双模式。在这种情况下,控制器100可处理从第二图像传感器125获得的图像以
将处理后的图像作为主屏幕显示在显示单元130上,处理从第一图像传感器120获得的图像
并对其调整大小以在显示单元130的位置显示为子屏幕。
像并捕捉作为子屏幕图像的第二图像。然而,当请求拍摄操作时,电子装置可首先捕捉子屏
幕图像并可捕捉主屏幕图像。
图像传感器125中拍摄的第二图像以将处理后的图像显示在子屏幕的显示区域上。控制器
100可包括图像信号处理器,图像信号处理器可包括图像预处理单元、图像后处理单元、图
像缩放器、编码解码器等。在这种情况下,从第一图像传感器120输出的第一图像可在图像
信号处理器中被预处理并后处理,并且可由图像缩放器使用显示单元130的主屏幕大小进
行缩放并输出。此外,从第二图像传感器125输出的第二图像可以是在图像信号处理器中被
预处理并后处理器,并可由图像缩放器使用子屏幕大小进行缩放并输出。
的图像存储在存储单元110中。一般来说,当通过使用双图像传感器来拍摄双镜头时,用户
设置适合拍摄帧的主屏幕图像,在这种情况下,子屏幕图像的拍摄帧可能不是期望的。在这
种情况下,可使用顺序拍摄方法。根据顺序拍摄方法,主屏幕图像可首先使用期望的拍摄帧
被设置以进行拍摄,子屏幕图像可使用期望的拍摄帧被设置以进行拍摄。此外,在顺序拍摄
模式下,控制器100可将拍摄的当前显示的主屏幕和子屏幕显示在显示单元130上。
二图像传感器125中产生的第二图像以将处理后的图像作为预览图像显示在显示单元130
上。控制器100可将主屏幕的第一图像作为静止图像并将子屏幕的第二图像作为预览图像
显示在显示单元130上。
作可以是装置的位置旋转、摇动或摆动、运动检测、亮度改变(例如,照度传感器触摸或遮
挡)、快门打开、屏幕悬停、屏幕触摸等。此外,动作可被设置为用户动作,在这种情况下,动
作可以是眨眼、微笑等。在双图像传感器的顺序拍摄模式下,用户可在设置模式下注册以上
动作之中的某个动作。此外,可通过传感器150、输入单元140和/或第二图像传感器125来感
测动作,动作感测单元115可感测动作感测信号的发生。
可在操作321将第一图像作为静止图像显示在显示单元130上,并将在第二图像传感器125
中产生的第二图像显示为预览图像。定时器可在用户捕捉主屏幕图像之后提供用于设置意
图通过第二图像传感器125捕捉的第二图像的帧的时间。
可被显示为静止图像。控制器100可将捕捉的第二图像与第一图像的子屏幕区域进行合成,
对合成的图像进行编码,并在操作327将合成的图像存储在存储单元110中。
终止双图像传感器的操作。
控制器100可以以与图3中的操作311、313和315相同的方式,在操作511、513和515控制电子
装置。用于捕捉第二图像的动作被设置为电子装置的旋转(或摇动)。在第一图像被捕捉之
后,如果用户如图6中的标号640所示旋转电子装置,则传感器150可产生电子装置的旋转感
测信号以将该感测信号应用到控制器100,控制器100的动作感测单元115可在操作517感测
电子装置的旋转。
作519如图6中的标号650所示运行定时器113。定时器113可保证在用户旋转电子装置之后
将第二图像设置为期望的帧所需的时间。
时器113到期,则控制器100可捕捉第二图像,并将第一图像和第二图像进行合成,并存储合
成后的图像。所述操作可以以与图3中的操作321、323、325和327相同的方式被执行。控制器
100可以以与图3中的操作331和333相同的方式,在操作531和533控制电子装置。
作715捕捉第一图像,并将第二图像显示为预览图像。可以以与图3中的操作311、313和315
相同的方式来执行操作711、713和715。
期之前感测到动作,则控制器100可捕捉第二图像。动作可以是交互(例如,悬浮或触摸交互
方法以及电子装置的共享、旋转、摆动和运动检测等)。
125中拍摄的第二图像作为预览图像在子屏幕显示区域上预览。在以上操作717中运行的第
一定时器可在用户捕捉住屏幕图像之后提供用于设置通过第二图像传感器125将被捕捉的
第二图像的帧的时间。
变成子屏幕图像。主屏幕图像已被捕捉为静止图像,因此主屏幕可被显示为静止图像。
作之后提供用于设置意图通过第二图像传感器125将被捕捉的第二图像的帧的时间。第二
定时器的时段可被设置为与第一定时器的时段相同,或可被设置为具有不同时段。此外,控
制器100可在操作723将捕捉的第一图像处理为将被显示为主屏幕的静止图像,并将从第二
图像传感器125获得的第二图像作为预览图像显示在子屏幕图像区域直到第二定时器到期
为止。此外,如果第二定时器到期,则控制器100可在操作725感测到第二定时器到期并在操
作727捕捉第二图像。
到以上操作711以执行预览模式。此外,如果在预览模式下请求图像传感器的终止,则控制
器100在操作741感测该请求并关闭双模式。
产生的第二图像可被选择为主屏幕图像,在第一图像传感器120中产生的第一图像可被选
择为子屏幕图像。此外,在图3至图7的描述中假设了在顺序拍摄模式下,在主屏幕图像被捕
捉之后,当定时器到期时子屏幕图像被捕捉,但是,也可以与之相反,子屏幕图像可被首先
捕捉,主屏幕图像可在定时器到期时被捕捉。
大,接收单元使接收到的信号进行低噪放大并对频率进行下转换。此外,通信单元170可包
括调制单元和解调单元。调制单元可对发送的信号进行调制并将调制后的信号发送到发送
单元,解调单元可对通过接收单元接收到的信号进行解调。调制解调单元可以是LTE、
WCDMA、GSM等或Wi‑Fi、WIBRO、NFC、蓝牙等。在本公开的各种实施例中,假设通信单元170配
备有LTE、Wi‑Fi和蓝牙通信单元。
摄比第一图像传感器120相对低的低分辨率的图像。
式终端的通信功能。此外,应用处理单元810包括定时器113和动作感测单元115,控制在双
模式的预览模式下将第一图像显示为主屏幕图像并将第二图像显示为子屏幕图像,通过使
用定时器113和动作感测单元115拍摄第一图像和第二图像,并合成和存储拍摄的图像。
可被配置有LCD或OLED。输入单元140可被实现为电容型或电阻型,并将用户触摸(假设触摸
是手指触摸)的位置信息输出到控制器100。此外,输入单元140还可包括EMR传感器板,可感
测笔触摸输入并将笔触摸输入输出到控制器100。显示单元130和输入单元140可被一体成
型。
的控制下处理在通信模式下产生的语音信号。
外,当用户的双按钮被打开时,控制器100执行用于运行第一图像传感器120和第二图像传
感器125的双模式,并且在双模式下,控制器100可在显示单元130上将从图像传感器120和
125输出的图像显示为主屏幕和子屏幕的双图像。此外,控制器100可在双模式下通过对图
像传感器选择按钮的选择来选择输出主屏幕图像的图像传感器。根据本公开的实施例,假
设在双模式下运行便携式终端时,第一图像传感器120被选为主屏幕图像传感器,第二图像
传感器125被选为子屏幕图像传感器。
显示为子屏幕。控制器100的应用处理单元810可包括定时器113和动作感测单元115,并当
请求拍摄时可通过使用定时器113和动作感测单元115来拍摄第一图像和第二图像。
像。也就是说,当在预览模式下请求拍摄操作时,首先,控制器100可捕捉从产生主屏幕图像
的图像传感器输出的主屏幕图像,并可预览显示从产生子屏幕图像的图像传感器输出的子
屏幕图像。控制器100可检查是否通过动作感测单元115产生用于捕捉第二图像的动作。
感测单元115可通过传感器150感测到动作的发生。此外,如果动作是用户的面部表情(例
如,眨眼、微笑等),则动作感测单元115可通过第二图像传感器125来感测动作的发生。此
外,如果动作是手势或在显示单元130上的触摸交互,则动作感测单元115可通过输入单元
140感测到动作的发生。
可将捕捉的主屏幕图像和子屏幕图像进行合成,处理并存储合成的图像。
包括第一定时器和第二定时器。首先,如果在预览模式下请求拍摄操作,则控制器100可捕
捉从产生主屏幕图像的图像传感器输出的主屏幕图像,预览显示从产生子屏幕图像的图像
传感器输出的图像,并运行第一定时器。
成的图像。然而,如果在第一定时器到期之前在动作感测单元115没有感测到动作,则控制
器100运行第二定时器,如果第二定时器到期,则控制器100可捕捉从产生子屏幕图像的图
像传感器输出的子屏幕图像。控制器100可将捕捉的主屏幕图像和子屏幕图像进行合成,处
理并存储合成的图像。第一定时器的时段可与第二定时器的时段相同或不同。此外,动作可
与以上描述的一个实施例的动作相同。
自动拍摄子屏幕图像来获得多个图像,当通过定时器拍摄时可获得用户期望的多个自然的
图像。此外,例如,当设置了顺序拍摄模式时,如果在通过拍摄请求拍摄主屏幕图像之后感
测到动作,则可在经过一段时间时拍摄子屏幕图像,因此可在拍摄主屏幕图像之后获得期
望形式的子屏幕图像。
上和细节上的各种改变。