CN113709354A - 一种拍摄方法及电子设备 - Google Patents
一种拍摄方法及电子设备 Download PDFInfo
- Publication number
- CN113709354A CN113709354A CN202010432123.8A CN202010432123A CN113709354A CN 113709354 A CN113709354 A CN 113709354A CN 202010432123 A CN202010432123 A CN 202010432123A CN 113709354 A CN113709354 A CN 113709354A
- Authority
- CN
- China
- Prior art keywords
- image
- camera
- photo
- user
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 88
- 230000004044 response Effects 0.000 claims description 30
- 238000009432 framing Methods 0.000 claims description 16
- 230000004048 modification Effects 0.000 claims description 14
- 238000012986 modification Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 8
- 238000003860 storage Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 description 57
- 239000000203 mixture Substances 0.000 description 56
- 230000006870 function Effects 0.000 description 34
- 238000007726 management method Methods 0.000 description 20
- 239000010410 layer Substances 0.000 description 19
- 230000008569 process Effects 0.000 description 18
- 238000004891 communication Methods 0.000 description 17
- 238000004422 calculation algorithm Methods 0.000 description 16
- 238000001514 detection method Methods 0.000 description 12
- 238000010295 mobile communication Methods 0.000 description 11
- 210000004027 cell Anatomy 0.000 description 9
- 230000008859 change Effects 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 238000013528 artificial neural network Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 5
- 229920001621 AMOLED Polymers 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 241000251468 Actinopterygii Species 0.000 description 1
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009182 swimming Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
一种拍摄方法及电子设备,涉及电子技术领域,可以在高倍变焦倍率拍摄场景下,实现便捷高效地追踪拍摄运动目标,提升用户的拍摄体验,该方法具体包括:在电子设备进入长焦拍摄模式后,采用第一摄像头采集主预览图和辅助预览图,当检测到运动的拍摄目标或者用户指示进入运动拍摄模式后,电子设备继续采用第一摄像头采集主预览图,但采用第二摄像头采集辅助预览图,第二摄像头的取景范围大于第一摄像头。
Description
技术领域
本申请涉及电子技术领域,尤其涉及一种拍摄方法及电子设备。
背景技术
目前,手机通常都配置有多个摄像头用于满足用户各种拍摄场景。该多个摄像头可以包括多个焦段的摄像头,例如可以包括短焦(广角)摄像头、中焦摄像头和长焦摄像头。其中不同的摄像头对应不同的取景范围和变焦倍率。用户在拍摄时,手机可以通过切换不同焦段的摄像头(即光学变焦)进行拍摄,有时也会结合数码变焦的软件处理方式对拍摄后的图片进行处理,以满足各种高倍率的拍摄场景。
然而,在高倍率的拍摄场景中,手机的取景范围仅为被摄场景的一个局部,通常较小。当拍摄目标处于运动状态时,极有可能运动到取景范围外,使得手机丢失拍摄目标。在这种场景下,运动状态的拍摄目标一直在移动位置,而用户又在不断移动手机寻找拍摄目标,用户很难实现对运动状态的拍摄目标的追踪拍摄。
发明内容
本申请提供的一种拍摄方法,可以在高倍变焦倍率拍摄场景下,实现便捷高效地追踪拍摄运动目标,提升用户的拍摄体验。
为了实现上述目的,本申请实施例提供了以下技术方案:
第一方面、提供一种拍摄运动目标的方法,包括:响应于启动相机应用的操作,电子设备显示第一取景框,用于显示电子设备的第一摄像头采集的画面;响应于检测到用户增大相机应用变焦倍率的操作,第一取景框用于显示电子设备的第二摄像头采集的第一画面,第二摄像头的取景范围小于第一摄像头的取景范围;当相机应用变焦倍率大于或等于预设倍率时,电子设备还显示第二取景框,用于显示第二摄像头采集的第二画面;第二画面对应的取景范围大于第一画面对应的取景范围,且第二取景框中包括第一标记框,用于在第二取景框显示的画面中标记出第一取景框的取景范围;响应于检测到运动目标或接收到用户指示进入运动拍摄模式的操作,第一取景框用于显示第二摄像头采集的画面,第二取景框用于显示第一摄像头采集的画面,且第二取景框还包括第二标记框,其中第二标记框用于在第二取景框显示的画面中标记出运动目标。
也就是说,第一取景框用于显示主预览图,第二取景框用于显示辅助预览图。可见,本申请实施例提供一种长焦拍摄场景下拍摄运动目标的方法,即通过切换视场角更大的摄像头来采集辅助预览图,使得辅助预览图的取景范围更大,并在辅助预览图中标记主预览图显示的取景范围。这样,用户借助更大的取景范围的辅助预览图去追踪运动目标,有利于用户明确手机待移动方向和位置,提升运动目标的追踪效率。
一种可能的实现方式中,该方法还包括:当检测到运动目标移出第二取景框显示的画面,或者检测到用户指示关闭运动拍摄模式的操作,第一取景框用于显示第二摄像头采集的第三画面,以及第二取景框用于显示第二摄像头采集的第四画面;第四画面对应的取景范围大于第三画面对应的取景范围;或者,当检测到相机应用的变焦倍率小于预设倍率,第一取景框,用于显示第一摄像头采集的画面,且电子设备不再显示第二取景框。
由此,提供了几种电子设备退出运动拍摄模式的方法。
一种可能的实现方式中,该方法还包括:当检测到运动目标移出第二取景框显示的画面,第一取景框用于显示第二摄像头采集的画面,第二取景框用于显示第三摄像头采集的画面;其中,第三摄像头的取景范围大于第一摄像头。
当运动目标移出第二取景框显示的画面后,电子设备可以切换到视场角更大的第三摄像头来采集辅助预览图,便于在取景范围更大的辅助预览图中观察到运动目标,从而实现对运动目标的追踪。
一种可能的实现方式中,该方法还包括:电子设备根据第二取景框中第一标记框和第二标记框的相对位置,显示提示信息或播放语音,用于指导用户移动电子设备。
一种可能的实现方式中,该方法还包括:响应于检测到用户执行拍照操作,电子设备对第二摄像头采集的第一图像生成第一照片;当第一图像中运动目标的中心点位于第一图像的第一区域外时,第一照片中运动目标中心点位于第一照片的第一区域内。
也就是说,在运动拍摄模式下,当拍摄得到照片中运动目标没有位于照片的第一区域内,例如图像的中心区域,电子设备可以自动的根据摄像头采集的全尺寸图像重新裁剪,使得裁剪后的照片中运动目标位于图像的第一区域内。即,自动对拍摄的照片进行二次构图,提升用户拍摄体验。
一种可能的实现方式中,该方法还包括:响应于检测到用户执行拍照操作,电子设备对第二摄像头采集的第一图像生成第一照片;当第一图像中运动目标的中心点位于第一图像的第一区域外时,电子设备还保存第一图像。
另一个实施例中,在运动拍摄模式下,当拍摄得到照片中运动目标没有位于照片的第一区域内,例如图像的中心区域,电子设备可以保存摄像头采集的全尺寸图像,便于后续根据用户的指示对全尺寸图像进行重新裁剪。
一种可能的实现方式中,该方法还包括:响应于检测到用户执行拍照操作,电子设备对第二摄像头采集的第一图像生成第一照片;当第一图像中运动目标的中心点位于第一图像的第一区域外且位于第二区域内时,第一照片中运动目标中心点位于第一照片的第一区域内;当第一图像中运动目标的中心点位于第一图像的第二区域外时,电子设备还保存第一图像。
例如,当判断运动目标的中心点在当前图像第一区域(例如图像中央1/2的范围)之外,但位于当前图像第二区域(例如图像中央3/4的范围)之内,可以自动对拍摄照片的构图进行微调。若判断运动目标的中心点在当前图像第二范围(例如图像中央3/4的范围)之外,则认为构图不合理,且需要用户手动进行二次构图。也就是说,在本次拍摄后,手机得到两张图像,一张图像为根据拍摄时采用的变焦倍率对长焦摄像头采集的图像进行裁剪和变焦得到的图像,该图像为用户通过浏览照片时能够查看到的。另一张图像为长焦摄像头采集的全尺寸图像,该图像则为用户手动二次构图处理时,能够调出的图像。
一种可能的实现方式中,该方法还包括:在用户通过图库应用浏览第一照片时,第一照片的浏览界面包括第一控件;响应于检测到用户对第一控件的操作,电子设备显示第一照片的修改界面;修改界面包括第一图像和第三标记框,第三标记框用于在第一图像上标记出第一照片的取景范围;响应于检测到用户对第三标记框的拖动操作,电子设备移动第三标记框在第一图像上的位置;响应于检测到用户操作确定控件,电子设备根据第三标记框中图像生成第二照片,第二照片与第一照片对应的变焦倍率相同,且第二照片中运动目标在第二照片的第一区域内。
由此提供一种用户手动二次构图的方法,以解决拍摄运动目标时得到的照片构图不合理的情况,提升用户拍摄体验。
一种可能的实现方式中,该方法还包括:响应于检测到用户执行连拍操作,电子设备对第二摄像头采集的多个第二图像生成对应的第三照片;当多个第二图像中任一个图像中运动目标的中心点位于图像的第一区域外时,图像对应的第三照片中运动目标中心点位于图像对应的第三照片的第一区域内。
一种可能的实现方式中,该方法还包括:响应于检测到用户执行连拍操作,电子设备对第二摄像头采集的多个第二图像生成对应的第三照片;当多个第二图像中任一个图像中运动目标的中心点位于图像的第一区域外时,电子设备保存图像。
一种可能的实现方式中,该方法还包括:响应于检测到用户执行连拍操作,电子设备对第二摄像头采集的多个第二图像生成对应的第三照片;当多个第二图像中任一个图像中运动目标的中心点位于图像的第一区域外且位于第二区域内时,图像对应的第三照片中运动目标中心点位于图像对应的第三照片的第一区域内;当多个第二图像中任一个图像中运动目标的中心点位于图像的第二区域外时,电子设备保存图像。
一种可能的实现方式中,该方法还包括:在用户通过图库应用浏览第三照片时,第三照片的选择界面包括第一控件;响应于检测到用户对第一控件的操作,电子设备显示选中的第三照片的修改界面;修改界面包括选中的第三照片对应的第二图像和第四标记框,第四标记框用于在第三照片对应的第二图像上标记出选中的第三照片的取景范围;响应于检测到用户对第四标记框的拖动操作,电子设备移动第四标记框在选中的第三照片对应的第二图像上的位置;响应于检测到用户操作确定控件,电子设备根据第四标记框中图像生成第四照片,第四照片与第三照片对应的变焦倍率相同,且第四照片中运动目标在第四照片的第一区域内。
一种可能的实现方式中,第一摄像头为中焦摄像头,第二摄像头为长焦摄像头。第三摄像头为广角摄像头或超广角摄像头。
第二方面、提供一种电子设备,包括:处理器、存储器和触摸屏,所述存储器、所述触摸屏与所述处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,当所述处理器从所述存储器中读取所述计算机指令,以使得所述电子设备执行如上述方面及其中任一种可能的实现方式中所述的方法。
第三方面、提供一种装置,该装置包含在电子设备中,该装置具有实现上述方面及可能的实现方式中任一方法中电子设备行为的功能。该功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括至少一个与上述功能相对应的模块或单元。例如,检测模块或单元、显示模块或单元、以及处理模块或单元等。
第四方面、提供一种计算机可读存储介质,包括计算机指令,当计算机指令在终端上运行时,使得终端执行如上述方面及其中任一种可能的实现方式中所述的方法。
第五方面、提供一种电子设备上的图形用户界面,所述电子设备具有显示屏、摄像头、存储器、以及一个或多个处理器,所述一个或多个处理器用于执行存储在所述存储器中的一个或多个计算机程序,所述图形用户界面包括所述电子设备执行如上述方面及其中任一种可能的实现方式中所述的方法时显示的图形用户界面。
第六方面、提供一种计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行如上述方面中及其中任一种可能的实现方式中所述的方法。
第七方面、提供一种芯片系统,包括处理器,当处理器执行指令时,处理器执行如上述方面中及其中任一种可能的实现方式中所述的方法。
附图说明
图1为本申请实施例提供的一种电子设备的结构示意图一;
图2为本申请实施例提供的一种电子设备的结构示意图二;
图3为本申请实施例提供的一些电子设备的用户界面示意图;
图4为本申请实施例提供的又一些电子设备的用户界面示意图;
图5为本申请实施例提供的又一些电子设备的用户界面示意图;
图6为本申请实施例提供的又一些电子设备的用户界面示意图;
图7为本申请实施例提供的又一些电子设备的用户界面示意图;
图8为本申请实施例提供的一种拍摄方法中图像处理的方法的示意图一;
图9为本申请实施例提供的一种拍摄方法中图像处理的方法的示意图二;
图10A为本申请实施例提供的又一些电子设备的用户界面示意图;
图10B为本申请实施例提供的又一些电子设备的用户界面示意图;
图10C为本申请实施例提供的又一电子设备的用户界面示意图;
图11为本申请实施例提供的一种拍摄方法的流程示意图;
图12为本申请实施例提供的又一种拍摄方法的流程示意图;
图13为本申请实施例提供的一种芯片系统的结构示意图。
具体实施方式
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
在本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
本申请实施例提供的拍摄方法可应用于安装有摄像头的电子设备中,该电子设备例如可以为手机、平板电脑、个人计算机(personal computer,PC)、个人数字助理(personal digital assistant,PDA)、智能手表、上网本、可穿戴电子设备、增强现实技术(augmented reality,AR)设备、虚拟现实(virtual reality,VR)设备、车载设备、智慧屏、智能汽车、智能音响、机器人等,本申请对该电子设备的具体形式不做特殊限制。
图1示出了电子设备100的结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
可以理解的是,图1示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(lownoise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
上述摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。在另一些实施例中,摄像头193为可升降的摄像头。
在本申请的一些实施例中,电子设备100至少包括一个长焦摄像头,以及一个中焦摄像头或短焦(广角)摄像头。在长焦拍摄模式下,手机根据长焦摄像头生成主预览图和辅助预览图。当进一步检测到运动目标或者根据用户指示进入运动拍摄模式后,手机继续根据长焦摄像头生成主预览图,同时使用中焦摄像头或短焦(广角)摄像头生成辅助预览图。需要注意的是,这里的长焦摄像头,和中焦摄像头(或短焦(广角)摄像头)应位于电子设备100的同一侧,例如位于电子设备100屏幕的背面。下文将详细描述具体的技术方案。
在本申请的另一些实施例中,手机在长焦拍摄模式下,在检测到用户执行拍摄操作时,手机根据长焦摄像头采集的图像进行裁剪和变焦得到拍摄时使用的变焦倍率对应的图像,即为拍摄后的得到的图像。在运动拍摄模式下,手机在得到拍摄后的图像后,一些场景下还可以保留长焦摄像头的全尺寸图像,用于对拍摄后的图像的构图进行微调或者根据用户的指示对图像进行重新构图,以提升对运动目标的追踪拍摄的效果。
一些示例中,ISP包括前端处理单元和后端处理单元。在电子设备100进入运动拍摄模式后,若检测到用户执行拍摄操作,则ISP的前端处理单元根据用户执行的拍摄操作从摄像头193缓存的多张图像中选出相应的图像(即选帧),并对选出的图像进行Raw域处理等。ISP的后端处理单元,一方面根据电子设备100使用的变焦倍率对前端处理单元处理后的图像帧进行裁切、数字变焦、YUV域处理以及编码等处理,得到拍摄的图像。另一方面,ISP的后端处理单元还保存一份前端处理单元处理后的图像,注意该图像为未裁切的图像。后续,在后端处理单元空闲时,或者在处理得到前述拍摄的图像后,后端处理单元再对前端处理后的图像进行YUV域处理等,得到备份的全尺寸图像,用于后续用户对本次拍摄得到的图像进行重新构图使用。下文将详细描述具体的技术方案。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
在本申请的一些实施例中,NPU可以对从摄像头193捕获的图像进行图像识别,识别出图像中包含的物体,和/或识别出的物体的位置,从而确定图像中是否包含运动目标。若检测到运动目标,则手机自动进入运动拍摄模式或者提示用户进入运动拍摄模式。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备100的各种功能应用以及数据处理。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminalplatform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunicationsindustry association of the USA,CTIA)标准接口。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。
上述电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本发明实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图2是本发明实施例的电子设备100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
以下实施例中所涉及的技术方案均可以在具有上述硬件架构和软件架构的电子设备100中实现。
本文以电子设备100是手机举例,结合附图对本申请实施例提供的技术方案进行详细说明。
1、启动相机
示例的,用户可以通过触摸手机屏幕上特定的控件、按压特定的物理按键或按键组合、输入语音、隔空手势等方式,指示手机开启相机应用。响应于接收到用户开启相机的指示后,手机启动相机,显示拍摄界面。
例如:如图3中(1)所示,用户可以通过在手机桌面上点击“相机”应用图标301,指示手机开启相机应用,手机显示如图3中(2)所示的拍摄界面。再例如:在手机处于锁屏状态时,用户也可以通过在手机屏幕上向右滑动的手势,指示手机开启相机应用,手机也可以显示如图3中(2)所示的拍摄界面。或者,手机处于锁屏状态时,用户可以通过在锁屏界面上点击“相机”应用的快捷图标,指示手机开启相机应用,手机也可以显示如图3中(2)所示的拍摄界面。
再示例性的,在手机运行其他应用时,用户也可以通过点击相应的控件使得手机开启相机应用进行拍照。比如:用户正在使用即时通信类应用(例如:微信应用)时,用户也可以通过选择相机功能的控件,指示手机开启相机应用进行拍照和拍摄视频。
如图3中(2)所示,相机的拍摄界面一般包括有第一取景框302、拍摄控件以及其他功能控件(“大光圈”、“人像”、“拍照”、“录像”等)。其中,第一取景框302可用于预览摄像头采集到的图像(或画面),用户可以基于第一取景框302中的图像(或画面),决定指示手机执行拍摄操作的时机。其中,用户指示手机执行拍摄操作例如可以是用户点击拍摄控件的操作,或者用户按压音量键的操作等。在一些实施例中,拍摄界面中还可以包括变焦倍率指示303。通常,手机默认的变焦倍率为基本倍率,为“1×”。
其中,变焦倍率可理解为当前摄像头的焦距相当于基准焦距的缩/放倍数。其中,基准焦距通常为手机主摄像头的焦距。
举例说明,以手机集成有短焦(广角)摄像头、中焦摄像头和长焦摄像头三个摄像头为例进行说明。其中,在手机和被拍摄物体的相对位置不变的情况下,短焦(广角)摄像头的焦距最小,视场角最大,拍摄的图像中的物体尺寸最小。中焦摄像头的焦距大于短焦(广角)摄像头,视场角比短焦(广角)摄像头小,拍摄的图像中物体尺寸比短焦(广角)摄像头大。长焦摄像头的焦距最大,视场角最小,拍摄的图像中物体的尺寸最大。其中,视场角用于指示手机在拍摄图像的过程中,摄像头所能拍摄到的最大的角度范围。可以理解的是,“视场角”也可以替换为“视场范围”、“视野范围”、“视野区域”、“成像范围”或“成像视野”等词汇。
通常,用户使用中焦摄像头的场景最多,因此,一般将中焦摄像头设置为主摄像头。主摄像头的焦距设置为基准焦距,变焦倍率为“1×”。在一些实施例中,可以对主摄像头捕获的图像进行数码变焦(digital zoom)(或称为数字变焦),即,通过手机中的ISP或其他处理器将主摄像头捕获的“1×”的图像的每个像素面积放大,并相应缩小图像的取景范围,使得处理后的图像呈现等效于主摄像头采用其他变焦倍率(例如“2×”)拍摄的图像。也就是说,使用主摄像头拍摄的图像可以对应一个区间的变焦倍率,例如:“1×”至“5×”。类似的,长焦摄像头的焦距与主摄像头的焦距的倍数,可作为长焦摄像头的变焦倍率。例如,长焦摄像头的焦距可以为主摄像头的焦距的5倍,即长焦摄像头的变焦倍率为“5×”。同理,也可以对长焦摄像头捕获的图像进行数码变焦。即,使用长焦摄像头拍摄的图像可以对应另一个区间的变焦倍率,例如:“5×”至“50×”。类似的,短焦(广角)摄像头的焦距与主摄像头的焦距的倍数,可作为短焦(广角)摄像头的变焦倍率。例如,短焦摄像头的焦距可以为主摄像头的焦距的0.5倍,即长焦摄像头的变焦倍率为“0.5×”。同理,也可以对短焦(广角)摄像头捕获的图像进行数码变焦。即,使用长焦摄像头拍摄的图像可以对应另一个区间的变焦倍率,例如:“0.5×”至“1×”。
当然,手机可以使用其中任一个摄像头作为主摄像头,并以主摄像头的焦距为基准焦距,本申请不做具体限定。
2、进入长焦拍摄模式
在一些实施例中,用户可以手动调整手机拍摄时使用的变焦倍率。例如:如图3中(2)所示,用户可以通过在拍摄界面中操作变焦倍率指示303,调整手机使用的变焦倍率。比如:当前手机使用的变焦倍率为“1×”时,用户可以通过点击一次或多次变焦倍率指示303,使得手机使用的变焦倍率变更为“5×”,即手机显示如图4中(1)所示的拍摄界面。在图4中(1)所示的拍摄界面中,第一取景框401中预览到的图像的取景范围显然比图3中(2)中第一取景框302中的取景范围小,但第一取景框401中预览到的被拍摄对象(例如:鸟)的尺寸大于第一取景框302中预览到的被拍摄对象。在一些示例中,图4中所述的拍摄界面中还可以继续显示变焦倍率指示402,此时显示当前变焦倍率为“5×”,以便用户知晓当前的变焦倍率。又例如:如图3中(3)所示,用户可以通过在拍摄界面中双指(或三指)捏合的手势,减小手机使用的变焦倍率,或者双指(或三指)向外滑动的手势(与捏合相反的方向)增大手机使用的变焦倍率。又例如:如图3中(4)所示,用户也可以在拍摄界面中通过拖动变焦标尺304来改变手机使用的变焦倍率。又例如:用户也可以在拍摄界面中或拍摄设置界面中,通过切换当前所使用的摄像头来改变手机的变焦倍率。例如,用户选择切换到长焦摄像头,则手机自动增大变焦倍率。又例如:用户也可以在拍摄界面中或拍摄设置界面中,通过选择长焦拍摄场景的选项或者远距离的拍摄场景的选项等,来改变手机的变焦倍率。
在另一些实施例中,手机也可以自动识别摄像头捕获的图像的具体场景,根据识别的具体场景自动调整变焦倍率。比如:若手机识别出摄像头捕获的图像为视野范围较大的景物,例如大海、高山、树林等,可以自动减小变焦倍数。又比如:若手机识别出摄像头捕获的图像为远距离的物体时,例如远处的飞鸟、运动场上的运动员等,可以自动增大变焦倍数,本申请对此不做限定。
在本申请中,当手机使用的变焦倍率大于或等于预设倍率(例如:“10×”)时,则认为手机进入长焦拍摄模式。在该长焦拍摄模式下,手机的拍摄界面中除了显示第一取景框的预览图像(或者预览画面)外,还可以显示第二取景框的预览图像(或者预览画面)。第二取景框的预览图像的视场角大于第一取景框的预览图像,并且第二取景框的预览图像中标记出了与第一取景框的预览图像相同或者近似相同的区域。因此,用户可以借助第二取景框中的预览图像对第一取景框的预览图像进行构图或者对某个运动目标进行跟踪拍摄。为了便于区分,将第一取景框中显示的预览图像(或者预览画面)称为主预览图(或主预览画面),第二取景框中显示的预览图像(或者预览画面)称为辅助预览图(辅助预览画面)。
例如,如图4中(1)所示,手机拍摄界面显示当前的变焦倍率为“5×”,此时拍摄界面中仅显示有第一取景框401。当检测到用户增大变焦倍数的指示(例如变焦倍率增大到“10×”),手机显示如图4中(2)所示的拍摄界面。在图4中(2)所示的拍摄界面中,除了显示有第一取景框403,还显示有第二取景框405。可见,第一取景框403中显示的主预览图为第二取景框405显示的辅助预览图中的一部分。例如,主预览图为辅助预览图的中心区域(或大致中心区域)的图像。在第二取景框405的图像可以包括第一标记框406,以提示用户第一取景框403中图像在第二取景框405的图像中的位置,便于用户使用第二取景框405对第一取景框403的图像进行取景构图,以及对运动的对象进行拍摄。可选的,第二取景框405中还可以包括关闭控件407、放大控件408等其他功能控件,以支持用户对第二取景框403的其他操作,本申请实施例不做限定。
在一种技术方案中,当手机进入长焦拍摄模式时,手机使用长焦摄像头采集图像。而后,一方面,手机将长焦摄像头采集到全尺寸图像进行裁切,用作辅助预览图。另一方面,手机根据当前使用的变焦倍率对长焦摄像头采集到的全尺寸图像进行裁切以及数字变焦放大,以得到主预览图。一般,辅助预览图对应的变焦倍率小于主预览图,即辅助预览图的取景范围大于主预览图。
需要说明的是,手机摄像头采集到的全尺寸图像的尺寸是大于手机根据该全尺寸图像显示的图像。也就是说,即使手机显示的图像与手机摄像头采集的全尺寸图像对应的变焦倍率相同,即不对全尺寸图像进行变焦放大,手机显示的图像也是小于全尺寸图像的。比如,手机的长焦摄像头采集的全尺寸图像对应的变焦倍率为“8×”,当手机需要显示变焦倍率为“8×”的预览图时,也需要对全尺寸图像进行裁切。
在一些示例中,手机也可以直接用长焦摄像头采集的全尺寸图像作为主预览图。这样,即使辅助预览图与主预览图的变焦倍率相同,辅助预览图的取景范围也是大于主预览图的,因此,辅助预览图也是可以用于帮助用户对主预览图进行构图,或对运动目标的跟踪拍摄。
在另一些示例中,手机还可以根据根据长焦摄像头采集的全尺寸图像按照一定的变焦倍率进行放大以及裁切得到辅助预览图。当然,辅助预览图对应的变焦倍率小于主预览图,即辅助预览图的取景范围大于主预览图。
3、进入运动拍摄模式
进一步的,当用户追踪拍摄运动目标时,比如追踪拍摄飞行的鸟,行驶中的汽车,奔跑的孩子等,由于运动目标的位置一直在移动,很快会移出第一取景框的主预览图,再移出第二取景框的辅助预览图。若用户仅凭感觉地移动手机去追踪运动目标,效率低而效果不佳。为此,本申请实施例提供一种长焦拍摄场景下拍摄运动目标的方法,即通过切换视场角更大的摄像头来采集辅助预览图,使得辅助预览图的取景范围更大,并在辅助预览图中标记主预览图显示的取景范围。这样,用户借助更大的取景范围的辅助预览图去追踪运动目标,有利于用户明确手机待移动方向和位置,提升运动目标的追踪效率。
一些实施例中,手机可以使用图像识别算法(例如目标检测算法、目标识别算法、运动目标检测算法等)对当前摄像头采集的图像进行识别,若识别出运动目标时,则手机自动开启运动拍摄模式。或者,在手机识别出运动目标后,提示用户是否需要开启运动拍摄模式。若用户选择开启运动拍摄模式或者在预设时间段内未接收到用户的指示,则手机开启运动拍摄模式。否则,手机不开启运动拍摄模式。在运动拍摄模式下,手机会根据运动目标的移动切换不同视场角的摄像头用于采集辅助预览图,进而帮助用户快捷准确的追踪拍摄目标。
例如,当手机进入长焦拍摄模式后,手机对摄像头采集的M张图像执行目标检测算法,以确定出M张图像中包含的拍摄物体,以及拍摄物体在M张图像中的位置。其中,M为大于或等于2的整数。若某个拍摄物体在M张图像中的位置发生变化,则手机可以认为检测到运动的拍摄物体,则自动开启运动拍摄模式。或者,手机询问用户是否开启运动拍摄模式。比如,如图5中(1)所述的界面包括提示信息501。若手机检测到的运动的拍摄物体是用户的拍摄目标,则用户指示手机开启运动拍摄模式。若手机检测到的运动的拍摄物体不是用户的拍摄目标,则用户指示手机不开启运动拍摄模式。
可选的,也可结合手机配置的运动传感器(例如加速度传感器、陀螺仪)等进一步确定手机是否发生移动,以排除因用户手部移动手机造成M张图像中的拍摄物体位置发生变化的情形,从而提升手机自动识别运动目标的准确性。
其中,目标检测算法可以为Fast R-CNN、Faster R-CNN、R-FCN、YOLO、SSD和RetinaNet中任一种或任几种的组合,也可以为其他神经网络算法或非神经网络算法,本申请实施例对此不做限定。
又例如,当手机进入长焦拍摄模式后,手机对摄像头采集的P张图像执行目标识别算法,以确定出P张图像中包含的拍摄物体。其中,P为大于或等于1的整数。并进一步判断P张图像中的拍摄物体包含能够运动的物体。若P张图像中的拍摄物体包含能够运动的物体,例如汽车、鸟、飞机、气球、足球等,则手机可以认为检测到运动的拍摄物体,则自动开启运动拍摄模式。或者,手机询问用户是否开启运动拍摄模式。
或者,对采集得到P张图像的场景进行识别。若P张图像的拍摄场景为运动场、公路等,则可以认为用户的拍摄目标极可能为运动的拍摄物体,可自动进入运动拍摄模式或询问用户是否进入运动拍摄模式。
又或者,在识别出P张图像中拍摄物体后,也可以进一步确定用户是否曾经针对该拍摄物体开启过运动拍摄模式。这是因为,用户感兴趣的物体大多会集中在一些相同的物体上,比如:运动的孩子,奔跑的小狗、飞行的鸟、游动的鱼等。也就是说,在一些示例中,手机可以保存开启过运动拍摄模式的物体的信息(例如图像特征等)。当后续再次检测到该物体后,可以默认进入运动拍摄模式或询问用户是否进入运动拍摄模式。
又例如,当手机进入长焦拍摄模式后,手机对摄像头采集的M张图像执行运动目标检测算法,以确定出M张图像是否包含运动的拍摄物体。若确定包含运动的拍摄物体,可自动进入运动拍摄模式或询问用户是否进入运动拍摄模式。
其中,运动目标检测算法可以为背景差分法、帧间差分法、混合高斯模型、光流法、块匹配和光流估计中任一种或任几种的组合,也可以为其他神经网络算法或非神经网络算法,本申请实施例对此不做限定。
在手机进入运动拍摄模式后,手机使用比当前摄像头视场角更大的摄像头采集的图像用作第二取景框的辅助预览图。例如,当手机刚进入长焦拍摄模式时,根据长焦摄像头采集的图像,分别处理得到主预览图和辅助预览图。在手机进入运动拍摄模式后,继续使用长焦摄像头采集的图像进行处理得到主预览图。但同时,使用主摄像头采集的图像进行处理得到辅助预览图。可以理解的是,主摄像头采集的图像的视场角大于长焦摄像头采集的图像。如图5中(1)所示,若在手机进入长焦拍摄模式后检测到运动目标,手机自动或者根据用户的指示进入运动拍摄模式,且显示如图5中(2)所示的界面503。对比进入运动拍摄模式前的辅助预览图502,与进入运动拍摄模式后的辅助预览图504,可以发现,辅助预览图504的取景范围大于辅助预览图502的取景范围。此时手机除了运动拍摄模式不同,其他设置均相同。
可选的,辅助预览图504中还可以对识别出的运动目标进行标记,例如第二标记框505,以便用户观察运动目标在辅助预览图504中的位置。用户可以通过观察辅助预览图,将第二标记框505移入第一标记框506,使得手机的主预览图中出现运动目标,实现对运动目标的追踪。其中,手机可以采用不同的方式显示第一标记框506和第二标记框505以示区别。例如,第二标记框505可以与第一标记框506为不同颜色的标记(例如,一个为黄色矩形框,另一个为红色矩形框),或者为不同线型的标记(例如,一个为实线,另一个为虚线;或者两个标记框的线性粗细不同)等。
另一些实施例中,用户可以通过操作特定控件,或按压特定按键或按键组合,或执行特定隔空手势、或输入语音命令等方式,指示手机开启运动拍摄模式。
例如,手机在长焦拍摄场景下的拍摄界面中可以显示有运动拍摄模式的控件。响应于用户对运动拍摄模式的控件的操作,手机进入运动拍摄模式。如图4中(2)所示,当前手机使用的变焦倍率大于或等于预设倍率(例如“10×”),手机的拍摄界面403中显示有开启运动拍摄模式控件409,用于指示手机是否进入运动拍摄模式。当然,手机也可以在其他界面中设置开启运动拍摄模式的控件,例如在手机系统设置的功能项中设置,或者在“相机”应用的设置界面中设置。在手机根据用户的指示开启运动拍摄模式后,手机使用主摄像头采集辅助预览图,继续使用长焦摄像头采集主预览图。在一些示例中,在启动相机后,用户也可以直接手动开启运动拍摄模式。那么,手机可以自动将变焦倍率切换到大于或等于预设倍率,例变焦倍率切换到“10×”,“20×”等,且调用主摄像头采集辅助预览图,调用长焦摄像头采集主预览图。
可选的,在手机开启运动拍摄模式后,可以提示用户选择待拍摄的运动目标。在一个示例中,手机可以对采集的辅助预览图进行图像识别,识别出辅助预览图中包含的物体,可以标记出来或者以选项或列表等方式呈现出来,供用户选择待拍摄的运动目标。例如,如图6中(1)所示的拍摄界面,在该拍摄界面中,手机显示选项601,用于提示用户选择待拍摄的运动目标。在用户选择运动目标后,手机在辅助预览图中标记该运动目标。
在另一个示例中,手机也可以对采集的辅助预览图进行运动目标检测,自动识别出辅助预览图中的运动目标,自动在辅助预览图中标记该运动目标。若手机识别出多个运动目标,则可以提示用户选择待拍摄的运动目标,仅在辅助预览图中标记用户选中的运动目标。当然,手机也可以标记出多个运动目标,本申请实施例对此不做限定。
在又一个示例中,手机也可以先不对辅助预览图进行图像识别或运动目标检测,而是提示用户选择待拍摄的运动目标。用户可以在主预览图或辅助预览图中进行选择待拍摄的运动目标。例如,用户在主预览图中长按运动目标所在的位置。然后,手机根据用户选择操作执行的位置进行图像识别,识别出该位置的物体的大小和位置,即该物体确认为运动目标。手机还可以进一步提取出该运动目标的图像特征,并根据提取的图像特征在辅助预览图中识别出该运动目标并进行标记。手机可以在主预览图和辅助预览图中均标记运动目标,也可以仅在辅助预览图中标记运动目标。又例如,用户在辅助预览图中长按运动目标所在的位置。类似的,手机根据用户选择操作执行的位置进行图像识别,识别出该位置的物体的大小和位置,确认为运动目标并进行标记。可选的,手机还可以提取出该运动目标的图像特征,根据提取的图像特征在主预览图中标记运动目标。例如,如图6中(2)所示,手机可以显示提示信息602,用于提示用户在辅助预览图上长按待拍摄的运动目标。可选的,手机还可以自动或提示用户将辅助预览图放大,便于用户在放大的辅助预览图上选择运动目标,有利于提升手机识别运动目标的准确性。例如,如图6中(3)所示,界面603中仅显示有全屏的辅助预览图,方便用户在其上选择运动目标。在用户选择后,手机也可以自动或提示用户将辅助预览图恢复到原来的大小。例如,如图6中(3)所示,用户可以通过操作恢复控件604,将全屏的辅助预览图恢复到原来的大小以及位置。
在又一些实施例中,手机还可以在自动检测到运动目标或者根据用户的选择确定运动目标后,可以先不进入运动拍摄模式,而是在进一步检测到运动目标移出第二取景框的取景范围时,再进入运动拍摄模式。在一个示例中,在进入运动拍摄模式前,手机可以只开启长焦摄像头,在进入运动拍摄模式后,手机开启长焦摄像头和主摄像头。由此,可以减少手机进入运动拍摄模式的时长,减少开启两个摄像头的时间,有利于节省功耗。
可选的,在上述各个实施例中,当手机进入运动拍摄模式后,手机还可以根据第二标记框相对第一标记框的位置显示引导信息或者播放音频或动画,用于指导用户移动手机的方向。例如,手机可以显示箭头图案,箭头的方向指示用户移动手机的方向,箭头的长度指示用户移动手机的距离。又例如,手机可以显示引导文字,包含移动方向和移动距离等。
在又一些实施例中,在手机自动识别出运动目标或者用户手动选择运动目标后,即锁定运动目标后,手机的主预览图和辅助预览图都对锁定的运动目标自动对焦(autofocus,AF)、自动曝光(automatic exposure,AE)。一些示例中,辅助预览图在进行自动白平衡(automatic white balance,AWB)处理时保持与主预览图的AWB处理一致。这样,使得辅助预览图的图像效果尽量与主预览图保持一致,避免辅助预览图的效果和主预览图的效果出现偏差,造成用户的困惑。
在又一些实施例中,在手机锁定运动目标后,手机也支持自动解锁运动目标或者用户手动解锁运动目标。例如,当运动目标运动到辅助预览图外时,手机自动解锁运动目标,重新根据辅助预览图确定运动目标或者手机自动退出运动拍摄模式。又例如,用户也可以在辅助预览图中双击锁定的运动目标或其他操作解锁运动目标。又例如,在检测到用户关闭运动拍摄模式的操作后,手机自动解锁运动目标。又例如,当检测到手机使用的变焦倍率低于预设倍率时,即手机退出长焦拍摄模式时,手机也可以自动解锁运动目标。本申请实施例对解锁运动目标的方式不做限定。
在又一些实施例中,当锁定的运动目标移动到辅助预览图外时,手机还可以继续切换更大视场角的摄像头,用于采集辅助预览图。也就是说,继续增大辅助预览图的取景范围。例如,在手机刚进入运动拍摄模式时,使用长焦摄像头采集主预览图,使用主摄像头采集辅助预览图。在检测到运动目标移出辅助预览图时,继续使用长焦摄像头采集主预览图,但同时使用广角摄像头(或超广角摄像头等)采集辅助预览图。例如,如图7中(1)所示的拍摄界面701,手机使用主摄像头采集辅助预览图702。此时,手机锁定的运动目标“鸟”已飞出辅助预览图702,于是手机可以自动切换广角摄像头采集辅助预览图,即显示如图7中(2)所述的拍摄界面703。此时拍摄界面703中的辅助原图704中出现已锁定的运动目标705,则用户可以根据运动目标795与第一标记框706的相对位置关系,移动手机使得运动目标出现在第一标记框706中,即主预览图中将显示运动目标的图像。在另一些示例中,若手机切换广角摄像头后,辅助预览图704中仍未出现运动目标705,则可以进一步切换为超广角摄像头采集辅助预览图。可选的,在手机切换采集辅助预览图的摄像头时,可以显示提示信息或播放语音提示,避免用户未移动手机,而辅助预览图的图像发生变化造成用户的困惑。例如,如图7中(1)所述的提示信息701。
当然,用户可以手动切换摄像头用于采集辅助预览图。也就是说,在手机处于运动拍摄模式时,手机的拍摄界面可以显示切换采集辅助预览图摄像头的选项,可供用户根据需求自主选择切换的摄像头。
在一些示例中,当锁定的运动目标705移入第一标记框706后,手机也可以自动切换回主摄像头采集辅助预览图。这样,由于运动目标705已移入主预览图,且由主摄像头采集的辅助预览图中物体的尺寸较大(相较于广角摄像头和超广角摄像头采集的辅助预览图),便于用户查看辅助预览图中的物体。
综上可见,由于手机可以根据运动目标的运动情况,切换不同视场角的摄像头采集辅助预览图,即便在运动目标位置变化较大的情况下,辅助预览图中也能观察到运动目标,有助于实现对运动目标的追踪拍摄。
4、拍摄运动目标
进一步的,在运动拍摄模式下,用户可以根据辅助预览图和主预览图在合适的时机可以指示手机执行拍摄操作。需要注意的是,虽然用户可借助辅助预览图移动手机,将运动目标置于主预览图中,但由于运动目标的位置仍然处于变化中,用户无法预判拍摄的图像(照片或视频)中运动目标的准确位置。因此,在本申请实施例中还提供了一种对运动拍摄模式下拍摄的图像进行二次构图处理的方法。
手机响应于用户指示执行拍摄操作后,一方面,手机根据当前长焦摄像头采集的图像得到拍摄的图像得到与主预览图一致的图像,即所见即所拍。例如,如图8中(1)所示,图像801为长焦摄像头当前采集的全尺寸图像。手机根据当前变焦倍率对图像801进行裁剪,裁剪后的图像为图像802,进一步对图像802进行数字变焦放大得到如图8中(2)所示的图像803,即为手机拍摄得到的图像。另一方面,手机还保存一份当前长焦摄像头采集的全尺寸图像,即未根据变焦倍率进行裁切的图像。后续,在手机确定需要对本次拍摄的图像进行重新构图(也称为二次构图)时,可以基于此时保存的全尺寸图像进行裁切等处理。一些示例中,手机也可以保存主摄像头采集的全尺寸图像,用于后续的重新构图。本申请实施例对此不做限定。
进一步的,手机对拍摄得到的图像中运动目标的构图进行智能判断。若拍摄的图像中运动目标的构图判断为合理,则不启动二次构图处理。即,此时拍摄的图像即为最终得到的图像。若拍摄的图像中运动目标的构图判断为不合理,则启动二次构图处理。
在一些实施例中,可以根据运动目标在拍摄图像中的位置确定是否构图是否合理。
示例性的,可以根据运动目标的中心点在拍摄图像中的位置确定是否构图合理。例如,若判断运动目标的中心点在当前图像第一范围(例如图像中央1/2的范围)之内,则认为构图合理。例如,如图9中(1)所示,可以针对根据手机拍摄时使用的变焦倍率裁剪后的图像802,或者针对变焦放大后的图像803进行构图是否合理的判断。若运动目标“鸟”的中心位置位于整个图像中央1/2的范围之内,则认为构图合理,可不启动二次构图处理。一些示例中,手机可以删除之前保留的全尺寸图像。
若判断运动目标的中心点在当前图像第一范围(例如图像中央1/2的范围)之外,但位于当前图像第二范围(例如图像中央3/4的范围)之内,则可以对构图进行微调。例如,如图9中(2)所示,若运动目标“鸟”的中心位置位于整个图像中央1/2的范围之外,且位于整个图像中央3/4的范围之内时,手机可以自动根据长焦摄像头采集的全尺寸图像进行重新裁剪。比如在原来裁剪位置稍微向下一些裁剪,使得裁剪后的图像中运动目标的中心点位于重新裁剪后图像中央1/2的范围之内。再根据重新裁剪后的图像进行数字变焦得到新的图像,该图像即为拍摄最终得到的图像,且用户通过图像浏览到该图像。
若判断运动目标的中心点在当前图像第二范围(例如图像中央3/4的范围)之外,则认为构图不合理,且需要用户手动进行二次构图。也就是说,在本次拍摄后,手机得到两张图像,一张图像为根据拍摄时采用的变焦倍率对长焦摄像头采集的图像进行裁剪和变焦得到的图像,该图像为用户通过浏览照片时能够查看到的。另一张图像为长焦摄像头采集的全尺寸图像,该图像则为用户手动二次构图处理时,能够调出的图像。
在手机拍摄得到图像后,检测到拍摄的图像的构图不合理,可以提示用户当前拍摄的图像构图不合理,询问用户是否需要二次构图处理。或者,用户在浏览该图像时,手机可以通过根据用户指示开启对该图像进行二次构图处理。
例如,如图10A中(1)所述的界面101,为用户通过图库查看本次拍摄的图像的浏览界面。在该界面101中显示有修改控件102,用于用户开启二次构图处理的功能控件。响应于用户点击修改控件102,手机调出保留的长焦摄像头采集的全尺寸图像,显示如图10A中(2)所示的修改界面103。该修改界面103中显示有长焦摄像头采集的全尺寸图像,并且在该全尺寸图像中显示有第三标记框104,该标记框104标记出本次拍摄的图像在全尺寸图像中的位置。用户可以通过例如拖动第三标记框104的位置,以重新选择构图时手机裁剪的区域。比如,用户拖动第三标记框104的位置至图10A中(3)所述界面105中的位置,响应于用户点击确定控件106,手机根据当前第三标记框的位置,重新对长焦摄像头的全尺寸图像进行裁剪以及变焦放大,得到二次构图后的图像。手机可以仅保留二次构图处理后的图像,也可以同时保留二次构图处理后的图像和原来拍摄得到的图像。
可以理解的是,上述实施例是对用户执行拍摄操作后得到的图像进行二次构图进行说明的,当然,也可以在相机预览的过程中,对预览的图像进行二次构图,方法类似,不再赘述。
此外,上述实施例是以相机应用中的拍摄照片为例进行说明的,相机应用的连拍以及录制视频等其他场景也可以使用本申请的辅助预览功能,方法类似,这里简单说明下。
连拍场景:
若检测到运动目标或者根据用户的指示进入运动拍摄模式后,手机采用上述实施例介绍的各种方法进行预览。当检测到用户执行连拍操作,例如长按拍摄控件时,手机除了按照现有技术拍摄多张照片外,针对这多张照片,采用上述实施例介绍的二次构图处理的方法进行处理。即,针对每张照片确定构图是否合理,若合理则不开启二次构图处理,否则自动微调照片的构图或者保留该照片对应时刻长焦摄像头采集的全尺寸图像。当用户通过图库浏览连拍的多张照片时,也可以通过在优选界面中设置二次构图的功能控件,用于用户手动进行二次构图处理。
例如,如图10B中(1)所示,为通过图库浏览连拍照片的界面107。用户可以通过点击选择控件108进入如图10B中(2)所示的该连拍照片的优选界面109。在优选界面109上设置有修改控件110,用于进入优选界面109中选中照片的二次构图界面。相关的操作可参考图10A中单张照片的二次构图过程,这里不再赘述。
当然,在另一些示例中,也可以是在用户选择连拍照片中的一张或多张照片单独保存后,在单独保存的一张或张照片的浏览界面对该一张或多张照片进行手动二次构图。本申请实施例对二次构图的相关界面不做限定。
录制视频的场景:
在手机开启录制视频的功能,未开始录制时,可以采用本申请提供的方法,在高变焦倍率(变焦倍率大于或等于预设倍率)的情况下,使用长焦摄像头采集主预览图和辅助预览图。当根据辅助预览图确定有运动目标或者根据用户指示进入运动拍摄模式后,使用长焦摄像头采集主预览图,同时使用主摄像头采集辅助预览图。用户可以通过取景范围更大的辅助预览图追踪运动目标。在录制视频的过程中,当运动目标的位置移出主预览图后,用户可以借助辅助预览图移动手机,以使得运动目标出现在主预览图(即录制的范围)中。
在另一些实施例中,在录制视频的过程中,手机除了录制主预览图中显示的视频(记为第一视频)外,还保留与录制视频时间轴对齐的长焦摄像头采集的全尺寸图像组成的视频,作为备份视频(记为第二视频)。后续,手机根据针对第一视频中每帧图像进行构图合理的判断。若第一视频中某些帧的图像构图不合理,则可以针对第二视频中与这些帧时间对应的图像帧进行二次构图处理。并使用二次构图处理后图像替换第一视频中相应的图像帧,从而实现对运动目标的追踪拍摄。其中,具体每帧图像的处理可以参考上文相关内容的描述,这里不再赘述。
在一些示例中,手机在进入长焦拍摄模式后但未进入运动拍摄模式时,手机可以使用长焦摄像头采集录像流,且录像流的分辨率可以为默认的分辨率,例如,全高清(FullHigh Definition,FHD)。在手机进入运动拍摄模式后,手机使用主摄像头采集的录像流作为辅助预览图,但使用长焦摄像头采集录像流,此时录像流的分辨率可以切换为4K。而后,手机一方面按照当前使用的变焦倍率对4K录像流进行裁切、压缩为默认的分辨率、编码等处理得到本次录制的视频,即第一视频。另一方面,手机保留一份4K的录像流,并进行编码等处理,得到第二视频,可用于后续的二次构图处理。可见,手机在运动拍摄模式下录像流的分辨率设置为高分辨率出流,可以保证手机在拍摄第一视频以及保留第二视频的过程中不需要启动停流,保证手机录制过程的流畅性,无卡顿。
例如,如图10C所示,为通过图库应用浏览第一视频的界面。该浏览界面中包括第一区域111和第二区域113。其中,第一区域111用于浏览第一视频中各个图像帧。第二区域113用于显示第一视频中包含的多个图像帧的预览。用户可以通过点击播放控件114,选择播放第一视频或者暂停播放第一视频。该界面中还包括修改控件112,可通过操作该控件112,进入针对第一区域111当前显示的图像帧的二次构图界面。相关的操作可参考图10A中单张照片的二次构图过程,这里不再赘述。
如图11所示,为本申请实施例提供的一种拍摄方法的流程示意图,具体包括:
S1101、启动相机。
S1102、手机显示预览图。
一般,手机默认的变焦倍率为“1×”。此时,手机仅显示一个预览图,且使用主摄像头采集的图像作为预览图。此后,手机可以根据具体的拍摄场景自动或者根据用户的指示增大或减小变焦倍率。
S1103、判断手机使用的变焦倍率是否大于预设倍率。若大于预设倍率,则手机执行步骤S1104。否则,继续执行S1102。
S1104、手机显示主预览图和辅助预览图。
手机分别对长焦摄像头采集的图像进行处理,得到主预览图和辅助预览图。其中,主预览图的变焦倍率与手机当前使用的变焦倍率一致。辅助预览图的变焦倍率一般小于手机当前使用的变焦倍率,且辅助预览图中包含第一标记框,用于在辅助预览图中标记与主预览图取景范围相同的图像。进一步的,手机对辅助预览图进行图像识别,识别其中是否包含运动目标,具体的识别方法参考上文相关描述。
S1105、手机判断是否锁定运动目标。若锁定运动目标,则执行步骤S1106,否则,继续执行步骤S1104。
若辅助预览图中识别出运动目标,或者检测到用户手动进入运动拍摄模式,且根据用户的指示确定了运动目标,则认为是锁定了运动目标。
S1106、手机显示主预览图和辅助预览图。
此时,手机继续使用长焦摄像头采集主预览图,但使用主摄像头采集辅助预览图。
S1107、手机刷新辅助预览图中的第一标记框和第二标记框的位置。
手机以一定频率刷新主预览图和辅助预览图,并刷新辅助预览图中第一标记框和第二标记框的位置。
S 1108、手机确定是否解锁运动目标。若是,则执行步骤S1103,否则,执行步骤S1107。
用户可以手动解锁运动目标。或者,手机也可以在检查到运动目标移除辅助预览图后自动解锁运动目标。或者,手机在检测到用户退出运动拍摄模式时,自动解锁运动目标。
如图12所示,为本申请实施例提供的另一种拍摄方法的流程示意图,具体包括:
S1201、手机开启相机应用,且相机进入运动拍摄模式。
S1202、手机的长焦摄像头缓存多张采集的图像,形成全尺寸图像队列。
S1203、手机在第一时刻检测到用户执行的拍摄操作。
S1204、手机根据第一时刻在全尺寸图像队列中选取图像帧,并备份选取的图像帧。
S1205、手机根据第一时刻相机所使用的变焦倍率对所选的图像帧进行裁切以及数字变焦处理。
S1206、手机保存裁切等处理后的图像,为第一时刻拍摄得到的图像。
用户可以通过图库浏览到该图像。
S1207、判断是否需要对第一时刻拍摄的图像进行二次构图。若需要则指出步骤S1208,否则本流程结束。
手机可以自动对步骤S1206得到的图像,或者步骤S1205中裁切后的图像运行算法,确定其中的运动目标在图像中的位置是否合理,若合理则不需要二次构图,否则需要二次构图。具体判断合理的方法可参考上文的相关描述。
或者,在用户进入图库浏览照片时,可浏览到步骤S1206的图像。若用户不满意,也可以手动启动对该图像的二次构图。(图中步骤S1210和步骤S1211示出该步骤)
S1208、手机加载备份的全尺寸图像。
S1209、手机根据第一时刻的变焦倍率重新对备份的全尺寸图像进行裁切和数字变焦等处理得到重新构图的图像。
本申请实施例还提供一种芯片系统,如图13所示,该芯片系统包括至少一个处理器1301和至少一个接口电路1302。处理器1301和接口电路1302可通过线路互联。例如,接口电路1302可用于从其它装置(例如电子设备100的存储器)接收信号。又例如,接口电路1302可用于向其它装置(例如处理器1301)发送信号。示例性的,接口电路1302可读取存储器中存储的指令,并将该指令发送给处理器1301。当所述指令被处理器1301执行时,可使得电子设备执行上述实施例中的电子设备100(比如,手机)执行的各个步骤。当然,该芯片系统还可以包含其他分立器件,本申请实施例对此不作具体限定。
本申请实施例还提供一种装置,该装置包含在电子设备中,该装置具有实现上述实施例中任一方法中电子设备行为的功能。该功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括至少一个与上述功能相对应的模块或单元。例如,检测模块或单元、显示模块或单元、以及确定模块或单元等。
本申请实施例还提供一种计算机存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行如上述实施例中任一方法。
本申请实施例还提供一种计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行如上述实施例中任一方法。
本申请实施例还提供一种电子设备上的图形用户界面,所述电子设备具有显示屏、摄像头、存储器、以及一个或多个处理器,所述一个或多个处理器用于执行存储在所述存储器中的一个或多个计算机程序,所述图形用户界面包括所述电子设备执行如上述实施例中任一方法时显示的图形用户界面。
可以理解的是,上述终端等为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明实施例的范围。
本申请实施例可以根据上述方法示例对上述终端等进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本发明实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (17)
1.一种拍摄运动目标的方法,其特征在于,包括:
响应于启动相机应用的操作,电子设备显示第一取景框,用于显示所述电子设备的第一摄像头采集的画面;
响应于检测到用户增大所述相机应用变焦倍率的操作,所述第一取景框用于显示所述电子设备的第二摄像头采集的第一画面,所述第二摄像头的取景范围小于所述第一摄像头的取景范围;
当所述相机应用变焦倍率大于或等于预设倍率时,所述电子设备还显示第二取景框,用于显示所述第二摄像头采集的第二画面;所述第二画面对应的取景范围大于所述第一画面对应的取景范围,且所述第二取景框中包括第一标记框,用于在所述第二取景框显示的画面中标记出所述第一取景框的取景范围;
响应于检测到运动目标或接收到用户指示进入运动拍摄模式的操作,所述第一取景框用于显示所述第二摄像头采集的画面,所述第二取景框用于显示所述第一摄像头采集的画面,且所述第二取景框还包括第二标记框,其中所述第二标记框用于在所述第二取景框显示的画面中标记出运动目标。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当检测到所述运动目标移出所述第二取景框显示的画面,或者检测到所述用户指示关闭运动拍摄模式的操作,所述第一取景框用于显示所述第二摄像头采集的第三画面,以及所述第二取景框用于显示所述第二摄像头采集的第四画面;所述第四画面对应的取景范围大于所述第三画面对应的取景范围;或者,
当检测到所述相机应用的变焦倍率小于所述预设倍率,所述第一取景框,用于显示所述第一摄像头采集的画面,且所述电子设备不再显示所述第二取景框。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当检测到所述运动目标移出所述第二取景框显示的画面,所述第一取景框用于显示所述第二摄像头采集的画面,所述第二取景框用于显示第三摄像头采集的画面;其中,第三摄像头的取景范围大于所述第一摄像头。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述方法还包括:
所述电子设备根据所述第二取景框中所述第一标记框和所述第二标记框的相对位置,显示提示信息或播放语音,用于指导用户移动电子设备。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
响应于检测到用户执行拍照操作,所述电子设备对所述第二摄像头采集的第一图像生成第一照片;
当所述第一图像中所述运动目标的中心点位于所述第一图像的第一区域外时,所述第一照片中所述运动目标中心点位于所述第一照片的第一区域内。
6.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
响应于检测到用户执行拍照操作,所述电子设备对所述第二摄像头采集的第一图像生成第一照片;
当所述第一图像中所述运动目标的中心点位于所述第一图像的第一区域外时,所述电子设备还保存所述第一图像。
7.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
响应于检测到用户执行拍照操作,所述电子设备对所述第二摄像头采集的第一图像生成第一照片;
当所述第一图像中所述运动目标的中心点位于所述第一图像的第一区域外且位于第二区域内时,所述第一照片中所述运动目标中心点位于所述第一照片的第一区域内;
当所述第一图像中所述运动目标的中心点位于所述第一图像的第二区域外时,所述电子设备还保存所述第一图像。
8.根据权利要求6或7所述的方法,其特征在于,所述方法还包括:
在所述用户通过图库应用浏览所述第一照片时,所述第一照片的浏览界面包括第一控件;
响应于检测到用户对所述第一控件的操作,所述电子设备显示所述第一照片的修改界面;所述修改界面包括所述第一图像和第三标记框,所述第三标记框用于在所述第一图像上标记出所述第一照片的取景范围;
响应于检测到所述用户对所述第三标记框的拖动操作,所述电子设备移动所述第三标记框在所述第一图像上的位置;
响应于检测到用户操作确定控件,所述电子设备根据所述第三标记框中图像生成第二照片,所述第二照片与所述第一照片对应的变焦倍率相同,且所述第二照片中所述运动目标在所述第二照片的第一区域内。
9.根据权利要求1-8任一项所述的方法,其特征在于,所述方法还包括:
响应于检测到用户执行连拍操作,所述电子设备对所述第二摄像头采集的多个第二图像生成对应的第三照片;
当所述多个第二图像中任一个图像中所述运动目标的中心点位于所述图像的第一区域外时,所述图像对应的所述第三照片中所述运动目标中心点位于所述图像对应的所述第三照片的第一区域内。
10.根据权利要求1-8任一项所述的方法,其特征在于,所述方法还包括:
响应于检测到用户执行连拍操作,所述电子设备对所述第二摄像头采集的多个第二图像生成对应的第三照片;
当所述多个第二图像中任一个图像中所述运动目标的中心点位于所述图像的第一区域外时,所述电子设备保存所述图像。
11.根据权利要求1-8任一项所述的方法,其特征在于,所述方法还包括:
响应于检测到用户执行连拍操作,所述电子设备对所述第二摄像头采集的多个第二图像生成对应的第三照片;
当所述多个第二图像中任一个图像中所述运动目标的中心点位于所述图像的第一区域外且位于第二区域内时,所述图像对应的所述第三照片中所述运动目标中心点位于所述图像对应的所述第三照片的第一区域内;
当所述多个第二图像中任一个图像中所述运动目标的中心点位于所述图像的第二区域外时,所述电子设备保存所述图像。
12.根据权利要求9或11所述的方法,其特征在于,所述方法还包括:
在所述用户通过图库应用浏览所述第三照片时,所述第三照片的选择界面包括第一控件;
响应于检测到用户对所述第一控件的操作,所述电子设备显示选中的第三照片的修改界面;所述修改界面包括所述选中的第三照片对应的第二图像和第四标记框,所述第四标记框用于在所述第三照片对应的第二图像上标记出所述选中的第三照片的取景范围;
响应于检测到所述用户对所述第四标记框的拖动操作,所述电子设备移动所述第四标记框在所述选中的第三照片对应的第二图像上的位置;
响应于检测到用户操作确定控件,所述电子设备根据所述第四标记框中图像生成第四照片,所述第四照片与所述第三照片对应的变焦倍率相同,且所述第四照片中所述运动目标在所述第四照片的第一区域内。
13.根据权利要求1-12任一项所述的方法,其特征在于,所述第一摄像头为中焦摄像头,所述第二摄像头为长焦摄像头。
14.根据权利要求3所述的方法,其特征在于,所述第三摄像头为广角摄像头或超广角摄像头。
15.一种电子设备,其特征在于,包括:处理器、存储器和触摸屏,所述存储器、所述触摸屏与所述处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,当所述处理器从所述存储器中读取所述计算机指令,以使得所述电子设备执行如权利要求1-14中任一项所述的拍摄运动目标的方法。
16.一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1-14中任一项所述的拍摄运动目标的方法。
17.一种芯片系统,其特征在于,包括一个或多个处理器,当所述一个或多个处理器执行指令时,所述一个或多个处理器执行如权利要求1-14中任一项所述的拍摄运动目标的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010432123.8A CN113709354A (zh) | 2020-05-20 | 2020-05-20 | 一种拍摄方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010432123.8A CN113709354A (zh) | 2020-05-20 | 2020-05-20 | 一种拍摄方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113709354A true CN113709354A (zh) | 2021-11-26 |
Family
ID=78645650
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010432123.8A Pending CN113709354A (zh) | 2020-05-20 | 2020-05-20 | 一种拍摄方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113709354A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114422692A (zh) * | 2022-01-12 | 2022-04-29 | 西安维沃软件技术有限公司 | 视频录制方法、装置及电子设备 |
CN115278030A (zh) * | 2022-07-29 | 2022-11-01 | 维沃移动通信有限公司 | 拍摄方法、装置及电子设备 |
CN115278043A (zh) * | 2021-04-30 | 2022-11-01 | 华为技术有限公司 | 一种目标追踪方法及相关装置 |
CN116051368A (zh) * | 2022-06-29 | 2023-05-02 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
WO2023231600A1 (zh) * | 2022-05-30 | 2023-12-07 | 荣耀终端有限公司 | 一种拍摄方法及电子设备 |
WO2024088074A1 (zh) * | 2022-10-29 | 2024-05-02 | 华为技术有限公司 | 拍摄月亮的方法和电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101998052A (zh) * | 2009-08-07 | 2011-03-30 | 奥林巴斯映像株式会社 | 摄影装置 |
US20120268641A1 (en) * | 2011-04-21 | 2012-10-25 | Yasuhiro Kazama | Image apparatus |
CN103914689A (zh) * | 2014-04-09 | 2014-07-09 | 百度在线网络技术(北京)有限公司 | 基于人脸识别的图片裁剪方法及装置 |
CN104991725A (zh) * | 2015-07-28 | 2015-10-21 | 北京金山安全软件有限公司 | 一种图片裁剪的方法和系统 |
CN111010506A (zh) * | 2019-11-15 | 2020-04-14 | 华为技术有限公司 | 一种拍摄方法及电子设备 |
-
2020
- 2020-05-20 CN CN202010432123.8A patent/CN113709354A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101998052A (zh) * | 2009-08-07 | 2011-03-30 | 奥林巴斯映像株式会社 | 摄影装置 |
US20120268641A1 (en) * | 2011-04-21 | 2012-10-25 | Yasuhiro Kazama | Image apparatus |
CN103914689A (zh) * | 2014-04-09 | 2014-07-09 | 百度在线网络技术(北京)有限公司 | 基于人脸识别的图片裁剪方法及装置 |
CN104991725A (zh) * | 2015-07-28 | 2015-10-21 | 北京金山安全软件有限公司 | 一种图片裁剪的方法和系统 |
CN111010506A (zh) * | 2019-11-15 | 2020-04-14 | 华为技术有限公司 | 一种拍摄方法及电子设备 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115278043A (zh) * | 2021-04-30 | 2022-11-01 | 华为技术有限公司 | 一种目标追踪方法及相关装置 |
WO2022228259A1 (zh) * | 2021-04-30 | 2022-11-03 | 华为技术有限公司 | 一种目标追踪方法及相关装置 |
CN115278043B (zh) * | 2021-04-30 | 2024-09-20 | 华为技术有限公司 | 一种目标追踪方法及相关装置 |
CN114422692A (zh) * | 2022-01-12 | 2022-04-29 | 西安维沃软件技术有限公司 | 视频录制方法、装置及电子设备 |
WO2023134583A1 (zh) * | 2022-01-12 | 2023-07-20 | 维沃移动通信有限公司 | 视频录制方法、装置及电子设备 |
CN114422692B (zh) * | 2022-01-12 | 2023-12-08 | 西安维沃软件技术有限公司 | 视频录制方法、装置及电子设备 |
WO2023231600A1 (zh) * | 2022-05-30 | 2023-12-07 | 荣耀终端有限公司 | 一种拍摄方法及电子设备 |
CN116051368A (zh) * | 2022-06-29 | 2023-05-02 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
CN116051368B (zh) * | 2022-06-29 | 2023-10-20 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
CN115278030A (zh) * | 2022-07-29 | 2022-11-01 | 维沃移动通信有限公司 | 拍摄方法、装置及电子设备 |
WO2024088074A1 (zh) * | 2022-10-29 | 2024-05-02 | 华为技术有限公司 | 拍摄月亮的方法和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11831977B2 (en) | Photographing and processing method and electronic device | |
CN112532869B (zh) | 一种拍摄场景下的图像显示方法及电子设备 | |
CN110072070B (zh) | 一种多路录像方法及设备、介质 | |
CN113489894B (zh) | 一种长焦场景下的拍摄方法及终端 | |
CN113194242B (zh) | 一种长焦场景下的拍摄方法及移动终端 | |
CN111183632A (zh) | 图像捕捉方法及电子设备 | |
US11949978B2 (en) | Image content removal method and related apparatus | |
CN113709354A (zh) | 一种拍摄方法及电子设备 | |
CN112887583B (zh) | 一种拍摄方法及电子设备 | |
CN116055874B (zh) | 一种对焦方法和电子设备 | |
CN113497890B (zh) | 一种拍摄方法及设备 | |
CN115734071A (zh) | 图像处理方法及装置 | |
WO2021185296A1 (zh) | 一种拍摄方法及设备 | |
CN114866860A (zh) | 一种播放视频的方法及电子设备 | |
CN114466101B (zh) | 显示方法及电子设备 | |
CN115037872B (zh) | 视频处理方法和相关装置 | |
CN115344176A (zh) | 显示方法及电子设备 | |
CN117714849A (zh) | 一种图像拍摄方法及相关设备 | |
CN113452895A (zh) | 一种拍摄方法及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211126 |