[go: up one dir, main page]

CN112911059B - 拍照方法、装置、电子设备及可读存储介质 - Google Patents

拍照方法、装置、电子设备及可读存储介质 Download PDF

Info

Publication number
CN112911059B
CN112911059B CN202110087293.1A CN202110087293A CN112911059B CN 112911059 B CN112911059 B CN 112911059B CN 202110087293 A CN202110087293 A CN 202110087293A CN 112911059 B CN112911059 B CN 112911059B
Authority
CN
China
Prior art keywords
image
camera
input
display
preview image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110087293.1A
Other languages
English (en)
Other versions
CN112911059A (zh
Inventor
郭越
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Hangzhou Co Ltd
Original Assignee
Vivo Mobile Communication Hangzhou Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Hangzhou Co Ltd filed Critical Vivo Mobile Communication Hangzhou Co Ltd
Priority to CN202110087293.1A priority Critical patent/CN112911059B/zh
Publication of CN112911059A publication Critical patent/CN112911059A/zh
Priority to ES22742151T priority patent/ES3041163T3/es
Priority to EP22742151.8A priority patent/EP4283975B1/en
Priority to JP2023544407A priority patent/JP7640718B2/ja
Priority to PCT/CN2022/072523 priority patent/WO2022156672A1/zh
Application granted granted Critical
Publication of CN112911059B publication Critical patent/CN112911059B/zh
Priority to US18/356,534 priority patent/US12368949B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请公开了一种拍照方法、装置、电子设备及可读存储介质,属于通信技术领域。其中,方法包括:接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;其中,所述N个摄像头至少包括所述主摄像头,N为正整数。本申请可以提高成像的灵活性。

Description

拍照方法、装置、电子设备及可读存储介质
技术领域
本申请属于图像处理技术领域,具体涉及一种拍照方法、装置、电子设备及可读存储介质。
背景技术
随着电子设备拍照功能的发展,越来越多的用户使用电子设备拍照,以记录生活中的点滴。目前,电子设备的成像即为摄像头采集到的图像,即成像与实际景色一致。可见,现有技术中的成像方式单一。
发明内容
本申请实施例的目的是提供一种拍照方法、装置、电子设备及可读存储介质,能够解决现有技术中成像方式单一的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种拍照方法,该方法包括:
接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;
响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;
按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;
其中,所述N个摄像头至少包括所述主摄像头,N为正整数。
第二方面,本申请实施例提供了一种拍照装置,该装置包括:
第一接收模块,用于接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;
第一显示模块,用于响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;
第一处理模块,用于按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;
其中,所述N个摄像头至少包括所述主摄像头,N为正整数。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
在本申请实施例中,接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;其中,所述N个摄像头至少包括所述主摄像头,N为正整数。可见,本申请实施例可以通过调整摄像头采集到的图像中的对象的显示状态,使得目标图像与摄像头采集到的图像不同,这样,相比于现有技术中成像即为摄像头采集到的图像,提高了成像的灵活性。
附图说明
图1是本申请实施例提供的拍照方法的流程图;
图2a是本申请实施例提供的图像示意图之一;
图2b是本申请实施例提供的图像示意图之二;
图2c是本申请实施例提供的图像示意图之三;
图2d是本申请实施例提供的图像示意图之四;
图2e是本申请实施例提供的图像示意图之五;
图3a是本申请实施例提供的图像示意图之六;
图3b是本申请实施例提供的图像示意图之七;
图3c是本申请实施例提供的图像示意图之八;
图3d是本申请实施例提供的图像示意图之九;
图3e是本申请实施例提供的图像示意图之十;
图4是本申请实施例提供的显示状态调节控件的示意图之一;
图5a是本申请实施例提供的显示状态调节控件的示意图之二;
图5b是本申请实施例提供的显示状态调节控件的示意图之三;
图6是本申请实施例提供的拍照装置的结构图;
图7是本申请实施例提供的电子设备的结构图之一;
图8是本申请实施例提供的电子设备的结构图之二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的拍照方法进行详细地说明。
本申请实施例提供的拍照方法可由包括至少一个摄像头的电子设备执行。
在电子设备包括两个或两个以上的摄像头的情况下,不同摄像头可以具有不同的对焦范围(或称为缩放倍率),以清晰拍摄不同距离的物体。
可以理解地是,不同的对焦范围对应不同的物距拍摄范围。因此,具体实现时,电子设备可以基于目标物体的物距,选择拍摄所述目标物体的摄像头,其中,拍摄所述目标物体的摄像头的对焦范围对应的物距拍摄范围包括所述目标物体的物距。
如:假设电子设备包括标准摄像头、超广角摄像头和长焦摄像头;其中,超广角摄像头的对焦范围为第一对焦范围,适用于拍摄物距大于或等于0,小于第一预设距离阈值的物体,即所述第一对焦范围对应的物距拍摄范围为[0,第一预设距离阈值);标准摄像头的对焦范围为第二对焦范围,适用于拍摄物距大于或等于所述第一预设距离阈值,小于第二预设距离阈值的物体,即所述第二对焦范围对应的物距拍摄范围为[第一预设距离阈值,第二预设距离阈值);长焦摄像头的对焦范围为第三对焦范围,适用于拍摄物距大于或等于所述第二预设距离阈值的物体,即所述第二对焦范围对应的物距拍摄范围为[第二预设距离阈值,∞)。
若待拍摄的目标物体的物距小于所述第一预设距离阈值,那么,电子设备可以选择超广角摄像头拍摄该目标物体。
另外,在电子设备包括两个或两个以上的摄像头的情况下,可以将其中一个摄像头设置为电子设备的主摄像头,其他摄像头设置为电子设备的辅摄像头,主摄像头和辅摄像头的设置可根据实际需求决定,本申请实施例对此不做限定。如:假设电子设备包括上述标准摄像头、超广角摄像头和长焦摄像头,那么,可以将标准摄像头作为电子设备的主摄像头,将超广角摄像头和长焦摄像头作为电子设备的辅摄像头。
在实际应用中,电子设备可以是手机、平板电脑(Tablet Personal Computer)、膝上型电脑(Laptop Computer)、称为笔记本电脑、个人数字助理(Personal DigitalAssistant,PDA)、掌上电脑、上网本、超级移动个人计算机(ultra-mobile personalcomputer,UMPC)、移动上网装置(Mobile Internet Device,MID)、可穿戴式设备(WearableDevice)或车载设备(VUE)、行人终端(PUE)等。
参见图1,图1是本申请实施例提供的拍照方法的流程图之一。如图1所示,拍照方法可以包括以下步骤:
步骤101、接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像。
所述调整第一预览图像中第一对象的显示状态,可以包括以下至少一项:
调整第一预览图像中第一对象的显示大小,如放大或缩小第一预览图像中的第一对象;
调整第一预览图像中第一对象的显示位置,如上移、下移、左移或右移第一预览图像中的第一对象。
所述第一摄像头可以是电子设备的主摄像头或辅摄像头。
步骤102、响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象。
具体实现时,所述响应于所述第一输入,显示第二预览图像,可以包括:
响应于所述第一输入,调整所述第一预览图像的显示状态,或,调整所述第一预览图像的第一对象的显示状态,得到第一处理图像;
对所述第一处理图像进行第四图像处理,得到第四中间图像,所述第四中间图像仅包括所述第一处理图像中的第四像素信息,所述第四像素信息为所述第一处理图像中所述第一对象对应的像素信息;
获取第四图像,所述第四图像为所述主摄像头在第二时刻采集到的图像;
对所述第四图像进行第五图像处理,得到第五中间图像,所述第五中间图像包括所述第四图像中除第五像素信息之外的所有像素信息,所述第五像素信息为所述第四图像中所述第一对象对应的像素信息;
将所述第四中间图像和所述第五中间图像合成,得到第二预览图像;
显示所述第二预览图像;
其中,所述第二时刻为早于所述第一输入的输入时刻的时刻,或,所述第二时刻为晚于所述第一输入的输入时刻的时刻。
进一步地,在所述第二时刻为早于所述第一输入的输入时刻的时刻的情况下,所述第四图像可以为所述主摄像头从其对应的缓存队列的队尾抓取的图像;在所述第二时刻为晚于所述第一输入的输入时刻的时刻的情况下,所述第四图像可以为所述主摄像头的传感器感光后输出的图像。
在本可选实施方式中,第一实现方式中,所述第一输入可以通过调整所述第一预览图像整个图像的显示状态,实现第一预览图像中第一对象的显示状态的调整。在该实现方式中,所述第一处理图像为调整显示状态后的第一预览图像,即所述第一处理图像中的对象相比于所述第一预览图像均发生了改变。
第二实现方式中,所述第一输入可以仅调整所述第一预览图像中第一对象的显示状态,可以不对所述第一预览图像中的其他对象的显示状态造成影响。在该实现方式中,仅所述第一处理图像中的第一对象相比于所述第一预览图像发生了改变,其他对象相比于所述第一预览图像未发生改变。
电子设备在获取到第一处理图像后,可以通过删除所述第一处理图像中除所述第四像素信息之外的所有像素信息,得到第四中间图像。
另外,电子设备可以获取所述第四图像,并通过删除所述第四图像中的第五像素信息,得到第五中间图像。
在获取到所述第四中间图像和所述第五中间图像之后,电子设备可以合成所述第四中间图像和所述第五中间图像,得到第二预览图像。
之后,电子设备可以显示第二预览图像,以供用户通过第二预览图像查看已改变显示状态的第一对象。
需要说明的是,在第二预览图像中存在空白区域的情况下,电子设备在显示第二预览图像之前,可以但不仅限于采用插值处理方式,利用空白区域的相邻像素信息,对第二预览图像中的空白区域进行像素填充,从而提高成像效果。
为方便理解,以下结合图2a至图2e进行示例说明:
在下述示例中,假设各摄像头采集到的图像包括“云朵”和“人”两个对象,并将“云朵”视为第一对象,“人”视为第二对象。另外,调整第一预览图像中第一对象的显示状态表现为:放大第一预览图像中的第一对象。
图2a的显示屏显示的是第一摄像头采集到的第一预览图像20,第一预览图像20包括未改变显示状态的第一对象和第二对象。
在接收到所述第一输入的情况下,电子设备可以响应于所述第一输入,放大第一预览图像20,得到图2b所示的第一处理图像21,第一处理图像21包括放大后的第一对象和放大后的第二对象。
图2c所示的是第四中间图像22,第四中间图像22包括放大后的第一对象。
图2d所示的是第五中间图像23,第五中间图像23包括未改变显示状态的第二对象。
图2e所示的是第二预览图像24,第二预览图像24包括放大后的第一对象和未改变显示状态的第二对象。
步骤103、按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像。
具体实现时,一种实现方式中,电子设备可以响应于拍照输入,按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像。另一种实现方式中,电子设备可以依据预设频率,周期性按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像。
其中,所述N个摄像头至少包括所述主摄像头,N为正整数。可选地,在所述第一摄像头为所述主摄像头的情况下,所述N个摄像头包括所述主摄像头;在所述第一摄像头为第一辅摄像头的情况下,所述N个摄像头包括所述主摄像头和所述第一辅摄像头,所述第一辅摄像头的对焦范围与所述主摄像头的对焦范围不同。可选地,所述显示信息可以但不仅限于包括以下至少一项:显示效果、显示大小、显示位置。
在本步骤中,所述第一目标图像的显示信息与所述第二预览图像的显示信息相同。可选地,所述第一目标图像的所述第一对象的显示信息与所述第二预览图像的所述第一对象的显示信息相同,所述第一目标图像的其他对象的显示信息可以与所述第二预览图像的显示信息相同,也可以不同,具体可根据实际情况决定,本申请实施例对此不做限定。这样,所述第一目标图像也包括已改变显示状态的第一对象,使得第一目标图像与摄像头采集到的图像不同,从而提高了成像的灵活性。
可以理解地是,在所述第一目标图像的显示信息满足用户需求的情况下,用户可以对电子设备执行拍照输入,使电子设备输出满足用户需求的所述第一目标图像。这样,可以使得成像符合用户需求,从而可以提高成像的利用率。
本实施例的拍照方法,接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;其中,所述N个摄像头至少包括所述主摄像头,N为正整数。可见,本实施例可以通过调整摄像头采集到的图像中的对象的显示状态,使得目标图像与摄像头采集到的图像不同,这样,相比于现有技术中成像即为摄像头采集到的图像,提高了成像的灵活性;另外,可以使得成像符合用户需求,从而可以提高成像的利用率。
在本申请实施例中,可选地,在所述第一摄像头与所述主摄像头不是同一摄像头的情况下,所述接收用户的第一输入之前,所述方法还包括:
显示第五预览图像,所述第五预览图像为所述主摄像头采集的图像;
接收用户对所述第五预览图像的所述第一对象的第五输入;
响应于所述第五输入,获取所述第一对象对应的第一物距;
根据所述第一物距,确定与所述第一对象匹配的目标摄像头;
在所述目标摄像头为所述第一摄像头的情况下,显示所述第一预览图像。
在本可选实施方式中,电子设备在启动拍摄功能时,可以在显示区域显示主摄像头采集的图像。
考虑到不同摄像头的对焦范围不同,用于清晰拍摄不同距离的物体,因此,电子设备在拍摄不同物距的物体时,可以切换摄像头,以提高成像的清晰度。如:为获取到更清晰的近景图像或远景图像,电子设备可以调用近焦摄像头采集近景图像,或,调用远焦摄像头采集远景图像,但不仅限于此。
在本可选实施方式中,所述第五输入作用的是第一对象,说明用户旨在调整第一对象的显示状态,因此,为采集到更清晰的第一对象,电子设备可在调整第一对象的显示状态之前,调用与所述第一对象匹配的目标摄像头。
电子设备可以预先存储各摄像头与物距拍摄范围之间的对应关系,该对应关系满足:对于某物距拍摄范围内的物体,采用该物距拍摄范围对应的摄像头采集到的该物体对应的对象最清晰。这样,电子设备在接收到所述第五输入之后,可以响应于所述第五输入,获取所述第一对象对应的第一物距,即所述第一对象(物体的成像)对应的物体(实体)的物距,以根据所述第一物距,确定与所述第一对象匹配的目标摄像头。
具体实现时,电子设备可以将所述第一物距所属的物距拍摄范围对应的摄像头确定为目标摄像头。在所述目标摄像头为所述第一摄像头的情况下,电子设备可以显示所述第一摄像头采集到的图像,即所述第一预览图像。
在本可选实施方式中,电子设备可以基于用户的输入,确定用户期望调整显示状态的对象,并基于该对象对应的物距,调用显示区域显示与该对象对应的目标摄像头采集到的图像,进而通过该图像调整该对象的显示状态,从而可以提高成像的清晰度。
在本申请实施例中,用户通过所述第一输入调整第一预览图像中第一对象的显示状态之后,还可以继续通过其他输入调整摄像头采集到的图像中的其他对象的显示状态,具体说明如下。
可选地,所述响应于所述第一输入,显示第二预览图像之后,所述方法还包括:
接收用户的第二输入,所述第二输入用于选择所述第二预览图像的第二对象;
响应于所述第二输入,显示第三预览图像,所述第三预览图像为第二摄像头采集的图像;
接收用户的第三输入,所述第三输入用于调整所述第三预览图像中第二对象的显示状态;
响应于所述第三输入,显示第四预览图像,所述第四预览图像通过处理主摄像头采集的图像得到,所述第四预览图像包括已改变显示状态的第一对象,以及已改变显示状态的第二对象;
按照所述第四预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第二目标图像。
在本可选实施方式中,所述第二摄像头可以为与所述第二对象匹配的摄像头。所述第二输入作用的是第二对象,说明用户旨在调整第二对象的显示状态,因此,为采集到更清晰的第二对象,电子设备可在调整第二对象的显示状态之前,调用与所述第二对象匹配的摄像头,并显示该摄像头采集到的图像,供用户通过输入调整第二对象的显示状态。
所述响应于所述第三输入,显示第四预览图像,可以包括:
响应于所述第三输入,调整所述第三预览图像的显示状态,或,调整所述第三预览图像的第二对象的显示状态,得到第二处理图像;
对所述第二处理图像进行第六图像处理,得到第六中间图像,所述第六中间图像仅包括所述第二处理图像中的第六像素信息,所述第六像素信息为所述第二处理图像中所述第二对象对应的像素信息;
对所述第二预览图像进行第七图像处理,得到第七中间图像,所述第七中间图像包括所述第四图像中除第七像素信息之外的所有像素信息,所述第七像素信息为所述第二预览图像中所述第二对象对应的像素信息;
将所述第六中间图像和所述第七中间图像合成,得到第四预览图像。
需要说明的是,所述第四预览图像的获取方式与所述第二预览图像的获取原理类似,具体可参见前述描述,此处不再赘述。
为方便理解,结合图2a至图3e示例说明如下:
在下述示例中,假设各摄像头采集到的图像包括“云朵”和“人”两个对象,并将“云朵”视为第一对象,“人”视为第二对象。另外,调整第二预览图像中第二对象的显示状态表现为:缩小第二预览图像中的第二对象。
图3a的显示屏显示的是第三摄像头采集到的第三预览图像30,第一预览图像30包括未改变显示状态的第一对象和第二对象。
在接收到所述第三输入的情况下,电子设备可以响应于所述第三输入,缩小第三预览图像30,得到图3b所示的第二处理图像31,第二处理图像31包括缩小后的第一对象和缩小后的第二对象。
图3c所示的是第六中间图像32,第六中间图像32包括缩小后的第二对象。
图3d所示的是第七中间图像33,第七中间图像33通过对图2e中的第二预览图像34进行第七图像处理得到,第七中间图像33包括放大后的第一对象。
图3e所示的是第四预览图像34,第四预览图像34包括放大后的第一对象和未缩小后的第二对象。
在本可选实施方式中,用户通过所述第一输入调整第一预览图像中第一对象的显示状态之后,还通过第三输入调整所述第三预览图像中第二对象的显示状态,因此,电子设备可以按照所述第四预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第二目标图像。
所述N个摄像头可以满足以下任一项:
a)在所述第一摄像头和所述第二摄像头均为所述主摄像头的情况下,所述N个摄像头包括所述主摄像头;
b)在所述第一摄像头(或所述第二摄像头)为第一辅摄像头,所述第二摄像头(或所述第一摄像头)为所述主摄像头的的情况下,所述N个摄像头包括所述主摄像头和所述第一辅摄像头(或所述第二摄像头),所述第一辅摄像头的对焦范围与所述主摄像头的对焦范围不同;
c)在所述第一摄像头为第一辅摄像头,所述第二摄像头为第二辅摄像头的情况下,所述N个摄像头包括所述主摄像头、所述第一辅摄像头和所述第三摄像头,所述第一辅摄像头、所述第二辅摄像头和所述主摄像头的对焦范围均不同。
在本可选实施方式中,一种实现方式中,电子设备可以响应于拍照输入,按照所述第四预览图像中的显示信息,将所述第一中间图像、所述第二中间图像和所述第三中间图像合成,得到第二目标图像。另一种实现方式中,电子设备可以依据预设频率,周期性按照所述第四预览图像中的显示信息,将所述第一中间图像、所述第二中间图像和所述第三中间图像合成,得到第二目标图像。
所述第二目标图像的显示信息与所述第四预览图像的显示信息相同。可选地,所述第二目标图像的所述第一对象和所述第二对象的显示信息与所述第四预览图像中的所述第一对象和所述第二对象的显示信息相同,所述第二目标图像的其他对象的显示信息可以与所述第四预览图像的显示信息相同,也可以不同,具体可根据实际情况决定,本申请实施例对此不做限定。这样,所述第一目标图像也包括已改变显示状态的第一对象和已改变显示状态的第二对象,使得第二目标图像与摄像头采集到的图像不同,从而提高了成像的灵活性。
对于c),可选地,所述按照所述第四预览图像的显示信息,处理N个摄像头采集到的N个图像,得到目标图像,包括:
获取第一图像、第二图像和第三图像,所述第一图像为所述主摄像头在第一时刻采集到的图像,所述第二图像为所述第一辅摄像头在所述第一时刻采集到的图像,所述第三图像为所述第二辅摄像头在所述第一时刻采集到的图像;
对所述第一图像进行第一图像处理,得到第一中间图像,所述第一中间图像包括所述第一图像中除第一像素信息之外的所有像素信息,所述第一像素信息为所述第一图像中所述第一对象和所述第二对象对应的像素信息;
对所述第二图像进行第二图像处理,得到第二中间图像,所述第二中间图像仅包括所述第二图像中的第二像素信息,所述第二像素信息为所述第二图像中所述第一对象对应的像素信息;
对所述第三图像进行第三图像处理,得到第三中间图像,所述第三中间图像仅包括所述第二图像中的第三像素信息,所述第三像素信息为所述第三图像中所述第二对象对应的像素信息;
按照所述第四预览图像中的显示信息,将所述第一中间图像、所述第二中间图像和所述第三中间图像合成,得到第二目标图像;
其中,所述第一时刻为早于拍照输入的输入时刻的时刻,或,所述第一时刻为后于所述拍照输入的输入时刻的时刻。
可选地,在电子设备响应于拍照输入获取第二目标图像的实现方式中,所述第一时刻可以为早于拍照输入的输入时刻的时刻,或,所述第一时刻为后于所述拍照输入的输入时刻的时刻;在电子设备周期性获取第二目标图像的实现方式中,所述第一时刻可以为早于周期的起始时刻的时刻,或,所述第一时刻为晚于周期的起始时刻的时刻。
在所述第一时刻为早于拍照输入的输入时刻(或周期的起始时刻)的时刻的情况下,所述第一图像可以为所述主摄像头从其对应的缓存队列的队尾抓取的图像,所述第二图像可以为所述第一摄像头从其对应的缓存队列的队尾抓取的图像,所述第三图像可以为所述第二辅摄像头从其对应的缓存队列的队尾抓取的图像。
在所述第一时刻为晚于所述拍照输入的输入时刻(或周期的起始时刻)的时刻的情况下,所述第一图像可以为所述主摄像头的传感器感光后输出的图像,所述第二图像可以为所述第一辅摄像头的传感器感光后输出的图像,所述第三图像可以为所述第二辅摄像头的传感器感光后输出的图像。
具体实现时,电子设备可以通过删除所述第一图像的第一像素信息,得到第一中间图像;可以通过删除所述第二图像除第二像素信息之外的所有像素信息,得到第二中间图像;可以通过删除所述第三图像除所述第三像素信息之外的所有像素信息,得到第三中间图像。
在获取到所述第一中间图像、所述第二中间图像和所述第三中间图像之后,电子设备可以按照所述第四预览图像中的显示信息,合成所述第一中间图像、所述第二中间图像和所述第三中间图像,得到第二目标图像。
需要说明的是,在所述第二目标图像存在空白区域的情况下,电子设备可以但不仅限于采用插值处理方式,利用空白区域的相邻像素信息,对所述第二目标图像的空白区域进行像素填充,从而提高成像效果。
以下对本申请实施例的第一输入进行说明:
可选地,所述接收用户的第一输入之前,所述方法还包括:
接收用户对所述第一预览图像中第一对象的第四输入;
响应于所述第四输入,在所述第一预览图像中显示与所述第一对象关联的第一显示状态调节控件;
所述接收用户的第一输入,包括:
接收用户对所述第一显示状态调节控件的第一输入;
其中,所述第一预览图像中不同的对象关联不同的显示状态调节控件。
在本可选实施方式中,用户在执行所述第一输入之前,可以通过第四输入触发电子设备显示与所述第一对象关联的第一显示状态调节控件
具体实现时,所述第四输入可以为:输入轨迹包围所述第一对象的滑动输入,或,点击所述第一对象的点击输入,但不仅限于此。
进一步地,所述接收用户对所述第一显示状态调节控件的第一输入,包括:
在所述第一显示状态调节控件包括第一子控件和第二子控件的情况下,接收用户对所述第一子控件或所述第二子控件的第一输入,其中,所述第一子控件用于调整一个对象的显示大小,所述第二子控件用于调整一个对象的显示位置;
在所述第一显示状态调节控件包括第一显示模式和第二显示模式的情况下,接收用户对所述第一显示模式的第一显示状态调节控件或所述第二显示模式的第一显示状态调节控件的第一输入,其中,在所述第一显示模式下,所述第一显示状态调节控件用于调整一个对象的显示大小;在所述第二显示模式下,所述第一显示状态调节控件用于调整一个对象的显示位置。
为方便理解,结合图4至图5b示例说明如下:
在图4中,所述第一显示状态调节控件包括第一子控件41和第二子控件42。具体实现时,若用户想调整所述第一对象的显示大小,可以通过触控所述第一显示状态调节控件的第一子控件41实现;若用户想调整所述第一对象的显示位置,可以通过触控所述第一显示状态调节控件的第二子控件42实现。这样,用户可以通过触控不同的子控件实现对象的显示大小和显示位置的调整,从而可以提高对象的显示状态调整的独立性,可以降低显示状态调整的误触发率。
在图5a和图5b中,所述第一显示状态调节控件包括第一显示模式和第二显示模式,其中,图5a所示的第一显示状态调节控件处于第一显示模式,图5b所示的第一显示状态调节控件处于第二显示模式。具体实现时,若用户想调整所述第一对象的显示大小,可以执行输入触发电子设备将所述第一显示状态调节控件设置为所述第一显示模式;若用户想调整所述第一对象的显示位置,可以执行输入触发电子设备将所述第一显示状态调节控件设置为所述第二显示模式。这样,用户可以通过一个显示状态调节控件的不同显示模式,实现对象的显示大小和显示位置的调整,从而可以减少控件的设置数量。
以下对所述第一输入为用户对所述第一显示状态调节控件的输入,且所述第一显示状态调节控件包括第一显示模式和第二显示模式的应用场景进行示例说明:
电子设备可利用多个摄像头来拍摄同一个场景,通过调节放大缩小的倍数条(即处于第一显示模式的第一显示状态调节控件)来实现远近景的距离切换。可以实现采用多个摄像头拍摄不同倍数的场景融合实现距离切换。如:使用两个摄像头同时拍摄控制物体的放大倍数可以用于有些用户想要拍摄特写的场景,比如用户拍了一颗完整的果树,他想要放大果树中的其中一个果子的特写就可以将该果子进行放大,该果子放大的图片部分可以和整个果树的图片进行融合处理,就可实现对整个场景某一个区域或拍摄对象的细节的特写。
电子设备上可以安装多个摄像头来实现滑动变焦效果的,现在设备上有不限于3个摄像头,包括超广角镜头(Ultra)、广角镜头(Wide)或长焦镜头(Tele),每种镜头具有不同的焦距和不同的镜头覆盖范围,其可根据距离目标物体的远近选择适用。如:当距离目标物体较近时,较适用于超广角镜头采集视频;当距离目标物体适中时,较适用于广角镜头采集视频;当距离目标物体较远时,较适用于长焦镜头采集视频。
若电子设备安装有多个摄像头,则安装于电子设备上的摄像头可以是超广角镜头与广角镜头的组合、广角镜头与长焦镜头的组合或超广角镜头、广角镜头与长焦镜头的组合。该不同镜头的组合可适用于不同拍摄范围的需要,如超广角镜头与广角镜头的组合,当若该广角镜头适用的缩放倍率为1-2的范围,若低于该范围,则可能导致成像不清楚,进而若需要进一步采集清楚的缩放倍率低于1的图像,需将广角镜头切换为超广角镜头,以实现较好的拍摄效果。
电子设备可以通过电子设备上多个摄像头来实现对远景近景分别调用不同的摄像头来拍摄,达到清晰度较好的效果,具体的实施包括以下步骤:
步骤一、在拍摄的过程中,用户可以触控(touch)远景的物体关联的拖动倍数条,来调节控制远焦摄像头要放大缩小的倍数。
如图5a所示,用户在touch屏幕后会出现一个倍数条,可以调节的倍数范围。可选地,调节的倍数范围可以是1-4,中间可以分40个间隔,比如可以倍数为1.1,1.2,1.3…。
步骤二、在拍摄的过程中,用户可以touch近景的物体绑定的拖动倍数条,来调节控制近焦摄像头要放大缩小的倍数。
对于远景和近景的选取,用户可以在屏幕上把要处理的远景和近景的物体圈出,随后点击一下圈中的物体就会出现倍数条。
通过用户touch物体的距离来选择不同的摄像头,比如用户touch的物体属于近景时,这个时候对焦点是在近景处,可以通过激光测距或者双目测距的方法测出物体的距离,判断为近景就调用近焦摄像头,这个距离的判断阈值可以设置对焦的物体距离小于1m为近景调用近焦摄像头,大于1m为远景调用远焦摄像头,具体的阈值设定要根据摄像头的焦距来定。
Touch近景调用近焦摄像头,近焦摄像头焦距小,拍摄近景会相对清晰一些;touch远景调用远焦摄像头,远焦摄像头的焦距长,可以比较清晰的拍摄远景。纵所周知:终端拍摄距离终端比较近的时候物体时,该物体的成像是比较大的,拍摄距离终端比较远的物体时,物体的成像随着距离越来越远拍摄出来的大小会越来越小,所以为了改变这个拍摄的效果距离就可以通过放大或者缩小物体来实现。
因此,如果用户要放大缩小远近景的距离,touch近景的物体可以设置缩小倍数比如滑动线条为1.2,表示缩小为原来大小的1.2倍;touch远景的物体可以设置放大倍数比如倍数线条为2.5表示放大为原来大小的2.5倍。
图像处理的过程:通过用户选择的物体放大倍数,分别用两个摄像头来处理生成两张数字变焦的帧,一帧是远景放大的帧,一帧是近景缩小的帧,再用远焦摄像头生成一张不做处理的基础帧,分别将放大,缩小的帧相应的物体抠出来,融合到基础帧上的相应位置上覆盖原来的物体,对于融合后的物体边缘可以和周边像素做插值处理,使边缘的过渡平滑些,最终合成一张图片。
如图3e所示,通过改变远近景的放大倍数来实现远景近景的距离改变,图中可以看出将近处人缩小,远处的云扩大合成后的效果。
可见,用户可以通过倍数条调整图像中对象的显示大小,来实现远景和近景的距离切换;另外,电子设备通过不同摄像头采集不同物距的物体的图像,可以保证远景和近景的清晰度。
如果用户想要改变图像中物体的位置,可以通过双击倍数条后会出现一个坐标轴(即处于第二显示模式的第一显示状态调节控件),这个坐标轴是一个方位坐标,可以用于改变图像中物体的位置。
具体实现时,touch远景和近景会触发电子设备在旁边出现一个坐标轴,如图5b所示。坐标轴的x轴y轴分别表示水平和垂直的位置,原点就是物体原来的位置,用户可以分别滑动x轴,y轴的位置坐标,例如用户滑动x轴为1,y轴为2那就是坐标(1,2)这个位置,表示要把物体水平右移动1m后在垂直上移动2m的位置上。用户位置是(-0.1,-0.5)表示物体先水平左移动1cm在垂直下移动5cm的位置上,用户如果只滑动x轴那么,物体只是水平方向移动,如果只滑动y轴,物体只垂直方向移动。
调整远景近景的方位后根据用户调整的不同方位把近景远景的物体抠出来单独进行相应位置的图像融合,其余的抠图空出来的部分可以用周边差值来计算填充。
可见,用户可以通过坐标轴调整图像中对象的位置,进而对于调整物体远景近景距离更加的灵活多变。
需要说明的是,在其他实施方式中,所述第一输入可以为输入位置包括所述第一对象的输入。进一步地,所述第一输入可以为起始输入位置为所述第一对象的输入。在此情况下,用户期望调整哪个对象的显示状态,即可在该对象开始执行所述第一输入。这样,电子设备可以确定所述第一对象为所述第一输入的起始输入位置对应的对象。如:用户在期望调整第一对象的显示状态时,可以在第一对象的显示位置处开始执行所述第一输入,触发电子设备调整所述第一对象的显示状态。
可以理解地是,本申请实施例中介绍的多种可选地实施方式,彼此可以相互结合实现,也可以单独实现,对此本申请实施例不作限定。
本申请实施例提供的拍照方法,执行主体可以为拍照装置,或者,该拍照装置中的用于执行拍照方法的控制模块。本申请实施例中以拍照装置执行拍照方法为例,说明本申请实施例提供的拍照装置。
参见图6,图6是本申请实施例提供的拍照装置的结构图。
如图6所示,拍照装置600包括:
第一接收模块601,用于接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;
第一显示模块602,用于响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;
第一处理模块603,用于按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;
其中,所述N个摄像头至少包括所述主摄像头,N为正整数。
可选地,在所述第一摄像头为所述主摄像头的情况下,所述N个摄像头包括所述主摄像头;
在所述第一摄像头为第一辅摄像头的情况下,所述N个摄像头包括所述主摄像头和所述第一辅摄像头,所述第一辅摄像头的对焦范围与所述主摄像头的对焦范围不同;
所述显示信息包括以下至少一项:显示效果、显示大小、显示位置。
可选地,所述拍照装置600还包括:
第二接收模块,用于接收用户的第二输入,所述第二输入用于选择所述第二预览图像的第二对象;
第二显示模块,用于响应于所述第二输入,显示第三预览图像,所述第三预览图像为第二摄像头采集的图像;
第三接收模块,用于接收用户的第三输入,所述第三输入用于调整所述第三预览图像中第二对象的显示状态;
第三显示模块,用于响应于所述第三输入,显示第四预览图像,所述第四预览图像通过处理主摄像头采集的图像得到,所述第四预览图像包括已改变显示状态的第一对象,以及已改变显示状态的第二对象;
第二处理模块,用于按照所述第四预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第二目标图像。
可选地,在所述第一摄像头为第一辅摄像头,所述第二摄像头为第二辅摄像头,所述第一辅摄像头、所述第二辅摄像头和所述主摄像头的对焦范围均不同的情况下,所述N个摄像头包括所述主摄像头、所述第一辅摄像头和所述第二辅摄像头;
所述第二处理模块,包括:
获取单元,用于获取第一图像、第二图像和第三图像,所述第一图像为所述主摄像头在第一时刻采集到的图像,所述第二图像为所述第一辅摄像头在所述第一时刻采集到的图像,所述第三图像为所述第二辅摄像头在所述第一时刻采集到的图像;
第一处理单元,用于对所述第一图像进行第一图像处理,得到第一中间图像,所述第一中间图像包括所述第一图像中除第一像素信息之外的所有像素信息,所述第一像素信息为所述第一图像中所述第一对象和所述第二对象对应的像素信息;
第二处理单元,用于对所述第二图像进行第二图像处理,得到第二中间图像,所述第二中间图像仅包括所述第二图像中的第二像素信息,所述第二像素信息为所述第二图像中所述第一对象对应的像素信息;
第三处理单元,用于对所述第三图像进行第三图像处理,得到第三中间图像,所述第三中间图像仅包括所述第二图像中的第三像素信息,所述第三像素信息为所述第三图像中所述第二对象对应的像素信息;
合成单元,用于按照所述第四预览图像中的显示信息,将所述第一中间图像、所述第二中间图像和所述第三中间图像合成,得到第二目标图像;
其中,所述第一时刻为早于拍照输入的输入时刻的时刻,或,所述第一时刻为晚于所述拍照输入的输入时刻的时刻。
可选地,所述拍照装置600还包括:
第四接收模块,用于接收用户对所述第一预览图像中第一对象的第四输入;
第四显示模块,用于响应于所述第四输入,在所述第一预览图像中显示与所述第一对象关联的第一显示状态调节控件;
所述第一接收模块601,具体用于:
接收用户对所述第一显示状态调节控件的第一输入;
其中,所述第一预览图像中不同的对象关联不同的显示状态调节控件。
可选地,所述第一接收模块601,具体用于:
在所述第一显示状态调节控件包括第一子控件和第二子控件的情况下,接收用户对所述第一子控件或所述第二子控件的第一输入,其中,所述第一子控件用于调整一个对象的显示大小,所述第二子控件用于调整一个对象的显示位置;
在所述第一显示状态调节控件包括第一显示模式和第二显示模式的情况下,接收用户对所述第一显示模式的第一显示状态调节控件或所述第二显示模式的第一显示状态调节控件的第一输入,其中,在所述第一显示模式下,所述第一显示状态调节控件用于调整一个对象的显示大小;在所述第二显示模式下,所述第一显示状态调节控件用于调整一个对象的显示位置。
可选地,在所述第一摄像头与所述主摄像头不是同一摄像头的情况下,所述接收用户的第一输入之前,所述拍照装置600还包括:
第五显示模块,用于显示第五预览图像,所述第五预览图像为所述主摄像头采集的图像;
第五接收模块,用于接收用户对所述第五预览图像的所述第一对象的第五输入;
获取模块,用于响应于所述第五输入,获取所述第一对象对应的第一物距;
确定模块,用于根据所述第一物距,确定与所述第一对象匹配的目标摄像头;
第六显示模块,用于在所述目标摄像头为所述第一摄像头的情况下,显示所述第一预览图像。
本申请实施例中的拍照装置可以是装置,也可以是终端中的部件、集合成电路、或芯片。该装置可以是电子设备。
本申请实施例中的拍照装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的拍照装置600能够实现图1方法实施例实现的各个过程,并达到相同的技术效果,为避免重复,这里不再赘述。
可选地,如图7所示,本申请实施例还提供一种电子设备700,包括处理器701,存储器702,存储在存储器702上并可在所述处理器701上运行的程序或指令,该程序或指令被处理器701执行时实现上述图1方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
图8为实现本申请实施例的一种终端的硬件结构示意图。
该电子设备800包括但不限于:射频单元801、网络模块802、音频输出单元803、输入单元804、传感器805、显示单元806、用户输入单元807、接口单元808、存储器809、以及处理器810等部件。
本领域技术人员可以理解,电子设备800还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器810逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图8中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
应理解地是,本申请实施例中,输入单元804可以包括图形处理器(GraphicsProcessing Unit,GPU)8041和麦克风8042,图形处理器8041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元806可包括显示面板8061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板8061。用户输入单元807包括触控面板8071以及其他输入设备8072。触控面板8071,也称为触摸屏。触控面板8071可包括触摸检测装置和触摸控制器两个部分。其他输入设备8072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器809可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器810可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解地是,上述调制解调处理器也可以不集成到处理器810中。
其中,处理器810,用于:
通过用户输入单元807接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;
响应于所述第一输入,通过显示单元806显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;
按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;
其中,所述N个摄像头至少包括所述主摄像头,N为正整数。
可选地,在所述第一摄像头为所述主摄像头的情况下,所述N个摄像头包括所述主摄像头;
在所述第一摄像头为第一辅摄像头的情况下,所述N个摄像头包括所述主摄像头和所述第一辅摄像头,所述第一辅摄像头的对焦范围与所述主摄像头的对焦范围不同;
所述显示信息包括以下至少一项:显示效果、显示大小、显示位置。
可选地,处理器810,还用于:
通过用户输入单元807接收用户的第二输入,所述第二输入用于选择所述第二预览图像的第二对象;
响应于所述第二输入,通过显示单元806显示第三预览图像,所述第三预览图像为第二摄像头采集的图像;
通过用户输入单元807接收用户的第三输入,所述第三输入用于调整所述第三预览图像中第二对象的显示状态;
响应于所述第三输入,通过显示单元806显示第四预览图像,所述第四预览图像通过处理主摄像头采集的图像得到,所述第四预览图像包括已改变显示状态的第一对象,以及已改变显示状态的第二对象;
按照所述第四预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第二目标图像。
可选地,在所述第一摄像头为第一辅摄像头,所述第二摄像头为第二辅摄像头,所述第一辅摄像头、所述第二辅摄像头和所述主摄像头的对焦范围均不同的情况下,所述N个摄像头包括所述主摄像头、所述第一辅摄像头和所述第二辅摄像头;
处理器810,还用于:
获取第一图像、第二图像和第三图像,所述第一图像为所述主摄像头在第一时刻采集到的图像,所述第二图像为所述第一辅摄像头在所述第一时刻采集到的图像,所述第三图像为所述第二辅摄像头在所述第一时刻采集到的图像;
对所述第一图像进行第一图像处理,得到第一中间图像,所述第一中间图像包括所述第一图像中除第一像素信息之外的所有像素信息,所述第一像素信息为所述第一图像中所述第一对象和所述第二对象对应的像素信息;
对所述第二图像进行第二图像处理,得到第二中间图像,所述第二中间图像仅包括所述第二图像中的第二像素信息,所述第二像素信息为所述第二图像中所述第一对象对应的像素信息;
对所述第三图像进行第三图像处理,得到第三中间图像,所述第三中间图像仅包括所述第二图像中的第三像素信息,所述第三像素信息为所述第三图像中所述第二对象对应的像素信息;
按照所述第四预览图像中的显示信息,将所述第一中间图像、所述第二中间图像和所述第三中间图像合成,得到第二目标图像;
其中,所述第一时刻为早于拍照输入的输入时刻的时刻,或,所述第一时刻为后于所述拍照输入的输入时刻的时刻。
可选地,处理器810,还用于:
通过用户输入单元807接收用户对所述第一预览图像中第一对象的第四输入;
响应于所述第四输入,通过显示单元806在所述第一预览图像中显示与所述第一对象关联的第一显示状态调节控件;
通过用户输入单元807接收用户对所述第一显示状态调节控件的第一输入;
其中,所述第一预览图像中不同的对象关联不同的显示状态调节控件。
可选地,处理器810,还用于:
在所述第一显示状态调节控件包括第一子控件和第二子控件的情况下,通过用户输入单元807接收用户对所述第一子控件或所述第二子控件的第一输入,其中,所述第一子控件用于调整一个对象的显示大小,所述第二子控件用于调整一个对象的显示位置;
在所述第一显示状态调节控件包括第一显示模式和第二显示模式的情况下,通过用户输入单元807接收用户对所述第一显示模式的第一显示状态调节控件或所述第二显示模式的第一显示状态调节控件的第一输入,其中,在所述第一显示模式下,所述第一显示状态调节控件用于调整一个对象的显示大小;在所述第二显示模式下,所述第一显示状态调节控件用于调整一个对象的显示位置。
可选地,在所述第一摄像头与所述主摄像头不是同一摄像头的情况下,处理器810,还用于:
通过显示单元806显示第五预览图像,所述第五预览图像为所述主摄像头采集的图像;
通过用户输入单元807接收用户对所述第五预览图像的所述第一对象的第五输入;
响应于所述第五输入,获取所述第一对象对应的第一物距;
根据所述第一物距,确定与所述第一对象匹配的目标摄像头;
在所述目标摄像头为所述第一摄像头的情况下,通过显示单元806显示所述第一预览图像。
需要说明的是,本实施例中上述电子设备800可实现图1方法实施例中的各个过程,及达到相同的有益效果,为避免重复,此处不再赘述。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述拍照方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述拍照方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (14)

1.一种拍照方法,其特征在于,所述方法包括:
接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;
响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;
按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;
其中,所述N个摄像头至少包括所述主摄像头,N为正整数;
在所述第一摄像头与所述主摄像头不是同一摄像头的情况下,所述接收用户的第一输入之前,所述方法还包括:
显示第五预览图像,所述第五预览图像为所述主摄像头采集的图像;
接收用户对所述第五预览图像的所述第一对象的第五输入;
响应于所述第五输入,获取所述第一对象对应的第一物距;
根据所述第一物距,确定与所述第一对象匹配的目标摄像头;
在所述目标摄像头为所述第一摄像头的情况下,显示所述第一预览图像。
2.根据权利要求1所述的方法,其特征在于,在所述第一摄像头为所述主摄像头的情况下,所述N个摄像头包括所述主摄像头;
在所述第一摄像头为第一辅摄像头的情况下,所述N个摄像头包括所述主摄像头和所述第一辅摄像头,所述第一辅摄像头的对焦范围与所述主摄像头的对焦范围不同;
所述显示信息包括以下至少一项:显示效果、显示大小、显示位置。
3.根据权利要求1所述的方法,其特征在于,所述响应于所述第一输入,显示第二预览图像之后,所述方法还包括:
接收用户的第二输入,所述第二输入用于选择所述第二预览图像的第二对象;
响应于所述第二输入,显示第三预览图像,所述第三预览图像为第二摄像头采集的图像;
接收用户的第三输入,所述第三输入用于调整所述第三预览图像中第二对象的显示状态;
响应于所述第三输入,显示第四预览图像,所述第四预览图像通过处理主摄像头采集的图像得到,所述第四预览图像包括已改变显示状态的第一对象,以及已改变显示状态的第二对象;
按照所述第四预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第二目标图像。
4.根据权利要求3所述的方法,其特征在于,在所述第一摄像头为第一辅摄像头,所述第二摄像头为第二辅摄像头,所述第一辅摄像头、所述第二辅摄像头和所述主摄像头的对焦范围均不同的情况下,所述N个摄像头包括所述主摄像头、所述第一辅摄像头和所述第二辅摄像头;
所述按照所述第四预览图像的显示信息,处理N个摄像头采集到的N个图像,得到目标图像,包括:
获取第一图像、第二图像和第三图像,所述第一图像为所述主摄像头在第一时刻采集到的图像,所述第二图像为所述第一辅摄像头在所述第一时刻采集到的图像,所述第三图像为所述第二辅摄像头在所述第一时刻采集到的图像;
对所述第一图像进行第一图像处理,得到第一中间图像,所述第一中间图像包括所述第一图像中除第一像素信息之外的所有像素信息,所述第一像素信息为所述第一图像中所述第一对象和所述第二对象对应的像素信息;
对所述第二图像进行第二图像处理,得到第二中间图像,所述第二中间图像仅包括所述第二图像中的第二像素信息,所述第二像素信息为所述第二图像中所述第一对象对应的像素信息;
对所述第三图像进行第三图像处理,得到第三中间图像,所述第三中间图像仅包括所述第二图像中的第三像素信息,所述第三像素信息为所述第三图像中所述第二对象对应的像素信息;
按照所述第四预览图像中的显示信息,将所述第一中间图像、所述第二中间图像和所述第三中间图像合成,得到第二目标图像;
其中,所述第一时刻为早于拍照输入的输入时刻的时刻,或,所述第一时刻为后于所述拍照输入的输入时刻的时刻。
5.根据权利要求1所述的方法,其特征在于,所述接收用户的第一输入之前,所述方法还包括:
接收用户对所述第一预览图像中第一对象的第四输入;
响应于所述第四输入,在所述第一预览图像中显示与所述第一对象关联的第一显示状态调节控件;
所述接收用户的第一输入,包括:
接收用户对所述第一显示状态调节控件的第一输入;
其中,所述第一预览图像中不同的对象关联不同的显示状态调节控件。
6.根据权利要求5所述的方法,其特征在于,所述接收用户对所述第一显示状态调节控件的第一输入,包括:
在所述第一显示状态调节控件包括第一子控件和第二子控件的情况下,接收用户对所述第一子控件或所述第二子控件的第一输入,其中,所述第一子控件用于调整一个对象的显示大小,所述第二子控件用于调整一个对象的显示位置;
在所述第一显示状态调节控件包括第一显示模式和第二显示模式的情况下,接收用户对所述第一显示模式的第一显示状态调节控件或所述第二显示模式的第一显示状态调节控件的第一输入,其中,在所述第一显示模式下,所述第一显示状态调节控件用于调整一个对象的显示大小;在所述第二显示模式下,所述第一显示状态调节控件用于调整一个对象的显示位置。
7.一种拍照装置,其特征在于,包括:
第一接收模块,用于接收用户的第一输入,所述第一输入用于调整第一预览图像中第一对象的显示状态,所述第一预览图像为第一摄像头采集的图像;
第一显示模块,用于响应于所述第一输入,显示第二预览图像,所述第二预览图像通过处理主摄像头采集的图像得到,所述第二预览图像包括已改变显示状态的第一对象;
第一处理模块,用于按照所述第二预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第一目标图像;
其中,所述N个摄像头至少包括所述主摄像头,N为正整数;
第五预览图像为所述主摄像头采集的图像;
第五接收模块,用于接收用户对所述第五预览图像的所述第一对象的第五输入;
获取模块,用于响应于所述第五输入,获取所述第一对象对应的第一物距;
确定模块,用于根据所述第一物距,确定与所述第一对象匹配的目标摄像头;
第六显示模块,用于在所述目标摄像头为所述第一摄像头的情况下,显示所述第一预览图像。
8.根据权利要求7所述的拍照装置,其特征在于,在所述第一摄像头为所述主摄像头的情况下,所述N个摄像头包括所述主摄像头;
在所述第一摄像头为第一辅摄像头的情况下,所述N个摄像头包括所述主摄像头和所述第一辅摄像头,所述第一辅摄像头的对焦范围与所述主摄像头的对焦范围不同;
所述显示信息包括以下至少一项:显示效果、显示大小、显示位置。
9.根据权利要求7所述的拍照装置,其特征在于,所述拍照装置还包括:
第二接收模块,用于接收用户的第二输入,所述第二输入用于选择所述第二预览图像的第二对象;
第二显示模块,用于响应于所述第二输入,显示第三预览图像,所述第三预览图像为第二摄像头采集的图像;
第三接收模块,用于接收用户的第三输入,所述第三输入用于调整所述第三预览图像中第二对象的显示状态;
第三显示模块,用于响应于所述第三输入,显示第四预览图像,所述第四预览图像通过处理主摄像头采集的图像得到,所述第四预览图像包括已改变显示状态的第一对象,以及已改变显示状态的第二对象;
第二处理模块,用于按照所述第四预览图像的显示信息,对N个摄像头采集到的N个图像进行图像处理,得到第二目标图像。
10.根据权利要求9所述的拍照装置,其特征在于,在所述第一摄像头为第一辅摄像头,所述第二摄像头为第二辅摄像头,所述第一辅摄像头、所述第二辅摄像头和所述主摄像头的对焦范围均不同的情况下,所述N个摄像头包括所述主摄像头、所述第一辅摄像头和所述第二辅摄像头;
所述第二处理模块,包括:
获取单元,用于获取第一图像、第二图像和第三图像,所述第一图像为所述主摄像头在第一时刻采集到的图像,所述第二图像为所述第一辅摄像头在所述第一时刻采集到的图像,所述第三图像为所述第二辅摄像头在所述第一时刻采集到的图像;
第一处理单元,用于对所述第一图像进行第一图像处理,得到第一中间图像,所述第一中间图像包括所述第一图像中除第一像素信息之外的所有像素信息,所述第一像素信息为所述第一图像中所述第一对象和所述第二对象对应的像素信息;
第二处理单元,用于对所述第二图像进行第二图像处理,得到第二中间图像,所述第二中间图像仅包括所述第二图像中的第二像素信息,所述第二像素信息为所述第二图像中所述第一对象对应的像素信息;
第三处理单元,用于对所述第三图像进行第三图像处理,得到第三中间图像,所述第三中间图像仅包括所述第二图像中的第三像素信息,所述第三像素信息为所述第三图像中所述第二对象对应的像素信息;
合成单元,用于按照所述第四预览图像中的显示信息,将所述第一中间图像、所述第二中间图像和所述第三中间图像合成,得到第二目标图像;
其中,所述第一时刻为早于拍照输入的输入时刻的时刻,或,所述第一时刻为晚于所述拍照输入的输入时刻的时刻。
11.根据权利要求7所述的拍照装置,其特征在于,所述拍照装置还包括:
第四接收模块,用于接收用户对所述第一预览图像中第一对象的第四输入;
第四显示模块,用于响应于所述第四输入,在所述第一预览图像中显示与所述第一对象关联的第一显示状态调节控件;
所述第一接收模块,具体用于:
接收用户对所述第一显示状态调节控件的第一输入;
其中,所述第一预览图像中不同的对象关联不同的显示状态调节控件。
12.根据权利要求11所述的拍照装置,其特征在于,所述第一接收模块,具体用于:
在所述第一显示状态调节控件包括第一子控件和第二子控件的情况下,接收用户对所述第一子控件或所述第二子控件的第一输入,其中,所述第一子控件用于调整一个对象的显示大小,所述第二子控件用于调整一个对象的显示位置;
在所述第一显示状态调节控件包括第一显示模式和第二显示模式的情况下,接收用户对所述第一显示模式的第一显示状态调节控件或所述第二显示模式的第一显示状态调节控件的第一输入,其中,在所述第一显示模式下,所述第一显示状态调节控件用于调整一个对象的显示大小;在所述第二显示模式下,所述第一显示状态调节控件用于调整一个对象的显示位置。
13.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至6中任一项所述的拍照方法的步骤。
14.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至6中任一项所述的拍照方法的步骤。
CN202110087293.1A 2021-01-22 2021-01-22 拍照方法、装置、电子设备及可读存储介质 Active CN112911059B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN202110087293.1A CN112911059B (zh) 2021-01-22 2021-01-22 拍照方法、装置、电子设备及可读存储介质
ES22742151T ES3041163T3 (en) 2021-01-22 2022-01-18 Photographing method and apparatus, electronic device and readable storage medium
EP22742151.8A EP4283975B1 (en) 2021-01-22 2022-01-18 Photographing method and apparatus, electronic device and readable storage medium
JP2023544407A JP7640718B2 (ja) 2021-01-22 2022-01-18 撮影方法、装置、電子機器及び可読記憶媒体
PCT/CN2022/072523 WO2022156672A1 (zh) 2021-01-22 2022-01-18 拍照方法、装置、电子设备及可读存储介质
US18/356,534 US12368949B2 (en) 2021-01-22 2023-07-21 Photographing method and apparatus, electronic device and readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110087293.1A CN112911059B (zh) 2021-01-22 2021-01-22 拍照方法、装置、电子设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN112911059A CN112911059A (zh) 2021-06-04
CN112911059B true CN112911059B (zh) 2022-06-07

Family

ID=76117494

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110087293.1A Active CN112911059B (zh) 2021-01-22 2021-01-22 拍照方法、装置、电子设备及可读存储介质

Country Status (6)

Country Link
US (1) US12368949B2 (zh)
EP (1) EP4283975B1 (zh)
JP (1) JP7640718B2 (zh)
CN (1) CN112911059B (zh)
ES (1) ES3041163T3 (zh)
WO (1) WO2022156672A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112911059B (zh) * 2021-01-22 2022-06-07 维沃移动通信(杭州)有限公司 拍照方法、装置、电子设备及可读存储介质
CN114157810B (zh) * 2021-12-21 2023-08-18 西安维沃软件技术有限公司 拍摄方法、装置、电子设备及介质

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9148618B2 (en) * 2009-05-29 2015-09-29 Apple Inc. Systems and methods for previewing newly captured image content and reviewing previously stored image content
EP2637397A1 (en) * 2012-03-09 2013-09-11 BlackBerry Limited Methods and devices for capturing images
JP2015126326A (ja) 2013-12-26 2015-07-06 株式会社東芝 電子機器及び画像処理方法
KR102339178B1 (ko) * 2015-08-27 2021-12-14 엘지전자 주식회사 이동단말기 및 그 제어방법
CN106909274B (zh) * 2017-02-27 2020-12-15 南京车链科技有限公司 一种图像显示方法和装置
US10630895B2 (en) * 2017-09-11 2020-04-21 Qualcomm Incorporated Assist for orienting a camera at different zoom levels
CN108471498B (zh) * 2018-03-16 2020-07-21 维沃移动通信有限公司 一种拍摄预览方法及终端
WO2020059925A1 (ko) * 2018-09-21 2020-03-26 엘지전자 주식회사 이동 단말기
KR102661185B1 (ko) * 2018-10-18 2024-04-29 삼성전자주식회사 전자 장치 및 그의 이미지 촬영 방법
US10917571B2 (en) * 2018-11-05 2021-02-09 Sony Corporation Image capture device control based on determination of blur value of objects in images
CN109743498B (zh) * 2018-12-24 2021-01-08 维沃移动通信有限公司 一种拍摄参数调整方法及终端设备
CN109729266A (zh) * 2018-12-25 2019-05-07 努比亚技术有限公司 一种图像拍摄方法、终端及计算机可读存储介质
CN110445978B (zh) 2019-06-24 2020-12-15 华为技术有限公司 一种拍摄方法及设备
CN111669506A (zh) * 2020-07-01 2020-09-15 维沃移动通信有限公司 拍照方法、装置及电子设备
CN111988522B (zh) 2020-07-28 2022-04-22 北京达佳互联信息技术有限公司 拍摄控制方法、装置、电子设备及存储介质
CN112911059B (zh) * 2021-01-22 2022-06-07 维沃移动通信(杭州)有限公司 拍照方法、装置、电子设备及可读存储介质

Also Published As

Publication number Publication date
EP4283975A4 (en) 2024-07-03
EP4283975B1 (en) 2025-08-13
CN112911059A (zh) 2021-06-04
US12368949B2 (en) 2025-07-22
EP4283975A1 (en) 2023-11-29
ES3041163T3 (en) 2025-11-07
JP2024504159A (ja) 2024-01-30
JP7640718B2 (ja) 2025-03-05
WO2022156672A1 (zh) 2022-07-28
US20230362477A1 (en) 2023-11-09

Similar Documents

Publication Publication Date Title
CN112492212B (zh) 拍照方法、装置、电子设备及存储介质
CN112887602B (zh) 摄像头切换方法、装置、存储介质及电子设备
CN113676655B (zh) 拍摄方法、装置、移动终端及芯片系统
CN113840070B (zh) 拍摄方法、装置、电子设备及介质
CN103780839B (zh) 一种拍照方法及拍照终端
CN113794829B (zh) 拍摄方法、装置及电子设备
CN112887617B (zh) 一种拍摄方法、装置和电子设备
CN112954193B (zh) 拍摄方法、装置、电子设备及介质
CN113875220A (zh) 拍摄防抖方法、装置、终端及存储介质
WO2022161260A1 (zh) 对焦方法、装置、电子设备及介质
CN112584043B (zh) 辅助对焦方法、装置、电子设备及存储介质
CN112738401B (zh) 变焦方法、装置及电子设备
CN112532881A (zh) 图像处理方法、装置和电子设备
CN110248091A (zh) 焦距调整方法及相关产品
US12368949B2 (en) Photographing method and apparatus, electronic device and readable storage medium
CN112954197B (zh) 拍摄方法、装置、电子设备及可读存储介质
CN112672058B (zh) 拍摄方法及装置
CN113329172A (zh) 拍摄方法、装置及电子设备
CN113873160B (zh) 图像处理方法、装置、电子设备和计算机存储介质
CN113747067B (zh) 拍照方法、装置、电子设备及存储介质
CN113286085B (zh) 显示控制方法、装置和电子设备
CN111461950B (zh) 图像处理方法及装置
CN114143455B (zh) 拍摄方法、装置及电子设备
CN117177052A (zh) 图像获取方法、电子设备及计算机可读存储介质
CN112653841B (zh) 拍摄方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant