CN101656817A - 图像处理设备、图像处理方法以及图像处理程序 - Google Patents

Abstract

本发明涉及图像处理设备、图像处理方法以及图像处理程序。不需要追加光学滤镜或其他部件就能够实现各种特殊摄影效果。其包括将摄影图像分离为主要被摄影体部分和其他部分的分离装置、将由所述分离装置分离的所述其他部分，分割成2个以上的领域的分割装置、对通过所述分割装置分割的各领域，进行具有方向性的虚化的虚化装置、对所述主要被摄影体和由所述虚化装置虚化的所述其他部分进行合成的合成装置。

Description

图像处理设备、图像处理方法以及图像处理程序

技术领域

本发明涉及图像处理设备、图像处理方法以及图像处理程序，尤其适用于获得各种特殊摄影效果时的图像处理设备、图像处理方法以及图像处理程序。

背景技术

在银盐照相机中，通过在摄影透镜前面装上各种滤镜(filter)，就能够进行各种各样的特殊摄影。例如，通过在滤镜的中心里开孔，在周围安装呈毛玻璃状的滤镜后，就能够获得仅对摄影画面的中心部进行鲜明的拍照，而对周围部分进行虚化的摄影效果，或者，通过在滤镜的中心部以外，安装在同一方向里赋予有行进(连续)的瑕疵的滤镜，就可以获得摄影画面的中心部为通常，而周围部分在同一方向里具有动感的摄影效果。

例如在人物肖像(portrait)摄影或花草等的微距摄影中，通过有意地虚化前景或背景来浮现突出主要被摄影体的照片显示是颇具效果的，采用银盐照相机来进行这种照片显示时，是在对主要被摄影体进行对焦，景深较浅的状态下摄影的。

另一方面，在数字式照相机(digital camera)，特别是小型化(compact)的数字式照相机中，因为摄像元件的曝光面比银盐照相机的曝光面要显著狭小，为了获得与银盐照相机相同的视角，数字式照相机的摄影透镜的焦点距离就要比银盐照相机的摄影透镜的焦点距离来得短。还有，因为大口径的摄影透镜的体积大、价格高，所以在小型化的数字式照相机中，多采用口径小的摄影透镜。由于焦点距离短、口径小时景深会变深而不能充分虚化，所以，在数字式照相机中存在着比银盐照相机的景深要深，不能获得银盐照相机那样的光圈效果的问题。

对于这样的问题，提案有对图像数据进行电子加工后来虚化背景的技术。例如，专利文献1里所提案的技术是，将图像数据分离为主要被摄影体和背景，并根据背景的虚化量，进一步强调背景的虚化程度，并获得自然虚化的照片显示。还有，专利文献2里所公开的技术是，在移动体之主要的被摄影体和除此之外的部分里，进行强调移动体之移动的图像处理。

【专利文献1】特开2007-124398号公报

【专利文献2】特开2006-339784号公报

发明内容

然而，专利文献1所记载的技术，对于光圈效果来说虽然可以获得一定的效果，但却不能得到有动感的摄影效果。另外，专利文献2所记载的技术，虽然可以获得用以强调移动体的移动方向，即所谓的追踪(追随)摄影的摄影效果，但是当被摄影体静止时就不能对应。由此，无论哪一种技术都局限在特定条件下的摄影效果里，因而不可能选择地实现各种特殊摄影效果。

这里，本发明的目的在于提供一种，不需要追加光学滤镜或其他部件，就能实现采用光学滤镜时得以实现的各种特殊摄影效果的图像处理设备、图像处理方法以及图像处理程序。

为了实现上述目的，本发明的提供以下技术方案。

1.一种图像处理设备，其特征在于包括：分离装置，其将摄影图像分离为主要被摄影体部分和其他部分；分割装置，其将由所述分离装置分离的所述其他部分，分割成2个以上的领域；虚化装置，其对通过所述分割装置分割的各领域，进行具有方向性的虚化；合成装置，其对所述主要被摄影体和由所述虚化装置虚化的所述其他部分进行合成。由此，来将摄影图像的主要被摄影体之外的其他部分分割成2个以上的领域，并进行具有方向性的虚化后显示出具有动感的特殊摄影效果。

2.根据技术方案1所述的图像处理设备，其特征在于：所述虚化装置对于通过所述分割装置分割的领域，进行具有在互为不同方向里的方向性的虚化。由此，进行具有在不同方向里的方向性的虚化处理后，来显示注意到被摄影体里的特殊摄影效果。

3.根据技术方案1或者2所述的图像处理设备，其特征在于：还包括选择装置，其从对应于虚化方法而设定的复数的虚化模式中选择1个虚化模式，所述虚化装置根据所述被选择的虚化模式，对于所述被分割的各领域进行具有方向性的虚化。由此，根据所选择的模式来显示各种特殊摄影效果。

4.根据技术方案1至3中任何一项所述的图像处理设备，其特征在于：所述虚化装置对于由所述分割装置分割的领域，进行具有强度不同的方向性的虚化。由此，在同一方向或不同方向里进行方向性强度不同的虚化处理后，来显示更具有动感的特殊摄影效果。

5.根据技术方案1至4中任何一项所述的图像处理设备，其特征在于：所述虚化装置在由所述分割装置分割的领域中的1个或2个以上的领域中，进行具有方向性的虚化。由此，通过在一部分的领域里进行没有方向性的虚化，来显示这样一种特殊摄影效果，即强调进行了具有方向性虚化的领域的虚化处理。

6.根据技术方案1至5中任何一项所述的图像处理设备，其特征在于：所述虚化装置在由所述分割装置分割的领域中的1个或2个以上的领域中，不进行虚化。由此，通过在一部分的领域里进行没有方向性的虚化，来显示这样一种特殊摄影效果，即强调进行了具有方向性虚化的领域的虚化处理。

7.根据技术方案1至6中任何一项所述的图像处理设备，其特征在于：所述分离装置多处检测到所述主要被摄影体部分，并对该多处的主要被摄影体部分，分别分离为所述主要被摄影体部分和所述其他部分。由此，即使主要被摄影体为复数个，对于对应于各主要被摄影体的其他部分，来进行具有方向性的虚化处理，以在主要被摄影体里分别显示特殊摄影效果。

8.根据技术方案1至7中任何一项所述的图像处理设备，其特征在于：所述方向性是由对应于所述摄影图像的各像素位置之事先存储的表格来决定的。由此，以像素单位来进行具有各种方向性的虚化处理，显示具有复杂的动感的特殊摄影效果。

9.一种图像处理方法，其特征在于包括：分离处理，其将摄影图像分离为主要被摄影体部分和其他部分；分割处理，其将由所述分离装置分离的所述其他部分，分割成2个以上的领域；虚化处理，其对通过所述分割装置分割的各领域，进行具有方向性的虚化；合成处理，其对所述主要被摄影体和由所述虚化装置虚化的所述其他部分进行合成。由此，来将摄影图像的主要被摄影体之外的其他部分分割成2个以上的领域，并进行具有方向性的虚化后显示出具有动感的特殊摄影效果。

10.一种由计算机执行的图像处理程序，其特征在于包括：分离处理，其将摄影图像分离为主要被摄影体部分和其他部分；分割处理，其将由所述分离装置分离的所述其他部分，分割成2个以上的领域；虚化处理，其对通过所述分割装置分割的各领域，进行具有方向性的虚化；合成处理，其对所述主要被摄影体和由所述虚化装置虚化的所述其他部分进行合成。由此，来将摄影图像的主要被摄影体之外的其他部分分割成2个以上的领域，并进行具有方向性的虚化后显示出具有动感的特殊摄影效果。

附图说明

参照下面对附图详细的说明可以更快·更好地理解对公开技术及其特征的完整描述。其中，

【图1】本发明的图像处理设备的功能模块图以及连接机器的例示图。

【图2】数字式照相机外观的例示图，其中，(A)是上面图，(B)是背面图，(C)是正面图。

【图3】显示图像处理设备所执行的图像处理动作的流程图例。

【图4】用于说明图像处理的图，其中，(A)是AF评价值区域以及AF区域，(B)是主要被摄影体区域块，(C)是分离处理、虚化处理以及合成处理时的说明图。

【图5】用于AF评价值的计算方法的说明图。

【图6】背景图像虚化处理的详细流程示意图。

【图7】用于具有方向性的虚化处理的说明图。

【图8】朝向主要被摄影体镜头放大时的特殊摄影模式的说明图。

【图9】主要被摄影体为静止时的追随摄影的特殊摄影模式的说明图。

【图10】仅主要被摄影体的右侧向右方运动时的特殊摄影模式的说明图。

【图11】朝向复数的主要被摄影体而分别带有镜头放大效果时的特殊摄影模式的说明图。

【图12】主要被摄影体在旋涡状的中心里时的特殊摄影模式的说明图。

【图13】镜头放大效果+越向周边部方向性的移动感越强的特殊摄影模式的说明图。

具体实施方式

以下，根据图1-图13所示的实施方式来详细说明本发明的构成。

1.图像处理设备的构成

图像处理设备的功能模块图以及连接在图像处理设备里的连接机器的一个例子如图1所示。在图像处理设备里，例如可以适用为摄影设备。在本实施方式中，作为摄影设备的一个例子，以数字静态照相机设备为例来说明。

数字静态照相机(digital still camera)设备1(以下也简称为数字式照相机)，如下所述，其包括系统控制部2、摄影部3、图像处理部4、显示控制部5、LCD6、记录媒介接口7、记录媒介8、硬键(hardkey)接口部9、通信接口部10等。

系统控制部2包括CPU、NAND闪存、SDRAM、时钟(timer)等，执行数字式照相机1全体的控制。另外，摄影部3包括光学系统部件(透镜以及透镜驱动马达等)、CCD、CCD驱动回路、A/D变换器等，来进行摄影。

图像处理部4包括用以进行图像的压缩伸长而设置的图像处理用DSP(数字信号处理器)、RAM等，在对摄影部3所获得的图像信号进行各种图像处理的同时，对摄影部3的CCD驱动时机、透镜驱动马达进行控制后，进行焦距或缩放位置的切换、聚焦、曝光调整等。

另外，在图像处理部4里包括有进行分离处理(后述的主要被摄影体图像抽出处理(S8))的分离装置40、进行分割处理(后述的背景图像分离处理(S9))的分割装置41、进行虚化处理(后述的背景图像虚化处理(S10))的虚化装置42以及进行合成处理(S11)的合成装置43。

显示控制部5包括生成用于用户界面(User Interface)的各种图形图像并显示到LCD6里而设置的D/A变换器、屏幕显示控制器等，对图像处理部4所处理的图像信号进行用于显示到LCD6里的信号处理。

LCD6是用于显示图像以及用于用户界面图形等的显示部(屏幕)。

记录媒介接口部7包括存储卡控制器等，是与记录媒介8之间的接口。

记录媒介8包括闪存等，是可以装卸于数字式照相机1的媒介，该数字式照相机1被设置为用以存储被压缩的图像信号或关于图像的各种情报。

硬键接口部9包括如：电源开关33、用于快门释放的释放按钮12、用于设定摄影模式的摄影模式拨盘13、用于各种设定的菜单按钮26等的按钮或拨盘(参照图2)，或者是用于进行去主CPU的主电源控制而设置的副CPU。

通信接口部10是用于连接USB等进行数据通信而设置的通信控制器。

还有，个人计算机(以下也称为PC)11是与数字式照相机1和USB等连接的连接机器，其或对数字式照相机1传送来的图像数据进行再现，或对数字式照相机1进行各种设定。

接着，以图2来例示数字式照相机1的一个外观图例。这里，图2(A)是上面图，(B)是正面图，(C)是背面图。

在数字式照相机1的上面，配置有快门释放按钮12、摄影模式拨盘13、以及显示可能摄影张数的副LCD14。

在数字式照相机1的正面，配置有存储卡插口15、闪光灯发光部16、光学取景器17、测距组件18、遥控受光部19、镜筒组件20等。

另外，在数字式照相机1的背面，配置有AFLED21、闪光灯LED22、缩放按键(T)23、缩放按键(W)24、自拍/删除按键25、菜单按钮26、上/闪光灯按键27、右按键28、显示按键29、下/闪光灯按键30、左/图像确认按键31、确认(OK)按键32、电源按键33以及LCD屏幕6等。

2.图像处理设备的基本动作

下面，对数字式照相机1的基本动作进行说明。

首先，对启动动作进行简单的说明。当用户开启数字式照相机1的电源按键33后，硬键接口部9开启向系统控制部2的主CPU的电源供给。

主CPU首先从NAND闪存的引导(boot)部来开始访问(执行程序)，并通过引导程序将程序数据传送到SDRAM去。当完成向SDRAM的传送后，就将程序的执行指针(程序计数器)移到传送后的SDRAM上的程序里，之后就通过SDRAM上的程序来开始启动处理。

在启动处理中，操作系统的初始化、透镜镜筒的转出处理、记录媒介的初始化处理等的处理得到执行。例如，镜筒的转出处理是介由图像处理部4，通过在每一个规定的间隔里将脉冲信号赋予到摄影部3的透镜驱动马达里来进行的。还有，记录媒介的初始化处理是在介由记录媒介接口部7，将电源和时钟供给给记录媒介8之后，向记录媒介8发布初始化命令。该初始化处理在记录媒介8内被执行，系统控制部2为了检测其是否结束，而以规定的间隔来检查记录媒介8的状态。

接下来，对摄影动作进行简单说明。用户在摄影时，对各种按键或拨盘等进行操作，并决定例如通常摄影模式、特殊摄影模式(虚化模式)等的摄影模式。用户所进行的操作内容通过硬键接口部9由系统控制部2来判别。

系统控制部2根据操作内容将导向图形(guidance graphic)生成到显示控制部5里，并促使用户进行下一个操作。还有，系统控制部2在摄影模式确定以后，就将对应于该摄影模式的处理参数设定到图像处理部4里。即，系统控制部2起到的是选择装置的功能，用户从特殊摄影模式中选择任意的模式之后，对应于所选择的特殊摄影模式，将执行该特殊摄影模式的处理参数等设定到图像处理部4里。

另外，用户操作缩放按键23、24，并决定视角(摄影范围)。这里，用户的操作内容通过硬键接口部9由系统控制部2来判别。系统控制部2根据操作来控制摄影部3，并驱动透镜。摄影部3按照来自于图像处理部4的控制，在实际摄影之前，先拍摄被摄影体图像，并开始用于显示对应于显示装置分辨率而加工的预览图像(monitoring image)的摄影动作。

拍摄的数据被连续送到图像处理部4里，在图像处理部4里进行色空间变换、γ补正、白平衡调整等处理之后，将图像数据送到显示控制部5去。在显示控制部5中，将图像数据作信号处理后显示到LCD6里，并向用户提示摄影状态。另外，当释放按钮被按下时，该操作和模式设定同样地，通过硬件接口部9由系统控制部2来判别。

摄影部3按照来自于图像处理部4的控制，在进行对焦之后，将摄取的图像送去图像处理部4。受到该图像的图像处理部4对应于摄影模式来进行图像处理、压缩处理。还有，系统控制部2读取被压缩的图像数据，并加入报头情报，然后通过记录媒介接口部7，写入到记录媒介8里。

3.图像处理设备的图像处理动作

接下来，通过图3所示的流程图来详细说明本发明的图像处理设备所执行的具有特征的图像处理动作、本发明的图像处理方法以及本发明的图像处理程序所执行的处理。

以下所述图像处理是指对应于由用户设定的各种特殊摄影模式，来改变主要被摄影体以外的区域(背景区域)的虚化方法的处理。因此，通过用户对摄影模式拨盘13或菜单按钮26的操作，是不同于通常摄影模式的特殊摄影模式被设定时所执行的。以下，作为特殊摄影模式，以具有朝向主要被摄影体放大(zoom in)时的效果的“放大过滤片模式(zoom in filter mode)”被设定时的情况为例来说明。另外，图3所示的流程图显示的是预览动作中的处理流程。

系统控制部2在预览动作开始之后，为了实现所设定的“放大过滤片模式”，首先对各种处理参数进行初始化(S1)。这里，处理参数的初始化也可以在处理结束时执行。

接着，系统控制部2对图像处理部4以及摄影部3进行控制，并进行CCDAF扫描(S2)。具体来说是，从无穷远至近端，在慢慢移动对焦透镜的同时，在复数个位置处拍摄被摄影体，并从拍摄到的复数的图像数据中，将可以获得最高清晰度(锐度sharpness)的对焦透镜的位置作为聚焦位置。

接着，系统控制部2执行距离判定处理(S3)来判定各图像的每一个小区域的距离或与距离相关的参数。对于距离判定处理(S3)说明如下。

图4(A)-图4(D)所示是图像处理的详细说明图。图4(A)中，100表示屏幕图像的视角，101表示1个AF评价值区域，102表示AF区域。

AF评价值区域101是将视角100内均等分割之后的小领域(区域)。在距离判定处理(S3)中，通过CCDAF来计算每一个区域的AF评价值。具体是，系统控制部2根据规定的计算方法来分析每一个区域里，由CCDAF的扫描所获得的每一个透镜位置的AF评价值，并判定相当于AF评价值峰值位置的透镜的驱动位置，更进一步地，对于每一个区域，从现在的缩放位置来将透镜的驱动位置变换成距离情报。

这里所说的AF评价值是指区域内图像的对比度的累计值，具体是，对于区域内的各像素来进行水平方向的HPF(高通)计算，将获得的结果进行加算后得到。另外，在HPF系数里，可以使用如ki＝{-1，-2，6，-2，-1}等值。例如，k0是在目标像素的水平方向-2坐标的像素里所乘的系数，k1是在目标像素的水平方向-1坐标的像素里所乘的系数，k3是在目标像素里所乘的系数，k4是在目标像素的水平方向+1坐标的像素里所乘的系数，k5是在目标像素的水平方向+2坐标的像素里所乘的系数。

将该AF评价值的计算，以图5所示从AF评价值区域101内抽出的5个像素为例来做具体说明。

在图5中，1001表示目标像素的水平方向-2坐标的像素，1002表示目标像素的水平方向-1坐标的像素，1003表示目标像素，1004表示目标像素的水平方向+1坐标的像素，1001表示目标像素的水平方向+2坐标的像素。此时，AF评价值由下式(1)来求取。

(AF评价值)＝k0×(1001的像素值)+k1×(1002的像素值)+k2×(1003的像素值)+k3×(1004的像素值)+k4×(1005的像素值)···(1)

更进一步地，为了从求得的AF评价值来获得距离情报(从透镜到被摄影体的距离)，根据高斯的成像方程式1/a+1/b＝1/f，由下式(2)来求得。

a＝bf/(b-f)···(2)

这里，a：是从透镜到被摄影体的距离

b：是从透镜到摄影元件间的距离

f：是透镜的焦距

另外，(2)式中的透镜焦距f由摄影时的缩放位置来唯一地得到。从透镜到摄影元件间的距离b由AF评价值的峰值所得到的对焦透镜的驱动位置来唯一地得到。

根据以上所述，就能够获得视角100内所有AF评价值区域101的各个距离情报。还有，当不能获得所有区域的距离情报时，可以进行例如根据求得的数据来对周边的区域进行插值法处理，或通过变更取得AF评价值时的滤镜，并重新扫描等来获得。

另外，在图4(A)中，AF区域102被设定在以AF对焦后的区域里。系统控制部2从画面中央部分的AF评价值区域101之中，将距离最近的区域作为AF区域102来进行AF区域判定处理(S4)的判定。

更进一步地，如图4(B)所示，将被判断为与AF区域102距离大致相等的领域作为主要被摄影体区域块103，来进行主要被摄影体区域块判定处理(S5)的判定。亦即，AF区域102包含在主要被摄影体区域块103里。

接着，系统控制部2计算与主要被摄影体区域块103相当的位置的图像数据的平均亮度后，进行平均亮度计算处理(S6)。平均亮度计算处理(S6)将在后面详细说明。

接着，如图4(C)所示，系统控制部2根据获得的主要被摄影体区域块103的情报以及所摄影的图像，来对主要被摄影体区域104进行主要被摄影体区域判定处理(S7)。

主要被摄影体区域判定处理(S7)通过轮廓抽出的图像处理方法，来判定包括主要被摄影体区域块103的任意形状的区域。另外，作为轮廓抽出的图像处理方法可以采用公知的手法，对此没有特别的限制。

还有，将此时抽出的主要被摄影体区域104的上下方向(Y轴方向)和左右方向(X轴方向)之中心的像素，设定为主要被摄影体区域104的中心像素后，记录下该像素的坐标。作为像素坐标的设定方法，可以采用以最左下方的像素为(X，Y)＝(1，1)，然后向右(X方向)、向上(Y方向)进行增加。

接着，图像处理部4根据主要被摄影体区域104的情报，来依次执行主要被摄影体图像抽出处理(S8)之后的处理。以下参照图4(D)来详细说明。这里，105表示摄影图像，106表示主要被摄影体，107表示抽出的主要被摄影体，108表示背景图像，109表示虚化的背景图像，110表示合成图像。

在主要被摄影体图像抽出处理(S8)中，通过沿着主要被摄影体区域104来分离图像，而进行主要被摄影体106的抽出。

在图4(D)中，以主要被摄影体106位于中央的情况来例示。通过主要被摄影体的抽出处理(S8)，摄影图像105被分离成了主要被摄影体107和，主要被摄影体以外的图像领域(背景图像)108。

更进一步地是，根据与主要被摄影体106的位置关系，来进行背景图像分离处理(S9)以将主要被摄影体以外的图像领域(背景图像)再分割成复数的领域。这里，因为图像数据是像素单位的集合体，分割成领域指的是以分割后的集合体来进行对各像素的处理。

在本实施方式中，是以摄影画面为中心，如图8所示进行4分割。对于被分割后的背景图像108，再进行背景图像虚化处理(S10)。

例如，在“放大滤镜模式”(参照图8)中，由于是对主要被摄影体106进行放射状的虚化处理，通过在右上方领域里进行向左下方的具有方向性的虚化处理、在右下方领域里进行向左上方、在左上方领域里进行向右下方、在左下方领域里进行向右上方的具有方向性的虚化处理，来生成主要被摄影体以外的虚化背景图像109。

这里，背景图像虚化处理(S10)以具有方向性的虚化处理为特征。首先，对于具有方向性的虚化处理，参照图7进行详细说明。

图7所示是在右下方领域里进行向左上方的具有方向性的虚化处理，和在右上方领域里进行向左下方的具有方向性的虚化处理的例示。这里，图7的各个单元表示1个像素，全画面是32×32像素。

具有方向性的虚化处理是指例如对于领域内的各像素，通过重复地将要显示方向性的方向之相反方向的复数个像素数据相加平均后，与原来的像素进行置换的操作，来进行虚化处理。

即，为了在右下方领域里显示向左斜上方的动态，就可以进行例如下式(3)的计算。

(A像素)＝(A+B+C)/3

(B像素)＝(B+C+D)/3

(C像素)＝(C+D+F)/3···(3)

这里的加法计算平均的像素数可以是任意的设定，没有特别的限制。另外，也可以对剩余的像素进行相同的计算。

更进一步地，为了显示动态方向性的强度，即图像的速度感，可以如下式(4)所示地增大相加的数。对于其他像素也可以进行同样的操作。

(A像素)＝(A+B+C+D)/4···(4)

另外，对于端边像素，例如使用斜左上部的任意一个像素数据或周边的数据，如下式(5)所示来代用。

(E像素)、(F像素)＝(D+E+F)/3

(E像素)＝(E像素的左斜下部的像素+F像素的左斜下部的像素+F像素的2个以下的像素)/3···(5)

同样地，为了在右上领域里显示向左斜下方的动态，可以如下式(6)来计算。

(L像素)＝(L+K+J)/3

(K像素)＝(K+J+I)/3···(6)

对于其他的像素也可以进行同样的处理。

另外，为了显示动态的方向性的强度，即图像的速度感，只要如上式(4)那样增大相加数即可。更进一步地，对于端边像素，只要使用斜右下部的任意一个像素数据或周边的数据来代用即可。还有，G像素不是端边像素，可以如下式(7)来求取，也可以如上式(5)所示地，以周边像素来代用。

(G像素)＝(G+G的右斜下部(虚化之前)+更右斜下部(虚化之前))/3···(7)

还有，在上述例子中，虽然对右上领域以及右下领域作了说明，对于左上领域以及左下领域，进行同样的计算即可。即，通过使左上领域带有向右下方的方向性，使左下领域带有向右上方的方向性，就能够获得朝向主要被摄影体进行放大的那种特殊摄影效果。

另外，在使右斜上下方向、横向方向等其他方向里具有方向性的虚化处理的动态时，也可以同样地采用上述处理即可，另外，对以像素单位来改变方向的情况同样地也可以采用上述处理。

另外，例如为了使变化更为细小，也可以将相加计算的像素数据变换成中间的数据来进行。还有，中间的数据可以例如将邻接的数据预先插值后作成。另外，例如，也可以从接近主要被摄影体的部分开始，在向周边部行进的过程里改变虚化的强度，进行更能强调动感的处理。

还有，在上述例子中，虽然是以32×32像素的画面为例来说明的，即使是像素数多的实际图像，也能够进行同样的处理。这里，在对像素数多的图像数据执行上述处理的时候，可能因计算量膨大而需要长时间的处理。因此，这种情况下，为了减少计算量而进行高速的虚化处理，就选用通过对图像数据进行缩小处理后来减少像素数，并对该缩小图像进行上述处理之后扩大，并与主要被摄影体合成的方法来减轻计算量。然而，是否进行缩小处理，或进行何种程度的缩小处理，只要根据硬件的性能或处理的待机许可时间，或者对主要被摄影体以外部分的画质精度要求来做适当的决定即可，并没有特别的限制。

另外，在上述例子中，虽然是将图像的分割单位取为4分割，但是对于是否要分割，分割单位为何种程度，是可以任意设定的，并没有特别的限制。例如，像32×32分割那样进行细小的分割，并在各领域里对方向进行微妙变化的虚化后，就能够获得更有效果的合成结果。还有，分割单位也可以在考虑了硬件性能、获得效果和处理时间等之后，作适当判断即可。

更进一步地，还可以采用其他各种虚化处理。例如，也可以是事先制作用于显示规定方向性的像素数据，并以表格形式(参数表)来保存，然后，根据主要被摄影体的中心部和要处理的像素之间的坐标差来参照表格，通过将读取的具有方向性的数据与要处理的像素进行置换，或加入一定程度的摄影数据后进行置换来进行虚化处理的方法。另外，也可以是采用通过仅保存计算用的参数，来进行处理的像素和未图示的计算，以进行具有方向性的虚化处理的构成。

图6所示是图3的背景图像虚化处理(S10)的详细处理流程图。在以下的说明中，将上述所进行的分割图像后对不同领域分别进行虚化处理，称为“进行不同领域判定的虚化处理”，另外，将参照保存的表格来对不同的像素进行虚化处理，称为“进行表格参照的虚化处理”。

首先，判断(S10-1)是根据摄影前所决定的特殊摄影模式来对虚化处理进行不同领域的处理(进行不同领域判定的虚化处理)的模式，还是对每一个像素进行处理(进行表格参照的虚化处理)的模式。

在进行不同领域判定的虚化处理中，读出最初的处理像素(S10-8)，并在对应于该像素所属的领域的处理得到执行(S10-9)之后，转移到下一个像素处理去(S10-11)，全部的处理完成之后(S10-10：是)，就结束该处理。

另一方面，在进行表格参照的虚化处理中，读出最初的处理像素(S10-2)，并求取主要被摄影体分离时所记录的主要被摄影体的中心像素(参照S7)和要处理的像素之间的坐标差(S10-3)，从该坐标差来参照表格后决定处理式(S10-4)，分别计算(S10-5)，处理结束后就转移到下一个像素里(S10-7)，全像素处理完成之后(S10-6：是)，就结束该处理。另外，表格参照的内容例如既可以是计算用的参数，也可以是置换的虚化之后的像素数据，也可以是与原来的像素合成之后显示方向性的半处理像素数据。

图8-图13是通过本发明的图像处理设备可以实现的几个特殊摄影模式的例示。这里，图8如上所述，是朝向主要被摄影体放大时的特殊摄影模式(放大滤镜模式(zoom in filter mode)，进行不同领域判定的虚化处理)的例示。

图9所示是主要被摄影体为静止，而看上去像追随摄影的特殊摄影模式(进行不同领域判定的虚化处理)的实施例。在本模式中，对于主要被摄影体以外的所有复数的领域(背景图像)108，进行使其具有同一方向性的虚化处理。在图9中，对于4分割后除主要被摄影体以外的所有领域108，进行使其具有从右向左的方向性的虚化处理，对于属于所有领域中的一个一个的像素单位，都以同样的步骤来进行具有方向性的虚化处理。另外，本模式并不一定需要分割背景图像108。

图10所示是仅主要被摄影体的右侧为在右方向里看上去像追随摄影那样的特殊摄影模式的实施例。在本模式中，对于主要被摄影体以外的复数的领域108的一部分，进行具有同一的方向性的虚化处理。在图10中，4分割之后的主要被摄影体以外的领域108之中，仅对属于右侧的2个领域里的像素，进行具有从右向左的方向性的虚化处理，在属于左侧的2个领域里的像素里，或进行单纯的虚化处理，或进行边缘强调处理，或什么都不做。

如此，本发明无论主要被摄影体106是否移动，都能够显示出动感来，而且其方向性也是自由的。即，能够获得图9所示的，主要被摄影体106如同向左移动的特殊摄影效果，或如图10所示的，在摄影画面的左右半部分里，具有不同效果的特殊摄影效果。

图11所示是朝向复数的主要被摄影体，使其分别具有放大(zoom in)效果的特殊摄影模式(进行不同领域判定的虚化处理)的实施例。图11所示是主要被摄影体106在画面中心部里1个(例如是近距离的人物)，和左右部分里2个(例如是远距离的人物或植物等)，共计有3个时的情况。

在该模式中，通过将3个主要被摄影体分别进行分离，并对其周围分别进行4分割，就能够获得安装光学滤镜时不能进行的特殊摄影效果。在实施例中，最初是对中央的主要被摄影体106a进行分离，并对中央的主要被摄影体106a以外的部分进行4分割。再以各主要被摄影体106b、106c为中心，对左右深处各主要被摄影体106b、106c的周边部之，充分包含各主要被摄影体106b、106c的范围进行4分割，构成共计12分割。

之后，如图11所示地，对属于各领域的像素，进行分别朝向3个主要被摄影体106而具有方向性的虚化处理，然后将分割了的3个主要被摄影体图像107进行合成。通过该方法，就能够获得3个主要被摄影体106被清晰地描写，而其各自的周围具有朝向主要被摄影体106呈放射状流动的摄影效果。

根据本模式，无论被摄影体位于何处都能够获得特殊摄影效果，能够使对应于被摄影体位置的位置自动地具有方向性后虚化，以及可以变化方向等，由此就能够实现安装光学滤镜时不能实现的各种特殊摄影效果。

图12所示是主要被摄影体处于旋涡状的中心那样的特殊摄影模式(进行表格参照的虚化处理)的实施例。如图12所示，通过根据与主要被摄影体106之间的位置关系来进行对方向性作微细变化的旋涡状的虚化效果，就能够获得将注意力有效集中到旋涡中心的主要被摄影体106里的摄影结果。

在本模式中，有必要对主要被摄影体以外的领域108进行更为详细的分割。在图12的实施例中，显示了32×32的分割。因为进行的是根据与主要被摄影体106之间的位置关系来微妙地改变方向性的处理，所以计算量会增加许多。因此，通过事先准备简单对应的方向决定表格(根据与中心像素之间的坐标差<X，Y方向上的距离而微妙地变化虚化方向的像素数据>)，根据要处理的像素和实现存储的主要被摄影体106的特定像素(中心像素)之间的坐标差，通过调用变化方向的表格数据，就能够减少计算量。

另外，在进行该摄影时，事先决定将主要被摄影体106放在中心部里为摄影条件，并将遍及画面全体的具有旋涡状的方向性的像素数据都准备之后，在主要被摄影体106被分离的阶段里，将除此以外的领域108的像素都置换成具有旋涡状的方向性的像素数据，或将主要被摄影体以外的领域108的像素和具有旋涡状的方向性的像素数据相加后置换，也可以减少计算量。

图13所示是放大效果(zoom in)+越向周边部方向性的动感越强的特殊摄影模式(进行表格参照的虚化处理)的实施例。图13所示的实施例是在进行与图18所示的实施例同样的处理的时候，根据与主要被摄影体106之间的距离来变更虚化量大小的实施例。

在本模式中，随着距离上离开主要被摄影体106，为了增大上述那种具有方向性的虚化效果，而进行了在取相加平均时逐渐增加所使用的像素数的处理。另外，根据上述的主要被摄影体106的特定像素(中心像素)和进行虚化处理像素之间的坐标差来参照表格，通过读取虚化处理时相加后取平均的像素数的构成，就能够减少计算量。

根据本模式，因为是随着离开主要被摄影体106，保持其方向性不变，来进行增大(增大速度感)虚化处理的，所以就比图8所示的例子更能提高特殊摄影效果。

回到图3的流程图的说明里。图像处理部4将通过上述背景图像虚化处理(S10)而生成的主要被摄影体以外的虚化了的背景图像109，和主要被摄影体领域107合成后，进行获得合成图像110的合成处理(S11)。

所生成的合成图像110介由显示控制部5后被显示到LCD6里(S12)。以上，一个画面的预览图像的处理就完成了。

更进一步地，是进行平均亮度计算处理(S13)。平均亮度计算处理(S6以及S13)是摄影者对是否改变了成帧(framing)而作的预览(monitoring)处理，在检测主要被摄影体部分时先取得平均亮度(S6)，合成处理结束后再一次取得(S13)，如果变化在规定程度以上，就认为成帧变化了，而从CCDAF扫描(S2)开始再次重做，如果没有变化时，就在继续预览的过程中，继续进行主要被摄影体区域判定处理(S7)至合成处理(S11)为止的处理。

至预览结束为止重复地执行S7至S14的处理(S15)，当预览结束时就结束图像处理。

如上所述，根据本发明，以简易的构成，不需要追加其他部件，就能够进行像一边交换各种光学滤镜一边摄影那样的，具有动感，或集中注意到主要被摄影体里的特殊摄影的效果。另外，如同安装了光学滤镜那样，不需要将主要被摄影体放到摄影画面的中心里，摄影时的成帧自由度就高。还有，也能够获得主要被摄影体为复数时等的，通过光学滤镜不能实现的摄影效果。另外，在附加具有方向性的虚化效果时，既不需要被摄影体是移动的，也不需要移动摄影设备。

还有，上述的实施方式是本发明的最佳实施例，但并不限定于此，只要在不脱离本发明的要旨的范围内，就可以进行各种变形实施。

例如，在上述实施方式中，作为图像处理设备虽然是以摄影设备为例来说明的，但作为图像处理设备，也可以适用其他各种设备。例如也可以在个人计算机11里设置上述构成(图像处理部4等)，使个人计算机11起到图像处理设备的功能。

另外，在上述实施方式中，对于背景图像虽然对获得特殊摄影效果的图像处理方法作了说明，根据需要也可以对摄影图像全体或主要被摄影体部分，进行上述各种处理后来获得特殊摄影效果。

从以上所述还可以有许多的改良和变化，在权利要求的范围内，该专利说明书的公开内容不局限于上述的说明。

本专利申请的基础和优先权要求是2008年3月18日、在日本专利局申请的日本专利申请JP2008-069664，其全部内容在此引作结合。

Claims (10)

1.一种图像处理设备，其特征在于包括：

分离装置，其将摄影图像分离为主要被摄影体部分和其他部分；

分割装置，其将由所述分离装置分离的所述其他部分，分割成2个以上的领域；

虚化装置，其对通过所述分割装置分割的各领域，进行具有方向性的虚化；

合成装置，其对所述主要被摄影体和由所述虚化装置虚化的所述其他部分进行合成。

2.根据权利要求1所述的图像处理设备，其特征在于：

所述虚化装置对于通过所述分割装置分割的领域，进行具有在互为不同方向里的方向性的虚化。

3.根据权利要求1或者2所述的图像处理设备，其特征在于：

还包括选择装置，其从对应于虚化方法而设定的复数的虚化模式中选择1个虚化模式，

所述虚化装置根据所述被选择的虚化模式，对于所述被分割的各领域进行具有方向性的虚化。

4.根据权利要求1至3中任何一项所述的图像处理设备，其特征在于：

所述虚化装置对于由所述分割装置分割的领域，进行具有强度不同的方向性的虚化。

5.根据权利要求1至4中任何一项所述的图像处理设备，其特征在于：

所述虚化装置在由所述分割装置分割的领域中的1个或2个以上的领域中，进行具有方向性的虚化。

6.根据权利要求1至5中任何一项所述的图像处理设备，其特征在于：

所述虚化装置在由所述分割装置分割的领域中的1个或2个以上的领域中，不进行虚化。

7.根据权利要求1至6中任何一项所述的图像处理设备，其特征在于：

所述分离装置多处检测到所述主要被摄影体部分，并对该多处的主要被摄影体部分，分别分离为所述主要被摄影体部分和所述其他部分。

8.根据权利要求1至7中任何一项所述的图像处理设备，其特征在于：

所述方向性是由对应于所述摄影图像的各像素位置之事先存储的表格来决定的。

9.一种图像处理方法，其特征在于包括：

分离处理，其将摄影图像分离为主要被摄影体部分和其他部分；

分割处理，其将由所述分离装置分离的所述其他部分，分割成2个以上的领域；

虚化处理，其对通过所述分割装置分割的各领域，进行具有方向性的虚化；

合成处理，其对所述主要被摄影体和由所述虚化装置虚化的所述其他部分进行合成。

10.一种由计算机执行的图像处理程序，其特征在于包括：

分离处理，其将摄影图像分离为主要被摄影体部分和其他部分；

分割处理，其将由所述分离装置分离的所述其他部分，分割成2个以上的领域；

虚化处理，其对通过所述分割装置分割的各领域，进行具有方向性的虚化；

合成处理，其对所述主要被摄影体和由所述虚化装置虚化的所述其他部分进行合成。

Images