CN106470313B - 影像产生系统及影像产生方法 - Google Patents
影像产生系统及影像产生方法 Download PDFInfo
- Publication number
- CN106470313B CN106470313B CN201510859914.8A CN201510859914A CN106470313B CN 106470313 B CN106470313 B CN 106470313B CN 201510859914 A CN201510859914 A CN 201510859914A CN 106470313 B CN106470313 B CN 106470313B
- Authority
- CN
- China
- Prior art keywords
- frame
- image
- degree panoramic
- angle
- panoramic image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Studio Devices (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Engineering & Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明揭示一种影像产生系统及影像产生方法。影像产生系统包括:储存装置、摄像装置及处理器。摄像装置获取360度全景影像。处理器决定360度全景影像的多个有意义角度,根据有意义角度将360度全景影像分隔为多个时间区段,及根据与有意义角度关连的时间区段产生通用格式影像。每一时间区段对应于有意义角度中的一者。电子装置将从不同时间区段撷取有意义视角及组成完整的通用格式影像,以达到在不同种类的电子装置之间显示或传输的效果。
Description
技术领域
本发明是关于影像产生系统及影像产生方法,且特别是有关于一种全景影像的影像产生系统及全景影像的影像产生方法。
背景技术
近年来,诸如移动电话、数字摄像机或平板电脑等电子装置通常配备摄像镜头,以便允许使用者撷取照片或影像。一些具有摄像功能的电子装置可用于录制全景影像,以及一些电子装置可进一步录制360度全景影像。360度全景影像是基于影像的真实重现技术,此技术使用真实影像长度以获得三维影像。观看者可随意点击以选择想关注的360度全景影像中的任何视角,类似于观看者身处于真实环境中并针对四周进行观看。
此外,要查看360度全景影像则需要特定的影像播放器。然而,并非全部电子装置都具有特定的影像播放器用于查看360度全景影像。因此,如何便利地在不同种类的电子装置上传输或显示360度全景影像已成为待解决的问题。
发明内容
为解决上述的问题,本发明的一方面提供一种影像产生系统。影像产生系统包括:储存装置、摄像装置及处理器。处理器可操作性地被配置用以决定 360度全景影像的多个有意义角度,根据有意义角度将360度全景影像分隔为多个时间区段,及根据与有意义角度相关的时间区段产生通用格式影像。每一时间区段对应于有意义角度中的一个角度。
本发明的另一方面提供一种影像产生方法。影像产生方法包含:决定360 度全景影像的多个有意义角度;根据有意义角度将360度全景影像分隔为多个时间区段;及根据与有意义角度相关的时间区段产生通用格式影像。每一时间区段对应于有意义角度中的一个角度。
综上所述,本发明的技术方案与现有技术相比具有明显的优点和有益效果。通过上述技术方案,可达到相当的技术进步,并具有产业上的广泛利用价值,本发明利用360度全景影像产生通用格式影像可令任何人具有优良的影像观看体验。电子装置将从不同时间区段撷取有意义视角及组成完整的通用格式影像,以达到在不同种类的电子装置之间显示或传输的效果。
附图说明
为让本发明的上述和其他目的、特征、优点与实施例能更明显易懂,所附附图的说明如下:
图1根据本发明的一实施例绘示一种影像产生系统的示意图;
图 2A~2B根据本发明的一实施例绘示一种影像产生方法的流程图;
图3根据本发明的一实施例绘示一种影像产生方法的示意图;
图4根据本发明的一实施例绘示一种影像产生方法产生通用格式影像的示意图;
图5根据本发明的一实施例绘示一种影像产生方法产生通用格式影像的示意图;
图6根据本发明的一实施例绘示一种影像产生方法的示意图;以及
图7根据本发明的一实施例绘示一种影像产生方法产生通用格式影像的示意图。
具体实施方式
将理解,在本发明的描述及下文中全部专利申请范围中,短语“及/或”包括相关连的所列项目中一或更多者的任何及全部组合。
现请参看图1。图1是根据本发明的一个实施例的影像产生系统100的示意图。在此实施例中,影像产生系统100包括摄像装置110、处理器130,及储存装置140。
影像产生系统100可为任何种类的电子装置,例如移动装置、膝上型电脑、面板装置或其他系统。摄像装置110耦接至处理器130及储存装置140。摄像装置110用于撷取影像或影像。摄像装置110由数字摄像机或其他装置实施。摄像装置110为使用者提供撷取照片或影像的功能。在一个实施例中,摄像装置110选择性地包括多个镜头及/或广角镜头以用于撷取不同方向的影像,以获得360度全景影像。处理器130由微晶片、中央处理单元(central processing unit;CPU)或固件电路系统实施。储存装置140用于储存信息。储存装置110 由记忆体、磁盘、储存媒体或记忆体卡等实施,该装置用于储存信息。在其他实施例中,储存装置110亦可被取代为一远端连接装置。
在另一实施例中,影像产生系统100还包括一声音接收装置120。处理器 130及储存装置140耦接至声音接收装置120。在一个实施例中,声音接收装置120包括一或更多个麦克风以用于接收来自不同方向的声音,以录制具有 360度全景影像的360度全景声音。
请同时参看图2A~图2B及图3~图4,图2A~图2B是根据本发明的一实施例的影像产生方法的流程图。图3是根据本发明的一实施例的影像产生方法的示意图。图4是通过根据本发明的一实施例的影像产生方法产生通用格式影像的示意图。在一个实施例中,图2A~图2B中的影像产生方法由一系统实施,该系统的结构与图1中所示结构相同或类似。为了简化下文的描述,在以下段落中,将应用图1中所示的影像产生系统100以作为实施图2A~图2B中所示影像产生方法的一例。然而,本发明并非限定于此。
下文中影像产生方法的步骤可依据本发明的多个实施例而视情况进行增添、替换,及/或剔除。
在此实施例中,图2A~图2B中所示影像产生方法包括以下步骤。
在步骤S210中,摄像装置110获取360度全景影像。在一个实施例中,摄像装置110使用多个镜头以撷取真实影像长度注脚,以用于产生三维影像。如图3中所示,影像产生系统100获取及录制与区域F1至F4关连的影像以产生360度全景影像。在另一实施例中,摄像装置110进一步获取具有360度全景声音的360度全景影像,此360度全景的声音是通过声音接收装置120所接收。
在步骤S220中,处理器130决定360度全景影像的多个有意义角度。360 度全景影像包括多个帧,及每一有意义角度对应于360度全景摄像影像中至少一个帧的一部分。在一个实施例中,处理器130通过侦测来自360度全景影像的至少一帧中部分的至少一物件、至少一脸部、至少一说话者,或至少一声音方向来决定有意义角度。
例如,图3中的影像产生系统100获取音乐会的360度全景影像。如图3 中所示,区域F1是360度全景影像的天空部分,区域F2是360度全景影像中的地面部分,区域F3是包括360度全景影像中的舞台部分,及区域F4是包括 360度全景影像中的观众部分。根据此情景,可通过下述方法决定有意义角度。此外,下述方法并非限定于此实例。下述方法亦可用于其他情景或360度全景影像中其他内容。
在一个实施例中,360度全景影像包括多个帧。而且,处理器130计算对应于多个事件的多个权重参数,及这些事件在至少一个帧的不同部分中出现。
例如,处理器130首先向每一种事件赋予一权重以作为权重参数。接着,处理器130找出帧中具有最大权重参数的事件。然后,将帧中对应于此事件的部分决定为有意义角度。例如,如若说话者事件的权重参数是“3”,出现一指定物件事件的权重参数是“4”,及出现一识别脸部事件的权重参数是“5”,则处理器130可判断出此帧中具有最大权重参数的事件为识别脸部事件。然后,处理器130决定此帧中对应于识别脸部事件(例如图3中的位置A)的区域(例如图3中的舞台区域F3)为有意义角度。在此实施例中,360度全景影像中的事件种类是但不限于识别脸部、说话者、指定物件、声音或热点(hot spot),等等。
在一个实施例中,权重参数分别作为至少一个帧的脸部部分(例如在区域 F4中出现的观众脸部事件)的权重参数、至少一帧的说话者部分(例如在区域F3中出现主持人脸部的事件)的权重参数,及/或至少一帧的声音方向(例如接收来自区域F1的鞭炮声音的事件)的权重参数。接着,处理器130找出对应于这些事件的权重参数中哪一权重参数具有最大值。然后,处理器130 根据对应于具有最大值的权重参数的至少一个帧中的一部分决定有意义角度中的一者。例如,如若处理器130发觉一个帧中的脸部部分的权重参数在这些权重参数中具有最大值,则将此帧的脸部部分(例如在图3中区域F3的位置 A处出现演唱者脸部的事件)决定为有意义角度。
在另一实施例中,处理器130将先前的热点角度预设为有意义角度的一者。此先前的热点角度是储存在储存装置140中的历史有意义角度。例如,大部分观众在音乐会期间往往查看舞台部分F3。观众在音乐会期间不会常常查看地面部分F2或天空部分F1。由此,将舞台部分F3的视角决定为热点,及配置作为有意义角度的历史纪录及储存在储存装置140中。以此方式,储存在储存装置140中的先前的热点角度被处理器130决定为当前有意义角度中的一者。
在另一实施例中,处理器130决定在360度全景影像的至少一个帧中是否侦测到识别脸部,以寻找有意义角度。若在360度全景影像的至少一个帧中侦测到识别脸部,则处理器130决定这些有意义角度中的一有意义角度对应至360度全景影像的至少一个帧中的识别脸部所属的一角度。例如,处理器130 在图3的位置A处侦测到演唱者的脸部。处理器130比较演唱者的脸部与所储存的脸部信息,以决定此演唱者的脸部是否与所识别的脸部相同或类似。若处理器130决定此演唱者的脸部与所识别的脸部相同,则此演唱者的脸部被决定为所识别的脸部。接着,处理器130将其中一个有意义角度决定为对应至 360度全景影像的至少一个帧中(例如至少一个帧中的位置A)的此识别脸部所属的一角度。
在另一实施例中,处理器130决定在360度全景影像的至少一个帧中是否侦测到说话者,以寻找有意义角度。若在360度全景影像的至少一个帧中侦测到说话者的语音源,则处理器130决定这些有意义角度中的一有意义角度对应至360度全景影像的至少一个帧中的说话者所属的一角度。例如,如若处理器 130侦测到站立于位置A处的说话者的语音源,则处理器130将其中一个有意义角度决定为对应至360度全景影像的至少一个帧中(例如至少一个帧中的位置A)的此说话者所属的一角度。
在另一实施例中,处理器130进一步决定在360度全景影像的至少一个帧中是否存在声音源,以寻找有意义角度。若在360度全景影像的至少一个帧中存在声音源,则处理器130决定这些有意义角度中的一有意义角度对应至360 度全景影像的至少一个帧中的此声音源所属的一角度。例如,如若处理器130 侦测到位于位置B处的鞭炮声音源,则处理器130将其中一个有意义角度决定为对应至360度全景影像的至少一个帧中(例如至少一个帧中的位置B处) 的此声音源方向所属的角度。
上述方法可单独实施。在其他实施例中,上述方法亦可组合以决定有意义角度。如图2B中所示,这些步骤的优先权并非仅限于此,及这些步骤的次序可根据实际用途而经调整。
在一个实施例中,步骤S220中的步骤可进一步包括以下步骤。以下步骤中的步骤可依据本发明的多个实施例视情况而经增添、替换,及/或剔除。
在步骤S221a中,处理器130决定是否侦测到手动指令。如若未侦测到手动指令,则同时执行或以任何次序执行步骤S223、S225、S227。如若侦测到手动指令,则执行步骤S221b。在步骤S221b中,处理器130根据手动指令决定有意义角度。例如,如若使用者通过点击360度全景影像中的一部分来输入手动指令,以选择关注一视角(步骤S221a),则处理器130根据手动指令决定此有意义角度(步骤S221b)。然后,执行步骤S230。
在步骤S223中,于侦测到一识别脸部的情况下,处理器130用以决定有意义角度中的一者,并将有意义角度中的一者对应至至少一个帧中的此识别脸部的部分。在一个实施例中,如若在360度全景影像的至少一个帧中未侦测到识别脸部,则识别脸部事件的权重参数可设置为无效或零。如若在360度全景影像的至少一个帧中侦测到识别脸部,则执行步骤S229。
在步骤S225中,于侦测到说话者的语音源的情况下,处理器130用以决定有意义角度中的一者,并将有意义角度中的一者对应至至少一个帧中的此说话者语音源的部分。在一个实施例中,如若在360度全景影像的至少一个帧中未侦测到说话者的语音源,则说话者事件的语音源的权重参数可设置为无效或零。如若在360度全景影像的至少一个帧中侦测到说话者的语音源,则执行步骤S229。
在步骤S227中,于声音源存在的情况下,处理器130用以决定有意义角度中的一者,并将有意义角度中的一者对应至至少一个帧中的此声音源的部分。在一个实施例中,如若在360度全景影像的至少一个帧中未侦测到声音源,则声音源事件的权重参数可设置为无效或零。如若在360度全景影像的至少一个帧中侦测到声音源,则执行步骤S229。
在步骤S229中,处理器130根据对应于具有最大值的权重参数的至少一个帧中的一部分,以选择有意义角度中的一者。
图2B中的步骤的细节及实例与前述实施例相同,及本发明将省略这些步骤的详细描述。因此,影像产生方法可根据不同事件决定有意义角度。
接着,在步骤S230中,处理器130根据有意义角度将360度全景影像分隔为多个时间区段,其中每一时间区段对应于有意义角度中的一者。
在一个实施例中,360度全景影像是一30秒影像。首先,图3中位于位置A处的演唱者在与360度全景影像的第0秒至第10秒内关连的帧中出现。接着,图3中位于位置B处的鞭炮在与360度全景影像的第11秒至第21秒内关连的帧中爆炸。最后,位于位置C处的观众在与360度全景影像的第21 秒至第30秒内关连的帧中喝彩及欢呼。在此实施例中,如图3中所示,在步骤S220中决定的有意义角度是位置A、位置B,及位置C。换言的,有意义角度的位置A对应于360度全景影像中的第0秒至第10秒。有意义角度的位置B对应于360度全景影像中的第11秒至第20秒。有意义角度的位置C对应于360度全景影像中的第21秒至第30秒。如图4中所示,处理器130根据每一有意义角度(例如位置A、位置B,及位置C)将360度全景影像分隔为时间区段DA(第0秒至第10秒)、DB(第11秒至第20秒)及DC(第21 秒至第30秒)。换言之,每一时间区段DA、DB及DC对应于有意义角度中的一者。
在步骤S240中,处理器130根据时间区段DA、DB及DC产生通用格式影像400。例如,通用格式影像400根据如图3所示的有意义角度(例如位置 A、位置B,及位置C)而包括时间区段DA(第0秒至第10秒)、时间区段 DB(第11秒至第20秒)及时间区段DC(第21秒至第30秒),如图4中所示。时间线TL展现为通用格式影像400的总时长。以此方式,通用格式影像400通过原始360度全景影像的有意义角度而产生。由此,通用格式影像400 被视作原始360度全景影像的部分。此外,通用格式影像400的数据格式可通过MP4、MPEG、AVI、WMA或其他一般格式而实施,无需使用特定影像播放器来播放。此外,通用格式影像400依据固定的解析度影像以产生,如 800*600或1024*768像素。
经由上述步骤,处理器130决定360度全景影像的有意义角度。有意义角度是360度全景影像的特殊瞬时或代表性部分。然后,处理器130根据对应于有意义角度的时间区段而产生通用格式影像。以此方式,通用格式影像仍可包含原始360度全景影像的代表性部分。而且,影像产生系统100提供在无需特定或特殊影像播放器的情况下观看通用格式影像的功能。通用格式影像可轻松传输或显示。
在另一实施方式中,影像产生系统100可进一步放大或缩小帧的一部分。请参看图5,图5是通过根据本发明的一个实施例的影像产生方法所产生的通用格式影像的示意图。
在一个实施例中,当至少一个帧的解析度高于解析度临限值,及对应于相同有意义角度的时间区段长于时间临限值时,处理器130放大此至少一个帧中的部分。例如,在步骤S220中决定的有意义角度是相同的有意义角度,或在步骤S220中仅决定一个有意义角度(例如360度全景影像的说话内容或表演内容)。在此情况下,如若由相同的有意义角度(如时间区段DE、DF及DG) 产生通用格式影像500,则观看者可能感到厌烦。时间区段DE、时间区段DF 及时间区段DG具有相同的有意义角度及出现相同的人员。为避免产生令人厌烦的通用格式影像,对应于时间区段DE、DF及DG的有意义角度可放大或缩小以使得通用格式影像500更鲜活生动。例如,一位人员的半身处于通用格式影像500的时间区段DE中。如若时间区段DF的帧的解析度高于解析度临限值,及对应于相同有意义角度的三个时间区段DE、DF及DG长于时间临限值,则可放大时间区段DF的至少一个帧。此举意味着有意义角度相同及保持片刻,及帧的解析度经决定为进行放大的适合条件。以此方式,时间区段DF可显示此人员头部的细节。由于解析度更高,因此当帧放大时将不会模糊。此外,当至少一个帧的解析度低于解析度临限值时,处理器130缩小此至少一个帧的部分。例如,当时间区段DG中的帧解析度低于解析度临限值时,处理器130缩小时间区段DG中的帧以避免这些帧发生模糊的情况。在缩小时间区段DG中的帧之后,人员的全身显示在通用格式影像500中。
因此,即使全部时间区段DE、DF及DG对应于相同的有意义角度,通用格式影像亦可通过放大及缩小效应而鲜活生动。当通用格式影像500包含一些视觉变更时,观看者将更有耐性。
在一个实施例中,处理器130经配置以自动追踪对应于有意义角度中的一者的至少一个物件、至少一个脸部、至少一个说话者,或至少一个声音方向。例如请参看图6到图7,图6是根据本发明的一个实施例的影像产生方法的示意图。图7是通过根据本发明的一个实施例的影像产生方法产生通用格式影像的示意图。
例如,影像产生系统100撷取对应于360度全景影像中有意义角度的一者的物件。在一个实施例中,360度全景影像包含汽车70,此汽车自位置X移向位置Y,然后自位置Y移向位置Z。处理器130经配置以通过识别汽车70 在360度全景影像中的位置(如位置X、Y及Z)而自动追踪此汽车70,如图 6所示。在此实施例中,有意义角度是根据汽车70的位置而决定的。例如,当汽车70处于位置X时,有意义角度被决定为位置X,及处理器130经配置以自动追踪汽车70,以产生时间区段DX的内容。当汽车70处于位置Y时,有意义角度被决定为位置Y,及处理器130经配置以自动追踪汽车70,以产生时间区段DY的内容。当汽车70处于位置Z时,有意义角度被决定为位置 Z,及处理器130经配置以自动追踪汽车70,以产生时间区段DZ的内容。在另一实施例中,360度全景影像可被分隔为对应于汽车70所在位置的更多时间区段,以获取平滑的追踪效应。
接着,影像产生系统100产生通用格式影像700,此通用格式影像700包含处于全部时间区段DX、DY及DZ的汽车70。另一方面,图6到图7中的组件、步骤及应用的其他详细技术特征与前述实施例的彼等特征相同,及本发明中将省略这些特征的详细描述。
因此,通过上述方法,可通过处理器130追踪物件、人员或/及声音。而且,可根据追踪到的物件、人员或/及声音来产生通用格式影像700。以此方式,将有助于观看者关注特定事件。
应注意,上述影像产生方法可由上述实施例中的影像产生系统100实施,或可作为储存在非瞬时性计算机可读取媒体中的计算机程序而实施,此媒体待读取以用于控制计算机或电子装置以执行上述图2A到图2B中的影像产生方法。计算机程序可储存在非瞬时性计算机可读取媒体中,此媒体如只读记忆体 (read-only memory;ROM)、快闪记忆体、软盘、硬盘、光盘、快闪磁盘、磁带、可从网络存取的数据库,或具有本发明所述技术领域的一般技术人员可设想的相同功能的任何储存媒体。
影像产生方法及影像产生系统可利用360度全景影像产生通用格式影像。此外,通用格式影像由数个视角组成,这些视角对于彼等所组成的时间区段是有意义视角。观看者仍可通过通用格式影像观看有意义内容,及通用格式影像更易于在无需特定软件播放器的情况下传输或显示。然而,本发明并非限定于此,其他通讯技术亦符合本发明的设想范畴。
虽然本发明已以实施方式揭露如上,然其并非用以限定本发明,任何熟悉此技艺者,在不脱离本发明的精神和范围内,当可作各种的更动与润饰,因此本发明的保护范围当视所附的权利要求书所界定的范围为准。
Claims (18)
1.一种影像产生系统,其特征在于,包括:
一处理器,可操作性地被配置用以:
决定一360度全景影像的多个有意义角度;
根据所述有意义角度将该360度全景影像分隔为多个时间区段,其中每一时间区段对应至所述有意义角度中的一者;
根据与所述有意义角度相关的所述时间区段产生一通用格式影像;
回应于至少一个帧的一解析度高于一解析度临限值,且对应于相同的所述有意义角度的所述时间区段长于一时间临限值时,放大该至少一个帧中的一部分;以及
回应于该至少一个帧的该解析度低于该解析度临限值时,缩小该至少一个帧的该部分。
2.根据权利要求1所述的影像产生系统,其特征在于,进一步包括:
一摄像装置,可操作性地被配置用以撷取该360度全景影像;
其中每一有意义角度对应于该360度全景影像的该至少一个帧的该部分。
3.根据权利要求1所述的影像产生系统,其特征在于,该处理器进一步可操作性地被配置以:
通过侦测来自该360度全景影像的该至少一个帧的该部分的至少一物件、至少一脸部、至少一说话者,或至少一声音方向,来决定所述有意义角度。
4.根据权利要求3所述的影像产生系统,其特征在于,该处理器进一步可操作性地被配置用以:
自动追踪对应于所述有意义角度中的一者的该至少一物件、该至少一脸部、该至少一说话者,或该至少一声音方向。
5.根据权利要求1所述的影像产生系统,其特征在于,该处理器进一步可操作性地被配置用以:
决定多个权重参数,所述权重参数对应于多个事件;以及
根据所述权重参数计算所述有意义角度中的一者;
其中所述事件出现在每一时间区段的该至少一个帧的不同部分中。
6.根据权利要求5所述的影像产生系统,其特征在于,该处理器根据所述权重参数中的一最大参数,以决定所述有意义角度中的一者。
7.根据权利要求1所述的影像产生系统,其特征在于,进一步包括:
一储存装置,可操作性地被配置以储存一先前热点角度;
其中该先前热点角度由该处理器决定为所述有意义角度中的一者。
8.根据权利要求1所述的影像产生系统,其特征在于,该处理器进一步可操作性地被配置用以:
决定在该360度全景影像的该至少一个帧中是否侦测到一识别脸部;
其中回应于在该360度全景影像的该至少一个帧中侦测到的该识别脸部,该处理器决定所述有意义角度中的一有意义角度对应至该360度全景影像的该至少一个帧中的该识别脸部所属的一角度。
9.根据权利要求1所述的影像产生系统,其特征在于,进一步包括:
一声音接收装置,可操作性地被配置以接收一声音源;
其中该处理器更用以决定该声音源是否存在于该360度全景影像的该至少一个帧中;以及
回应于该声音源存在于该360度全景影像的该至少一个帧中,该处理器决定所述有意义角度中的一有意义角度对应至该360度全景影像的该至少一个帧中的该声音源所属的一角度。
10.一种影像产生方法,其特征在于,包括以下步骤:
决定一360度全景影像的多个有意义角度;
根据所述有意义角度将该360度全景影像分隔为多个时间区段,其中每一时间区段对应至所述有意义角度中的一者;
根据与所述有意义角度相关的所述时间区段产生一通用格式影像;
回应于至少一个帧的一解析度高于一解析度临限值,且对应于相同的所述有意义角度的所述时间区段长于一时间临限值时,放大该至少一个帧的一部分;以及
回应于该至少一个帧的该解析度低于该解析度临限值时,缩小该至少一个帧的该部分。
11.根据权利要求10所述的影像产生方法,其特征在于,每一有意义角度对应于该360度全景影像的该至少一个帧的该部分。
12.根据权利要求10所述的影像产生方法,其特征在于,进一步包括:
通过侦测来自该360度全景影像的该至少一个帧的该部分的至少一物件、至少一脸部、至少一说话者的语音源,或至少一声音方向,来决定所述有意义角度。
13.根据权利要求12所述的影像产生方法,其特征在于,进一步包括:
自动追踪对应于所述有意义角度中的一者的该至少一物件、该至少一脸部、该至少一说话者,或该至少一声音方向。
14.根据权利要求10所述的影像产生方法,其特征在于,进一步包括:
决定多个权重参数,其中所述权重参数对应于多个事件;及根据所述权重参数计算所述有意义角度中的一者;以及
其中所述事件出现在每一时间区段的该至少一个帧的不同部分中。
15.根据权利要求10所述的影像产生方法,进一步包括:
决定储存在一储存装置中的一先前热点角度为所述有意义角度中的一者。
16.根据权利要求10所述的影像产生方法,进一步包括:
决定在该360度全景影像的该至少一个帧中是否侦测到一识别脸部;
其中回应于在该360度全景影像的该至少一个帧中侦测到该识别脸部,一处理器决定所述有意义角度中的一有意义角度对应至该360度全景影像的该至少一个帧中的该识别脸部所属的一角度。
17.根据权利要求10所述的影像产生方法,进一步包括:
决定在该360度全景影像的该至少一个帧中是否侦测到一说话者;
其中回应于在该360度全景影像的该至少一个帧中侦测到该说话者,一处理器决定所述有意义角度中的一有意义角度对应至该360度全景影像的该至少一个帧中的该说话者所属的一角度。
18.根据权利要求10所述的影像产生方法,进一步包括:
决定一声音源是否存在于该360度全景影像的该至少一个帧中;
其中回应于该声音源存在于该360度全景影像的该至少一个帧中,一处理器决定所述有意义角度中的一有意义角度对应至该360度全景影像的该至少一个帧中的该声音源所属的一角度。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/833,130 | 2015-08-23 | ||
US14/833,130 US10250803B2 (en) | 2015-08-23 | 2015-08-23 | Video generating system and method thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106470313A CN106470313A (zh) | 2017-03-01 |
CN106470313B true CN106470313B (zh) | 2019-12-27 |
Family
ID=58158349
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510859914.8A Active CN106470313B (zh) | 2015-08-23 | 2015-11-30 | 影像产生系统及影像产生方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10250803B2 (zh) |
CN (1) | CN106470313B (zh) |
TW (1) | TWI588590B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107124590A (zh) * | 2017-05-24 | 2017-09-01 | 深圳市酷开网络科技有限公司 | 基于声源定向的全景视频压缩方法、存储介质及摄像机 |
US10521468B2 (en) * | 2017-06-13 | 2019-12-31 | Adobe Inc. | Animated seek preview for panoramic videos |
US20190007536A1 (en) | 2017-07-03 | 2019-01-03 | Essential Products, Inc. | Handheld writing implement form factor mobile device |
US10462345B2 (en) | 2017-08-11 | 2019-10-29 | Essential Products, Inc. | Deformable structure that compensates for displacement of a camera module of a camera accessory |
CN107396085A (zh) * | 2017-08-24 | 2017-11-24 | 三星电子(中国)研发中心 | 一种全视点视频图像的处理方法及系统 |
US10496887B2 (en) * | 2018-02-22 | 2019-12-03 | Motorola Solutions, Inc. | Device, system and method for controlling a communication device to provide alerts |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9374554B1 (en) * | 2014-03-25 | 2016-06-21 | Amazon Technologies, Inc. | Display selection for video conferencing |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7428000B2 (en) * | 2003-06-26 | 2008-09-23 | Microsoft Corp. | System and method for distributed meetings |
TW201030631A (en) | 2009-02-04 | 2010-08-16 | Altek Corp | Automatic photographing method for panoramic image of digital imaging apparatus |
JP2012068380A (ja) | 2010-09-22 | 2012-04-05 | Sony Corp | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
JP2013034081A (ja) | 2011-08-02 | 2013-02-14 | Sony Corp | 画像処理装置、その制御方法およびプログラム |
US9516225B2 (en) * | 2011-12-02 | 2016-12-06 | Amazon Technologies, Inc. | Apparatus and method for panoramic video hosting |
US20160050349A1 (en) * | 2014-08-15 | 2016-02-18 | Sony Corporation | Panoramic video |
-
2015
- 2015-08-23 US US14/833,130 patent/US10250803B2/en active Active
- 2015-11-23 TW TW104138753A patent/TWI588590B/zh active
- 2015-11-30 CN CN201510859914.8A patent/CN106470313B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9374554B1 (en) * | 2014-03-25 | 2016-06-21 | Amazon Technologies, Inc. | Display selection for video conferencing |
Also Published As
Publication number | Publication date |
---|---|
TW201708928A (zh) | 2017-03-01 |
US10250803B2 (en) | 2019-04-02 |
CN106470313A (zh) | 2017-03-01 |
TWI588590B (zh) | 2017-06-21 |
US20170054904A1 (en) | 2017-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106470313B (zh) | 影像产生系统及影像产生方法 | |
US10367997B2 (en) | Enriched digital photographs | |
US10991108B2 (en) | Densely compositing angularly separated sub-scenes | |
US9927948B2 (en) | Image display apparatus and image display method | |
US20130235223A1 (en) | Composite video sequence with inserted facial region | |
US20130235224A1 (en) | Video camera providing a composite video sequence | |
US20150146078A1 (en) | Shift camera focus based on speaker position | |
CN110636276B (zh) | 视频拍摄方法、装置、存储介质及电子设备 | |
JP2009510877A (ja) | 顔検出を利用したストリーミングビデオにおける顔アノテーション | |
JP6096654B2 (ja) | 画像の記録方法、電子機器およびコンピュータ・プログラム | |
JP2012123513A (ja) | 情報処理装置、および情報処理システム | |
JP2013172446A (ja) | 情報処理装置、端末装置、撮像装置、情報処理方法、及び撮像装置における情報提供方法 | |
CN112907617B (zh) | 一种视频处理方法及其装置 | |
JP2014050022A (ja) | 画像処理装置、撮像装置、およびプログラム | |
JP2018535572A (ja) | カメラプレビュー | |
JP2007235969A (ja) | 映像記録システム、プログラム及び記録媒体 | |
CN113709545A (zh) | 视频的处理方法、装置、计算机设备和存储介质 | |
KR100711950B1 (ko) | 하이브리드 광학 및 가상 주밍 장치를 사용한 관심있는물체의 실시간 트래킹 | |
JP3954439B2 (ja) | 映像記録システム、プログラム及び記録媒体 | |
WO2023164814A1 (zh) | 媒体设备及其控制方法和装置、目标跟踪方法和装置 | |
US11825191B2 (en) | Method for assisting the acquisition of media content at a scene | |
Zhang et al. | Semantic saliency driven camera control for personal remote collaboration | |
JP2011101161A (ja) | 撮像装置、その制御方法、再生装置およびプログラム | |
CN116055861B (zh) | 一种视频编辑方法和电子设备 | |
JP5646716B2 (ja) | 映像表示装置及び映像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |