CN114827491B - 一种无线传输全景环视拼接技术 - Google Patents
一种无线传输全景环视拼接技术 Download PDFInfo
- Publication number
- CN114827491B CN114827491B CN202210401494.9A CN202210401494A CN114827491B CN 114827491 B CN114827491 B CN 114827491B CN 202210401494 A CN202210401494 A CN 202210401494A CN 114827491 B CN114827491 B CN 114827491B
- Authority
- CN
- China
- Prior art keywords
- video
- vehicle
- synchronous
- panoramic
- wide
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/30—Services specially adapted for particular environments, situations or purposes
- H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
- H04W4/48—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
- B60R2001/1253—Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Computer Networks & Wireless Communication (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明公开了一种无线传输全景环视拼接技术,包括:在车身不同位置分别设置广角摄像头;在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
Description
技术领域
本发明涉及无线传输技术领域,具体涉及一种无线传输全景环视拼接技术。
背景技术
随着时代的发展和科技的进步,生活水平逐渐提高,对车的需求量也逐渐增大,在安全装备的需求上也逐渐重视了起来,大型货车和客车,因为盲区更大,更加需要解决A柱及周边盲区问题。传统左右后视镜,普遍存在视野范围小,视线盲区大,雨雪天气容易模糊,和夜视效果不好等问题。因此,亟需一种具有低时延、高可靠、精同步、多并发、高速率、高安全获得全景环视视频的方法。
发明内容
本发明提供一种无线传输全景环视拼接技术,以解决现有技术中存在的上述问题。
本发明提供一种无线传输全景环视拼接技术,包括:
S100,在车身不同位置分别设置广角摄像头;
S200,在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;
S300,将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。
优选的,所述S100包括:
S101,所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;
S102,在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;
S103,在拖挂车的两侧设置至少两个广角摄像头。
优选的,所述S200包括:
S201,在所有广角摄像头中设置有车载无线短距离通信第一发送端口;
S202,在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
优选的,所述S300包括:
S301,所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;
S302,将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
优选的,所述S100还包括:在每个广角摄像头中设置第二同步时钟模块;
相应的,S200还包括:
S203,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;
S204,所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;
S205,所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;
S206,基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
优选的,所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
优选的,所述S200还包括:
S207,在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;
S208,所述车载智能控制系统对车载无线短距离通信技术的通信质量,进行定时监控,按照预设的间隔时间定时进行监控;一旦定时监控时检测到通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式;若在预设时间段内每次定时监控时通信质量均高于预设值,则所述车载智能控制系统自动调整定时监控的间隔时间,将间隔时间设定值增大;一旦再次检测通信质量低于预设值,重新将间隔时间调整为原来的间隔时间。
优选的,所述S100之后,包括:
S400,在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;
S500,若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
优选的,所述S300之后,包括:
S600,所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;
在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。
优选的,所述基于所述同步视频拼接为全景环视视频,包括:
将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;
基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;
检测出位置相邻的两个同步视频中的参照物;
基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;
基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
优选的,还包括视频筛选单元,用于采用下述方式对全景环视视频的拼接过程中的当前视频集中所有视频进行筛选:
步骤一:设置相似度阈值,通过该阈值判断两个视频之间的重叠区域是否过高;
步骤二:获得当前视频集中相似度最大的两个视频,分别为视频A和视频B,判断这两个视频的相似度至是否大于相似度阈值,如果大于,则代表视频集中存在重叠区域过高的局部区域,进入步骤三;否则说明视频集中所有相邻视频间没有过高的重叠区域;停止筛选,输出当前视频集;
步骤三:根据下述公式分析视频A和视频B与公共临界视频的相似度关系,根据分析结果将其中一个视频判定为冗余视频并移除当前视频集:
其中,T为视频A和视频B与公共临界图像的相似度值;A为视频A,B为视频B;p∈(A,B),其中视频A和视频B为当前视频集中相似度最大的两个视频;s(i,j)为视频i和视频j之间的相似度,n为公共临界视频的个数;s(i,p)为视频i与视频p之间的相似度,s(p,j)为视频p与视频j之间的相似度,视频i和视频j属于当前视频集。
将T值大的对应的视频作为冗余视频进行移除,通过该方式提升删选效率。
步骤四:更新当前视频集的相似度矩阵;并转入步骤二,再次重新获得视频集中相似度最大的两个视频A*和B*;并重复步骤三和步骤四。
与现有技术相比,本发明具有以下优点:
本发明提供一种无线传输全景环视拼接技术,包括:在车身不同位置分别设置广角摄像头;在车载智能控制系统设置第一同步时钟模块,基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种无线传输全景环视拼接技术的流程图;
图2为本发明实施例中在车身不同位置分别设置广角摄像头的方法流程图;
图3为本发明实施例中基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频的方法流程图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
本发明实施例提供了一种无线传输全景环视拼接技术,请参照图1,该技术保护以下几个步骤:
S100,在车身不同位置分别设置广角摄像头;
S200,在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;
S300,将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。
上述技术方案的工作原理为:本实施例采用的方案是在车身不同位置分别设置广角摄像头;在车载智能控制系统设置第一同步时钟模块以及同步检测模块,通过同步检测模块检测各个广角摄像头传输的视频是否是同步的,若不同步,则通过第一同步时钟模块调整各个广角摄像头传输的视频以使所有视频保持同步状态,形成同步视频,因此,基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。通过对同步视频的拼接形成全景环视视频,保证该全景环视视频更接近真实的现场情况,若某个广角摄像头的视频有延迟,拼接后的全景环视视频必然不能完全代表真实场景,因此,通过同步检测模块以及第一同步时钟模块保证形成同步视频。
上述技术方案的有益效果为:采用本实施例提供的方案在车身不同位置分别设置广角摄像头;在车载智能控制系统设置第一同步时钟模块,基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,请参照图2,所述S100包括:
S101,所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;
S102,在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;
S103,在拖挂车的两侧设置至少两个广角摄像头。
上述技术方案的工作原理为:本实施例采用的方案是所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;在拖挂车的两侧设置至少两个广角摄像头。
上述技术方案的有益效果为:采用本实施例提供的方案所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;在拖挂车的两侧设置至少两个广角摄像头。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S200包括:
S201,在所有广角摄像头中设置有车载无线短距离通信第一发送端口;
S202,在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
上述技术方案的工作原理为:本实施例采用的方案是在所有广角摄像头中设置有车载无线短距离通信第一发送端口;在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
上述技术方案的有益效果为:采用本实施例提供的方案在所有广角摄像头中设置有车载无线短距离通信第一发送端口;在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S300包括:
S301,所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;
S302,将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
上述技术方案的工作原理为:本实施例采用的方案是所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
上述技术方案的有益效果为:采用本实施例提供的方案所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。适应驾驶者的驾驶习惯,并且可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,请参照图3,所述S100还包括:在每个广角摄像头中设置第二同步时钟模块;
相应的,S200还包括:
S203,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;
S204,所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;
S205,所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;
S206,基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
上述技术方案的工作原理为:本实施例采用的方案是在每个广角摄像头中设置第二同步时钟模块;相应的,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
上述技术方案的有益效果为:采用本实施例提供的方案在所述广角摄像头中设置第二同步时钟模块;相应的,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
上述技术方案的工作原理为:本实施例采用的方案是所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
上述技术方案的有益效果为:采用本实施例提供的方案所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S200还包括:
S207,在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;
S208,所述车载智能控制系统对车载无线短距离通信技术的通信质量,进行定时监控,按照预设的间隔时间定时进行监控;一旦定时监控时检测到通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式;若在预设时间段内每次定时监控时通信质量均高于预设值,则所述车载智能控制系统自动调整定时监控的间隔时间,将间隔时间设定值增大;一旦再次检测通信质量低于预设值,重新将间隔时间调整为原来的间隔时间。
上述技术方案的工作原理为:本实施例采用的方案是在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;所述车载智能控制系统检测车载无线短距离通信技术的通信质量,若通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式。通过设定间隔时间对通信质量进行定时监控,而不是实时监控,在实际应用中可能会遇到信号质量短暂波动造成通信方式切换的情况,这种情况下,若直接切换通信方式反而影响通信质量,造成视频传输延迟的问题,而通过设定间隔时间,每间隔一段时间进行检测一次,一方面实现对通信质量的定时检测,保证通信质量处于较优的状态,另一方面也避免可能出现频繁切换的状况。当一定时间后(该时间远远大于间隔时间),发现通信质量一直处于超过预设值的状态,则可以认定通信质量很好,可以暂时调整间隔时间,使间隔时间变长,即两次检测时间拉长,但一旦再次检测到通信质量低于预设值,则重新将间隔时间调整到原始设定的值,以上述方式重复调整间隔时间,该间隔时间是通过车载智能控制系统自动调整的。
上述技术方案的有益效果为:采用本实施例提供的方案在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;所述车载智能控制系统检测车载无线短距离通信技术的通信质量,若通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S100之后,包括:
S400,在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;
S500,若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
上述技术方案的工作原理为:本实施例采用的方案是在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
上述技术方案的有益效果为:采用本实施例提供的方案在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S300之后,包括:
S600,所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;
在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。
上述技术方案的工作原理为:本实施例采用的方案是所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。方便根据同步视频上标注的内容更好的找到需要的视频
上述技术方案的有益效果为:采用本实施例提供的方案所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述基于所述同步视频拼接为全景环视视频,包括:
将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;
基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;
检测出位置相邻的两个同步视频中的参照物;
基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;
基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
上述技术方案的工作原理为:本实施例采用的方案是所述基于所述同步视频拼接为全景环视视频,包括:将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;检测出位置相邻的两个同步视频中的参照物;基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
提升全景环视视频的质量,减少视频的畸变。
上述技术方案的有益效果为:采用本实施例提供的方案所述基于所述同步视频拼接为全景环视视频,包括:将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;检测出位置相邻的两个同步视频中的参照物;基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (9)
1.一种无线传输全景环视拼接方法,其特征在于,包括:
S100,在车身不同位置分别设置广角摄像头;
S200,在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;
S300,将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示;
所述S100还包括:在每个广角摄像头中设置第二同步时钟模块;
相应的,S200还包括:
S203,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;
S204,所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;
S205,所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;
S206,基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
2.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S100包括:
S101,所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;
S102,在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;
S103,在拖挂车的两侧设置至少两个广角摄像头。
3.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S200包括:
S201,在所有广角摄像头中设置有车载无线短距离通信第一发送端口;
S202,在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
4.根据权利要求3所述的无线传输全景环视拼接方法,其特征在于,所述S300包括:
S301,所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;
S302,将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
5.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
6.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S200还包括:
S207,在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;
S208,所述车载智能控制系统对车载无线短距离通信技术的通信质量进行定时监控,按照预设的间隔时间定时进行监控;一旦定时监控时检测到通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式;若在预设时间段内每次定时监控时通信质量均高于预设值,则所述车载智能控制系统自动调整定时监控的间隔时间,将间隔时间设定值增大;一旦再次检测通信质量低于预设值,重新将间隔时间调整为原来的间隔时间。
7.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S100之后,包括:
S400,在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头是否处于正常工作状态;
S500,若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
8.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S300之后,包括:
S600,所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;
在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。
9.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述基于所述同步视频拼接为全景环视视频,包括:
将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;
基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;
检测出位置相邻的两个同步视频中的参照物;
基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;
基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210401494.9A CN114827491B (zh) | 2022-04-18 | 2022-04-18 | 一种无线传输全景环视拼接技术 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210401494.9A CN114827491B (zh) | 2022-04-18 | 2022-04-18 | 一种无线传输全景环视拼接技术 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114827491A CN114827491A (zh) | 2022-07-29 |
CN114827491B true CN114827491B (zh) | 2023-02-14 |
Family
ID=82537559
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210401494.9A Active CN114827491B (zh) | 2022-04-18 | 2022-04-18 | 一种无线传输全景环视拼接技术 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114827491B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117549834B (zh) * | 2023-09-22 | 2024-07-02 | 鹰驾科技(深圳)有限公司 | 一种基于无线传输的电子后视镜控制方法及装置 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104301677A (zh) * | 2014-10-16 | 2015-01-21 | 北京十方慧通科技有限公司 | 面向大场景的全景视频监控的方法及装置 |
US9251603B1 (en) * | 2013-04-10 | 2016-02-02 | Dmitry Kozko | Integrating panoramic video from a historic event with a video game |
CN105946714A (zh) * | 2016-05-16 | 2016-09-21 | 乐视控股(北京)有限公司 | 一种汽车全景观测系统及全景环视观测汽车 |
CN106803878A (zh) * | 2016-12-30 | 2017-06-06 | 智车优行科技(北京)有限公司 | 车载全景环视系统、用于实现全景环视的方法及装置 |
CN107396068A (zh) * | 2017-08-30 | 2017-11-24 | 广州杰赛科技股份有限公司 | 全景视频同步拼接系统、方法及全景视频显示装置 |
CN110087032A (zh) * | 2019-04-24 | 2019-08-02 | 招商局重庆公路工程检测中心有限公司 | 一种全景式隧道视频监视装置及方法 |
CN111179168A (zh) * | 2019-12-12 | 2020-05-19 | 郑州嘉晨电器有限公司 | 一种车载360度全景环视监控系统及方法 |
CN111768332A (zh) * | 2019-03-26 | 2020-10-13 | 深圳市航盛电子股份有限公司 | 一种车载环视实时3d全景图像的拼接方法及图形采集装置 |
CN112702576A (zh) * | 2020-12-24 | 2021-04-23 | 浙江赫千电子科技有限公司 | 一种车载视频的数据采集推流显示方法 |
CN112738382A (zh) * | 2021-01-25 | 2021-04-30 | 广州敏视数码科技有限公司 | 一种车辆车头与车身全景环视图像拼接方法 |
CN113689368A (zh) * | 2020-05-18 | 2021-11-23 | 上海赫千电子科技有限公司 | 一种应用于车载环视图像的光照一致性自动调整方法 |
CN114500834A (zh) * | 2022-01-19 | 2022-05-13 | 上汽通用五菱汽车股份有限公司 | 车载全景影像系统的复位方法、装置、设备和存储介质 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104512328B (zh) * | 2013-09-27 | 2016-11-09 | 比亚迪股份有限公司 | 汽车环视图像生成方法及汽车环视系统 |
CN110958681B (zh) * | 2018-09-27 | 2023-09-05 | 中兴通讯股份有限公司 | 业务传输方法及装置 |
CN111731190B (zh) * | 2020-07-24 | 2022-12-30 | 展讯通信(天津)有限公司 | 车载avm的显示方法、系统、电子设备及存储介质 |
-
2022
- 2022-04-18 CN CN202210401494.9A patent/CN114827491B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9251603B1 (en) * | 2013-04-10 | 2016-02-02 | Dmitry Kozko | Integrating panoramic video from a historic event with a video game |
CN104301677A (zh) * | 2014-10-16 | 2015-01-21 | 北京十方慧通科技有限公司 | 面向大场景的全景视频监控的方法及装置 |
CN105946714A (zh) * | 2016-05-16 | 2016-09-21 | 乐视控股(北京)有限公司 | 一种汽车全景观测系统及全景环视观测汽车 |
CN106803878A (zh) * | 2016-12-30 | 2017-06-06 | 智车优行科技(北京)有限公司 | 车载全景环视系统、用于实现全景环视的方法及装置 |
CN107396068A (zh) * | 2017-08-30 | 2017-11-24 | 广州杰赛科技股份有限公司 | 全景视频同步拼接系统、方法及全景视频显示装置 |
CN111768332A (zh) * | 2019-03-26 | 2020-10-13 | 深圳市航盛电子股份有限公司 | 一种车载环视实时3d全景图像的拼接方法及图形采集装置 |
CN110087032A (zh) * | 2019-04-24 | 2019-08-02 | 招商局重庆公路工程检测中心有限公司 | 一种全景式隧道视频监视装置及方法 |
CN111179168A (zh) * | 2019-12-12 | 2020-05-19 | 郑州嘉晨电器有限公司 | 一种车载360度全景环视监控系统及方法 |
CN113689368A (zh) * | 2020-05-18 | 2021-11-23 | 上海赫千电子科技有限公司 | 一种应用于车载环视图像的光照一致性自动调整方法 |
CN112702576A (zh) * | 2020-12-24 | 2021-04-23 | 浙江赫千电子科技有限公司 | 一种车载视频的数据采集推流显示方法 |
CN112738382A (zh) * | 2021-01-25 | 2021-04-30 | 广州敏视数码科技有限公司 | 一种车辆车头与车身全景环视图像拼接方法 |
CN114500834A (zh) * | 2022-01-19 | 2022-05-13 | 上汽通用五菱汽车股份有限公司 | 车载全景影像系统的复位方法、装置、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114827491A (zh) | 2022-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110381255B (zh) | 应用360全景环视技术的车载视频监控系统及方法 | |
US20190394427A1 (en) | System for perceiving and co-processing intelligent connected vehicle-oriented scene image data | |
CN109435852A (zh) | 一种针对大型卡车的全景式辅助驾驶系统及方法 | |
US20220353476A1 (en) | Camera system, event recording system and event recording method | |
CN212305474U (zh) | 一种大型车辆全景影像拼接系统及汽车 | |
CN110278418B (zh) | 视频数据的处理系统、方法和车辆 | |
CN103679838A (zh) | 车辆监控系统及方法 | |
CN108650495B (zh) | 一种车用全景环视系统及其自适应补光方法 | |
CN113276774B (zh) | 无人车远程驾驶过程中视频画面的处理方法、装置及设备 | |
CN113525234A (zh) | 一种辅助驾驶系统装置 | |
CN114827491B (zh) | 一种无线传输全景环视拼接技术 | |
CN107680395A (zh) | 一种无线路况车内警示系统及其方法 | |
CN109089086A (zh) | 一种全景摄像系统 | |
CN111311958A (zh) | 基于v2x技术的转弯路况提醒方法、系统及v2x服务器 | |
CN108322498A (zh) | 一种车联网中的车辆远程查看系统及方法 | |
JP2015070350A (ja) | 監視画像提示システム | |
CN108608944A (zh) | 一种智能夜视控制方法和系统 | |
CN216331763U (zh) | 一种集成全景功能和bsd功能的智能汽车电子后视镜设备 | |
CN111476975A (zh) | 一种车辆智能后视镜的多信息融合展现系统 | |
CN212324233U (zh) | 一种全地域覆盖的车载周视监测系统 | |
CN105869437A (zh) | 泊车辅助系统及泊车方法 | |
CN210390948U (zh) | 一种集成全景环视的车载视频监控设备及车辆 | |
CN115601852A (zh) | 一种处理车辆数据的方法、装置及车辆 | |
CN114025129A (zh) | 图像处理方法、系统及机动车辆 | |
CN208128452U (zh) | 一种适用于重型拖挂商用车的全景环视监控系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |