大华股份AI斩获场景流和光流两项竞赛桂冠
继50天内拿下4个世界纪录后，近日，大华股份再次刷新kitti sceneflow和kitti flow两项竞赛的好成绩，采用基于实例分割、深度视差网络、刚体运动一致性约束的场景流估计算法，超越了其它ai公司和的学术研究机构，以及iccv、eccv、cvpr相关论文中的场景流研究成果，这标志着大华股份在场景流与光流两个算法领域均具有重要影响力。
大华股份取得kitti sceneflow排行榜
大华股份取得kitti flow排行榜
关于kitti
kitti数据集由德国卡尔斯鲁厄理工学院和丰田美国技术研究院联合创办，是目前上大的计算机视觉算法评测数据集之一。数据集用于评测立体匹配(stereo)、光流(flow)、场景流(sceneflow)、视觉里程计(visual odometry)、物体检测(object detection)和跟踪(tracking)、道路分割(road)、语义分割(semantics)等计算机视觉技术的性能。kitti包含市区、乡村和高速公路等场景采集的真实图像数据，每张图像中多包含15辆车和30个行人，且存在不同程度的遮挡与截断。
场景流与光流
场景流算法能够同时估计场景中物体的三维位置与三维运动矢量，是感知环境空间几何结构的核心算法，与感知语义信息的算法结合后，能够全面地理解环境。三维场景流的估计结果能够进一步分解为立体匹配结果与光流匹配结果，可以认为，光流是场景流映射到二维图像坐标系的投影。
在本次比赛中，大华股份ai团队为提升场景流估计精度，增加了一系列算法模块。首先，基于mask-rcnn网络进行实例分割，从场景中分割出行人、车辆、自行车等前景目标。接下来，基于gc-net计算初始视差图，使用分段多权重loss函数、利用实例分割结果和多尺度特征图优化初始视差结果，得到更加精细的视差图，进而改善了初始的proposal nrt集合。后，引入移动前景目标的刚体运动一致性约束，针对场景流不连续区域，采用多阈值融合的策略，优化场景流估计结果。
在评测中，采用场景流和光流算法的效果和计算结果如下所示：
输入图像
t0时刻视差图
经光流反向映射后的t1时刻视差图
t0时刻到t1时刻的光流图
在大华实际产品和未来产品中的应用
本次竞赛中使用的技术已在大华股份的双目摄像机、全景摄像机等产品上得到应用，提升多目摄像机的捕获目标深度数据、目标分离等算法性能。同时，该技术也成功应用于ar融合应用，实现单个与多个摄像机图像的ar语义融合，*提升行业解决方案的用户体验。
双目摄像机立体匹配应用场景
以下为致密物体堆积下立体匹配的效果：
双目图像左图
视差图估计结果
ar语义融合应用场景
以下为路面图像的ar语义融合效果，可供增强的信息：目标类别、位置、运动矢量等
真实图像
ar语义融合后的效果
福州到拉斯维加斯物流货代,福州国际物流到拉斯维加斯的货代
天津到开姆尼茨国际搬家优质服务_天津到开姆尼茨搬家公司
揭阳海运到日本,揭阳到日本海运专线
5mm四氟楼梯板每平米重量
广州海珠区到澳门货运专线整车物流_广州海珠区到澳门物流公司
大华股份AI斩获场景流和光流两项竞赛桂冠
成都到富锦专线物流包车_成都到富锦物流专线整车运输
专业北京到马拉加物流专线_北京到马拉加国际物流公司
分切机不工作的原因有哪些？
上海至宿务国际搬家海运_上海到宿务国际搬家公司
济南到伯明翰国际空运,济南空运到伯明翰,济南到伯明翰空运
螺旋排屑机：关于对于排屑机的需求分析
宁波到百色空运公司,宁波空运到百色,宁波到百色航空货运
下车透平油滤油机一般不产生应力腐蚀裂纹
德国宝德类型 MS01 - pH 值传感器详细参数和使用
沙河到挪威物流专线,沙河到挪威国际货运专线
江苏无损检测设备厂家提醒 超声波探伤机 超声探伤仪 采购事项
磁通量概述
UV照射实验如何在光照模拟仓内获得高照度环境?
六联搅拌机转速是多少？为什么Z高只有1000转？
大华股份取得kitti sceneflow排行榜
大华股份取得kitti flow排行榜
关于kitti
kitti数据集由德国卡尔斯鲁厄理工学院和丰田美国技术研究院联合创办，是目前上大的计算机视觉算法评测数据集之一。数据集用于评测立体匹配(stereo)、光流(flow)、场景流(sceneflow)、视觉里程计(visual odometry)、物体检测(object detection)和跟踪(tracking)、道路分割(road)、语义分割(semantics)等计算机视觉技术的性能。kitti包含市区、乡村和高速公路等场景采集的真实图像数据，每张图像中多包含15辆车和30个行人，且存在不同程度的遮挡与截断。
场景流与光流
场景流算法能够同时估计场景中物体的三维位置与三维运动矢量，是感知环境空间几何结构的核心算法，与感知语义信息的算法结合后，能够全面地理解环境。三维场景流的估计结果能够进一步分解为立体匹配结果与光流匹配结果，可以认为，光流是场景流映射到二维图像坐标系的投影。
在本次比赛中，大华股份ai团队为提升场景流估计精度，增加了一系列算法模块。首先，基于mask-rcnn网络进行实例分割，从场景中分割出行人、车辆、自行车等前景目标。接下来，基于gc-net计算初始视差图，使用分段多权重loss函数、利用实例分割结果和多尺度特征图优化初始视差结果，得到更加精细的视差图，进而改善了初始的proposal nrt集合。后，引入移动前景目标的刚体运动一致性约束，针对场景流不连续区域，采用多阈值融合的策略，优化场景流估计结果。
在评测中，采用场景流和光流算法的效果和计算结果如下所示：
输入图像
t0时刻视差图
经光流反向映射后的t1时刻视差图
t0时刻到t1时刻的光流图
在大华实际产品和未来产品中的应用
本次竞赛中使用的技术已在大华股份的双目摄像机、全景摄像机等产品上得到应用，提升多目摄像机的捕获目标深度数据、目标分离等算法性能。同时，该技术也成功应用于ar融合应用，实现单个与多个摄像机图像的ar语义融合，*提升行业解决方案的用户体验。
双目摄像机立体匹配应用场景
以下为致密物体堆积下立体匹配的效果：
双目图像左图
视差图估计结果
ar语义融合应用场景
以下为路面图像的ar语义融合效果，可供增强的信息：目标类别、位置、运动矢量等
真实图像
ar语义融合后的效果
福州到拉斯维加斯物流货代,福州国际物流到拉斯维加斯的货代
天津到开姆尼茨国际搬家优质服务_天津到开姆尼茨搬家公司
揭阳海运到日本,揭阳到日本海运专线
5mm四氟楼梯板每平米重量
广州海珠区到澳门货运专线整车物流_广州海珠区到澳门物流公司
大华股份AI斩获场景流和光流两项竞赛桂冠
成都到富锦专线物流包车_成都到富锦物流专线整车运输
专业北京到马拉加物流专线_北京到马拉加国际物流公司
分切机不工作的原因有哪些？
上海至宿务国际搬家海运_上海到宿务国际搬家公司
济南到伯明翰国际空运,济南空运到伯明翰,济南到伯明翰空运
螺旋排屑机：关于对于排屑机的需求分析
宁波到百色空运公司,宁波空运到百色,宁波到百色航空货运
下车透平油滤油机一般不产生应力腐蚀裂纹
德国宝德类型 MS01 - pH 值传感器详细参数和使用
沙河到挪威物流专线,沙河到挪威国际货运专线
江苏无损检测设备厂家提醒 超声波探伤机 超声探伤仪 采购事项
磁通量概述
UV照射实验如何在光照模拟仓内获得高照度环境?
六联搅拌机转速是多少？为什么Z高只有1000转？