Deep Depth Estimation from Thermal Image

计算机科学 人工智能 计算机视觉 稳健性(进化) 惯性测量装置 条件随机场 单眼 水准点(测量) RGB颜色模型 激光雷达 遥感 地理 地图学 生物化学 基因 化学
作者
Ukcheol Shin,Jinsun Park,In So Kweon
出处
期刊:Proceedings [Institute of Electrical and Electronics Engineers]
卷期号:: 1043-1053 被引量:115
标识
DOI:10.1109/cvpr52729.2023.00107
摘要

Robust and accurate geometric understanding against adverse weather conditions is one top prioritized conditions to achieve a high-level autonomy of self-driving cars. However, autonomous driving algorithms relying on the visible spectrum band are easily impacted by weather and lighting conditions. A long-wave infrared camera, also known as a thermal imaging camera, is a potential rescue to achieve high-level robustness. However, the missing necessities are the well-established large-scale dataset and public benchmark results. To this end, in this paper, we first built a large-scale Multi-Spectral Stereo (MS2) dataset, including stereo RGB, stereo NIR, stereo thermal, and stereo LiDAR data along with GNSS/IMU information. The collected dataset provides about 195K synchronized data pairs taken from city, residential, road, campus, and suburban areas in the morning, daytime, and nighttime under clear-sky, cloudy, and rainy conditions. Secondly, we conduct an exhaustive validation process of monocular and stereo depth estimation algorithms designed on visible spectrum bands to benchmark their performance in the thermal image domain. Lastly, we propose a unified depth network that effectively bridges monocular depth and stereo depth tasks from a conditional random field approach perspective. Our dataset and source code are available at https://github.com/UkcheolShin/MS2-MultiSpectralStereoDataset.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
芋头完成签到 ,获得积分20
刚刚
科研通AI6.3的应助被yyyhan采纳,获得10
刚刚
shell完成签到 ,获得积分10
刚刚
我是老大的应助被斯文的千秋采纳,获得10
刚刚
FUTURE完成签到,获得积分10
1秒前
DW发布了新的文献求助10
1秒前
DW发布了新的文献求助10
1秒前
2秒前
2秒前
我是老大的应助被喔喔佳佳L采纳,获得20
2秒前
第一作者发布了新的文献求助10
3秒前
似水流年发布了新的文献求助10
3秒前
3秒前
兮非发布了新的文献求助10
3秒前
4秒前
4秒前
DW发布了新的文献求助10
4秒前
DW发布了新的文献求助10
4秒前
DW发布了新的文献求助10
4秒前
5秒前
乐乐的应助被今天没有哭鸭采纳,获得10
5秒前
DW发布了新的文献求助10
5秒前
瘦瘦寻菡发布了新的文献求助10
5秒前
5秒前
bomv发布了新的文献求助10
6秒前
Potato发布了新的文献求助30
6秒前
6秒前
6秒前
6秒前
7秒前
hml123发布了新的文献求助10
7秒前
DW发布了新的文献求助30
8秒前
DW发布了新的文献求助10
8秒前
DW发布了新的文献求助10
8秒前
DW发布了新的文献求助10
8秒前
8秒前
CodeCraft的应助被cz采纳,获得10
8秒前
8秒前
8秒前
FashionBoy的应助被桃桃采纳,获得10
8秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
Sex, Aging, and Death in a Medieval Medical Compendium: Trinity College Cambridge MS R.14.52, Its Texts, Language, and Scribe 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8188221
求助须知:如何正确求助?哪些是违规求助? 9576025
关于积分的说明 21845049
捐赠科研通 7786165
什么是DOI,文献DOI怎么找? 3435226
关于科研通互助平台的介绍 2559559
邀请新用户注册赠送积分活动 2482157