清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

Geo-NI: Geometry-Aware Neural Interpolation for Light Field Rendering

渲染(计算机图形) 人工智能 计算机科学 计算机视觉 插值(计算机图形学) 计算机图形学(图像) 光场 几何学 人工神经网络 数学 图像(数学)
作者
Gaochang Wu,Yuemei Zhou,Lu Fang,Yebin Liu,Tianyou Chai
出处
期刊:IEEE Transactions on Pattern Analysis and Machine Intelligence [IEEE Computer Society]
卷期号:47 (12): 11091-11106 被引量:2
标识
DOI:10.1109/tpami.2025.3594705
摘要

We present a novel Geometry-aware Neural Interpolation (Geo-NI) framework for light field rendering. Previous learning-based approaches either perform direct interpolation via neural networks, which we dubbed Neural Interpolation (NI), or explore scene geometry for novel view synthesis, also known as Depth Image-Based Rendering (DIBR). Both kinds of approaches have their own strengths and weaknesses in addressing non-Lambert effect and large disparity problems. In this paper, we incorporate the ideas behind these two kinds of approaches by launching the NI within a specific DIBR pipeline. Specifically, a DIBR network in the proposed Geo-NI serves to construct a novel reconstruction cost volume for neural interpolated light fields sheared by different depth hypotheses. The reconstruction cost can be interpreted as an indicator reflecting the reconstruction quality under a certain depth hypothesis, and is further applied to guide the rendering of the final high angular resolution light field. To implement the Geo-NI framework more practically, we further propose an efficient modeling strategy to encode high-dimensional cost volumes using a lower-dimension network. By combining the superiorities of NI and DIBR, the proposed Geo-NI is able to render views with large disparities with the help of scene geometry while also reconstructing the non-Lambertian effect when depth is prone to be ambiguous. Extensive experiments on various datasets demonstrate the superior performance of the proposed geometry-aware light field rendering framework.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
58秒前
科研通AI6.3的应助被11采纳,获得10
1分钟前
Haines完成签到,获得积分20
1分钟前
SciGPT的应助被阿波罗光之子采纳,获得10
2分钟前
2分钟前
2分钟前
2分钟前
2分钟前
2分钟前
搞怪南松发布了新的文献求助10
2分钟前
2分钟前
彦卿完成签到 ,获得积分10
2分钟前
Zhugengjie完成签到,获得积分10
2分钟前
在水一方的应助被好运连连采纳,获得10
2分钟前
庾傀斗发布了新的文献求助10
3分钟前
搞怪南松完成签到,获得积分10
3分钟前
alex的应助被科研通管家采纳,获得10
3分钟前
alex的应助被科研通管家采纳,获得10
3分钟前
alex的应助被科研通管家采纳,获得10
3分钟前
woxinyouyou完成签到,获得积分10
3分钟前
3分钟前
11发布了新的文献求助10
3分钟前
Eina完成签到,获得积分20
4分钟前
姚老表发布了新的文献求助100
4分钟前
4分钟前
4分钟前
4分钟前
脑洞疼的应助被专注的思松采纳,获得20
4分钟前
Galaxy完成签到,获得积分10
5分钟前
好运连连关注了科研通微信公众号
5分钟前
隐形曼青的应助被科研通管家采纳,获得10
5分钟前
ChencanFang完成签到,获得积分10
6分钟前
楚科研完成签到 ,获得积分10
6分钟前
潇洒小海豚完成签到,获得积分10
6分钟前
奔跑的应助被Jianing采纳,获得30
6分钟前
NexusExplorer的应助被11采纳,获得10
7分钟前
姚老表发布了新的文献求助30
7分钟前
7分钟前
乐乐的应助被GraceKabiri759采纳,获得30
8分钟前
8分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Handbook of Sport Coaching Research 1000
Orthognathic Surgery - 2 Volume Set 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8195212
求助须知:如何正确求助?哪些是违规求助? 9580923
关于积分的说明 21872990
捐赠科研通 7795185
什么是DOI,文献DOI怎么找? 3437967
关于科研通互助平台的介绍 2561276
邀请新用户注册赠送积分活动 2484678