DNN-based HRTF individualization for accurate spectral cues using a compact PRTF

计算机科学 语音识别 人工智能
作者
Byeong-Yun Ko,Hyeonuk Nam,Deokki Min,Y.K. Park
出处
期刊: 卷期号:270 (6): 5694-5699
标识
DOI:10.3397/in_2024_3634
摘要

Head-Related Transfer Function (HRTF) plays a critical role in how the auditory system perceives spatial information. The spectral cues embedded in HRTF are vital for accurately determining the elevation of sound sources. In existing approaches, deep neural networks (DNNs) have been utilized to predict the magnitude spectra of HRTF from images of the pinna, typically employing the HRTF log-magnitude as the output during training. However, HRTF encompasses the acoustic characteristics of both the head and torso, exhibiting direction-dependent patterns that pose challenges in reconstructing its spectral cues. To address this complexity, we propose an innovative method for HRTF individualization. Our model uses Pinna-Related Transfer Function (PRTF) as the output during training, which helps alleviate the impact of sound reflections from the head and torso in the head-related impulse response (HRIR). Our experimental findings, based on an HRTF dataset, illustrate that our proposed model excels in reconstructing the first and second spectral cues. Furthermore, it outperforms previous deep learning models in terms of log spectral distortion (LSD).

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
1秒前
xiubo128完成签到,获得积分10
1秒前
yawngale发布了新的文献求助10
1秒前
春风灼华完成签到,获得积分20
1秒前
科研通AI6.4应助wulanshu采纳,获得10
2秒前
科研通AI6.2应助pancake采纳,获得10
2秒前
yj完成签到 ,获得积分10
3秒前
CodeCraft应助lan采纳,获得10
3秒前
wan完成签到 ,获得积分10
3秒前
宁天娇发布了新的文献求助30
4秒前
清溪岸关注了科研通微信公众号
4秒前
lunhui6453完成签到 ,获得积分10
5秒前
5秒前
5秒前
哇哇哇完成签到,获得积分10
6秒前
Chem34发布了新的文献求助10
6秒前
7秒前
Lavender完成签到,获得积分10
7秒前
张欣豪完成签到,获得积分10
8秒前
雪白的秀发布了新的文献求助10
8秒前
后陡门小学生完成签到 ,获得积分10
8秒前
8秒前
ksak607155完成签到,获得积分10
8秒前
daiyan完成签到,获得积分10
8秒前
汉堡包应助超帅的南霜采纳,获得10
9秒前
lvren112完成签到,获得积分10
9秒前
lxy完成签到,获得积分20
9秒前
10秒前
10秒前
aaa完成签到,获得积分10
10秒前
10秒前
shisui发布了新的文献求助20
10秒前
所所应助鲁大海采纳,获得10
11秒前
潘多拉完成签到,获得积分10
11秒前
Hello应助Layman采纳,获得30
11秒前
烟花应助meteorabob采纳,获得10
12秒前
路过完成签到,获得积分10
12秒前
AA完成签到 ,获得积分10
12秒前
刘求助发布了新的文献求助10
12秒前
wanci应助destiny采纳,获得30
13秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Les chinois de jakarta: temples et vie collective 1000
Autoparametric Resonance in Mechanical Systems 1000
Social Psychology 800
基于锂离子电池正极材料回收的绿色溶剂开发及工程化应用研究 800
Cosmos as Art Object: Studies in Plato's Timaeus and Other Dialogues 600
Management and the Arts 510
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7646804
求助须知:如何正确求助?哪些是违规求助? 9219098
关于积分的说明 19784551
捐赠科研通 7211781
什么是DOI,文献DOI怎么找? 3277199
关于科研通互助平台的介绍 2438693
邀请新用户注册赠送积分活动 2275442