Machine Learning Alternatives to Response Surface Models

机器学习 人工神经网络 支持向量机 计算机科学 人工智能 线性模型 超参数 非线性系统 响应面法 多元统计 数学 量子力学 物理
作者
Badih Ghattas,Diane Manzon
出处
期刊:Mathematics [Multidisciplinary Digital Publishing Institute]
卷期号:11 (15): 3406-3406 被引量:52
标识
DOI:10.3390/math11153406
摘要

In the Design of Experiments, we seek to relate response variables to explanatory factors. Response Surface methodology (RSM) approximates the relation between output variables and a polynomial transform of the explanatory variables using a linear model. Some researchers have tried to adjust other types of models, mainly nonlinear and nonparametric. We present a large panel of Machine Learning approaches that may be good alternatives to the classical RSM approximation. The state of the art of such approaches is given, including classification and regression trees, ensemble methods, support vector machines, neural networks and also direct multi-output approaches. We survey the subject and illustrate the use of ten such approaches using simulations and a real use case. In our simulations, the underlying model is linear in the explanatory factors for one response and nonlinear for the others. We focus on the advantages and disadvantages of the different approaches and show how their hyperparameters may be tuned. Our simulations show that even when the underlying relation between the response and the explanatory variables is linear, the RSM approach is outperformed by the direct neural network multivariate model, for any sample size (<50) and much more for very small samples (15 or 20). When the underlying relation is nonlinear, the RSM approach is outperformed by most of the machine learning approaches for small samples (n ≤ 30).
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
WUYISONG完成签到,获得积分10
刚刚
yu完成签到,获得积分10
刚刚
紧张的绮玉完成签到 ,获得积分10
刚刚
真三发布了新的文献求助10
刚刚
水煮电吹风的应助被sweetwan采纳,获得10
刚刚
zgw发布了新的文献求助10
1秒前
刻苦以云完成签到 ,获得积分10
1秒前
柳煜城完成签到,获得积分10
1秒前
乔垣结衣完成签到,获得积分10
1秒前
Bob完成签到,获得积分10
1秒前
直率的飞雪完成签到,获得积分10
2秒前
2秒前
橙汁完成签到,获得积分0
2秒前
神偷奶奶完成签到 ,获得积分10
2秒前
FashionBoy的应助被晚秋采纳,获得30
2秒前
科研通AI65的应助被dadsafyf采纳,获得10
2秒前
YYJ完成签到,获得积分10
3秒前
林妮完成签到,获得积分10
3秒前
顶刊相见发布了新的文献求助30
3秒前
Hello的应助被橘又青采纳,获得10
3秒前
4秒前
粉雾海完成签到,获得积分10
4秒前
byj完成签到,获得积分10
4秒前
zz完成签到,获得积分10
4秒前
Madge完成签到,获得积分10
4秒前
水龙吟完成签到,获得积分10
4秒前
5秒前
5秒前
Owen的应助被迷路的豌豆采纳,获得10
5秒前
一汪完成签到,获得积分10
5秒前
辛勤小熊猫完成签到,获得积分10
6秒前
刘一半相思完成签到,获得积分10
6秒前
小森林发布了新的文献求助10
6秒前
7秒前
JXnotme完成签到,获得积分10
7秒前
清爽老九发布了新的文献求助30
7秒前
殷硕完成签到,获得积分10
7秒前
文静的以松完成签到,获得积分10
7秒前
8秒前
sx完成签到,获得积分10
8秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
Social Psychology in the Real World 600
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8180488
求助须知:如何正确求助?哪些是违规求助? 9570485
关于积分的说明 21812623
捐赠科研通 7776592
什么是DOI,文献DOI怎么找? 3433286
关于科研通互助平台的介绍 2557522
邀请新用户注册赠送积分活动 2479162