Reinforcement learning based temperature control of a fermentation bioreactor for ethanol production

设定值 控制器(灌溉) 控制理论(社会学) 生物反应器 强化学习 生物过程 计算机科学 控制(管理) 工程类 人工智能 植物 化学工程 农学 生物
作者
N. Rajasekhar,T. K. Radhakrishnan,Samsudeen Naina Mohamed
出处
期刊:Biotechnology and Bioengineering [Wiley]
卷期号:121 (10): 3114-3127 被引量:6
标识
DOI:10.1002/bit.28784
摘要

Ethanol production is a significant industrial bioprocess for energy. The primary objective of this study is to control the process reactor temperature to get the desired product, that is, ethanol. Advanced model-based control systems face challenges due to model-process mismatch, but Reinforcement Learning (RL) is a class of machine learning which can help by allowing agents to learn policies directly from the environment. Hence a RL algorithm called twin delayed deep deterministic policy gradient (TD3) is employed. The control of reactor temperature is categorized into two categories namely unconstrained and constrained control approaches. The TD3 with various reward functions are tested on a nonlinear bioreactor model. The results are compared with existing popular RL algorithm, namely, deep deterministic policy gradient (DDPG) algorithm with a performance measure such as mean squared error (MSE). In the unconstrained control of the bioreactor, the TD3 based controller designed with the integral absolute error (IAE) reward yields a lower MSE of 0.22, whereas the DDPG produces an MSE of 0.29. Similarly, in the case of constrained controller, TD3 based controller designed with the IAE reward yields a lower MSE of 0.38, whereas DDPG produces an MSE of 0.48. In addition, the TD3 trained agent successfully rejects the disturbances, namely, input flow rate and inlet temperature in addition to a setpoint change with better performance metrics.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
青平完成签到 ,获得积分10
1秒前
Badge完成签到 ,获得积分10
2秒前
斯文败类的应助被pangpang采纳,获得10
2秒前
cjh发布了新的文献求助10
2秒前
3秒前
Polly完成签到,获得积分10
4秒前
5秒前
积木发布了新的文献求助10
5秒前
斯文败类的应助被学术蝗虫采纳,获得10
6秒前
摩卡发布了新的文献求助30
7秒前
欢喜的乐安完成签到,获得积分10
7秒前
科研民工发布了新的文献求助200
7秒前
8秒前
ding的应助被fusion采纳,获得100
8秒前
比比卡丘关注了科研通微信公众号
9秒前
万能图书馆的应助被Luke采纳,获得10
9秒前
111关闭了111的文献求助
9秒前
cjh完成签到,获得积分10
9秒前
ResKeZhang发布了新的文献求助10
9秒前
追寻迎夏完成签到,获得积分10
12秒前
12秒前
14秒前
摩卡完成签到,获得积分10
14秒前
orixero的应助被不吃辣采纳,获得10
14秒前
Docline完成签到,获得积分10
15秒前
whenimdrunk完成签到,获得积分10
15秒前
15秒前
田様的应助被pivot_literature采纳,获得10
15秒前
16秒前
hvgjgfjhgjh完成签到,获得积分10
17秒前
17秒前
17秒前
ResKeZhang完成签到,获得积分10
17秒前
crazycathaha发布了新的文献求助10
18秒前
crazycathaha发布了新的文献求助10
18秒前
呵呵贺哈发布了新的文献求助30
18秒前
crazycathaha发布了新的文献求助10
18秒前
难过的念露完成签到,获得积分20
19秒前
19秒前
19秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Agyptische Geschichte der 21.30. Dynastie 510
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
基于界面调控的高效湿气发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8191366
求助须知:如何正确求助?哪些是违规求助? 9578238
关于积分的说明 21857620
捐赠科研通 7790721
什么是DOI,文献DOI怎么找? 3436607
关于科研通互助平台的介绍 2560359
邀请新用户注册赠送积分活动 2483340