Reproducible, scalable, and shareable analysis pipelines with bioinformatics workflow managers

工作流程 软件可移植性 计算机科学 可扩展性 管道(软件) 数据科学 软件工程 工作流技术 信息基础设施 工作流管理系统 数据库 工作流引擎 操作系统
作者
Laura Wratten,Andreas Wilm,Jonathan Göke
出处
期刊:Nature Methods [Nature Portfolio]
卷期号:18 (10): 1161-1168 被引量:162
标识
DOI:10.1038/s41592-021-01254-9
摘要

The rapid growth of high-throughput technologies has transformed biomedical research. With the increasing amount and complexity of data, scalability and reproducibility have become essential not just for experiments, but also for computational analysis. However, transforming data into information involves running a large number of tools, optimizing parameters, and integrating dynamically changing reference data. Workflow managers were developed in response to such challenges. They simplify pipeline development, optimize resource usage, handle software installation and versions, and run on different compute platforms, enabling workflow portability and sharing. In this Perspective, we highlight key features of workflow managers, compare commonly used approaches for bioinformatics workflows, and provide a guide for computational and noncomputational users. We outline community-curated pipeline initiatives that enable novice and experienced users to perform complex, best-practice analyses without having to manually assemble workflows. In sum, we illustrate how workflow managers contribute to making computational analysis in biomedical research shareable, scalable, and reproducible.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
abiorz完成签到,获得积分0
1秒前
窗外是蔚蓝色完成签到,获得积分0
1秒前
缓慢仇天完成签到,获得积分10
2秒前
冷吃兔要热了吃完成签到,获得积分10
2秒前
龙2024完成签到,获得积分10
3秒前
lucky完成签到 ,获得积分10
3秒前
俊秀的思山完成签到,获得积分10
3秒前
DHMO完成签到,获得积分10
4秒前
4秒前
优雅莞完成签到,获得积分10
5秒前
风信子完成签到,获得积分0
6秒前
Helios完成签到,获得积分0
6秒前
lylyspeechless完成签到,获得积分10
6秒前
我的偶像是C罗完成签到,获得积分10
6秒前
egoistMM完成签到,获得积分10
6秒前
JY'完成签到,获得积分0
6秒前
qqshown完成签到,获得积分10
7秒前
swiep完成签到,获得积分10
8秒前
ice完成签到,获得积分10
8秒前
我要蜂蜜柚子完成签到,获得积分10
9秒前
陌桑子完成签到 ,获得积分10
9秒前
10秒前
piaopiao完成签到,获得积分10
10秒前
姜勇发布了新的文献求助10
10秒前
liusj完成签到,获得积分10
10秒前
elsa嘻嘻完成签到 ,获得积分10
10秒前
蓝晶石完成签到,获得积分10
10秒前
Noshore完成签到,获得积分10
10秒前
香蕉觅云应助科研通管家采纳,获得10
10秒前
甜美的桐完成签到,获得积分10
10秒前
11秒前
Which完成签到,获得积分10
11秒前
nssanc完成签到,获得积分10
11秒前
Amikacin完成签到,获得积分0
11秒前
鹏举瞰冷雨完成签到,获得积分0
11秒前
搞怪莫茗完成签到,获得积分10
11秒前
yang完成签到 ,获得积分10
12秒前
俞弼发布了新的文献求助10
16秒前
NIUB发布了新的文献求助10
22秒前
slm完成签到,获得积分10
22秒前
高分求助中
Principles of Economics, 11th Edition 10000
University Physics with Modern Physics, 16th edition 10000
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Gründe der Seele:Die Wiener Psychatrie im 20.Jahrhundert 1000
Development of a Bridge Weigh-In-Motion System: A technology to convert the bridge response to the passage of traffic into data on vehicle configurations, speeds, times of travel and weights 1000
Organic Reactions, Volume 116 1000
Current concepts in cutaneous toxicity : proceedings of the Fourth Conference on Cutaneous Toxicity, Washington, D.C., May 9-11, 1979 1000
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7270248
求助须知:如何正确求助?哪些是违规求助? 8890675
关于积分的说明 18793482
捐赠科研通 6945503
什么是DOI,文献DOI怎么找? 3203730
关于科研通互助平台的介绍 2376601
邀请新用户注册赠送积分活动 2179661