在生信行业。从数据下机到最后的分析完成交付用户,有很多分析模块需要运行,每个分析模块运行时长,需要的计算资源不等。并且生信数据很大,整个分析链总计可能会产生 TB 级别的数据。而且不同的产品,可能需要跑不同的分析流程,这些不同的分析流程会可能会共用某些分析模块。所以我们开发了一个分析调度系统。可以根据产品类型,运行不同的分析流程,并且把整个分析流程上的不同模块,安装功能、资源需求等拆分包装,形成一个个子任务
此系统上线后,极大的降低的分析成本和分析时间。降低了手动操作风险,为后期用户量大增时提供了强有力的报告产出能力