首站-论文投稿智能助手
典型文献
ONSET数据流水线
文献摘要:
随着天文大科学设备的投入使用,传统的开发模式面临程序重复开发,环境依赖冲突等问题.另外,集群是一个高度耦合的计算资源,严重的环境冲突可能导致整个集群不可用.为了解决这个问题,采用微服务的概念开发新的流水线框架,这种框架可以实现短期内开发和部署新的流水线.介绍了通过这种框架开发的ONSET数据流水线,为了实现准实时数据处理,采用MPI和GPU技术对核心程序做了优化,并对最后的性能做了评估.结果表明,这种开发模式可以在短期内搭建满足需求的流水线,这种开发模式对未来多波段多终端的天文数据处理有借鉴意义.
文献关键词:
ONSET;数据流水线;容器;GPU
作者姓名:
王新华;陈东;邓涛;代红兵;向永源
作者机构:
中国科学院云南天文台,云南昆明 650216;中国科学院大学,北京 100049;云南大学信息学院,云南昆明 650504
引用格式:
[1]王新华;陈东;邓涛;代红兵;向永源-.ONSET数据流水线)[J].天文研究与技术-国家天文台台刊,2022(01):86-94
A类:
ONSET,数据流水线
B类:
大科学,投入使用,开发模式,环境依赖,计算资源,环境冲突,微服务,开发新,线框,实时数据,MPI,GPU,在短期内,多波段,多终端,天文数据
AB值:
0.2813
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。