大数据管理：概念、技术与挑战张超宇

摘要近年来，随着越来越多的大型科学仪器的建设和重大科学实验的发展，科学研究进入了前所未有的大数据时代。大数据时代的科学研究是一门科学性强、需求量大、数据量大、计算量大、发现过程大、研究开发大的数据，支持全生命周期的数据管理系统具有重要意义。本文分析了R&D科学大数据管理系统的产生背景，阐述了科学数据的概念和三个特点。通过对科学数据资源的开发和科学数据管理系统的研究分析，提出了全生命周期管理的科学数据分析的关键技术在科学数据管理系统从五个方面数据融合，实时数据分析，长期存储，云服务的系统和数据的开放共享机制。最后，展望了科学数据管理系统在科学研究领域的应用前景。

• 作者: 张超宇
• 出处: 《电力设备》 2017年19期
• 关键词: 科学数据 大数据 数据流水线
• 分类: [电气工程][电力系统及自动化]