基于微服务架构的Globus科研数据管理平台分析*
2021-03-10袁晓明王美琴
数字图书馆论坛 2021年12期
袁晓明 王美琴
基于微服务架构的Globus科研数据管理平台分析*
袁晓明 王美琴
(苏州大学图书馆,苏州 215006)
科研数据的爆发式增长和远程共享对数据管理提出需求,可实现弹性扩展、高性能传输、云托管的微服务架构数据管理平台为数据的高效管理提供可能。本文调研分析了芝加哥大学阿贡国家实验室研究团队研发的Globus科研数据管理平台。该平台采用分布式微服务架构,包括身份管理、组群服务、数据传输和数据共享4个微服务模块,模块之间相互独立,通过可视化Web界面实现科研数据的传输和共享。该平台已经应用于多个科研项目的数据管理,完成TB数量级的文件传输,其跨区域高效传输、灵活共享的数据管理模式可为我国科研数据管理提供借鉴。
科研数据管理;Globus;云服务;SaaS;微服务
随着科学技术的发展、科学仪器的更新和科学研究方法的改变,高性能探测设备和分析仪器应用到科研过程中,随之产生了大量高分辨率图片、音视频等科研数据,一些学科领域的科研数据爆发式增长,科学研究已经进入数据密集型阶段[1]。同时,高质量科研数据的共享、再现对大数据和人工智能跨领域数据分析日益重要,荷兰莱顿数据科学中心Mons[2]指出,科研数据管理不仅是科研工作者的责任,也是科研项目的重要组成部分,其中数据的存储、迁移和利用越来越受到国内外研究机构、高校及科研人员的重视。
数据密集型科研环境下,科研数据管理对科研数据价值的发挥产生了重要影响,国内外机构或图书馆围绕科研数据管理平台的开发和本地部署开展相关实践,以帮助研究者管理科研数据。……
登录APP查看全文
