我们居住的这颗蓝色星球70%的面积是海洋,由于海洋面积广博,环境复杂,是一个动态的、连续的、边界模糊的时空信息载体,对海洋的探索非常困难,因此我们对其知之甚少。

人类对海洋的科学研究大部分基于数据驱动。太空中当前有1000多颗卫星对我们生活的地球家园实施各种遥感探测,带来海量数据。地理信息与Web技术的最新发展使管理并共享大量的海洋监测数据成为了可能。对这些海量数据的应用和共享需要突破数据种类各异、个人硬件限制以及遥感专业门槛等多重“关卡”。目前国内已有一些研究机构研发出海洋数据在线共享与分析的平台,可以帮助海洋研究相关领域的从业人员、爱好者和社会公众查看和分析海洋数据,使海洋遥感数据随手可查、随手可用。

海洋研究进入大数据时代

随着我们对海洋研究和探索的脚步不停歇,以卫星遥感数据为代表的海洋数据呈爆炸式增长,前所未有的海洋大数据给相关的数据分析平台的存储管理、分析挖掘和产业应用带来了巨大的挑战,具体体现在以下几个方面:

·海洋遥感数据量日益膨胀,数据种类日益丰富,需要匹配大容量的、可弹性扩展的数据存储空间,降低TCO。

·海洋大数据具有多源性、模糊性、时空过程性等特点,需要存储支撑海量的数据预处理,提高数据质量。

·除了解决数据的存储,还要考虑数据的使用和文件的精细化管理,支撑海洋大数据相关在线分析平台现有的业务,帮助用户从浩瀚的数据中找到自己想要的数据,更好地服务海洋科研用户。

MOS海量对象存储赋能海洋探索

为了更好地利用海洋大数据,挖掘其蕴含的巨大价值,杉岩数据推出了基于MOS海量对象存储的“地理信息遥感影像存储解决方案”。用户可通过客户端或同步工具导入影像数据,GIS、地图AI、空间大数据等应用通过对象和文件接口调阅数据,同时解决方案还提供了影像数据标签、检索、数据分层等高级功能,可以帮助用户进行遥感影像数据的深度挖掘和拓展应用。

图 杉岩地理信息遥感影像存储解决方案

·全分布式架构设计:动态灵活扩容,性能随节点数增加而线性增加,应对海洋大数据未来增长需求。

·多接口支持:支持NFS、CIFS文件接口,解决入库系统接口改造问题,无缝对接大数据平台,性能稳定。

·空间利用率高:具备小文件合并特性,提升空间利用率的同时,降低数据检索时延。

·平滑演进:通过生命周期管理完成对现有业务和数据的迁移,保证业务连续性的同时实现架构平滑演进。

数据感知海洋之美

国内某海洋研究机构采用杉岩数据“地理信息遥感影像存储解决方案”构建了PB级的存储空间,提供海洋遥感数据的共享服务。在确保存储性能和容量的同时,也为未来开展大规模的海洋研究和探索工作奠定了数字基石。

·数据扁平化存储,简管理轻运维

分布式架构的超大容量存储,支持海洋探索业务无感知的在线扩容;单一命名空间下文件数量可达百亿级,存储空间可扩展到EB级,简化了海洋数据的管理和运维难度。

·多种数据保护策略,高安全易分享

采用多副本、多故障域等多种安全机制保障海洋数据安全;精细的权限划分和共享管理,既防止敏感数据的泄漏,又确保必要的海洋数据共享,促进海洋科学研究和技术创新,最大程度减少冗余数据对存储空间的消耗。

·快查询预分析,提升科研支撑力

海量对象存储的智能小文件优化、I/O优化、负载均衡等多种技术保障对海洋数据的流畅访问;内置的智能处理引擎、数据自动标签化,实现快速检索和数据发现,还可以与机器学习平台协同开展对遥感数据的智能预处理,提升对海量遥感数据的处理能力和深度学习智能提取算法的精度,提升科研效率。

海洋是人类尚未充分认识的科学与资源宝库,开发海洋也是为了世界社会与经济的可持续发展。浩瀚的海洋数据通过杉岩MOS海量智能存储,不仅解决了“存得下”的问题,还“用得爽”,在海量存储和便捷管理的基础上,让存储“理解”数据,助力我们探秘海洋,感知蓝色星球之美。