海量数据存储技术
的有关信息介绍如下:
海量数据存储技术是指用于高效管理和存储大规模数据集的技术和方法,通过分布式存储系统、数据库分片、数据压缩、去重和冗余备份等手段实现高扩展性和高性能,广泛应用于大数据分析、物联网、人工智能、金融、电商等领域 。该术语在《海洋科技名词》中被定义为"采用全息存储、专用软件、专用芯片或编程数据处理器压缩存储大量海洋数据的方法",于2007年公布。
世界各主要海洋国家均有负责数据处理和管理的海洋数据中心。美国国家航空航天局的地球观测中心建立了地球观测系统数据和信息系统,采用分布式开放的系统架构;欧洲航天局也建立了采取基于任务的分布式存储的数据中心。中国目前海洋卫星遥感数据的存储采用由千兆交换机连接构成的NAS三级存储体系,主要采用磁盘阵列加光盘存储的方式。国外的海洋大数据存储采用了逻辑上集中,物理上分散的分布式服务器集群存储架构;近年来国内海洋大数据存储也取得了显著进展,已建成大规模分布式存储集群,如山东省已建成170PB的海洋数据存储集群,多个沿海省份正积极建设各自的海洋大数据中心,采用分布式存储架构 。
想要了解更多“海量数据存储技术”的信息,请点击:海量数据存储技术百科



