空中客车防御和空间为卫星数据推出宠物档案,卫星数据与Stornext略微缩放存储

归档卫星数据的Petabytes

欧洲航天局(ESA)将为每个“哨兵”任务发射两颗卫星——在项目启动的几年内,ESA将有4颗“哨兵”卫星进入轨道。每颗卫星每年传输超过1PB,长达15年。保留所有这些数据需要一个新的存档。“我们不仅存档原始的0级仪器数据,还存档由ESA有效载荷数据地面段处理的数据,这产生了1级和2级产品,”空客国防和空间技术设计权威Mark Curtis说。“为了提供所有这些数据的长期存档,我们需要一种可以扩展到几十pb的存储解决方案。”

管理数百万个文件,利用磁带的经济学

“当轨道中有四个卫星时,我们需要每天存档40,000个文件,”柯蒂斯说。“我们需要一个强大的文件系统来支持数百万个文件。”它需要支持各种尺寸和类型。

“控制成本至关重要,因为我们需要为Sentinel任务存放数十个Petabytes,”Curtis说。“胶带非常经济:每个磁带盒都可以廉价地存储大量数据,磁带库需要比更高速度存储系统更少的电源和冷却。”和磁带非常适合流流的大量数据的应用。

用StorNext构建可扩展的多层档案

空客团队选择了多层StorNext解决方案,包括StorNext AEL6000磁带归档、元数据设备和磁盘缓存——所有这些都是由StorNext支持的。StorNext之所以被选中,部分原因是其在Infoterra与量子公司的合作经历。Infoterra是谷歌Earth的图像供应商,现在是空中客车国防与航天公司的一部分。

“Quantum一直在倾听我们改进解决方案的要求,”柯蒂斯说。“在StorNext的情况下,Quantum纳入我们和其他组织的输入,这有助于产生更强大的存储解决方案。”

归档最初支持18pb的数据,但可以扩展到37pb。“StorNext让我们轻松扩展我们的存档,”柯蒂斯解释说,“所以我们可以支持新的卫星任务,并将额外的数据融入未来。”

启用连续高速数据摄取和访问

“我们目前的配置支持StorNext文件系统1.1GB/s的性能,”Curtis说。“因此,我们可以迅速吸收我们收到的所有原始和处理过的数据,并在必要时迅速检索。”在大多数情况下,空客团队可以在不到一分钟的时间内从存档中检索单个文件,并且光纤通道连接意味着大型传输也可以快速传递。系统支持多种操作系统,包括Linux和Windows。

保障数据,同时保持员工水平低

系统的扩展数据寿命管理(EDLM)功能有助于保护数据。“StorNext磁带存档的基于策略的EDLM功能有助于主动地在长期内保持磁带上的数据的完整性,”Curtis解释说。“如果用磁带开发出问题,StorNext会自动将数据迁移到更好的磁带,而无需我们的管理员即可举行手指。EDLM提供了巨大的优势。“

“带有StorDext的行政费用相当低,”柯蒂斯说。“随着量子解决方案,我们中的两个人可以轻松地管理卫星数据的不断增长的PetaScale档案。”

获得意外数据增长的灵活性

Stornext还有助于满足更改的要求。例如,新规划的中继卫星系统预计将增加储存需求超出原始估计数。“幸运的是,Stornext使我们能够轻松扩展我们的环境。我们可以添加新的归档系统 - 然后移动到LTO-7.不需要大修就能满足这些新的数据收集要求,”柯蒂斯说。

“由于ESA推出了下一系列Sentinel卫星,存储要求可能再次变化,”柯蒂斯说。“随着Stornext解决方案,我们准备了。”