汽车电子领导者使用昆腾的多层存储解决方案加速自动驾驶汽车的工作流程

主动安全系统和自动驾驶技术的下一代电子产品的屡获殊荣的开发人员,需要解决因数据爆炸和更复杂的工作流程而导致的工作流程瓶颈的解决方案。只有昆腾的多层存储解决方案才能使开发团队在不超出预算的情况下再次恢复全速运行,从而通过提供比其他解决方案更高的性能来实现更简单的工作流程,并且成本仅为10%。

这个案例研究中的国际组织是为下一代车辆创建电子产品(包括自动安全功能和自动驾驶技术)的领导者,其年收入达数百亿美元。在过去的几年中,随着主动安全系统(如自动制动和碰撞预警系统)的优势被证明可以减少事故并提高汽车的安全性,汽车电子学研究得到了飞速发展。该公司最近发现,随着数据量的急剧增加,以及对更快的测试和更复杂的分析的需求,该重要计划的进展受到威胁。

用于汽车研究的扩展数据集推动了更高的数据量

开发先进的汽车电子设备取决于对从安装在车辆上的传感器和摄像机收集的数据集运行复杂的测试和分析程序。随着摄像机和传感器数量的增加以及分辨率的提高,其结果就是迅速扩展了需要存储和管理的数据集。该公司从为项目存储数百TB的数据到超过PB的数据。

复杂的分析和更长的数据保留更改工作流程

随着数据量的爆炸式增长,高性能计算(HPC)系统的部署进一步给IT基础架构带来压力,迫使工作流程发生变化。网络连接存储(NAS)系统的速度不足以适应新的HPC系统,因此数据集已复制到本地磁盘以进行工程测试。更大的数据集意味着团队还需要更快的存储性能来运行其分析,并且当前环境无法跟上。使问题复杂化的是,随着团队开发新的,更高级的分析软件,需要保存所有旧数据集以备将来重用。

IT团队决定转变其数据管理和存储系统,以支持业务的新需求。它需要创建一个系统,该系统可以存储更多数据,保留更长的时间,更有效地保护数据,并提高所有从事这些项目的团队的可访问性,并且在预算范围内进行。

该解决方案将高性能磁盘和磁带存档结合在一个管理点下

IT团队研究了所有可用选项,并与众多供应商进行了交谈。它曾考虑扩大其NAS容量,但由于成本高昂,数据保护复杂性和性能不足等原因而拒绝采用这种方法。取而代之的是,该公司选择了一种分层存储方法,该方法在结合了高性能磁盘和归档层的存储体系结构中使用了昆腾的StorNext数据管理软件。

StorNext解决方案具有三个主要优点。 StorNext旨在处理非常大的文件和大量的文件,这些因素在公司的工作中变得越来越重要。 StorNext还旨在支持协作工作流-团队可以共享数据集,甚至允许工程师同时处理相同的文件。最后,它提供了一种分层方法,其中包括一个磁带存档,以支持海量存储功能,自动保护并降低总成本。总体而言,团队得出的结论是,使用StorNext解决方案的总成本可能仅为他们考虑的其他方法成本的10%。

新的工作流程结合了访问,保护和存档功能

在新的工作流程中,研究数据被下载到高性能磁盘阵列中,该磁盘阵列现在已成为Quantum StorNext管理的存储环境的一部分。工程团队的HPC系统可以使用高速光纤通道存储区域网络(SAN)连接直接访问数据。使用StorNext,现在所有用户都可以看到相同的数据集,甚至可以允许不同的团队同时对相同的文件运行分析。总体而言,它使工作流程变得更快,更高效。

保护也已成为该过程的自动化部分。一旦数据降落到磁盘上,StorNext就会自动在StorNext AEL磁带归档中制作两个副本。这些副本最初用作备份,后来又成为活动存档的一部分。当不再主动处理磁盘上的数据时,将回收磁盘空间,但是其中一个磁带副本保留在存档中,可以在其中进行访问。 StorNext通过与磁盘上的副本相同的文件系统(在相同的目录位置)在存档中显示副本,因此研究团队可以直接访问它们。

该项目的工程师对他们可以直接访问的数据量以及以将文件从归档文件写回磁盘以供使用的速度印象深刻。

支持站点之间的协作

磁带上数据的第二个副本有两个用途。它提供了一份保险的异地副本以保护灾难恢复(DR),但它也已成为世界各地设计和工程团队处理相同数据的一种非常有效的方式。该团队发现,在北美站点和欧洲站点之间共享PB级数据的最简单方法是在不同位置之间传送存档磁带。第二个站点上的数据使全球开发团队可以共享相同的数据集,并且还提供了这些关键文件的DR副本。

在这个快速扩展的工程和设计领域中,未来的需求尚不清楚,但是似乎可以肯定,这将涉及对更多数据,更长的保留时间,更高的性能以及更多协作的需求。 StorNext方法为IT团队提供了多种选择,可以帮助其满足未来的需求。这些措施包括允许团队分别扩展性能和容量-并且允许团队让归档变得庞大,同时将活动磁盘工作区保持尽可能小以控制成本。