如何有效管理冷库大数据

Forrester报告称，组织中多达73％的大数据未使用，但很少有大数据被丢弃。保留旧的但很少或从未访问过的数据的主要原因是：

• 人们担心新的分析类型（例如长期趋势）可能会使所有被遗忘的数据成为必需。 

• 诉讼的可能性，这要求能够检索可能要追溯到几年前的旧文档和电子邮件。

面临的挑战是管理此数据的存储，在很大程度上看不到这些数据时也是如此。

SEE：世界上最重要的冷藏设施可以保障食品的未来（TechRepublic）

一个问题是，IT将存储视为商品。存储很便宜，因此没有人考虑在需要时订购更多磁盘甚至磁带。

但是存储真的便宜吗？

澳大利亚托管服务提供商PPS的业务经理Craig Hollins 与TechGenix的Mitch Tulloch谈到了带宽和基础架构成本的不断增长，而这些成本通常需要支持更多存储（甚至便宜的存储）以及包含大数据的更大文件。更多的存储空间需要更多的资金用于处理，网络和人员等支持资源。与存储相关的成本会增加的另一个原因是，保留大型文件的多个版本时，因为这些文件使灾难恢复和备份过程变得复杂。

结果是，为很少使用或根本不使用的数据留出了额外的存储空间，尤其是大数据时，它需要超出存储空间的资源。这增加了总体IT支出。

公司可以采取以下四个步骤来有效地管理其冷存储大数据。

1. 使用便宜但可靠的冷藏库

对于很少使用或存档的大数据，速度较慢的硬盘驱动器和磁带是最常用的存储介质。关键是定期测试磁盘和磁带，以确保它们工作正常。此外，请避免将旧的驱动器和磁带仅委派给归档和数据备份功能的诱惑-这些资源仍具有使用寿命，并且如果它们是较旧的资产，则很可能发生故障。

2.考虑基于云的冷存储

如果您不想在现场或物理外部设施中存储大数据，则可以选择使用云。有很多冷库云选择，您可能会找到一种比存储所有冷数据最经济的选择。

3.对冷藏数据进行年度评估

仅仅因为您有一种存储未使用数据的方法，并不意味着您应该常规地存储所有数据。如果您还没有，现在是时候与最终用户管理层和您的法律部门坐下来，确定应该保留哪些数据以及可以丢弃哪些数据。您应该每年评估一次冷库数据。

查看： 从大数据计划中获得最大价值的60种方法（免费PDF）（TechRepublic）

4.使用数据/存储自动化

大多数存储提供商都提供了分层数据存储，而人工智能（AI）促进了这种分层存储。该AI遵循用于存储您定义的数据的规则，并自动将其应用于确定数据的存储位置。 

数据存储的主要层是内存存储或固态驱动器，用于存储您经常访问的数据。可以将间歇性使用的数据存储在使用较便宜的硬盘驱动器的辅助数据层上。 

很少使用的数据或您的冷存储数据被分配给速度非常慢的磁盘驱动器或磁带，这些磁盘或磁带是您最便宜的存储介质。通过利用这种自动化，您可以确保经常以最低的成本存储很少使用的数据的同时，始终可以将大量使用的数据提供给用户。

结束语

大多数大数据存储管理策略都专注于使数据实时可供用户使用，但这也增加了用于存储和处理的预算支出。公司可以通过查看他们管理的很少使用的大数据来帮助抵消这些较大的支出，从而可以确保以最少的成本存储这些数据。对于此数据，冷存储介质是一种安全，可靠且价格合理的解决方案。