大数据时代，海量数据如何存储

 背景：大数据时代，数据规模越来越大，由于数据的增长速度和非结构化的特点，常用的硬软件设备已无法使客户在可容忍的时间范围内搜索、管理和分析。

Forrester报告显示，有多达73%的数据未使用，但很少有数据被丢弃。仍然保留旧的但很少或从未访问过的数据，主要原因在于：新的分析类型需要，比如长期趋势分析可能会使这些几乎被遗忘的数据重新启用。这种数据被称作“冷数据”，即是不经常访问、但又无法删除的数据，比如用户在社交媒体上存储的大量信息、企业备份数据、业务与操作日志数据等数据。如何有效管理此类数据，成为一大难题。但随着经营规模和日常事务的增加，存储相关成本与日俱增。

一般采取以下四种方法有效管理其冷数据：

1、使用便宜但可靠的冷数据存储

对于很少使用或存档的数据，慢速硬盘驱动器和磁带是最常用的存储介质。但此类存储介质使用寿命相对固定，在设备生命周期结束前，须将数据备份到新介质上。

2.考虑基于云的冷数据存储

如果不想使用物理外部设施进行数据存储，则可以选择“云”。

3.年度评估冷数据

即使已有存储冷数据的方法，也并不意味着可存储所有冷数据。管理办和法务人员须每年评估一次数据的“去留”。

4. 使用数据/存储自动化

大多数分层数据存储是通过人工智能实现的。人工智能通过用户定义的存储数据规则，来确定数据存储位置。很少使用的数据或冷数据将被分配给速度较慢的磁盘驱动器或磁带。自动化的过程不仅确保以最低的成本存储冷数据，而且也能将大量热数据提供给用户。

金钱猫冷数据存储和数据优化系统可根据用户需要智能分析和管理数据，将冷热数据分离，冷数据移至低功耗的硬盘中，通过智能电源管理技术，有效降低存储服务器整机运行功耗，并通过清理垃圾数据、数据去重、备份、归档等技术有效优化存储管理，全面提高存储效率，降低存储和运营成本。据测算可降低服务器硬盘投资成本50%，节省用电50%。同时数据存储在冷盘中支持在线可访问，仅5-10S就可响应，比光盘、磁带等离线存储更理想，更友好，更方便。