- 智能云存储系统 您现在的位置 :首页 -- 技术论坛 -- 智能云存储系统
- 上一篇:云存储的未来技术发展趋势
- 下一篇:分布式存储--冷数据存储的较优方案
如何让冷数据更好存储
发表于:2018-11-29 浏览590次 |
近年来,互联网、云计算、移动计算和物联网技术迅速发展,数以亿计的网络用户、无所不在的移动设备、RFID和无线传感器时时刻刻都在产生海量的数据,并且需要处理的数据呈几何级数增长。据统计,这些海量数据中只有10%―15%的数据是被经常访问的,而绝大部分都会在产生之后随着时间的推移逐渐变冷。这些“冷数据”的访问率虽然很低,但用户还是希望保留这些数据;对于企业而言还有很多数据需要进行备份和存档。
对于冷数据的技术存储,首先是数据的分级,主要是指从海量的数据中根据文件的访问频率、价值等因素,进行冷热数据的分类,甚至分出更细的数据类型,如“温数据”、“冰数据”等。目前常见的数据分级方法主要有两类,一类是业务数据的分类,即基于具体的业务类型,结合长期以来的运营经验,进行运营级的数据分类;另一类是基于数据存取特性的分类,即借助存储软件系统自动进行数据的冷热分级。通过存储软件系统对数据进行冷热监控,统计分析一个时间周期内的IO冷热程度,并按照设定的分类策略自动进行数据的分类,并将冷数据从前端业务存储系统迁移到冷数据存储系统。存储密度的提升,几乎所有的存储部件厂商都在努力通过提升单盘的存储容量来应对数据的快速增长。
金钱猫云存储架构下的冷存储技术产品JES5000高密度低功耗存储服务器,5U空间内提供80+8个硬盘槽位,最大支持80块3.5寸SAS/SATA硬盘,有效降低系统功耗,节省运行成本,可以满足不同行业用户的多样化需求,是一款绿色节能产品。运营能力的提升方面,海量数据的存储需要更智能化的运维系统,包括对数据的定期巡检、数据的精细化分类、自动化的数据迁移、故障预测及定位、设备的休眠等机房节能措施。此外存储的架构设计也是当前的研究热点,包括设备的分级、存储介质的选型、数据存储格式、数据检索以及对外服务接口等。金钱猫云存储架构下的冷存储技术产品JES5000高密度低功耗存储服务器可以根据用户需要,对存储系统中海量的数据进行智能分析和管理,将冷热数据分离,冷数据移至低功耗的硬盘中,通过智能电源管理技术,实现硬盘空闲时自动断电,有数据访问时自动加电,有效降低存储服务器整机运行功耗,并通过清理垃圾数据、数据去重、备份、归档等技术有效优化存储管理,全面提高存储效率,降低存储和运营成本。
另外,数据访问延迟、整体读取速率以及数据持久性等,也是海量冷数据存储的关键技术。这些关键技术相互制约影响,尤其是在运营能力提升方面,涉及的因素众多,对冷数据存储的选型提出了新的挑战。企业可以根据自身的业务特点,结合多年的运营经验和业务预测,进行存储架构的整体设计,并基于其在冷存储方面的经验和技术积累,对外提供了相关的冷数据存储服务。金钱猫云存储架构下的冷存储技术产品JES5000高密度低功耗存储服务器能同时数据存储在冷盘中支持在线可访问,仅5-10S就可响应,比光盘、磁带等离线存储更理想,更友好,更方便。