IT系统是智慧的支撑,同时IT系统形成的大规模网络,包括互联网、物联网、传感网络、社交媒体网络时时刻刻产生巨大的数据,这些数据需要存储。之前数据是存储在各个IT系统当中。我们建立大规模数据中心来存储这些数据,为各个IT系统提供统一化的存储、统一化的计算,从而使各个IT系统能够互相的共享资源、协调运转。
在大数据时代到来下,需要存储和计算的数据越来越多、数据量越来越大,传统的数据中心也面临着许多新的问题、新的挑战。比如能源消耗高,据相关统计,数据中心电费基本上已经占到数据中心成本50%以上,4年左右的电费有可能超过当初数据中心建设当中所投入的基础设施费用。另外数据中心时时刻刻存在数据损坏的风险,传统办法是定期更换硬盘,把数据从硬盘迁移到新硬盘当中,在数据量小的时候是完全可以的,但是一旦数据量上到1P级别的时候,定期重新建议的话,有点耗时耗力,也是越来越不可能了。由于存储在数据中心里面的数据存储在网络中,造成非法访问,数据存在被篡改、删除的可能,特别对公共安全来说,有可能造成非常不好的影响。
带着这些问题,我们中经进行了分析,我们发现可以将数据中心数据按照访问频率的高低分为热数据、温数据、冷数据。访问频率比较高的热数据存储在高速硬盘当中。温数据存储在磁盘阵列当中,冷数据存储在磁带库当中。热数据存储在高速磁盘当中是十分合理的,可以供用户随时访问,但是把这种温数据放在磁盘当中,即使没有用户访问的时候,这个磁盘也同样在产生热量、需要大量空调为其制冷,同样数据存在损坏风险,特别是某些数据中心当中,这种温数据可以占到整体数据总量80%左右,通过大量磁盘来存储这些80%数据可见产生的电力的浪费也是巨大的。离线数据保存在磁带库里面,容易造成数据丢失,并且存在着定位、时间长、介质寿命短等缺点。
我们中经云考虑是否有另外一个介质保存温数据、冷数据,我们发现光盘这种介质虽然访问速度上没有磁盘阵列快,但是这种介质寿命可以达到50年以上,数据存储过程中不怕电磁干扰,对温度、湿度不敏感,自然环境下保存也不会造成数据损失。介质保存的时候不需要空调制冷,我们认为这种介质比较适合存储长期的、不怎么需要改变和访问的温数据和冷数据。我们中经云提出基于光磁电融合的新一代数据存储系统,热数据保存在高速磁盘,温数据保存在光存储阵列当中,把冷数据保存在离线光盘柜,实现介质优点最大化利用,实现低成本存储、绿色存储。
在其中我们中经云采用冷热数据监控与智能迁移技术,把数据智能迁移到所应该使用的介质当中。降低了损坏风险。将光盘阵列、磁盘阵列形成集群控制网络,我们提出光存储设备软件接口标准,通过软件接口标准堆放各个光盘库厂商软件接口,实现最大的兼容性以及拓展性。我们中经云根据介质访问频率自然选择存储介质,最终实现了可以建设低成本、长寿命、安全、绿色的数据中心。
这里举两个例子说明一下在实际过程中如何应用。比如在医疗数据中心当中一个应用,医疗数据中心是用来存放大量的电子病例、手术视频等大量资料,随着业务量增加,需要医疗数据中心进行扩容。我们发现存储一定时间后,比如一两个月后,数据不频繁被使用。适合我们用光存储存储这些不需要被频繁使用和修改的数据,采用中经云光磁融合一套系统可以将原有系统磁盘空间迁移到光存储阵列当中,低成本实现扩容。由于原来系统的医疗应用软件,客户不希望修改应用软件也可以使用新的扩展空间,我们采用光磁文件映射技术,把磁盘文件映射到光存储阵列,使文件系统无缝映射,这样就可以不修改文件系统而使用新的存储空间,最后实现维护成本降低原来方案的10%左右。并且不修改原来系统配置。
第二个例子,平安城市公共视频存储中心当中,由于平安城市里面,有几万台摄像机,视频保存几个月的话,需要90PB的存储空间,全部存储,需要每年600万电费,加上空调电费,达到800万,采用我们方案,可以形成存储网络,将存储网络对接公共视频服务系统,使磁盘阵列放各级主管部门用来保存一周以内的数据,将需要保存更久的数据保存在一个中央数据中心,采用光盘阵列保存,通过光磁融合方案,电费下降到原来的20%以下,仅仅电费每年节约600万左右。
以上就是我们这个方案在实际项目当中运用情况。最后十分感谢一直以来对我们给予大力支持的各个合作伙伴,同时我们也将与这些合作伙伴一起为咱们智慧城市数据中心建设贡献自己的一点力量。