构建安全云平台 助力智慧新铁路
文 / RT轨道交通2016-07-01 02:17
(同有科技商业市场事业部产品拓展经理张雯铚接受本刊的采访)
        6月20日-22日,国产存储市场领导品牌北京同有飞骥科技股份有限公司(以下简称“同有科技”),携手中关村轨道交通视频与安全产业技术联盟亮相第十三届中国国际现代化铁路技术装备展览会。在展会现场,同有科技展示的新一代铁路大数据视频云存储系统解决方案受到了广泛关注,其超强的性能、近乎无限的扩展能力和出众的数据检索速度获得了参观者的一致好评。展会期间,同有科技商业市场营销中心交通行业解决方案顾问张雯铚先生接受了RT轨道交通杂志的现场采访,解析同有科技打造的大数据铁路视频云平台如何助力客户实现“智慧新铁路“。
 
       RT轨道交通:存储市场规模巨大,软硬件技术长期被少数国际存储巨头所掌控。国内存储厂商做了很多努力,并取得了巨大的进步。同有科技作为非常具有代表性的民族企业,近年来取得了令人瞩目的成绩。请您谈谈目前同有科技在铁路与轨道交通市场的发展以及产品应用情况。
       张雯铚:同有科技扎根铁路行业十余年,是中关村交通视频与安全产业技术联盟的会员单位。目前,我们的产品已经全面覆盖了全国18家铁路局视频应用系统,成功服务于贵广高铁、青藏铁路、哈齐高铁、长昆高铁、兰新高铁二线、北京局大站改造等大型铁路视频存储项目。
       近年来,随着视频高清数字化,带来了单个监控点数据量以指数级增长,例如单个1080PIPC30天就会产生2T数据,随着铁路线网逐渐完善,接入网络的监控点位增多,其数据量之巨大可想而知。庞大的数据对于后端存储系统的容量、带宽都提出了全新的挑战。伴随着数据规模的扩大,如何在控制成本线性增长的前提下实现存储系统扩容也是目前大数据汹涌背景下视频监控亟待解决的难题。随着数据量的增加,哪怕对TB级别的视频数据进行对数据内容的数据分析和检索,采用传统的串行计算模式都可能需要花费数小时,已远远不能满足铁路视频时效性的需求。
      针对铁路视频监控数字高清化、网络化、智能化特点,同有科技量身定制了铁路视频云存储系统解决方案, 它采用了新一代企业级高端存储云数据平台(NCS10000),这个数据平台具备以下几个特点:
     1.拥有超强的性能:在100节点的规模时,系统带宽可以达到240GB,并可以提供600万的OPS性能;
     2.近乎无限的扩展能力:NCS10000可以达到8192个存储节点的扩展;支持硬盘数量大于20万片;
     3.出众的检索速度:智能数据分片技术,可以将存储在不同节点的文件块,组合在一起,提供给应用集群使用,通过多节点并行处理完成,读取效率提升30%。
 
     RT轨道交通:中国的铁路及城市轨道交通领域是一个非常诱人的市场。请您介绍一下,面对如此大的市场需求,同有科技会在产品研发及深耕垂直市场方面做哪些工作? 
      张雯铚:大数据与云计算的兴起奠定了未来行业的发展方向,铁路行业同样面临着由传统应用向大数据应用的转型,下一步就是智慧铁路的高速发展期,传统低端存储产品已经无法满足铁路飞速增长的数据容量需求,下一步我们将会在铁路打造云计算统一资源平台,并深入铁路信息化应用,致力于构建铁路云数据中心统一资源平台,打造智慧铁路云数据中心。
 
     RT轨道交通:大数据存储、大数据应用都不能规避的一个问题就是数据安全,请问贵公司在保证数据安全方面有哪些技术保障? 
     总体上,我们打造的铁路视频云存储平台对数据安全的保证不依赖任何硬件设备来实现,在集群存储系统中任何节点服务器、磁盘以及网络设备的失效都不影响集群存储系统的稳定运行和数据的安全保证。
      1.系统具有高可靠的系统架构。整体由元数据集群和存储集群构成。元数据集群采用高安全性的镜像数据保护技术,具有强一致性,两两配对的特点,有效避免单点故障。配对的元数据服务器互相备份对方的数据和服务,并实时的同步元数据的更新,任何一台元数据宕机或者损毁,另一台元数据服务器都将自动接管其服务,而不会造成前端应用的中断,保证数据的安全。
      2.存储集群支持多种数据保护模式,可灵活设置1-4个文件副本数量或者文件级别RAID的数据保护机制,可保证数据在多块磁盘甚至多台服务器损坏的情况下的安全有效,并支持不同目录设置不同冗余度,同时满足数据安全性和存储空间的需求。
      为了保证任何一台存储服务器失效或者是任何一块硬盘失效都不会影响数据的可靠性和一致性,在应用端往存储系统中写入数据时,所有的数据副本以及数据校验都是同时写入到存储系统中的,当正在有数据发生写入的磁盘和存储服务器发生故障时,元数据服务器会为此数据对象分配在正常的存储服务器和磁盘中分配新的空间,以继续进行数据写入,而之前在失效磁盘上写入的数据则会通过另一份数据副本恢复到相应的磁盘和存储服务器上。
       一个磁盘上的数据段对应的冗余数据是平均分布在其他所有的存储服务器上的,损失的数据也将平均恢复到整个存储集群中,数据恢复过程由所有状态完好的存储服务器并发进行,是一个多对多的数据恢复模式。由于数据恢复过程中所有存储服务器都共同参与,所以存储服务器集群的规模越大,参与恢复的存储服务器数量就越多,整个系统的恢复速度也就越快,安全程度就越高。当设备失效后,一旦数据恢复完成整个系统立即成为最高安全状态,这时再发生设备失效也不会导致数据的丢失。理论上,只要系统中空闲空间足够,整个存储服务器集群依次失效至只有两台,集群存储系统也能够正常工作,也不会有数据丢失。
     3.系统提供以磁盘为粒度的在线实时调控。当系统通过实时监控发现某些设备或者磁盘处于高负载的情况时,一方面,存储系统可以通过禁止某些设备写入数据,从而降低某些设备的负载;另一方面,可以启动系统负载调控功能,根据自身智能负载机制将系统的热点数据进行迁移,使得存储系统中的各个存储节点负载均衡,避免出现热点,保证数据安全。
     4.系统内置了自动故障探测机制,并自动启动数据的恢复流程确保数据安全性。数据恢复只针对有效数据,提高数据恢复的效率。数据恢复完全在存储后端进行,无需在恢复过程中加入新的硬件,保证整个存储系统能够时刻处于最高的安全状态。结合设备分组功能,可以将故障的影响局限在指定的范围内,进一步提升数据安全性。
 
     RT轨道交通:在科技创新与打造民族品牌方面,同有科技在中国的存储领域是一面旗帜。经过多年的努力,同有科技在哪些产品,哪些方向上已经能替代进口产品并在市场上取得了可喜的成绩?又在哪方向上达到或超越了国际先进水平?
      张雯铚:经过多年的积累和耕耘,同有科技是目前业内覆盖行业最多的国产存储厂商,我们的客户也遍布在政府、金融、公检法司、科研院所、交通能源等诸多领域。在政府,我们服务了国家发改委、国家工商总局、广东省委、吉林国土资源厅、河北检察院等大型省部委机关;在金融,我们为中国人民银行、广发银行、四川工行等提供了安全稳定的数据保护服务;在公检法司,我们帮助湖北公安厅、山西公安等打造了海量数据存储解决方案;在科研院所,我们打造的超高性能数据存储系统成功应用于中国科学院高能物理研究所、中国原子能科学研究所、中国科学院大气物理研究所等;在交通能源,我们的产品已经全面覆盖了全国18家铁路局视频监控系统,累计服务超过20000公里,成功应用于青藏铁路、贵广高铁、哈齐高铁、海南东环高铁等大型铁路视频监控项目,从2009年开始,同有科技已经连续8年获得中石油物资供应商准入证。2015年以第一名的成绩成功中标中石化油气生产信息化系统项目。
       同有科技全面自主研发的新一代造企业级高端存储云数据平台NCS10000发力高端市场,不仅从技术上领先,并能够满足客户需要的定制化的本土服务。原来占领国内存储市场的国外品牌原厂服务成本较高、服务模式单一化、很难满足当前铁路市场定制化的服务需求。同有科技依托完善的服务网络和定制化的服务响应,出色地完成了一些客户在新老供应商交替过程中出现的一些问题,得到了客户的高度认可。
 
 
 
 
 
 
联系我们

联系电话: 021-51870312

扫码关注微信公众平台

备案号:沪ICP备15057112号