成都科汇科技有限公司

Kehui Technology Co., Ltd.

成都科汇科技有限公司
拥有15年 数据存储  专业经验 的私有云 解决方案商
产品中心
新闻中心
如何在7天内跨数据中心迁移1 PB文件? 科汇科技-四川 杉岩 standstone 虚拟化 分布式存储 官方授权分销代理商
来源: | 作者:科汇科技 | 发布时间: 2020-09-15 | 1180 次浏览 | 🔊 点击朗读正文 ❚❚ | 分享到:
你知道吗?

通信科技发展到今天,当数据量达到TB级,网络传输的效率其实还不如快递。百兆光纤宽带看似很快,但在遇到真正的“大数据”时,高速公路也会秒变停车场。


我们来算一笔账:

从时间成本来看,离线数据的物理迁移看似原始实则**高效。

就像钞票比钱包值钱,数据比存储设备更值钱,设备坏了可以再买,数据丢了那就是天要塌了。企业初期基本采用单数据中心运营,但业务规模上来以后,数据中心里的服务器和存储设备越来越多,数据量也大了,这时候就要考虑建设灾备中心,构建主备协同的双中心架构。在不影响业务的前提下,如何将生产数据中心的PB级规模数据备份到灾备数据中心呢?

按照上面的计算,完成1 PB数据的全部备份耗时近3年,这个方案没法接受。


图1.常规数据同步方案
杉岩的数据离线迁移服务,就是用来解决这个问题的。

普通的离线迁移一般是用中转磁盘的方式实现,如果是将对象数据拷贝到磁盘的文件系统,会造成标签等元数据的信息丢失,虽然数据主体是备份了,但实际上降低了数据质量。杉岩中转集群的方案不存在这个缺点,利用服务器搭建高密度中转集群,同步主数据和元数据,整个方案实施过程只有3步,7天即可完成。

1、部署中转集群

根据数据量配置服务器,搭载杉岩MOS海量对象存储软件以构建中转集群。服务器的网络接口规格根据数据量以及客户对迁移时间的要求,灵活选择千兆或万兆网卡。若迁移1 PB数据,客户仅需配置1台中转服务器,选配万兆网卡,带宽可达4 GB/s。

2、数据从生产数据中心同步到中转集群

在可视化管理界面上配置同步策略,将数据从生产数据中心同步到中转集群,这一步只要3天就可以完成。
数据同步完成之后,将中转服务器打包快递至灾备数据中心。视路程远近,这一步可以在1到3天内完成。

3、数据从中转集群同步到灾备数据中心

中转服务器送达后,按同样方式反向操作即可将数据同步到灾备中心,这一步也只要3天就可以完成。至此,数据迁移全部完成,耗时*短只要7天。


图2.数据离线迁移方案

采用杉岩离线迁移服务充分发挥分布式集群的带宽优势,迁移效率可提升100倍以上。数据迁移前后,完整保留文件的标签、多版本等数据属性,不存在信息丢失问题,数据质量有**;而且中转服务器运送过程全程监控,保障设备和数据安全,总体成本可节约50%以上,这套方案已经在保险公司等金融行业客户应用过,效果十分显著。

计算机领域老前辈、Minix的作者Andrew S. Tanenbaum的这句话仍然没有过时:“永远不要低估一辆满载着磁带在高速公路上飞驰的旅行车的带宽。”












IT解决方案
产品品类:
海量对象存储、统一存储平台、超融合一体机、安全存储一体机

产品品型:
超融合一体机:SandStone HyperCube 超融合基础架构一体机

型号 SC2000入门型 SC2100通用型 S3000基础型 SC3100存储型 SC3300计算型
节点形态

(2U 4节点)

(2U 1节点)
应用场景 小型企业


私有云建设

中型企业


部署核心业务

中小企业


部署传统和互联网业务

存储需求较大的企业,


可存放冷数据或备份容灾

大型企业和


云计算数据中心建设

处理器 1*英特尔®至强®


处理器8C/16T

(型号可配置)

2*英特尔®至强®


处理器20C/40T

(型号可配置)

2*英特尔®至强®


处理器16C/32T

(型号可配置)

2*英特尔®至强®


处理器20C/40T

(型号可配置)

2*英特尔®至强®


处理器24C/48T

(型号可配置)

内存 32GB 128GB 64GB 128GB 256GB
缓存盘 480GB SSD


(可扩展)

960GB SSD


(可扩展)

960GB SSD


(可扩展)

1.92TB SSD


(可扩展)

1.92TB SSD


(可扩展)

容量盘 4.8TB SATA/SAS


(可扩展)

9.6TB SATA/SAS


(可扩展)

24TB SATA/SAS


(可扩展)

60TB SATA/SAS


(可扩展)

24TB SATA/SAS


(可扩展)

*SandStone HyperCube均为3个节点起部署,以上为单节点配置。

安全存储一体机:SandStone HuaYan

型号 节点形态 应用场景 处理器 存储
DS3000-FT 2U 1节点 中小企业部署传统和互联网业务 1*飞腾FT-2000+


64核2.2GHz

480GB SSD


20TB SATA/SAS

DS3300-FT 大型企业和云计算数据中心建设 1*飞腾FT-2000+


64核2.2GHz

1.92TB SSD


40TB SATA/SAS

DS2000-KP 2U 4节点 企业私有云建设 2*鲲鹏920


(32/48/64核2.6GHz)

480GB SSD


4.8TB SATA/SAS

DS3000-KP 2U 1节点 中小企业部署传统和互联网业务 2*鲲鹏920


(32/48/64核2.6GHz)

480GB SSD


20TB SATA/SAS

DS3300-KP 大型企业和云计算数据中心建设 2*鲲鹏920


(32/48/64核2.6GHz)

1.92TB SSD


40TB SATA/SAS

DS6000-KP 4U 1节点 存储需求较大的企业,可存放冷数据或备份容灾 2*鲲鹏920


(32/48/64核2.6GHz)

180TB SATA/SAS
DS3000-HY-H620 2U 1节点 中小企业部署传统和互联网业务 2*海光7000系列处理器 480GB SSD


20TB SATA/SAS

DS3300-HY-H620 大型企业和云计算数据中心建设 2*海光7000系列处理器 1.92TB SSD


40TB SATA/SAS

DS6000-HY-S240 4U 1节点 存储需求较大的企业,可存放冷数据或备份容灾 1*海光7000系列处理器 180TB SATA/SAS

产品品牌:

杉岩sandstone

应用场景:
企业内容管理、人工智能与应用、影像存储、视频监控、大数据存储分析、备份归档、政务云大数据分析系统、党政机关统一文档系统、国产数据备份系统、机要涉密安全存储系统、大型存储资源池、私有云存储、容器云平台、超融合系统、大型存储资源池、私有云存储、容器云平台、超融合系统、值得信赖的软件定义存储厂商、杉岩数据某省大型数据中心、SandStone杉岩数据、关于杉岩 了解杉岩 选择杉岩 SandStone杉岩数据、杉岩数据 OA、OA办公系统、移动办公、办公自动化软件、杉岩分布式存储、杉岩数据公司如何、

解决方案:

金融非结构化数据中台解决方案、金融影像解决方案、医疗私有云解决方案、PACS影像解决方案、电子卷宗解决方案、机巡平台解决方案、CDN视频存储解决方案、校园网盘解决方案、私有云存储解决方案、智慧视频解决方案、机器学习解决方案、容器云存储解决方案、企业内容管理解决方案、杉岩数据校园网盘存储解决方案

更多型号和解决方案请咨询:

成都科汇科技有限公司

地址:四川省成都市武侯区人民南路四段一号时代数码大厦18楼A5

电话咨询热线:400-028-1235

QQ咨询热线: 1325383361

24小时咨询热线:180 8195 0517(微信同号)

在线客服系统
在线客服系统