北京快三开奖

  • <tr id="U9YkSO"><strong id="U9YkSO"></strong><small id="U9YkSO"></small><button id="U9YkSO"></button><li id="U9YkSO"><noscript id="U9YkSO"><big id="U9YkSO"></big><dt id="U9YkSO"></dt></noscript></li></tr><ol id="U9YkSO"><option id="U9YkSO"><table id="U9YkSO"><blockquote id="U9YkSO"><tbody id="U9YkSO"></tbody></blockquote></table></option></ol><u id="U9YkSO"></u><kbd id="U9YkSO"><kbd id="U9YkSO"></kbd></kbd>

    <code id="U9YkSO"><strong id="U9YkSO"></strong></code>

    <fieldset id="U9YkSO"></fieldset>
          <span id="U9YkSO"></span>

              <ins id="U9YkSO"></ins>
              <acronym id="U9YkSO"><em id="U9YkSO"></em><td id="U9YkSO"><div id="U9YkSO"></div></td></acronym><address id="U9YkSO"><big id="U9YkSO"><big id="U9YkSO"></big><legend id="U9YkSO"></legend></big></address>

              <i id="U9YkSO"><div id="U9YkSO"><ins id="U9YkSO"></ins></div></i>
              <i id="U9YkSO"></i>
            1. <dl id="U9YkSO"></dl>
              1. <blockquote id="U9YkSO"><q id="U9YkSO"><noscript id="U9YkSO"></noscript><dt id="U9YkSO"></dt></q></blockquote><noframes id="U9YkSO"><i id="U9YkSO"></i>
                企业空间 推销商城 存储论坛
                北京快三开奖全闪存阵列 IBM云盘算 Acronis 安克诺斯 安腾普 腾保数据
                首页 > 处理方案 > 注释

                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                2020-08-06 15:00泉源:中国存储网
                导读:X3DS是XSKY提供的平面数据办理零碎。可提供非构造化数据的DR(Disaster Recovery,劫难规复),DP(Data Protection,数据维护)和DM(Data Migration,数据迁徙)这三大办理才能,是一个平面的三维数据办理平台。

                FastDFS因此纯C言语完成的一款开源轻量级散布式文件零碎,支持Linux、FreeBSD、AIX等UNIX类零碎。

                FastDFS不是通用的文件零碎,不支持POSIX接口方法,只能经过专有API对文件停止存取拜访,现在提供了C、Java和PHP API为互联网使用量身定做,处理大容量文件存储题目。

                次要功用有:文件存储,文件同步,文件拜访(文件上传/下载),合适以中小文件(发起范畴:4KB < file_size<500MB)为载体的在线效劳,如相册网站、视频网站等等。

                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                FastDFS由跟踪效劳器(Tracker Server)、存储效劳器(Storage Server)和客户端(Client)组成。

                1、跟踪器-Tracker

                跟踪效劳器,次要做调理任务,起负载平衡的作用。在内存中记载集群中一切存储组和存储效劳器的形态信息,是客户端和数据效劳器交互的关键。客户端拜访集群的时分会随机分派一个Tracker来和客户端交互;

                2、存储节点-Storage

                存储效劳器(又称:存储节点或数据效劳器),实践存储数据的中央,文件和文件属性(meta data)都保管到存储效劳器上。Storage server间接应用OS的文件零碎挪用办理文件。Group可以断绝差别使用的数据,差别使用的数据放在差别group外面;

                3、客户端-Client

                作为业务恳求的提倡方,经过专有接口,运用TCP/IP协议与跟踪器效劳器或存储节点停止数据交互。每个客户端效劳器需求装置Nginx。

                由于FastDFS产物十分轻量复杂,支持最小化摆设,以是现在另有局部用户在运用该产物。但FastDFS被运用在消费情况另有许多隐患和缺乏:

                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                FastDFS次要缺陷

                01XEOS工具存储

                XEOS (XSKY Enterprise Object Storage)经过全新的存储妙技,基于通用效劳器硬件构建了一个近乎有限扩容、继续在线、可跨地区拜访的高性价比存储架构体系,在包管了数据高平安性的同时,冲破存储范围和地区限定的壁垒,低落企业 IT 建立的投入,满意了新业务形状的多源化存储需求。

                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                XEOS齐备的企业级存储特性,如:多正本/EC、QoS、负载平衡、小文件合并、一致定名空间、数据分层等,完满处理了FastDFS的诸多产物题目,腻滑的适配了其运用场景。

                02X3DS辅佐FastDFS 腻滑迁徙至XEOS

                X3DS(XSKY 3D data management System)是XSKY提供的平面数据办理零碎。可提供非构造化数据的DR(Disaster Recovery,劫难规复),DP(Data Protection,数据维护)和DM(Data Migration,数据迁徙)这三大办理才能,是一个平面的三维数据办理平台。

                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                支持非构造化数据的复制、迁徙、备份、归档功用,支持丰厚的数据办理战略,满意差别用户的特性化要求。支持多存储后端协议(如:CIFS,NFS,FTP,S3,BOS,OSS,FastDFS等),极大的兼容了市场上主流文件传输协议。

                支持跨厂商的文件和工具存储之间数据互相挪动,支持跨云的数据上云和下云,顺应性广,防止用户被设置装备摆设厂商和私有云厂商锁定。迁徙义务支持断点续传,应对海量数据迁徙进程中,如发作机房失电等毛病,毛病规复后,再次启动迁徙义务可以完成断点续传,无效节流迁徙工夫。

                1、全体迁徙方案架构

                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                2、方案特点

                可设置装备摆设迁徙QoS;

                支持主流协议迁徙;

                为包管数据可用,业务切换时需求长久停机做终极数据分歧反省;

                支持—file-from,指定文件迁徙;

                支持剧本东西导出FastDFS集群文件ID;

                迁徙义务支持断点续传。


                3、详细摆设方案

                全体操纵流程:

                创立源端


                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                创立目的端


                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                创立迁徙义务


                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                数据迁徙中


                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                产物装置摆设:

                1.目的XEOS集群摆设

                网络需求与源端集群业务网络连通;

                参照《星斗天合散布式存储零碎软件装置手册》完成XEOS散布式工具存储装置,初始化设置装备摆设,调试终了,预备停当。


                2.信息搜集,集群计划

                搜集原有FastDFS集群相干信息;

                联合客户需求定制,计划新集群相干设置装备摆设信息。


                3.迁徙流程计划

                迁徙项目施行需有细致的方案计划,针对差别的业务使用或许租户,优化切割工夫节点;

                评价重点业务,为包管迁徙的无效性和平安性,需求对验证迁徙前后数据的分歧性和完好性做全体计划;

                确定迁徙步调,次序,东西,施行职员等信息,给出详细的施行指点手册和方案,以及对应的回退方案。


                4.目的端集群设置装备摆设

                目的端集群对应资源的创立(工具资源,永世Token等);

                确定新集群和使用业务的对接。


                5.Nginx装置

                下载并设置装备摆设FastDFS-Nginx-Module模块,完成在Storage一切节点上Nginx的装置;

                Storage节点上对接设置装备摆设Nginx,并设置开机自启动;

                测试Nginx模块。


                6.数据迁徙

                装置设置装备摆设X3DS

                X3DS产物支持交融摆设在XEOS存储节点,不需求额定的资源耗费;

                上传解压X3DS装置包,一键装置摆设;

                添加X3DS节点(支持单节点和多节点摆设,多节点摆设发起至多3个节点) ;

                在目的端XSKY存储上创立永世Token;

                参照手册创立源真个FastDFS和目的真个XEOS S3的Remote范例;

                反省业务网络的连通性,待迁徙数据需可以在X3DS业务节点拜访。


                数据迁徙

                摆设用户提供的文件ID列表保管在X3DS业务节点上;

                预测试,运用小局部数据先预测试,验证方案可行性;

                设置装备摆设迁徙义务;

                迁徙完成后,反省分歧性。


                7.迁徙完成,业务切换

                迁徙完成后,业务切换,验证数据分歧性。

                03迁徙案例

                某新消耗效劳平台在新数据中央建立上接纳XSKY XEOS来满意其非构造化数据存储需求。原数据存储在FastDFS文件零碎中,总文件数目超越48亿个,总容量超越700TB,数据范例大局部为100-500kb的PDF文件。为了完成数据的一致办理和维护,需求将原FastDFS集群上的数据迁徙至新建XEOS工具存储集群中。

                1、迁徙方法

                接纳在线迁徙的方法停止;

                需求屡次迁徙,开业务完成最初的迁徙;

                长久离线迁徙次要用于校验数据分歧性。


                2、第一期迁徙

                完成数据迁徙合计600W+文件;

                合计迁徙工夫4小时。


                3、改革后劣势

                怎样将FastDFS存储数据腻滑迁徙至XSKY工具存储?

                持续阅读
                要害词 :
                XSKY 工具存储
                中国存储网声明:此文观念不代表本站态度,若有版权疑问请联络我们。
                相干阅读
                产物引荐
                头条阅读
                栏目热门

                Copyright @ 2006-2019 ChinaStor.COM 版权一切 京ICP备14047533号

                中国存储网

                存储第一站,存储流派,存储在线交换平台