北京快三开奖

  • <tr id="U9YkSO"><strong id="U9YkSO"></strong><small id="U9YkSO"></small><button id="U9YkSO"></button><li id="U9YkSO"><noscript id="U9YkSO"><big id="U9YkSO"></big><dt id="U9YkSO"></dt></noscript></li></tr><ol id="U9YkSO"><option id="U9YkSO"><table id="U9YkSO"><blockquote id="U9YkSO"><tbody id="U9YkSO"></tbody></blockquote></table></option></ol><u id="U9YkSO"></u><kbd id="U9YkSO"><kbd id="U9YkSO"></kbd></kbd>

    <code id="U9YkSO"><strong id="U9YkSO"></strong></code>

    <fieldset id="U9YkSO"></fieldset>
          <span id="U9YkSO"></span>

              <ins id="U9YkSO"></ins>
              <acronym id="U9YkSO"><em id="U9YkSO"></em><td id="U9YkSO"><div id="U9YkSO"></div></td></acronym><address id="U9YkSO"><big id="U9YkSO"><big id="U9YkSO"></big><legend id="U9YkSO"></legend></big></address>

              <i id="U9YkSO"><div id="U9YkSO"><ins id="U9YkSO"></ins></div></i>
              <i id="U9YkSO"></i>
            1. <dl id="U9YkSO"></dl>
              1. <blockquote id="U9YkSO"><q id="U9YkSO"><noscript id="U9YkSO"></noscript><dt id="U9YkSO"></dt></q></blockquote><noframes id="U9YkSO"><i id="U9YkSO"></i>
                企业空间 推销商城 存储论坛
                北京快三开奖全闪存阵列 IBM云盘算 Acronis 安克诺斯 安腾普 腾保数据
                首页 > 技能园地 > 文件零碎 > 注释

                TFS(淘宝文件零碎)引见篇

                2011-07-25 16:29泉源:中国存储网
                导读:TFS淘宝文件零碎,淘宝外部运用的散布式文件零碎,TFS次要处理海量小文件的散布式存储,2007 TFS1.0公布,2008 TFS1.3公布。
                什么是TFS?
                TFS,Taobao File System,淘宝文件零碎,淘宝外部运用的散布式文件零碎,次要针对海量小文件的随机读写拜访功能做了特别优化,承载着淘宝主站一切图片、商品描绘等数据的存储。
                TFS有什么特点
                完全扁平化的数据构造构造,丢弃了传统文件零碎的目次构造。
                在块设置装备摆设根底上树立自有的文件零碎,增加EXT3等文件零碎数据碎片带来的功能消耗
                单历程办理单块磁盘的方法,摈弃RAID5机制
                带有HA机制的地方控制节点,在平安波动和功能庞大度之间获得均衡。
                只管即便缩减元数据巨细,将元数据全部加载入内存,提拔拜访速率。
                跨机架和IDC的负载平衡和冗余平安战略。
                完全腻滑扩容
                TFS在淘宝的使用范围
                • 数百台PCServer
                • PB级数据量
                • 百亿数据级别
                TFS的功能参数
                TFS在淘宝的摆设情况中前端有两层缓冲,抵达TFS零碎的恳求十分团圆,以是TFS外部是没有任何数据的内存缓冲的,包罗传统文件零碎的内存缓冲也不存在。我们次要的功能参数不是IO吞吐量,而是单台PCServer提供随机读写IOPS。由于各人硬件型号差别,固然也是由于一些技能失密的缘由,我们很难给出一个参考值来阐明功能。但根本上我们可以到达单块磁盘随机IOPS实际最大值的60%左右,零件的输入随盘数添加而线性添加。 
                TFS的逻辑架构图
                TFS(淘宝文件零碎)引见篇
                • TFS尚未对终极用户提供传统文件零碎API,需求经过TFSClient停止接口拜访,现有JAVA、JNI、C、PHP的客户端
                • TFS的NameServer作为中央控制节点,监控一切数据节点的运转情况,担任读写调理的负载平衡,同时办理一级元数据用来协助客户端定位需求拜访的数据节点
                • TFS的DataServer作为数据节点,担任数据实践发作的负载平衡和数据冗余,同时办理二级元数据协助客户端获取真实的业务数据。 
                TFS开展汗青
                TFS1.0简介
                2007年6月,淘宝自主开辟的散布式的文件零碎, TFS(Taobao File System)1.0上线运转,次要处理海量小文件的散布式存储
                集群范围:200台PC Server(146G*6 SAS 15K Raid5) 
                文件数目: 亿级别
                零碎摆设存储容量: 140 TB
                实践运用存储容量: 50 TB
                单台支持随机IOPS200+,流量3MBps
                TFS1.0的特性
                •集群由一对Name Server和多台Data Server组成 
                •Data Server运转在挂许多硬盘的Linux主机上
                •以block文件的方式寄存数据文件(普通64M一个block)
                •文件名内置元数据信息,用户本人保管TFS文件名与实践文件的比较干系–使得元数据量特殊小
                •如T2auNFXXBaXXXXXXXX_!!140680281.jpg,名字中含有逻辑的block_no和object_no等 
                •block存多份包管数据平安
                •应用ext3文件零碎寄存数据文件
                •磁盘raid5做数据冗余
                TFS1.3简介
                2009年6月,TFS(TaobaoFile System)1.3上线运转
                集群范围440台PC Server (300G*12 SAS 15K RPM) + 30台PC Server (600G*12 SAS 15K RPM) 
                文件数目:百亿级别
                零碎摆设存储容量:1800 TB
                以后实践存储容量:995TB
                单台Data Server支持随机IOPS900+,流量15MB+
                现在Name Server运转的物理内存是217MB(效劳器运用千兆网卡)
                2010下半年开端摆设PC Server (1T SATA * 12) 
                TFS1.3的特性
                一切的元数据全部都内存化
                清算磁盘空泛
                容量和负载的平衡战略
                腻滑的扩容
                数据平安性的冗余包管
                几秒内完成Name Server毛病主动切换
                容灾战略
                功能大幅提拔
                持续阅读
                要害词 :
                TFS
                中国存储网声明:此文观念不代表本站态度,若有版权疑问请联络我们。
                相干阅读
                产物引荐
                头条阅读
                栏目热门

                Copyright @ 2006-2019 ChinaStor.COM 版权一切 京ICP备14047533号

                中国存储网

                存储第一站,存储流派,存储在线交换平台