logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Taobao分布式文件系统TFS简析

TFS官方称“TFS(Taobao FileSystem)是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统,其设计目标是支持海量的非结构化数据”。我个人花了点时间研究一下TFS的源码和相关技术文档,TFS与目前一些主流的开源分布式文件系统设计思想是相似的,如HDFS, MFS, KFS, Sector。TFS的高可扩展、高可用性是很好的,然而也存在一定不足,如通用性、用户接口、性能等

#网络
分布式存储市场和技术发展热点

SDS已经成为存储市场主流,全闪SDS 2.0正在加速发展即将成为存储市场主流。聚焦全闪SDS 2.0的高扩展、高性能、低成本/高效率,EB级超大规模、NVMeoF全闪存、DPU、AIOps等,将是分布式存储技术发展热点。

全闪分布式块存储性能实测1000万IOPS!

Ceph性能数据来源:Redhat对Ceph 使用三星PM1725A进行的性能测试报告(查看性能测试视频)性能测试说明测试数据(简表)测试方法本次测试采用四台服务器作为存储节点搭建FASS,创建16个100GB双副本存储卷进行测试8客户端压力读写,每个客户端读写2个存储卷,使用Intel SPDK自带的perf工具进行性能测试perf工具命令样例:网络环境前端和后端网采用100Gbps IB网交换

突破硬件瓶颈(一):Intel体系架构的发展与瓶颈挖掘

软件定义存储SDS正在从容量型向性能型演进,千万级IOPS和微秒级低延迟,非常具有挑战性。3节点标准x86服务器,能否有可能实现1000万IOPS与200us低延迟?这个可以有。硬件性能并不是瓶颈所在,软件颠覆才是关键。想要取得如此强的性能,必须要有突破时下存储软件对于硬件利用的瓶颈。而要突破这些瓶颈,就需要对硬件有深入的了解,而后利用软件想方设法突破,或者绕过他们,实现性能的腾飞。本文是突破硬件

基于Log-Structured的FASS 2.0架构设计

FASS 2.0分布式全闪块存储系统的实现基于Log- Structured。它将类HDD的映射方式改为类SSD的映射方式,相当于在系统内实现了一个分布式的SSD控制器。

文章图片
全闪SDS三节点EC(4+2:1)性能挑战测试

三节点集群,用EC(4+2:1),性能目标是:4KB随机读写7:3,达到100万IOPS,平均时延0.5ms,P99时延1ms。硬件配置:网络100G RoCE。每节点128GB DRAM,每节点6片nvme SSD。

文章图片
浅谈分布式全闪存储自动化测试平台设计

摘要本文简单介绍了分布式全闪的基本架构,根据对存储架构的理解和软件自动化测试系统理论的研究,指出软件自动化系统需涉及的主要方面,为软件自动化测试系统实现奠定基础。根据软件测试需求(功能、可靠性、性能),列出自动化系统的各个模块,逐步细化、设计,实现能与测试流程融合的自动化测试框架。在此基础上,还提出了未来自动化测试系统后续的优化方向,让大家意识到软件自动化测试的合理应用是软件开发过程中降本增效的关

全闪分布式,如何深度性能POC?

全闪存储已经成为当前存储的新贵,从存储架构的演变角度,软件定义的分布式存储系统替代传统控制器架构的磁盘阵列已是大势所趋。采用分布式架构的全闪存储系统能充分发挥闪存介质的性能,并构建具备云属性的弹性基础设施,是未来全闪存储系统的发展方向。FASS是TaoCloud自研的全闪分布式块存储系统,产品正式发布以来进行了大量多种场景的POC测试,这里将对典型场景的POC测试进行多角度对比分析,用数据验证FA

匿名无须交互输入用户名和密码的samba配置方法(security = user)

NAS(Network Attached Storage),网络附加存储需要支持NFS(Network File System)和CIFS(Common Internet File Sysem)一种或两种文件共享访问协议。NAS的配置方法相对都比较简单,这方面的资料很多,后面附录了NFS和CIFS的配置参数介绍。这里主要解决一个在配置CIFS的遇到的问题。 CIFS需求:Securit

#list
XDFS+AI重塑数据治理和安全防护

XDFS分布式统一存储产品,通过其内部构建的AI模型能力,超越了传统存储的范畴,不再仅仅是一款存储产品,它是智能时代的数据守护者,赋能企业数据价值最大化。

文章图片
#人工智能
    共 30 条
  • 1
  • 2
  • 3
  • 请选择