2月21日至23日,计算机体系结构顶会USENIX FAST 2023在美国圣克拉拉召开,阿里云4篇论文被顶会收录,涉及分布式存储架构、云原生存储、用户态存储引擎等多个领域。
其中,《Perseus:A Fail-Slow Detection Framework for Cloud Storage Systems》一文还斩获了大会最佳论文奖,这也是中国企业首次获此殊荣。
阿里云与上海交大合作论文获大会最佳论文奖
(资料图片)
FAST(Conference on File and Storage Technologies)创办于2002年,是由美国高等计算系统协会(USENIX)和美国计算机学会操作系统专业组织(ACM SIGOPS)联合组织的聚焦存储领域的顶级国际会议,代表了计算机存储领域的国际最高水平。
创办二十多年来,FAST推动了如软硬件结合、RAID、闪存文件系统、非易失内存技术和分布式存储等多项存储相关技术的发展。
本次阿里云入选的 4 篇论文主要是围绕飞天云计算操作系统核心组件之一的飞天盘古分布式文件存储系统,深入地描述了过去几年在多个领域的创新以及为云存储产品提升的竞争力。
使用通用的服务器和磁盘介质,在超大规模下解决数据不丢不错和高可用的难题,让存储更加稳定可靠,拥有更大的容量和更高的性能,可承载不同的应用负载, 覆盖低延迟、高吞吐、高并发等多种复杂场景。
阿里云存储资深专家储道介绍阿里云盘古分布式存储系统论文
#01
在《More Than Capacity: Performance-oriented Evolution of Pangu in Alibaba》中:
阿里云介绍了自研的盘古分布式文件存储的新一代 2.0 系统的创新和演进。
通过基于介质优化的存储引擎、高性能存储网络、全分布式元数据的管理、长尾延迟优化等技术,极致释放硬件的能力,利用 NVMe SSD和 RDMA 网络的低延迟高带宽性能,降低软件系统的开销,提高性能的稳定性。
基于盘古 2.0,阿里云实现了百微秒级平均延迟、毫秒级长尾延迟,以及单存储节点打满200Gbps网络的IOPS处理能力,有力支撑数据库、搜索和推荐等众多性能敏感型业务。
#02
在《Perseus: A Fail-Slow Detection Framework for Cloud Storage Systems》中:
阿里云与上海交通大学共同提出了一种精确的慢盘检测框架Perseus,可将节点P9999长尾延迟平均降低33%-64%,保证业务平稳运行。
借助 Perseus 对慢盘检测的主动性和精确性,不仅提供了高性能高可靠的存储,也保障了性能的稳定性,极大减少了性能的抖动,为客户提供了可预期的平滑的服务质量保障。
本文因“其在理论研究上的创新性和实际落地应用的巨大价值”,被大会评为 FAST 2023 的最佳论文。该项研究由阿里巴巴创新研究计划(AIR)支持,旨在促进计算机科学及相关领域的前沿研究,加速研究成果的应用落地。
阿里云存储专家答案介绍SMRStore新存储引擎论文
#03
在名为《SMRSTORE: A Storage Engine for Cloud Object Storage on HM-SMR Drives》论文中:
阿里云介绍了叠瓦式磁盘HM-SMR的高性能存储引擎——SMRStore,通过数据冷热分离、端到端协同设计、流量打散等技术,大幅降低SMR磁盘上的GC开销,提供不亚于传统CMR磁盘的性能。
基于 SMRStore 存储引擎的对象存储 OSS,标准和低频类型的存储规格规模化使用 SMR 磁盘,保障性能和稳定性的同时,降低了存储成本。
#04
面向云原生大规模分布式存储的需求,在《Fisc: A Large-scale Cloud-native-oriented File System 》论文中:
阿里云提到了面向云原生的大规模文件系统Fisc,通过文件系统客户端的硬件卸载技术高效支持多容器的高并发访问,降低容器CPU和内存的消耗,节约 20% 的资源;
同时首次提出基于CIPU软硬件协同的分布式存储应用层网关,将大数据计算、AI训练等业务的存储访问平均延迟降低到百微秒级别,P999延迟优化到毫秒级别,展示了从 IO 虚拟化、多租户隔离、高性能网络、和高性能存储系统的端到端的全栈优化技术。
阿里云存储团队亮相USENIX FAST 2023
此外,盘古在分布式数据冗余算法方面也进行了持续的创新,支持跨数据中心、跨地域的多数据中心容灾策略,数据可靠性达到12个9,可用性高达5个9。在高性能存储网络方面也积累了一系列创新成果,自研的高性能RDMA存储网络(SIGCOMM 2022),HPCC流控算法(SIGCOMM 2019),RDMA网络的大规模实践和优化(NSDI 2021),引领了云存储进入微秒延迟时代。
今天的阿里云盘古分布式存储已经广泛部署在阿里云全球近百个可用区,通过块存储EBS、对象存储OSS、文件存储NAS、文件存储CPFS、表格存储Tablestore、日志服务SLS、网盘与相册服务PDS、备份容灾等服务云上数百万的客户,覆盖政企、互联网、金融、零售、制造、医疗等千行百业。
精彩推荐
中新网2月23日电(中新财经记者吴涛)北京时间22日晚间,多次因会员涨价上热搜,近期因限制投屏引争议的爱...
大冶市应急管理局当好安全“店小二”,全力服务企业复工复产---大冶市应急管理局当好安全“店小二”,全...
据公开信息,2月20日,沪深交易所受理了16家企业主板首发申请,这是全面注册制正式实施以来,沪深交易所...
数据宝统计显示,沪深两市全天特大单净流出82 16亿元。其中,11股特大单净流入超2亿元,中国软件特大单...
1、病情分析:缓解睡眠不足头痛的方法:1。2、第一,要补充睡眠,最好是晚上,因为白天的睡眠还是会头疼...
2月22日盘中消息,11点26分铖昌科技(001270)触及涨停板。目前价格139 74,上涨10 0%。其所属行业军...
1、在战国时期,有一种用帛作为书写材料的书体——帛书,帛是白色的丝织品,汉代总称丝织品为帛或缯,或...
美国俄亥俄州有毒化学品运载列车脱轨事故已过去十多天,但事发地附近居民仍对这些有毒化学品的处置及其...
1、电脑设备只能登录网页版微信,需要用户通过手机设备登录微信账户,在通过微信扫一扫功能扫描网页版微...
一直强调黄金底部,1834做多黄金,大涨10美金,给力。日线锤子线,砸出市场底部,也多次全网公开强调黄...
五一广场社区:社区开展消防安全检查工作为有效预防和减少各类消防安全事故的发生。近日,安泰街道五一...
红网时刻新闻2月21日讯(通讯员陈怡萱)“章先生您好!我是国家税务总局湘潭市岳塘区税务局税收风险管理...
一、市场观点可能存在偏差大盘指数震荡整理,热点方向在尾盘还是有反抽。特别是在电信运营创出新高,很...
为加强维护共享助力车停放秩序,近日,哈啰针对隆昌市用户正式上线共享助力车“骑行驾照”信用管理体系2...
1、吉利有了远景X1,这次又来了个远景X3,它们同是小型SUV,风格却不一样。2、相比小弟弟远景X1,远景X3长出了20
经过一年多的持续调整,今年以来A股出现一定程度反弹,投资情绪有所转暖,符合国家战略转型方向的行业主...
北京时间2月21日4:00,西甲第22轮,赫塔费主场对阵瓦伦西亚。上半场,萨穆埃尔-利诺推射被扑。下半场,...
1、苹果8是2017年上市的。iPhone8是Apple(苹果公司)第11代手机,北京时间2017年9月13日凌晨1点,
振华重工(600320):公司总工程师费国先生,刘启中先生辞职2月20日,振华重工(600320)公告显示,上海振华...
南方财经2月20日电,高斯贝尔公告,公司于2023年2月20日召开第四届董事会第二十九次会议,审议通过了《...
近期,谈判已陷入僵局的伊朗核问题再起风波,美国彭博社、《华尔街日报》先后爆料,称国际原子能机构在...
青壮年一般高烧阶段不超过3天,到第4、第5天会明显好转。如高烧持续3天以上,且没有缓解趋势,建议前往...
如今,各种数字设备几乎无处不在。我们通常使用的手机、IP、电脑等都是数字设备。那么这些数字设备中就...
截至2023年2月17日收盘,漱玉平民(301017)报收于21 72元,上涨1 83%,换手率8 31%,成交量9 09万手,成交额2 01亿元。
1、设立基本管理制度,基本管理制度包括人事制度、薪酬制度、部门规定等,这是公司正常运营的基本保障。...
资讯News
08-28
06-20
11-03
11-03
11-03
11-03
11-03
11-03
11-03
11-03
11-03
11-03
聚焦Policy
当好农民工的“护薪人” 近日,罗某等7名农民工在收到被拖欠的工资后,纷纷打电话向江西省南昌市...
“通讯录里所有人都知道我欠钱了” □ 本报记者 韩丹东 □ 本报见习记者 张守坤 ...
大连宝马车撞人案肇事司机被判死刑 本报讯 记者韩宇 10月29日,辽宁省大连市中级人民法院一审...
医院财务迷上网络赌博输光5000万元公款 □ 本报记者 马维博 □ 本报通讯员 汪宇堂 曹...
辊环车削 雕琢毫厘(工匠绝活) 【绝活看点】 23年来,雷虎始终扎根一线,改进钢材轧制工艺...
交警严查超标电动自行车挪用“白牌” 截至昨晚6时,处罚电动自行车违法行为共计6585笔;下一步将...
明起寒潮来袭 北方气温普降10℃以上 中央气象台预计,本周日北京平原地区最低气温降至-4℃左右...
多种蔬菜价格降幅达五成 包括菠菜、蒿子秆等 预计本月中旬蔬菜恢复供需平衡 本报讯(记者...
北京周日最低气温或达-4℃ 本报讯(记者 赵婷婷)北京青年报记者昨天从中央气象台获悉,新一股...
昌平一家四口确诊新冠肺炎 天通北苑第二社区升级为中风险地区 朝阳两涉疫校区及16所学校停课 ...