两大绝招!华为将SSD寿命提升一个量级:延长30-50%
快科技6月29日消息,如今的SSD容量越做越大,企业级SSD容量已达30TB、60TB的、甚至120TB。但SSD寿命一直是致命伤”,越大容量的盘,出现故障后,丢失的数据就越多。
近日, 华为数据存储发文,揭开华为全闪分布式存储让SSD大盘更长寿”的秘诀。
首先,为什么SSD会有寿命问题?
SSD闪存实际是由半导体元件、NAND Flash颗粒组成。通过对盘上颗粒不断的擦和写,来完成对数据的增、删、改、查。
这个过程中,颗粒捕获电子的能力会逐渐减弱,当减弱到一定程度后、也就是超过颗粒最大擦写次数,便可能出现电子逃逸”现象,也就是硬盘写穿、数据错误、寿命耗尽。
盘上全部颗粒可支持的总擦写次数和使用期间用户写入的数据量。只要后者小于前者,那么就能保证寿命无忧!
因此,下面这个公式就能一目了然:
所以,想延长SSD寿命,就要减少写放大”。
为了降低分母,就要减少罪魁祸首写放大”。写放大的意思是,比如,在写入16KB的业务数据时,呈现到盘上却变成写入64KB物理数据量,被放大了,消耗了数倍的擦写次数,加速颗粒老化。写放大”的源头来自于以下三点:
后台垃圾回收
SSD是无法覆盖写的,要想修改数据必须擦除颗粒、重新写入,Block就是擦除的最小单元。当少量数据修改时, SSD就会将原Block上的全部有效数据读取后,写入新的Block位置,再擦除原Block。
这个过程,就像整理房间一样,要先把老房间的东西全部搬出来,再放到新房间里重新布置。换句话说,少量的数据更新,会引发更大面积颗粒的擦写。
小I/O补齐
SSD可读写的最小单元是Page(一般是512个byte)。在用户层面写入数据时,当用户写入的I/O大小不足一个Page容量,为了能管理它,就需要额外寻找另一份数据,来和原数据拼凑成一整个Page的大小,再写入到颗粒中。这个不够、别的来凑”,这用来凑齐的无效数据,就会造成写放大。
元数据变化
在SSD上,元数据是描述数据的索引,一般紧密地存放在一些Block区域。当用户在频繁修改数据时,对应的每份元数据也必须跟着被修改、重定向,造成多次读写、擦写,牵一发而动全身。
华为OceanStor Pacific分布式存储采用了一个创新的机制小I/O聚合,将小I/O在写盘前聚合在保电内存中,只有达到一定粒度后才会写入SSD,消除了小I/O补齐导致的写放大。
这对元数据变化也非常友好。聚合后的小I/O更容易被集中修改,极大减少元数据被频繁擦写的概率。
同时,华为还采用了业界独创的多流技术,即智能识别数据的冷热程度并优化数据布局,减少不必要的重复擦写和数据搬移。
除了分母,也要增大分子。华为是采用额外的编码纠错技术,在达到颗粒的标称擦写次数后,对数据持续校验或修正,彻底避免数据错误、业务出错,变相地增大了颗粒的总擦写次数。
华为开发了一套更加强大的组合拳LDPC(Low Density Parity Check)算法与SmartFSP 3.0算法,一方面对Flash介质进行监测,寻找更精确的读取电位,另一方面保证高性能的校验纠错性能,提供更加精准的盘内冗余纠错精度。
一个纠得正,一个查得准,二者配合,华为就将SSD数据的误码率从10-17降低至10-18,整整降低一个数量级,延长30~50%的SSD寿命。
俄罗斯小哥ChatGPT找女友:聊了5239个女生,现在订婚了
有事AI它是真上啊。「我向一位女生求婚,ChatGPT已经和她交流了一年。为了走到这一步,AI已经尝试了和5239名女生进行过沟通……」来源:https://twitter.com/biblikz/status/1752335415812501757最近几天,社交网络上人们正在轮番向一位俄罗斯小哥送去祝福。站长网2024-02-06 14:13:380000Tromzo获得800万美元融资,引领AI应用程序安全态势管理
本文概要:1.美国网络安全初创公司Tromzo获得800万美元种子轮融资。2.Tromzo的平台利用人工智能和智能图谱来提供终端到终端的可见性,减少噪音,消除手动工作,提高安全拥有度。3.Tromzo的独特方法结合了人工智能和应用安全态势管理(ASPM)。站长网2023-08-04 14:47:030000我用AI一键搞定室内设计!实测淘宝AI装修产品
据说一个人经历过装修,才会真正变得成熟。从设计、水电、木工、贴砖,到墙面、门窗、家具电器,太多复杂的工序,即使是老手也容易踩坑,装修成为了一门“遗憾的艺术”。好消息是现在我们拥有了AI技术,那些复杂的工序都将由AI进行模拟设计,试错成本大大降低,AIGC也因此成为家装行业的新热点。近期淘宝App上线了面向C端的AI装修产品“真能造”,用户上传空间照片后可免费生成10种风格的装修设计图。站长网2023-08-16 09:09:520000MLPerf放榜!AI芯片公司墨芯人工智能再夺MLPerf大模型推理三项冠军
要点:MLPerf公布最新GPT大模型推理测试结果,墨芯人工智能S30计算卡单卡、4卡、8卡的算力均获得第一。墨芯通过独创的双稀疏算法与硬件协同设计,在GPT-J大模型上取得1.8倍于英伟达H100的性能优势。墨芯的成绩证明,稀疏计算是大模型时代算力发展的关键,可根本解决大模型参数增长与算力瓶颈的矛盾。站长网2023-09-15 09:32:080000“剧本杀”馆使用盗版剧本 法院判决构成不正当竞争赔偿3万元
据长沙市开福区法院消息,近日,长沙市开福区人民法院审理了一起使用盗版剧本进行经营的案例。长沙某文化创意公司取得游戏剧本《阿卡姆症候群》(文字作品)的全部著作财产权,通过“城市限定”模式对外发行游戏剧本《阿卡姆症候群》,同时也为消费者提供剧本杀服务。某娱乐馆在网上购买盗版《阿卡姆症候群》剧本用于“剧本杀”经营。站长网2023-04-21 11:05:380000