信息无障碍通道
您的位置:首页>>业界动态

西部数据创新存储架构 助力IPFS突破算力瓶颈

发布时间:2021-04-20 21:12  来源:互联网    背景: 无障碍阅读通道

  4月9日至11日,第九届中国电子信息博览会(CITE2021)在深圳会展中心举办。同期有多场重磅会议及技术论坛开幕,其中4月9日举行的深圳国际大数据与存储峰会以及Web3.0中国峰会格外引得业界关注。

  西部数据展台

  作为世界存储巨头,西部数据携旗下一系列存储产品亮相展会,尤其是面向未来的IPFS数据存储解决方案更是亮点十足。西部数据公司副总裁兼中国区业务总经理刘钢也在Web3.0中国峰会上为我们带来了以“创新存储架构,突破IPFS算力瓶颈”为主题的演讲。

一張含有 文字, 個人, 室外, 直立的 的圖片

自動產生的描述

  西部数据公司副总裁兼中国区业务总经理刘钢

  ·企业级存储架构面临挑战 IPFS发展迅猛

  我们的世界正全面交由数字构建,大数据发展的尤为迅猛。据IDC预测,到2024年,以HDD为代表的大数据预计将增长到1.62ZB。而主要以SSD为介质的快数据在2024年也将增长到333EB。相较于HDD大数据30%的年增长率,SSD快数据50%的增长率是非常快的。

  如果统计整个2024年产生的数据,总容量将会达到惊人的143个ZB,也就是说大数据和快数据加起来也只有约2 ZB,也就是仅有1.5%的数据被存储。

  我们经常说,数字时代,数据就是石油,为什么这多的数据没有被存储下来,继而进行分析并挖掘其价值?很重要的一个原因是存储架构和存储技术没有及时地跟上,以至于有很多数据没有办法被存储下来并及时使用。

  现代企业级数据存储架构正面临着严峻的挑战。迅猛的数据增长速度、对于存储性能的高要求、更低的总拥有成本(TCO)以及更加环保的绿色能耗体系等多个方面的要求亟需存储架构的革新与变化。

  目前,数据的传输与访问,是基于HTTP协议为代表的互联网协议实现的。互联网将计算机与智能移动终端连接在一起,使得用户能够访问存储其他终端上的海量数据。数据以计算机、终端域名为地址进行中心化存储,带来了巨大的流量访问和数据传输压力。

  而IPFS去中心化分布式存储架构将会有效降低目前基于中心化的云存储成本,将和去中心化的云计算一起作为Web3.0的重要基础设施,加快推动相关行业的数字化转型进程,构建商业新场景,促使经济社会发生深刻变革。

  IPFS 是InterPlanetary File System的缩写,译作星际文件系统。简单而言,IPFS是一个内容可寻址的对等超媒体分发协议,用户要寻找的是存储在某地方的内容,这些内容分散在不同的服务器节点,而不是某个地址,因此只需确认验证内容的哈希值,就可以达到访问目标,大大减小了中心存储的压力。

  有了面向未来的IPFS存储架构,还需要将数据进一步细分,这就涉及到了分层存储。按照数据的热度和使用频率,我们可以简单的将其分为极热数据、热数据、温数据、冷数据和极冷数据。

  事实上,我们很难找到一种存储介质、存储设备能够同时满足所有层级的数据存储需求,对于不同层级的数据,需要采用的存储介质和存储的设备是不一样的,这样才能够既满足海量数据的存储和对热数据的快速访问。

  大数据部分主要针对冷存储和极冷存储,业界通常使用高密度的大容量企业级HDD来进行。目前,已经进化到了18TB容量的高密度硬盘产品。西部数据的Ultrastar DC系列硬盘已经在多个云服务商处得到验证与部署。西部数据基于SMR(叠瓦市磁记录)技术开发的企业级HDD,已经做到了20TB的容量,几家头部云服务商部署的硬盘在过去4年当中,已经从8TB容量进化到了18TB,发展非常迅速。

  西部数据公司副总裁兼中国区业务总经理刘钢

  但更为惊人的是,IPFS服务商的硬盘容量演进速度。在过去的四个季度,他们几乎就走完了传统云服务商用时四年才完成的存储容量升级,也就是说从8TB进化到了18TB。

  抛开升级速度,无论是IPFS服务商,还是传统云服务商,使用单盘容量越来越大的HDD是统一的,为什么大家从8TB不断升级至12TB、14TB,继而到现在的18TB?其实很简单,在同样存储容量的情况下,使用18TB硬盘可以大大减少服务器的数量,提高存储密度,从而降低功耗,降低部署成本,最终降低运维成本。

  IPFS存储与数据分层,让我们有可能使用各种产品的存储组合,来满足用户各方面、各种存储场景的需求,继而解决未来数据时代的存储痛点。

  ·西部数据领先产品 赋能IPFS存储与计算集群

  作为世界领先的存储架构公司、在存储领域深耕第51年的存储巨头,西部数据拥有完整的企业级存储产品线。

  在HDD方面,西部数据的SMR技术已经成功应用到20TB容量的硬盘上了,一些客户通过部署Ultrastar DC HC650 20TB SMR HDD,得到了更低的总体拥有成本(TCO)与更高的存储密度。全球领先的云存储服务商Dropbox是首批测试验证西部数据Ultrastar DC HC650 20TB SMR HDD的公司之一。

  对于需要频繁访问的快数据部分,像热存储、温存储,西部数据主要提供了两种不同类型的SSD产品,像面向极热存储的Ultrastar DC SN840 NVMe SSD,主要针对写入负载密集的负载而设计,可以帮助用户完成高性能的计算工作。而Ultrastar DC SN640 NVMe SSD更多应用到主流的服务器和云上,适用于读写均衡的混合型工作负载。

  对于企业级客户来说,选择SSD供应商需要考虑很多因素,足够的产能与供应能力,足够低的成本和领先的性能,以及良好的纵向优化能力,都是影响用户购买决策的重要方面。

  而这几点,恰恰是西部数据的优势。西部数据刚刚推出了第6代3D闪存技术,162层的3D闪存会进一步提高侧面单元密度,相比BiCS5相比,芯片尺寸减小40%,程序性能可以提高两倍以上,输入/输出性能提高约66%。西部数据与铠侠一起投入巨资,拥有领先的闪存产能优势,占有全球近3分之一的Flash产能。

  此外,西部数据还拥有完全自主的控制器和固件,和NAND Flash纵向集成,有助于性能和稳定性的不断优化,确保客户采购的产品在整个生命周期内拥有稳定的I/O一致性。

  在IPFS存储系统中,“存算分离”是一个特别重要的特点。也就是说存储集群和计算集群是分开的,两个集群的存储特性有着明显的区别。

  如果使用西部数据的18TB HDD,以4U60+18TB的解决方案为例,与传统的4U36+16TB组合相比,机柜数量可以减少约46%,功耗减少约36%,明显降低部署成本和运维成本。

  目前,西部数据已经与多家合作伙伴联合推出了IPFS存储解决方案,例如星辰天合、浪潮和西部数据共同推出的IPFS存储系统,使用了西部数据Ultrastar DC HC550 18TB HDD、浪潮英信服务器NF5466M5、XSKY文件存储系统等关键组件,不仅实现了快速部署、便捷运维,还有助于减少业务的异常情况带来的损失,大幅提升业务收益。

  在基于分布式存储的Web3.0架构之下,西部数据展示了全方位的技术实力和相应解决方案,赋能IPFS基础设施建设。与业内合作伙伴一起打造的针对IPFS优化的计算和存储节点方案,可以帮助客户更好的挖掘出大数据时代数据的真正价值。

特别提醒:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。


返回网站首页 本文来源:互联网

本文评论
毫末智行CEO顾维灏,“中金投资策略会”发表演讲:产品为王、规模制胜
自动驾驶领域再掀“买买买”投资狂潮。天眼查数据显示,2020年1月至今,自动驾驶赛道融资事件243起以上,同期新申请的专利达到近5000件。进入2021年,创业公司半年内拿到2-3轮融资,融资额数亿、数十亿的更是牵动了投资人的神经,从亚马逊、丰田、通用、长城、大众等互联网巨头、整车厂纷纷豪气入局。
日期:08-27
戴尔科技集团公布2022财年第二财季财报
在“打破时空界限”的经济时代,持久的竞争优势助力戴尔业绩再创历史新高
日期:08-27
松下影像 9 月 1 日举行线上发布会,有望推出 GH6 微单相机
8 月 27 日消息 松下影像宣布于 9 月 1 日 20:00 举行线上新品发布会,有望推出 LUMIX G 系列的全新旗舰 GH6 微单相机。
日期:08-27
国家网信办专项整治APP弹窗:禁止PUSH弹窗推送八卦绯闻等内容
据央视报道,国家网信办决定8月27日启动“清朗·移动应用程序PUSH弹窗突出问题专项整治”,聚焦突出问题靶向施策,推动PUSH弹窗传播秩序短期内实现明显好转。
日期:08-27
我国第一款自主创新主动标识载体芯片“星火”首次公开亮相
8 月 27 日消息 从中移物联网获悉,“2021 中国国际智能产业博览会”于 8 月 25 日在重庆闭幕。智博会上,由中国信通院和中移物联网联合研发的、第一款中国自主创新可控的主动标识载体芯片“...
日期:08-27
斥资49亿元!比亚迪在济南成立半导体公司
日前,据媒体报道,济南比亚迪半导体有限公司(以下简称:济南比亚迪半导体)已于8月24日正式成立,法定代表人为陈刚,注册资本49亿元人民币。
日期:08-27
三星官方 App 开始适配 Android 12,One UI 4.0 可能不远了
8 月 27 日消息 今年 7 月份,三星韩国的一位社区经理意外透露了“Galaxy S21 系列 One UI 4 Beta 测试版即将到来”的消息,然而之后就没了消息。
日期:08-27
西数答应为SMR红盘用户赔款:总金额约1750万元
还记得西数红盘引发的SMR事件吗?
  所谓SMR即叠瓦式磁记录,其优势在于提高了盘片容量,使得大容量机械硬盘价格更低,但缺点也有,那就是高负荷、长时间工况下写入掉速明显。
  由于西数红盘定...
日期:08-27
微信公众号新增“我的商店”功能
  8 月 27 日消息 微信公众号又推出了新功能:“我的商店”,公众号运营者添加该功能后
日期:08-27
大金空调:颜值至上时代,空调如何内外兼修?
随着人均可支配收入的增加,人们不再满足于基本的温饱需求,开始更加追求精神世界的满足与自我形象气质的提升。加上移动互联网和社交平台的蓬勃发展,带来直播和短视频热潮的同时,还催生了一种“颜值经济&r...
日期:08-27
高通和中兴通讯完成 5G 毫米波测试,使用骁龙 X65 实验终端完成
8 月 27 日消息 根据高通 @Quacomm 中国消息,高通和中兴通讯近日完成测试,实现 5G 毫米波(mmWave)新里程碑。为配合和支持 IMT-2020(5G)推进组制定的支持 200MHz 载波带宽的 5G 毫米波测试和部署需求,双方...
日期:08-27
中国三星与百度签署战略协议 多业务展开合作共建开放共赢生态
8月25日,中国三星与百度宣布达成战略合作,在智能搜索与内容、智慧云、智能化终端场景等领域展开合作,助力移动互联网应用创新和用户体验提升。双方将持续探索行业领先的解决方案,为消费者构建智能化和个性...
日期:08-27
与合作伙伴共享开放平台优势资源,科大讯飞这才叫真·赋能
8月25日,科大讯飞在线上召开了2021半年报业绩说明会。会上,科大讯飞总裁吴晓如对2021年半年度业绩进行了解读。科大讯飞董事长刘庆峰与董事副总裁聂小林、副总裁段大为等高管团队与投资者进行交流,并回答了...
日期:08-26
三星:3 纳米 GAA 制程研发进度领先台积电,将尽早实现商业化
8 月 26 日消息 据韩媒 BusinessKorea 报道,三星电子设备解决方案(DS)业务部首席技术官 Jeong Eun-seung 宣布,作为下一代代工微制造工艺的核心,全环绕栅极(Gate-All-Around,GAA)技术将尽早实现商业化。
日期:08-26
谷歌 Android 12 Beta 4.1 发布,修复手机重启后卡在启动界面的问题
8 月 26 日消息 谷歌近日发布了 Android 12 Beta 4.1 版本,带来了 Pixel 手机的一些重要修复。
日期:08-26
中国移动发布《2021年智能硬件质量报告》,联发科天玑1200功耗获全场唯一五星好评
近日,中国移动发布了《2021年智能硬件质量报告》,其中5G芯片评测部分广受关注。中国移动在SA网络模式下,对骁龙888、天玑1200、三星Exynos1080三大商用芯片的数据上传下载性能、语音通话和功耗表现,进行了...
日期:08-26
消息称字节跳动以 50 亿元收购 Pico,正式入局 VR
8 月 26 日消息 据 VR 陀螺报道,消息称字节跳动以 50 亿元人民币收购 Pico,正式入局 VR,目前相关方并未对此做出回应。
日期:08-26
统一推送联盟:统一推送能力开放平台正式上线,为 UMS 重要组成部分
8 月 26 日消息 今日,统一推送联盟宣布统一推送能力开放平台正式上线,开发者招募启动。
日期:08-26
AMD发布Radeon 21.8.2驱动:优化3款游戏 4K性能小涨6%
这几天适逢科隆游戏展,有多款游戏发布或者升级新技术。AMD日前也发布了Radeon Software Adrenalin显卡驱动21.8.2版,为《Myst》等3款游戏提供支持及优化,4K性能提升大约6%。
日期:08-26
揭秘火山引擎视频云:抖音背后的视频技术中台
  近日,火山引擎视频云产品负责人对外分享了火山引擎视频云的发展情况,以及从to C到to B的过程中,火山引擎视频云延续C端优势的独特做法。
日期:08-26
  专栏介绍
即时新闻 的专栏
即时新闻发表的文章