77百科网
当前位置: 首页 生活百科

大数据存储技术介绍(从大数据到快数据)

时间:2023-08-18 作者: 小编 阅读量: 2 栏目名: 生活百科

疫情以来,线上办公和线上教学等需求不断扩大,再加上5G、AI等新技术的应用和发展,使得全球数据总量步入了一个新的台阶。据了解,目前的存储器主要分NANDFlash和DRAM两种。其中NANDFlash被称为“闪存”,是外存的一种,断电不会丢失数据,可长期保存数据。目前,随着技术的突破,PM产品已经进入市场,成为解决“快数据”需求的重要力量。经宁认为,“需求技术”将催化存储系统新一轮变革机遇,存储行业将发生“第四次变革”。

每经记者:安宇飞 每经编辑:文多

当下正处于“数据大爆炸”的时代,全球数据量规模飞速增长,对存储能力的要求也不断提高。

6月15日,在深圳市泛联信息科技有限公司(以下简称“泛联信息”)新一代存储产品发布会上,公司总经理经宁表示,目前全球存储系统迎来新一轮变革机遇,正在从“Big Data”(大数据)发展到“Fsat Data”(快数据)。

经宁展示的数据显示,2021年全球实时数据量规模为16ZB(1ZB约等于1万亿GB),占全球数据总量的19.6%,2025年实时数据量将达到51ZB,占数据总量的比重会跃升至29%,“需要快速处理的数据比重在迅速上升”。

同时,经宁还认为,目前全球存储行业已经发生过三次变革,围绕新的技术点和需求,存储系统的变化将有很大概率实现,出现第四次变革的机会。

图片来源:主办方提供

数据爆发时代,存储行业面临哪些变化?

疫情以来,线上办公和线上教学等需求不断扩大,再加上5G、AI等新技术的应用和发展,使得全球数据总量步入了一个新的台阶。根据IDC预测,从2018年到2025年,全球数据总量将由33ZB增长至175ZB,年复合增长率达26.9%。

许多数据都需要存储,全球数据量的激增将会极大地带动存储行业的发展。

不过,存储市场蓬勃发展的背景下,一些变革也在悄然发生。泛联信息董事长韩凌认为,目前存储行业面临三大变化:环境之变、业态之变、技术之变。

其中,环境之变指的是“国产自主可控”的重要性日益提升。业态之变则催生了“快数据”的需求。

韩凌表示,云计算、人工智能、超算等技术的发展,都对IT基础架构提出了越来越多的需求,而这个变化的表现就在数据规模上体现出来。

“首先是数据越来越大:10年前T级数据(TB)对我们来说就已经很大,但今天,几十TB上百TB的数据比比皆是。其次是数据的结构、类型更加丰富和多元,早已经超出了桌面和移动端的应用范畴,更加深入地进入了千行百业,成为生产要素。第三个是快数据,数据要越来越快地进入算力,将来有可能是T级数据在10微秒内进入算力系统。”韩凌说。

如何应对“快数据”挑战?新介质催生变革机遇

如何让数据“跑得更快”?这就涉及韩凌提到的“技术之变”了。据了解,目前的存储器主要分NAND Flash和DRAM两种。其中NAND Flash被称为“闪存”,是外存的一种,断电不会丢失数据,可长期保存数据。而DRAM属于内存,速度比NAND Flash更快,但断电会丢失数据,主要用于存储程序运行时的临时数据。

以“8 256GB”的手机为例,这里的“8”指的就是内存为8GB,“256”指的是外存为256GB,人们经常把内存和外存误称。简单来说,外存就像一个仓库,当CPU工作的时候需要从“仓库”读取数据,但这个“仓库”又大,离CPU又远,运输效率低、速度慢。所以在CPU和仓库之间会建立一条“过道”,这就是内存。“过道”离仓库近,读取数据的速度也快,但不会保留数据,一断电就会被“清扫”得干干净净,啥也不剩。

目前,无论是内存还是外存都已发展到了比较成熟的阶段,特别是NAND Flash和DRAM这两种介质。但面对与日俱增的“快数据”需求,市场上也需要其他介质的技术发展来加速。

持久性内存Persistent Memory(以下简称“PM”)就是其中之一,它是介于外存和内存之间的一种新介质,既有“仓库”的容量和保存信息的能力,也有“过道”的速度。据了解,PM既能实现断电不丢失数据,也有超越SSD(固态硬盘)等外存的速度,兼具了内存和外存的各自优势。

目前,随着技术的突破,PM产品已经进入市场,成为解决“快数据”需求的重要力量。6月15日,泛联信息就发布了分布式全闪存存储UbiPower 18000和分布式海量存储UbiScale 12000两款创新型存储产品。

一边是全球数据量激增,快速处理数据的能力日渐重要,另一边则是PM等新介质进入市场。经宁认为,“需求 技术”将催化存储系统新一轮变革机遇,存储行业将发生“第四次变革”。

不过,深圳大数据研究与应用协会会长赵春雷也表示,目前行业发展也面临着“人才问题”的挑战。比起应届生,大数据相关企业更需要有经验的人才,但是“人从哪来”的问题仍难以解决。

对于PM产品这一方兴未艾的领域而言,“人才瓶颈”或成为它在国内进一步发展面临的主要挑战之一。

每日经济新闻

每日经济新闻

    推荐阅读
  • 女子聚会后突发胃肠炎,只因多吃了几块芒果

    经相关检查,医生建议她到消化内科住院,接受进一步治疗。他叮嘱患者,以后要停止食用芒果。经过加用口服激素治疗后,第2天患者腹痛情况迅速缓解,治疗后第4天复查嗜酸性粒细胞已恢复正常水平。张金华主任提醒,过敏体质人群如果出现突发腹痛伴有嗜酸性粒细胞明显升高,需高度警惕此病发生的可能,建议立即停用可疑的食物、药物,及时就医,明确诊断。

  • 生化危机2重制版试玩版修改器使用方法分享_网

    生化危机2重制版在哪里下载?想必很多朋友都还不是很清楚吧,所以呢小编今天给大家带来的就是生化危机2重制版试玩版修改器使用方法分享,需要的朋友还不快进来看看?试玩版修改器使用方法分享快捷键以及功能说明:快捷键F1开启修改器快捷键F2刷新试玩时间快捷键F3增加12发子弹快捷键F4子弹不减少快捷键F5速度减慢快捷键F6超级速度使用说明:1.打开游戏2.打开修改器3.继续游戏4.修改器当前只适用于demo版本下载地址:修改器

  • 苹果手机小圆点怎么取消(苹果手机小圆点如何取消)

    打开苹果手机上的设置完成以上步骤后,找到通用,点击进入,下面我们就来说一说关于苹果手机小圆点怎么取消?我们一起去了解并探讨一下这个问题吧!苹果手机小圆点怎么取消打开苹果手机上的设置。找到辅助触控并点击关闭按钮。

  • 关于过失损坏交通设施犯罪到底该怎样界定

    过失损坏交通设施与破坏交通设施罪的界限。过失损坏交通设施罪与破坏交通设施罪,侵害的客体和对象相同。从行为人认识方面看,前者行为人对其行为可能造成的危害结果已经预见,或者应当预见而未预见;后者对其行为会造成的危害结果是明知的。

  • 柏姓的由来和传说(天下柏氏姓氏来源)

    始祖为柏翳,起源于尧为部族首领之时,系出嬴姓。相传远古时代有柏皇氏,是东方部族的首领,名叫芝,因为以柏木为图腾,所以称为伯芝。世泰、世奎、世纯后人在此繁衍生殖已历十三世,人口达二千余之众。世泰世奎世纯合议率柏氏子孙集资修建家庙于踏水桥南头小屋坝上供奉祖先,后迁至庙坡上,名曰南溪庙,现仍供有家族狮子。世纯第六代子孙开达于柏家山建柏家祠堂,永祭祖先,功载千秋。

  • 2022款大众途岳最低配值不值得买(关于大众途岳这10个问题)

    途岳是上汽大众旗下继途观(途观L)和途昂之后推出的第三款“途”字辈SUV,定位紧凑型SUV,上市后将替代途观丝绸之路版的位置。号称“小途昂”的途岳10月31日正式上市,官方指导价为16.98-22.98万元。答:据了解,途岳今后极有可能推出插电式混动车型,搭载的动力系统类似帕萨特PHEV的1.4T电机组合。

  • 关于红酒的知识(关于红酒的知识有什么)

    关于红酒的知识不是所有葡萄都可以制作红酒水果摊的常见葡萄都是用来生吃的,不能来酿酒,因为此类葡萄大,水分含量高,纤维多,含糖低,用此类葡萄酿不出好酒。酿酒葡萄正好相反,只需颗粒小、皮厚、籽多。红酒单宁味酒到了口里有较涩的感觉,这就是单宁的味道,它是葡萄酒的骨架,是葡萄酒天然防腐剂,也是消去我们人体内的祸害活性氧的宝贝,同时也是葡萄酒陈年所必备的.来自葡萄的皮和梗以及橡木桶。

  • 儿童tritan水杯大容量(BornFree儿童安全防漏吸管饮水杯)

    商城:美国亚马逊品牌:BornFree年龄段:3-6岁商品详情BornFree是美国著名的奶瓶品牌,属于最早的一批坚持采用不含BPA(双酚A)材质生成奶瓶的品牌之一,再加上优异的防胀气性能,因此赢得了不错的口碑。软质硅胶吸管,也不会伤害宝宝牙龈,方便清洗。目前美国亚马逊粉色款特价至4.71美元,重量较轻,非常适合凑单带回,国内淘宝代购价格55元起,觉得海淘麻烦的可以国内代购入手

  • 兼职代驾需要一个月跑多少(代驾兼职一月2000左右是正常)

    司机收入不管专职还是兼职,单子一般都会在晚上10点以后,专职代驾每天接个两三单差不多,周末的时候有可能接到七八单,一个月收入在7千左右。注意事项既然要干代驾,就要把自己专业形象搞好,留下个好的第一印象。其次开车注意力要集中,不然发生刮擦事故的话很多天都白干了,并且事故处理期间也不能接单,亏大了。并且遇到那些刁钻的客户会被骂,因此有个大心脏是必不可少的,不能因为客户态度不好而起冲突。