77百科网
当前位置: 首页 生活百科

大数据存储技术介绍(从大数据到快数据)

时间:2023-08-18 作者: 小编 阅读量: 1 栏目名: 生活百科

疫情以来,线上办公和线上教学等需求不断扩大,再加上5G、AI等新技术的应用和发展,使得全球数据总量步入了一个新的台阶。据了解,目前的存储器主要分NANDFlash和DRAM两种。其中NANDFlash被称为“闪存”,是外存的一种,断电不会丢失数据,可长期保存数据。目前,随着技术的突破,PM产品已经进入市场,成为解决“快数据”需求的重要力量。经宁认为,“需求技术”将催化存储系统新一轮变革机遇,存储行业将发生“第四次变革”。

每经记者:安宇飞 每经编辑:文多

当下正处于“数据大爆炸”的时代,全球数据量规模飞速增长,对存储能力的要求也不断提高。

6月15日,在深圳市泛联信息科技有限公司(以下简称“泛联信息”)新一代存储产品发布会上,公司总经理经宁表示,目前全球存储系统迎来新一轮变革机遇,正在从“Big Data”(大数据)发展到“Fsat Data”(快数据)。

经宁展示的数据显示,2021年全球实时数据量规模为16ZB(1ZB约等于1万亿GB),占全球数据总量的19.6%,2025年实时数据量将达到51ZB,占数据总量的比重会跃升至29%,“需要快速处理的数据比重在迅速上升”。

同时,经宁还认为,目前全球存储行业已经发生过三次变革,围绕新的技术点和需求,存储系统的变化将有很大概率实现,出现第四次变革的机会。

图片来源:主办方提供

数据爆发时代,存储行业面临哪些变化?

疫情以来,线上办公和线上教学等需求不断扩大,再加上5G、AI等新技术的应用和发展,使得全球数据总量步入了一个新的台阶。根据IDC预测,从2018年到2025年,全球数据总量将由33ZB增长至175ZB,年复合增长率达26.9%。

许多数据都需要存储,全球数据量的激增将会极大地带动存储行业的发展。

不过,存储市场蓬勃发展的背景下,一些变革也在悄然发生。泛联信息董事长韩凌认为,目前存储行业面临三大变化:环境之变、业态之变、技术之变。

其中,环境之变指的是“国产自主可控”的重要性日益提升。业态之变则催生了“快数据”的需求。

韩凌表示,云计算、人工智能、超算等技术的发展,都对IT基础架构提出了越来越多的需求,而这个变化的表现就在数据规模上体现出来。

“首先是数据越来越大:10年前T级数据(TB)对我们来说就已经很大,但今天,几十TB上百TB的数据比比皆是。其次是数据的结构、类型更加丰富和多元,早已经超出了桌面和移动端的应用范畴,更加深入地进入了千行百业,成为生产要素。第三个是快数据,数据要越来越快地进入算力,将来有可能是T级数据在10微秒内进入算力系统。”韩凌说。

如何应对“快数据”挑战?新介质催生变革机遇

如何让数据“跑得更快”?这就涉及韩凌提到的“技术之变”了。据了解,目前的存储器主要分NAND Flash和DRAM两种。其中NAND Flash被称为“闪存”,是外存的一种,断电不会丢失数据,可长期保存数据。而DRAM属于内存,速度比NAND Flash更快,但断电会丢失数据,主要用于存储程序运行时的临时数据。

以“8 256GB”的手机为例,这里的“8”指的就是内存为8GB,“256”指的是外存为256GB,人们经常把内存和外存误称。简单来说,外存就像一个仓库,当CPU工作的时候需要从“仓库”读取数据,但这个“仓库”又大,离CPU又远,运输效率低、速度慢。所以在CPU和仓库之间会建立一条“过道”,这就是内存。“过道”离仓库近,读取数据的速度也快,但不会保留数据,一断电就会被“清扫”得干干净净,啥也不剩。

目前,无论是内存还是外存都已发展到了比较成熟的阶段,特别是NAND Flash和DRAM这两种介质。但面对与日俱增的“快数据”需求,市场上也需要其他介质的技术发展来加速。

持久性内存Persistent Memory(以下简称“PM”)就是其中之一,它是介于外存和内存之间的一种新介质,既有“仓库”的容量和保存信息的能力,也有“过道”的速度。据了解,PM既能实现断电不丢失数据,也有超越SSD(固态硬盘)等外存的速度,兼具了内存和外存的各自优势。

目前,随着技术的突破,PM产品已经进入市场,成为解决“快数据”需求的重要力量。6月15日,泛联信息就发布了分布式全闪存存储UbiPower 18000和分布式海量存储UbiScale 12000两款创新型存储产品。

一边是全球数据量激增,快速处理数据的能力日渐重要,另一边则是PM等新介质进入市场。经宁认为,“需求 技术”将催化存储系统新一轮变革机遇,存储行业将发生“第四次变革”。

不过,深圳大数据研究与应用协会会长赵春雷也表示,目前行业发展也面临着“人才问题”的挑战。比起应届生,大数据相关企业更需要有经验的人才,但是“人从哪来”的问题仍难以解决。

对于PM产品这一方兴未艾的领域而言,“人才瓶颈”或成为它在国内进一步发展面临的主要挑战之一。

每日经济新闻

每日经济新闻

    推荐阅读
  • 平安树死了怎么救活(平安树死了代表主人有难吗)

    2、若只是叶片干枯,根系并没有枯死的话,可采用以下方法挽救:修剪根系:植株干枯多是根系受损导致,要及时脱盆,剪掉烂根、枯根,并用多菌灵消毒。

  • 如何给孩子制定暑期计划(小学育儿必备系列之杨万里小池)

    导语丹娜妈咪今天继续与大家分享关于节气的古诗词。今年未到,天气已经十分炎热,丹娜妈咪思考了很久哪一首诗词比较适合幼儿园和小学低年级孩子。最终敲定分享给大家的是宋朝杨万里的《小池》。诗名《小池》指小池塘。丹娜妈咪绘制了倒影的树代表树荫;太阳代表晴天;一根羽毛代表柔和。《小池》第一、二句:泉眼无声惜细流,树阴照水爱晴柔。

  • 微信一秒长语音教程,求解)

    我们在使用微信的视乎是可以发1秒长语音的,但是很多的用户还是不知道要怎么做,那我们具体要怎么做才可以发1秒长语音呢?下面希望有你要的答案,我们一起来看看吧!下面是小编整理的微信1秒长语音怎么弄教程,一起去看看吧!打开手机微信,找到发过长语音的好友或者是群;来到好友聊天界面可以选择一秒语音进行收藏;在收藏页面点击语音进行转发,这样自己就可以转发一秒长语音了。

  • 空心菜需要注意的种植技巧有哪些,怎么高产种植

    适宜4月至10月种植。温度管理保温防寒是水空心菜快速生长的关键,因此水空心菜应在地温恒定在15℃后播种。但在我国北方,春季易出现晚春寒冷,昼夜温差大。可选择4月底至5月初气温稳定后播种,播种后覆盖保温材料。湿度管理空心菜适宜潮湿环境,避免风干,以免土壤水分不足,导致纤维增多,茎叶粗大老旧,影响空心菜品质。每次收获后应及时追肥,使下一茬空心菜能迅速生长而不减产。

  • 盗墓笔记手游谁玩了(你所不知道的盗墓笔记手游)

    16日,《盗墓笔记》手游迎来版本更新,最后的完结篇“云顶天宫”也浮出水面。“这是第一款《盗墓笔记》,也是官方的手游。它需要非常正统的定位。”南派三叔坦言,在积极打造《盗墓笔记》产业链的同时,他并非急不可耐的选择输出口,而是对输出内容的监制更加严谨。也许这一次,所有的谜团和期待,我们都将在《盗墓笔记》手游新版中找到答案。

  • 暗黑破坏神2重制版金怪刷哪些 暗黑破坏神2重制版刷boss

    金怪是指能够固定掉落金级装备的boss,很多玩家都不知道该刷哪些,下面小编就带来暗黑破坏神2重制版金怪速刷推荐,一起来看看吧。关于暗黑破坏神2重制版金怪速刷推荐为大家分享完毕,对这款游戏感兴趣的玩家可以多多关注本站游戏专区,我们会及时更新游戏的最新消息,希望对大家有所帮助。

  • 网络主播归广电总局管(文化和旅游部发文规范网络主播从业行为)

    网络主播归广电总局管新华社北京6月22日电近日,国家广播电视总局、文化和旅游部联合印发《网络主播行为规范》。网络表演、网络视听经纪机构要依法合规为网络主播提供经纪服务,维护网络主播合法权益。平台和经纪机构规范网络主播情况及网络主播规范从业情况,将纳入文化和旅游行政部门、广播电视行政部门许可管理、日常管理、安全检查、节目上线管理考察范围。