乘云而上:数据存储产业的三大趋势!
···约2000字,阅5分钟···
大数据时代,计算、存储与网络成为数据中心基础设施的核心资源。存储作为载体起到了核心与关键的作用,成为企业赖以生存的核心资产,数据存储成为业界的关注焦点之一。
正所谓 “抬头看天,低头走路”,作为一个数据存储行业从业者,脚踏实地立足当前技术发展的同时,我们也应该仰望星空去看看大数据的发展趋势。
数据保护与云不离不弃
云中护航渐成行业主旋律
数据安全问题,一直以来是人们非常看重的。
近日,发生在2019年双十一前后的旧闻让阿里云登上了热搜,而这一次事故,与云业务用户注册信息的泄露有关。作为一家市场份额高达40%的企业,每天数以亿计的数据在云端“飞奔”,一场有用户隐私安全的讨论随之展开。
数据是数字经济时代的基石,但当大量用户数据集中流向了互联网巨头等平台,如果平台做不好数据妥善保护和应用,就会带来隐患。从监管合规和隐私保护的角度来看,业内越来越侧重于在海量数据的不可见、不触碰的情况下,去获得商业的价值。
今年以来,监管层对于个人信息及企事业单位信息安全保护的重视度也不断提升。可以看到,在国家发布的“十四五规划”和“2035年远景目标”中,网络安全、数据安全成为了重要议题。对于数字中国的发展来说,数据安全不再是一个独立产业,而是全面融入经济社会发展的各领域。随着云计算技术应用的行业深入,企业全面上云时代也已开启,随之而来的数据保护与安全已经成为诸多行业数字化发展的战略考虑重点。
未来,随着产业数字化进程不断加速,数据安全的重要性必将与日俱增。伴随新基建的深入,AI、5G、物联网、大数据、区块链等新兴技术基于云的融合也在深入,数据保护与云安全之间的关系将会变得更为紧密,如何做好“数据安全建设”,将会关系到百行百业在数字化时代的创新发展。
EB级大数据存储时代
智能化提升技术融合
大数据存储从海量数据“存得下”的1.0时代,到融合存储“管得好”的2.0时代,再到智能存储“用得爽”的3.0时代,我们正在快速迈进数据时代的新纪元。
根据IDC的报告,到2024年,以HDD为代表的大数据预计将增长到1.62ZB,而以SSD为代表的快数据将会达到333EB的水平,但与此形成鲜明对比的是届时高达143ZB的总数据量。即便数据增长如此快速,但最终也只有1.5%的数据被存储下来,究其原因,还是因为存储的架构和存储的技术没有及时地跟上,以至于有很多数据被浪费掉了,没有办法被存储下来并及时使用。这些海量的数据包括了实时数据、边缘数据、终端数据等类型,同时其中以图片、视频、语音等非结构化数据居多,这些数据在带来独特用户体验和众多全新商业机会的同时,也给企业提出了前所未有的挑战。
与此同时,随着计算、云端、AI等多元技术的快速发展,存储作为载体引领着不同类型的数据对于容量、存储时间等要求的差异性,也使得多项存储技术与存储介质实现了多元共生。在Web 3.0时代的大背景下,存储问题的解决不仅要面对存储本身,还要跳出存储本身,解决技术互相融合的问题。
开疆辟土
IPFS成为数据存储新蓝海
当前,Web2.0正加速向Web3.0过渡,全球数据存储量呈现“爆炸式”增长。传统的中心化存储方式可满足日常需求,但数据存储已经呈现服务化趋势,数据与存储实体之间、数据使用者和资源所有者之间渐次分离,这种趋势要求存储服务必须“泛在化”:既“无处不在”又“随需而用”。
分布式数据存储的出现给存储服务的“泛在化”带来了契机,为分布式数据密集型应用下的数据管理提供一种高效的解决方案和实现机制,为数据存储提供海量的可扩展的高性能存储资源,也为复杂的数据处理提供强大的计算能力和支撑技术。
目前已经公开的分布式存储项目中,不管是技术还是实现形式很多都相互重叠,各有特点,没有一个非常明晰的划分。在这之中,IPFS一直被认为是这个赛道的未来。
IPFS想在BitTorrent的基础上,打造真正的点对点、去中心化的文件存储系统。在IPFS中,所有的文件都会集中起来,其中会有通用的语言,并且所有的用户都会在整个系统中共享,这可以让他们寻找并且互相转移文件。
IPFS 包含了通信协议和分布式系统的几个创新,它们的组合产生了与众不同的文件系统。因此,为了理解 IPFS 所要尝试达到的广度和深度,重要的是理解使其变得可能的技术突破和所有它正在尝试解决的问题。
目前,IPFS所应用的场景已高达100多个。不仅是京东、华为在布局IPFS,微软、谷歌、火狐等也加入了IPFS应用,从这方面可以显示出IPFS的发展迅速。未来,无论文字、图片,还是视频,各种用户想要存储的内容,都有可能通过IPFS来实现。
总的来说,数据存储行业的发展从起步到发展再到成熟,经历了多年的风风雨雨。随着各种技术成熟,人类正在追求信息储存在时间和空间两个维度上的极致:超高的存储密度和永恒的存储时间。未来,或许还会出现更多针对数据存储的技术,无论实践结果如何,以IPFS为代表的分布式存储已经成为时代发展蓝图中不可缺失的板块。