简介:摘要 移动互联、5G及自媒体等技术的发展,使21世纪的数据信息出现爆炸式增长,海量数据的产生推动了数据存储技术的发展,分布式存储以其较高的可靠性、横向扩展的规模性及并行访问的高性能得到业界的广泛应用。
简介:信息时代,人们在生活和工作中产生了大量数据。然而,随着数据越来越多,数据信息规模不断产生。传统的操作系统很难将这些体积庞大的数据快速、安全、稳定地存储起来。尽管有的研究者考虑过把这些数据进行拆分,并分配到更多的操作系统管理的磁盘中,以实现无限的数据存储。但是这种存储方式十分不便于管理和维护,因此,迫切需要一种更加先进的存储管理系统来管理多台机器上的文件,这就是本文研究的分布式文件管理系统。本文探讨了基于HDFS分布式文件系统的大数据存储的优点与功能,并介绍了依托HDFS分布式文件系统卓越的性能开展海量数据存储服务以及衍生服务的企业和研究机构,进而探究其借助这一重要工具实现业务水平快速升级的策略。
简介:摘要:随着云计算、大数据、物联网、边缘计算以及5G等技术的应用发展,特别是基于视频应用、社交网络及电子商务等各类业务应用数据和流量的爆发式增长,使未来对于内容分发网络(Content Delivery Network,CDN)的业务需求逐渐扩大。当前业务的快速增长尤其视频类应用的飞速发展对CDN平台的性能、网络承载能力等方面带来了很大的挑战,现阶段的CDN文件存储架构已经无法满足当前的应用需求。本文依托分布式文件存储技术优势,快速将业务应用内容文件缓存到边缘侧并共享给CDN边缘集群所有节点访问,以快速响应业务应用访问需求,同时通过集群模式提高边缘节点的高可用性,从而降低延迟卡顿,提升用户体验,更好地满足业务场景应用需求。
简介:摘要随着数据的高速增长,企业和用户对存储领域的需求呈现爆炸式增长。当前数据已经成为企业的核心资源,因此对数据存储的安全性和可靠性也提出了更高要求。这些技术从软件或硬件等不同层面共同推动了存储领域的发展,也对传统的存储体系结构形成了冲击,从而为相关的研究提供了广阔的空间。为了满足数据密集型海量存储系统的应用需求,进一步提高存储系统的带宽,随着海量数据存储和I/O密集型应用的发展,I/O越发成为了分布式存储系统的性能瓶颈,传统的HDD硬盘读写速度慢,难以胜任分布式文件系统中的工作,因此使用全SSD突破系统的IO瓶颈,提升分布式文件系统的性能。