学科分类
/ 25
500 个结果
  • 简介:

  • 标签:
  • 简介:摘要:针对大数据的特点及其对存储系统的海量、融合和高性能的存储需求,提出了一种融合分布存储系统,该系统基于本地物理存储介质构建统一的分布存储资源池,采用去中心化的软件定义存储架构,利用多台存储服务器分担存储负荷,提高存储系统性能;通过多副本、纠删码数据保护模式,提高数据可靠性;向上层应用提供文件存储、对象存储、块存储等融合存储服务,提供数据管理效率;系统采用可扩展的方案,实现动态扩展。本文对分布存储系统系统架构、寻址方案、读写流程等设计要点进行研究,并给出了测试验证结果。

  • 标签: 大数据,分布式存储系统
  • 简介:摘要:本文对基于云计算的分布存储系统技术进行深入研究,并重点分析了其中的三个关键技术,包括分布存储技术、数据缓存技术和数据加密技术。针对每个技术,本文从实际问题出发,深入探讨了其原理、应用场景、挑战,为读者深入了解分布存储系统技术提供了参考。

  • 标签: 云计算 分布式存储 云存储系统 可靠性 安全性 性能。
  • 简介:摘 要: 区块链是一种新型分布账本数据库,其具有分布存储、不可篡改、可溯源、去中心化等显著特征。 重卡的胎压、轴温是重卡行驶安全至关重要的因素,路谱数据的采集 可以有效帮助企业在重卡生产上进行安全升级。胎压、轴温、路谱数据 增长迅速 ,格式多变。 传统集中式数据存储方案在存储 诸类数据时存在瓶颈性问题且数据安全存在极大风险。为解决该问题,结合存储数据不可更改,本文利用区块链先进技术对重卡行驶安全数据进行分布存储,从而解决重卡行驶过程中实时数据存储性能瓶颈及数据安全问题。

  • 标签: 区块链 分布式数据存储 重卡
  • 简介:摘要:在如今的 IDC机房中,大多数数据存储都是采用集中式存储设备,集中式存储设备采用的均是 RAID技术,虽然 RAID比较成熟,但是随着大数据时代的到来,传统的数据存储方式并不能满足现在的需要,难于对海量的数据进行安全、可靠、快速的存储,并且不同厂家存储在新能和兼容性存在较大差异。本文章首先分析传统存储技术,随后就分布存储的优缺点进行简要分析。

  • 标签: 分布式存储技术 RAID技术 存储虚拟化
  • 简介:摘要本文通过对存储数据的分类,分析了结构化数据、非结构化数据和半结构化数据存储技术,并介绍了相关的应用场景。帮助用户构建适合自己需求的分布存储系统

  • 标签: 分布式 存储 结构化数据
  • 简介:摘要:随着互联网技术的迅猛发展,各类信息每天以井喷状态产生、传输和应用。为了适应信息时代信息管理的需求,分布数据库应运而生。在传统的集中式数据库时代,信息存储和信息用户较少,集中式存储库只能够满足基本的数据管理需求。而随着信息用户增多,对于信息存储、传输管理的要求不断提高,在信息管理方面更需要大容量和高效率的数据库技术来确保信息高品质、高效率的应用。分布数据库与集中式数据库相反,它将多个数据存储单元组合为同一个数据库,然后分存到不同的数据存储节点上,实现海量数据的超大容量存储和访问。研究分布存储数据技术在大数据中的应用对于解决现阶段数据库存储问题有着重要意义。

  • 标签: 分布式存储 数据 存储
  • 简介:

  • 标签:
  • 简介:首先给出了(s,s)策略随机存储系统极限库存分布的概念及更新过程的一些基本知识。利用更新过程的理论给出了极限库存分布的解析表达,并讨论了需求分布为指数分布的情形。然后利用系统仿真的方法进行验证,表明解析方法与仿真方法的结果完全一致。论文结果说明了解析推导的正确性和系统仿真方法的科学性。

  • 标签: 极限库存分布 更新过程 解析方法 系统仿真方法
  • 简介:传统的存储模式已经不能应对网络和应用的飞速发展,论述了近年来发展起来的一种新型数据存储技术,相对于传统方式有着明显的优势.对GlusterFS分布文件系统做了简要介绍,分析了此系统的架构,以及如何安装和正确地配置,并且在此系统上进行相应的测试,测试分为系统的自动冗余、由冗余带来的系统高可靠性(容错)、系统的在线文件同步、故障点恢复后的文件同步,测试的结果验证了此系统相对于传统存储模式的巨大优势.

  • 标签: 开源 分布式 文件系统 GlusterFS 冗余 存储
  • 简介:摘要:在互联网技术蓬勃发展的时代背景下,尤其是移动互联网的推广和普及以及无数新应用的诞生和变化,互联网中产生的数据量呈现爆炸的增长,人们意识到海量的数据中存在着巨大的价值,大数据作为一个描述数据量的名词如今已经被广泛地使用,人工智能,机器学习,用户画像等新领域都离不开大数据的支撑。存储和管理大数据的技术同时也在不断发展,配合着云计算技术的发展,云存储技术也在不断地优化迭代。过去的云存储技术通常基于集群应用。在分布文件和网格技术的前提下,分布存储技术能够通过软件将网络中链接的各种存储设备建立联系,将用户数据分别存放于这些设备中,大大提升了用户访问数据的效率和便利性。

  • 标签: 大数据 分布式云存储 人工智能
  • 简介:企业对于存储的需求与日俱增,但昂贵的专业存储系统对于中小企业而言是难以承受的,开源的FreeNAS为中小企业提供了免费的存储解决方案,本文针对企业应用环境,介绍了FreeNAS存储系统的安装,管理与应用。

  • 标签: 存储系统 中小企业 存储解决方案 企业应用
  • 简介:CKV(CloudKeyValue)是腾讯自主研发的分布存储系统,服务于QQ空间、朋友网、相册、音乐等核心业务,日访问量超过万亿次。本刊3月期《腾讯CKV海量分布存储系统:日访问过万亿次背后的技术挑战》一文中,全面剖析7CKV的实现原理和技术挑战。本文则将从部署架构、质量、效率和成本四个方面来讲述CKV的运营实践。

  • 标签: 分布式存储系统 腾讯 运营 自主研发 QQ空间 核心业务
  • 简介:

  • 标签:
  • 简介:本刊讯由谢长生、曹强、吴非、谭志虎、万继光、黄建忠等人组成的“进化海量存储系统关键技术与实现方法”项目组针对海量网络存储系统,在数据组织方式和组织策略上提出了多项发明技术。针对存储系统物理和逻辑的组织方式是一种静态组织结构,不能很好地刻画处于不断变化之中的系统,提出了一种进化存储系统及其进化方法、自适应数据存储优化分布存储设备数据再生进化方法,获得3项发明专利;还提出了一种存储系统数据分布及互转换和一种基于连续度聚类和时间序列的IO区域预取的方法,申请2项发明专利。针对数据存储安全性,提出了一种在内核态文件系统层的加密读写和一种用于存储系统的全局缓存管理的方法,申请2项发明专利。以上技术都已投入使用,从多角度提高了网络存储系统的性能,提供了多种关键技术缓解I/O瓶颈的方法。采用部分上述技术和方法形成的“采用零拷贝技术的多协议磁盘阵列控制器”为国内首款具有自主知识产权的磁盘阵列硬件控制器,并已成功应用于军用加固磁盘阵列和民用磁盘阵列系统中。

  • 标签: 海量存储系统 存储技术 进化方法 磁盘阵列控制器 网络存储系统 数据组织方式
  • 简介:存储系统压缩能充分利用片上晶体管,扩大cache容量,减少功耗,隐藏较长的存储延时,进而给系统性能带来较大提升。本文首先介绍了现阶段几种主流的压缩算法和压缩存储系统结构,并说明其各自的特点以及目前的状况,而后对压缩存储系统的发展趋势进行了分析。

  • 标签: 压缩 存储系统 高性能
  • 简介:对象存储系统是具有跨平台共享特性和高速直接访问特点,但是当系统存储容量、存储设备、服务器和网络设备越来越多时,系统的维护和管理变得更为复杂,存储系统的可用性和易用性将受到关注。为了减少人工管理和配置的时间,系统要通过简单方便和智能的设计提供更高的管理性。

  • 标签: 数据存储 对象存储系统 管理 虚拟化