学科分类
/ 25
500 个结果
  • 简介:近年来,随着各个领域中大规模、海量数据存储和处理需求的不断增加,集群作为一种廉价的可以提供强大计算能力的并行计算技术得到越来越广泛的应用,其具有大型机的超级计算能力和较低成本投入.从而成为各种高性能计算的主流方向,如科学计算与其他需要大规模并行计算的应用服务等.本文在分析现有分布式储存和计算等关键技术基础上,结合对Hadoop的集群技术的研究以及自身的业务需求和实际软硬件实力,提出了一种基于Hadoop的海量数据处理模型.

  • 标签: 集群 海量数据 HADOOP MAPREDUCE
  • 简介:本文以MODIS、CBERS-02B为遥感数据源,探讨了ENVI软件在遥感数据处理方面的应用,包括辐射定标、几何校正、影像图裁剪和拼接、波段运算和制图等。应用证明ENVI软件在处理遥感数据方面具有很大的优势。通过对ENVI功能的探索研究,为以后的遥感数据处理提供了技术支持。

  • 标签: ENVI 遥感数据 数据处理
  • 简介:数据是毋庸置疑的技术趋势和话题焦点,但是多数情况下,可能人们都太纠结大数据“是什么?不是什么?”,这让话题看起来永远都不会有结论。而本书作者另辟蹊径,在另外的角度上对这一趋势进行解读,即什么才是大数据的正确之路。现在我们就好像身处大数据技术演进的寒武纪时代,在这个技术变革时期,各种技术粉墨登场,快速演化。而这恰恰是人们对现有大数据技术一切疑惑和模棱两可观点的源头,也正是作者在开篇第1章和结尾表述的观点。因为我们身处变革当中,所以很好理解为什么作者并不急于回答“大数据是什么“。只要翻翻这本书,你一定会发现它和市面上其它大数据书籍的不同。

  • 标签: 大规模分析 海量数据 寻路 技术演进 技术变革 数据技术
  • 简介:为了方便提取电厂的TXT以及CSV文件中的数据,该文提出了一种数据处理算法,能够快速提取重要数据显示计算结果,且能采用MSChart控件将数据信息以图表的形式直观表示。该系统已经应用在电力系统中,并取得了很好的效果。

  • 标签: TXT文件 CSV文件 MSCHART控件 图表显示
  • 简介:摘要:本文探讨了大数据处理在当今数字化时代中的重要性和挑战。随着数据的爆炸性增长,有效处理海量、多样化的数据成为迫切需求。首先介绍了大数据的概念及其特点,包括数据量庞大、类型多样、处理速度快等。然后详细阐述了大数据处理的关键技术,包括分布式存储系统、分布式计算框架和数据处理工具,以及它们在数据采集、存储和处理过程中的作用。最后强调了大数据处理面临的挑战,如数据质量、隐私安全、计算资源限制等,并展望了未来发展趋势。通过对大数据处理的综合分析,可以更好地把握时代脉搏,推动数据技术的不断创新和发展,为构建数字化、智能化的未来社会做出贡献。

  • 标签: 大数据处理 分布式存储系统 分布式计算框架
  • 简介:Hilbert变换,Hilbert变换的算法,本文将Hilbert变换用于探地雷达资料的数据处理

  • 标签: 中的应用 变换探 探雷达
  • 简介:摘要企业数据处理在很大程度上主要是计算机技术和信息化发展中的新模式,在数控企业进行激烈的市场竞争中为其提供了有利的支持,因为在市场经济的快速发展中,尤其是中国加入世贸以后,测绘行业竞争巨大,为了能够提高资源的利用,能在竞争中首先取得先机,完善的企业数据处理是必不可少的。

  • 标签: 企业数据处理 软件系统 研究 运用
  • 简介:摘要:高分二号卫星是我国“高分专项”中首颗成功发射的国产亚米高空间分辨率遥感数据,也是我国目前空间分辨率最高的遥感卫星数据。本文以空间分辨率为2.5米的SPOT-5遥感数据和空间分辨率为25米的DEM数据为参考数据,从相对正射校正、几何配准、数据融合、彩色合成等方面探索了高分二号遥感数据处理方法,对各阶段处理结果进行了评价。最终确定了高分二号遥感数据处理流程、评价了该数据的空间定位精度,为该数据在土地利用动态监测、矿产资源调查、城乡规划监测评价、交通路网规划、森林资源调查、荒漠化监测等行业的应用提供技术支持。关键词:高分二号;处理方法;处理流程;评价

  • 标签: 数据处理方法 遥感数据 精度评价 土地利用动态监测 高空间分辨率 SPOT-5
  • 简介:VisualC++是目前计算机软件设计中最流行的、功能强大的常用开发工具。本文针对VC++在开发大数据处理的软件时,存在内存分配、绘图性能、文件存取等方面的问题,分别提出虚拟内存分配、双缓冲绘图、巨型文件读写等解决办法。

  • 标签: VC++编程 大数据量处理 虚拟内存使用 双缓冲绘图 大型文件存取
  • 简介:系统只需我们实现在MATLAB环境中测试数据处理方法的程序,第二把VisualC++读取到的数据传输到MATLAB中,且数据存储在数据库中

  • 标签: 编程数据处理系统 联合编程
  • 简介:利用VisualBasic语言实现对数据的最小二乘法处理,使数据处理非常方便且可靠性高,避免了大量的计算过程,保证数据处理的质量和效果.

  • 标签: 数据处理 最小二乘法 直线拟合 VISUAL basic
  • 简介:本文主要是针对关系型数据库的信息管理系统在处理海量数据的存储与检索方面的一些可选方案进行探讨与分析,并结合实际应用,分别从分布式数据存储、动态表、索引、查询语句优化等4个方面对海量数据的存储与检索给出可行的优化配置解决方案。

  • 标签: 海量数据 分布式存储 检索 优化
  • 简介:金士顿科技近日推出了32GB蓝色、64GB黄色和128GB黑色三种不同容量DT200闪存盘,开启了一个用小巧的闪存盘淘汰移动硬盘的新时代。其中,128G相当于移动硬盘容量的存储空间,可以使商务人士丢掉沉重的硬盘,轻松迎接属于移动商务存储的新生活。同时,作为倾向于商务应用研发的产品,金土顿DT200也带来了对企业信息、竞争资料的保护。它预装了PasswordTraveler安全软件,

  • 标签: 闪存盘 金士顿 移动硬盘 存储空间 硬盘容量 商务人士
  • 简介:本文以赤城县“高分一号”(GF-1)2米卫星影像为例,探讨其PMS数据(2米全色和8米多光谱)和WFV数据(16米宽幅)正射纠正、波段配准、影像配准、波段组合、融合影像色彩增强等处理方法。GF-1卫星数据广泛适用于土地资源、地质矿产资源、地质灾害与环境调查与监测,本文可为高分一号卫星影像数据处理提供技术参考。

  • 标签: GF-1卫星 正射纠正 融合方法
  • 简介:随着电脑行业的飞速发展,存储领域经历着不断的革新——硬盘容量已经发展到250GB;转速从56400发展到10000rpm。当然,应用软件所需的存储空间也在不断攀升,3.5"软盘早已不能满足移动存储要求。那么目前市场上存在的移动存储方案到底哪种最适合你呢?

  • 标签: 硬盘容量 光盘 刻录机 刻录速度 闪盘 存储设备
  • 简介:CKV(CloudKeyValue)是腾讯自主研发的分布式存储系统,服务于QQ空间、朋友网、相册、音乐等核心业务,日访问量超过万亿次。本刊3月期《腾讯CKV海量分布式存储系统:日访问过万亿次背后的技术挑战》一文中,全面剖析7CKV的实现原理和技术挑战。本文则将从部署架构、质量、效率和成本四个方面来讲述CKV的运营实践。

  • 标签: 分布式存储系统 腾讯 运营 自主研发 QQ空间 核心业务
  • 简介:高光谱遥感是近年来发展起来的一种全新的遥感技术,其在对地成像的同时能够获取地物波谱特征。鉴于河北省高光谱遥感工作目前处于探索阶段,本文以河北省北部丰宁地区一景星载高光谱遥感数据(Hyperion)为例,详细介绍了星载高光谱遥感数据产品的组成、产品命名规则、数据特点及预处理方法,为高光谱遥感技术在地质找矿、环境监测、精细农业等领域的应用提供技术支撑。

  • 标签: 高光谱遥感 河北省 HYPERION数据