共查询到19条相似文献，搜索用时 328 毫秒
1.
《山东省农业管理干部学院学报》2019,(12):30-31
随着信息技术的不断发展,互联网用户的数量在不断的增加,数据量增长的速度也越来越快。在大数据时代,传统数据库和集中式存储技术在处理大数据时出现了处理效率低、处理速度慢等问题,无法满足现代信息数据处理的需要。大数据分布式存储技术是一种新型的数据存储技术,增强了数据库的数据处理能力,提高了数据库的数据处理效率,加快了数据库的数据处理速度,满足了大数据时代信息数据处理的需要。本文主要研究数据库大数据分布式存储技术,希望能为大数据存储技术研究提供一些借鉴。 相似文献
2.
井水 《农业图书情报学刊》2012,24(7):8-11
从高校存储系统现状出发,阐述了存储系统的发展历程和对新型存储技术需求,提出了"云"存储作为一种新型存储技术具有虚拟化的海量存储空间、数据信息安全可靠、存储形式多样化等特点,使用"云"存储是时代发展的需求,是图书馆存储技术革命性的变革,能有效缓解高校的存储压力,降低使用、维护成本。 相似文献
3.
为了解决应用传统数据库架构存储和管理分散而海量的农业数据存储能力不足和管理困难的问题,在Hadoop框架下研究了面向海量农业数据的分布式计算与存储技术,提出了基于Hadoop的相邻区域边缘化存储和混合式索引分布与检索技术。测试和实验结果证明,应用这种技术所构建的分布式存储系统,能很好地实现对海量农业数据的存储和管理。 相似文献
4.
近些年遥感影像呈指数增长,遥感影像管理部门如何科学有效地管理海量的遥感影像数据,充分利用存储空间,按需高效调取多源遥感影像是目前迫切需要解决的难题。设计了海量多源遥感影像管理和服务的系统,应用云存储技术,将分布不同地点的存储设备通过软件组合后依托网络传输技术协同工作,管理部门可基于该系统做到有效的影像数据管理、数据分发以及数据服务共享等,切实解决当前海量遥感影像管理和应用遇到的问题。 相似文献
5.
数字图书馆拥有数字化资源、网络化存取、分布式管理三个基本要素。存储基础设施是数字图书馆的重要组成部分,而存储技术和存储设备是构造存储基础设施的重要组成部分。在对网络存储技术进行分析的基础上,研究和探讨了数字图书馆系统中的网络存储技术。 相似文献
6.
7.
王春叶 《农业图书情报学刊》2019,(5):75-82
大数据时代的到来,带来了数字资源的爆炸式增长。传统的存储存在难以扩容,安全性不够高等诸多问题。云存储具有易扩容、低成本,高安全性等特点,可解决海量数据存储难题。笔者以国家博物馆图书馆为例对数资概况以及存储现状进行了梳理和回顾,分析了传统存储中存在的诸多问题,提出了采用云存储的必要性,构建了基于云存储技术的数字资源保存系统并提出了此类图书馆云存储解决方案和相应建设策略,以期为图书馆使用云存储提供一些参考。 相似文献
8.
9.
10.
云存储技术通过集群应用、虚拟化、分布式文件系统等将网络中大量不同类型的存储设备集合起来协同工作,以此缓解老式数据中心的存储压力。目前许多涉农信息平台的文件管理与共享浪费了极大的空间,越来越多涉农企业的发展需要一个基于云存储技术的农村综合信息服务平台。以云存储为设计基础,一方面通过研究重复数据删除技术,提出了一种在客户端利用Hash的MD5算法进行文件级别的重复数据删除操作后再将数据存入云服务器中的方法,以此为涉农信息平台提供企业内部统一的文件共享;另一方面利用实时性更强,占用网络带宽更少,以及通信效率更高的Web通信协议,完整地采用基于HTML5 Web Socket协议的Web通信来实现涉农企业间的网络商务洽谈。 相似文献
11.
李凤念 《农业图书情报学刊》2014,(3):80-83
大数据不是对数据量大小的描述,而是在种类繁多、数量庞大的多样数据中进行的快速信息获取,从某种程度上来说大数据是一种数据分析技术。大数据具有大量化、多样化、快速化和价值密度低4大特点。大数据在政治、经济、科技等领域都有应用。信息网络技术的发展给高校图书馆带来了海量数据。大数据对高校图书馆的网络结构设计、数据存储和数据处理提出了挑战,高校图书馆需要统一大数据的格式,实现高效率的存储以及对非结构化数据进行处理。 相似文献
12.
为了提高船用蓄电池参数的测量速度和精度,保障测量人员的身体健康,设计了基于单片机的蓄电池智能检测仪．系统采用凌阳SPCE061A单片机作为数据处理核心,包括蓄电池温度、电压和电流采集及处理模块,键盘、显示以及语音报警模块．介绍了船用蓄电池的测量原理,系统的设计原理以及软、硬件设计．实现了船用蓄电池参数的快速测量和显示,电池电量不足时的语音报警功能． 相似文献
13.
14.
李焕勤 《农业图书情报学刊》2005,17(12):22-24
随着计算机技术的发展和广泛应用,数据量不断增加从而对网络存储提出了更高的要求,并由此诞生了许多新的网络存储技术,其中较为突出的是NAS和SAN,而NAS和SAN由于各自的优缺点及互补性出现了相互融合的趋势。NAS与SAN融合产生的巨大优势适应并推动了数字图书馆发展。 相似文献
15.
扩充计算机内存容量的方法有多种,但如果采用本文的研究成果,则会使PC—1500计算机又增添几个独特的优势:数据存贮量可扩大2～4倍,数据存贮可得到自我保护,数据转贮时间可大为缩短。 相似文献
16.
解决高寒草地的退化问题需要对高寒草地退化现状进行综合评价，而这需要相关数据作为支撑，本研究设计并实现了一个基于Hive的高寒草地海量数据高效分析系统，能对高寒草地的海量数据进行可靠、高效地存储分析。首先，平台设计基于Hadoop、Hive、Sqoop环境，通过节点和集群配置等步骤搭建完成；然后，通过期望最大化（EM）算法进行数据填充、数据导入、数据分区存储等步骤，完成数据抽取、转换、加载（ETL）及数据存储；最后，系统通过混合函数编码实现模糊查询功能，实验测试表明系统达到了预定的效果。随着文件大小的增加和总体数据规模的增大，系统整体存储和读取时间一直处于增长的状态，但平均运行时间（平均处理1 MB数据所使用的时间）处于降低的趋势，说明随着数据量的增加，系统并行处理海量数据的能力得到体现。使用2014年青海省称多县高寒草地样方监测数据和部分虚拟数据（总数据量约为3 958万条，7.56 GB），对Hive集群以及关系型数据库SQL Server的数据查询效率进行对比。结果显示，当查询数据量为3 958万条时，Hive集群数据查询的时间为SQL Server查询时间的67.8%。说明在数据量较大时，系统数据查询的效率比SQL Server更高。通过HiveQL对高寒草地生态数据进行分析处理，并开展相应的对照实验，对比发现，Hive数据分析技术与对照实验的处理结果相同。综上，将分布式数据仓库技术应用于高寒草地海量数据的存储与分析，较传统的数据存储与分析技术相比有明显的进步。本系统对海量数据处理效率高、可开发性强，可以很好地满足海量高寒草地数据的存储和分析要求。 相似文献
17.
固井作业是钻井工程的最后一个关键环节，作业期间要处理大量的固井数据，为了节约计算机资源和降低固井作业成本，关键在于快捷、有效地存储、查询和处理数据。SQL Server是Microsoft推出的数据管理对象，具有强大的数据管理和处理功能。介绍了建立固井数据库的必要性，分析了SQL Server在管理固井数据方面的可行性和优越性，详细阐述了SQL Server对固井数据的存储、查询及固井数据库的备份与还原过程。 相似文献
18.
19.
针对大型粮库粮食存储环境监测点分散的现状，设计一种树状拓扑结构的无线传感器网络中央监测系统。该系统以ZigBee无线传输技术为核心，结合温湿度传感器模块，构成无线传感器网络检测子节点。系统能够对现场环境实时检测，同时通过路由节点将检测到的数据上传给上位机，其中路由节点采用无线传输方式与终端节点进行通讯，使得现场检测到的数据能够实时传送给中央监控计算机，最终实现粮库内部的多点检测及和实时监控。 相似文献