首页 | 官方网站   微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 31 毫秒
1.
研究了云计算环境下的分布式文件系统KFS的系统架构,对于海量数据存储的云存储系统来说元数据管理效率是关键,通过分析KFS文件系统的元数据模型,提出了基于KFS分布式文件系统元数据的改进模型,即利用内存缓冲策略,对待插入的元数据进行预处理并批量插入,减少查找和分裂次数,大大提高了KFS文件系统的数据访问效率.最后通过算法复杂度的分析,证明该改进算法能有效提高分布式文件系统KFS的元数据服务器的效率.同时该改进模型对于采用B^+树索引机制来集中管理元数据的类似系统同样适用.  相似文献   

2.
在移动客户端建立缓存可以提高移动数据库系统的性能,也会带来服务器上的数据和缓存中的数据不一致的问题,即缓存一致性问题.通常采用基于广播的缓存失效算法来维护缓存的一致性.传统的采用同步广播方式或异步广播方式的缓存失效算法各有优缺点.该文在分析传统算法优缺点和一些现有算法的基础上,提出了一种改进的基于计数器的自适应缓存失效算法,该算法结合了两种传统的算法,可以提高缓存的利用率,同时可以降低通信开销.  相似文献   

3.
随着智能交通的发展,海量的交通状态实时数据成为智能交通的研究对象,利用低损耗获取高实时性的交通流状态成为实际应用研究中的重点.本文引入一种自适应加权平均的车速检测方法,与以往的方法相比,自适应加权平均方法更加简单,并且容易实现;虽然其误差比最小均方差加权平均算法略大,但是这种方法不必以存储海量的交通信息数据为代价,解决了交通信息采集过程中的关键——实时性不高、存储容量大等实际问题.通过MATLAB仿真结果可以看到,此方法大大节省了数据存储空间和数据处理的时间,适合在实际工程应用中广泛推广.  相似文献   

4.
针对射频识别技术(RFID)应用技术中亟待解决的海量数据存储问题,提出了RFID路径数据的双编码压缩存储模型.该方法首先分离出RFID路径数据的位置信息和时间信息,采用一种改进的素数编码方法PrimeLabel对位置信息编码,每条路径的编码用该路径上的最后一个位置的编码来表示.其次使用一种新的区域编码(Durableregion based numbering,DRB)方法对时间信息编码,最后在此基础上设计了RFID路径数据的双编码存储模型.实验结果表明:此编码存储模型能更好存储压缩路径数据,且能更高效地满足RFID路径数据的各种查询需要.  相似文献   

5.
随着交通领域的信息资源越来越庞大,传统的处理方法难以支撑海量数据的实时计算、低延时查询和统计分析等需求。文中提出一种基于Hadoop大数据架构的智能交通信息处理的设计方法,通过分析智能交通领域的应用需求状况,研究结合大数据处理技术的计算模式,处理多用户需求及大规模海量的交通数据,实现大数据的共享的、高效的存储和计算方法,不仅动态实时地、按需地提供个性化服务,还能构造交通管理、出行参考、监控刑侦等全方位、多角度的智能交通信息处理体系。  相似文献   

6.
针对目前非结构化信息存储系统中事务处理模型的不足,介绍一种新的事务处理系统OBSA-TPS,实现一种基于语义树的多粒度封锁机制,提高了非结构化信息存储系统事务处理的并发能力,从而使得以非结构化信息为主体的Web应用系统能够完成较为完善的事务交易处理.  相似文献   

7.
文中以智能交通应用中海量空间数据存储为研究对象,使用基于HDSF的分布式存储金字塔模型对空间数据进行分块;引入基于空间数据分类和删除技术的副本存储策略,将同一类影像存储在同一节点或者相近节点,降低连续访问延时;引入Spark作为空间信息查询的并行处理工具;利用RDD的快速存储机制,减少查询过程对I/O的读写,提高查询效率。实验结果证明了文中方法的有效性。  相似文献   

8.
基于MVC模式、集成Spring框架和Hibernate数据持久层设计实现了银行信贷管理系统.阐述了在实际应用中遇到的问题及其解决办法.在设计系统时充分吸收了目前完善的银行信贷基础信息,对提高信贷信息质量、规范信息业务处理流程、增强信贷业务统计分析能力进行了深入探讨,在防范和控制信贷风险、提升信贷业务管理水平、提高银行竞争力等方面作了全面考虑.同时,考察TJ2EE平台的安全机制,研究TSpring框架~Hibernate的优缺点及二者整合的可行性、必要性,从而提出了基于J2EE的银行信贷管理系统的全面解决方案.  相似文献   

9.
针对目前电力系统海量数据共享处理不足,难以满足实时性要求和网络共享性差的情形。文中结合XTDMS2000调度自动化系统,提出并实现了一种基于内存映射机制和Internet网络访问的数据共享方法。该方法采用分布式关系数据库和面向对象技术,较好地实现了数据的快速访问和网络共享。  相似文献   

10.
映射缓存在身份与位置分离网络中用于暂时存储通信对端的身份标识与位置标识的映射关系,以减少映射查询时延,提高网络性能.本文对基于生存时间(Time-To-Live,TTL)的映射缓存的命中概率进行了数学建模.该解析模型得到的缓存命中概率,可以作为数据包到达间隔分布的函数进行计算.通过仿真分析对数据包到达间隔的分布进行数据拟合,得到其累积概率分布,并验证了所建模型的正确性.进一步仿真评估了映射缓存的性能.  相似文献   

11.
标准地震资料数据是以SEG Y文件流的方式存储的,直接使用这种格式的数据进行三维地震解释,会使系统的大部分资源耗费在SEG Y格式数据转换上.为了提高数据的访问效率,必须对这种数据进行格式转换,并以能够高效访问的文件的形式存储在硬盘上,访问时以数据页的格式调入内存.详细论述了数据格式的转换方法,同时对存储和访问技术给出了具体实现.  相似文献   

12.
本文针对DOS应用程序的大数据量的存储与处理问题,提出了基于实方式下访问XMS内存的C程序设计方法,从而满足了DOS应用程序中的数据变量访问XMS的应用要求。  相似文献   

13.
在需要多块硬盘才能满足收费数据存储要求的同时,数据存储完整性和系统的安全运行也受到了越来越大的影响。为了提高硬盘存储系统的可靠性,石安高速公路数据库服务器普  相似文献   

14.
基于流媒体分发的大规模联网监控技术、视频转码接入网关、自适应网络传输技术、海量存储、分级管理等技术,提出了完整的视频监控系统网络管理平台的设计方案,实现了异构网络环境下,广域视频监控系统的综合网络管理平台.  相似文献   

15.
IDL是进行三维数据可视化显示、分析及应用开发的理想工具.研究了三维地形建模的原理、相关技术及用IDL实现三维可视化的方法和流程,并基于ENVI+IDL研究开发了遥感三维地形可视化功能模块.该模块依据在研的工程地质遥感解译软件系统的要求,实现了三维地形可视化的放缩、平移、旋转、漫游等相关功能.  相似文献   

16.
重点车辆监控是借助物联网技术,通过感知设备对重点监控车辆进行识别、定位、跟踪、监控和管理。重点车辆监控平台需面对海量数据的处理问题.云计算信息处理模式为重点车辆信息管理提供了新思路。借助云计算的概念,提出基于Hadoop分布式并行编程框架的重点车辆信息管理模式和基于MapReduce编程模型的重点车辆海量信息处理方案。然后,采用广东省的重点车辆监控平台的历史数据作为样本,搭建基于Hadoop的重点车辆海量信息处理测试平台。实验结果表明,该平台能够实现物联网环境下的重点车辆海量数据的快速处理与查询.满足实时监控的要求。  相似文献   

17.
路口视频监控是城市交通管理的重要方法。随着信息网络技术的发展,视频监控系统逐渐转向依靠网络信息平台来提高交通管理的快捷反应能力。探讨了城市交通视频集中监控网络信息平台的若干关键技术,首先对适合于交通视频监控的视频编码技术进行了分析比较,并阐述了对庞大视频数据进行处理的超级并行计算平台,同时探讨了适合爆发量数据存储、访问的SAN(区域网络存储)海量存储技术等。最后,以杭州市道路交通监控的具体需求为例,重点介绍了如何实现城市交通视频监控网络信息平台及其关键技术。  相似文献   

18.
随着大数据时代的到来,计算密集型的海量数据查询的应用范围越来越广,在大数据环境下,从数据结构的特点出发实现分布式存储架构,并以高效查询为目的实现非结构化数据的索引机制,同时处理和优化聚集查询操作,分析与平台无关的并行编程模型。  相似文献   

19.
地理信息系统(Geographic Information System,简称GIS)是一种采集、处理、传输、存储、管理、查询检索、分析、表达和应用地理信息的计算机系统,是分析、处理和挖掘海量地理数据的通用技术。GIS实现了空间信息和属性信息的集成管理,并能够完善地建立二者之间的联系。  相似文献   

20.
在GIS空间数据编辑处理过程中,对象的捕捉是非常重要而且常用的功能之一.并且对捕捉的响应速度要求很高.然而.海量数据编辑时.由于捕捉过程计算量比较大以及捕捉计算过程中频繁地从数据库中调入数据.严重地影响了捕捉的速度.文中提出了在海量数据下通过建立本地缓存的和数据精简方法来加快捕捉速度.阐述了当前流行的数据组织方式.以及基于这种方式的缓存构建.通过建立试验系统比较进行优化前后的捕捉响应速度的差异.来证明文中提出的方法的有效性.  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司    京ICP备09084417号-23

京公网安备 11010802026262号