共查询到20条相似文献,搜索用时 100 毫秒
1.
针对当前办公系统所面临的有关海量数据存储和数据访问等若干问题,提出了一个基于数据库的逻辑文件系统的设计方案.该系统不仅能够存储海量数据,还继承了语义文件系统基于内容的访问方式,因而具有了语义访问功能.同时系统将访问方式拓宽到支持内容属性和内容结构的访问. 相似文献
2.
3.
SAN环境下高性能集群文件系统研究与实现 总被引:1,自引:0,他引:1
在研究现有主流的集群文件系统后,针对SAN环境的特点,提出了一种高性能、低成本、支持大容量的集群文件系统模型.在论述其正确性后,对其性能进行分析.该模型采用文件元数据集中管理、多级cache、元数据预分配及预取等关键技术来提高系统的可靠性及吞吐率.最后通过实验验证了该模型的高效性. 相似文献
4.
5.
为解决高能物理海量存储系统由于存储规模不断扩大所面临的问题,设计一种分布式元数据管理系统,包括元数据管理、元数据服务、缓存服务以及监控信息采集4个部分,在此基础上提出自适应目录子树划分算法,以目录为粒度进行元数据划分,根据集群负载情况调整目录子树,实现元数据信息在元数据集群中的合理存储和分布。实验结果证明,该算法能提高元数据的访问和检索性能,提供可扩展及动态负载均衡的元数据服务,以保证该元数据管理系统的可用性、扩展性及I/O性能不会因存储规模扩大而受到影响,满足高能物理实验日益增长的存储需求。 相似文献
6.
7.
基于元数据的异构数据源集成系统设计与实现 总被引:11,自引:0,他引:11
在南海科学数据库项目开发过程中,要对多个异构数据源进行访问,给用户提供统一的查询接口.因而提出了基于元数据的异构数据源集成系统设计方案,给出了相应的元数据集成思想和系统设计框架,并对其中系统实现的关键技术进行了探讨. 相似文献
8.
文章描述了WanLan集群视频服务器上的集群流媒体文件系统(MFS)的设计与实现。MFS是一种支持MPEG文件格式的分布式流媒体文件系统,它由MFS的客户端、管理节点、数据节点以及元数据服务节点组成。MFS流媒体集群文件系统实现了单一系统的逻辑映像、数据和元数据的高可用以及系统自动配置。 相似文献
9.
本文介绍了元数据的概念并从分布式异步数据集成的需求出发,指出了数据集成中间件使用元数据技术的必要性,并阐述了元数据管理的设计与实现过程。 相似文献
10.
高性能并行I/O实现技术分析 总被引:1,自引:0,他引:1
本文就实现高性能并行I/O的技术问题作了一番比较,认为具有独立I/O网的外部并行I/O结构是最适于实现高性能并行I/O的平台。因而,只有从应用算法研究着手,获取适合并行I/O的数据布局类型,并在语言、编译和OS的支持下实现这种布局和并行I/O访问,才有可能达到较理想的性能指标。 相似文献
11.
维护文件逻辑位置到物理位置映射关系的文件布局是文件系统的重要组成部分。针对蓝鲸海量机群文件系统中文件的条带分布特性,分析了目前普遍采用的三级间接地址文件布局和扩展块段文件布局的优缺点。有效结合三级间接地址文件布局避免查询、直接映射的优点和扩展块段文件布局映射高效、空间占用少的优点,提出了一种新的固定长度扩展块段文件布局,并在小文件环境对其进行了优化改进,提出了幂次长度扩展块段文件布局。实验测试结果表明该文件布局可以有效适用于蓝鲸机群文件系统,达到了预期效果。该文件布局同样适用于其他采用条带机制的文件系统。 相似文献
12.
在多个存储节点构成的集群存储系统中,结合应用提高网络存储性能的目标就是利用文件系统方案来实现的.本文在相关研究的基础上重新讨论改进网络存储性能的文件系统方案.这个方案同时利用网络分布文件系统和网络分带文件系统的优点,采用非分带和分带文件数据分布混合应用.我们讨论了对应该方案的不同两级存储分配策略和相关参数的选择,并以HP97560性能参数为基础,进行理论分析.应用文件大小分布的对比以及模拟测试结果显示两级存储分配策略和相关参数选择的合理性. 相似文献
13.
介绍了AT45DB321B的特点、引脚功能、芯片的驱动方法。详细描述了基于它的文件系统的原理和设计,该文件系统采用三层结构设计,为应用系统提供了统一的,标准的接口函数。经过测试证明,该系统性能稳定,效果良好。 相似文献
14.
15.
16.
17.
介绍了可扩展机群文件系统TH-CluFS的设计与实现.TH-CluFS基于共享文件模型,采用无服务器的对等体系结构.同时,为了有效利用杌群系统累积的资源,TH-CluFS采用了复制与分布相结合的元数据分布管理策略、文件粒度的数据分布存储机制,以及一种茚治的I/O负载平衡方法.实验结果表明,TH-C1uFS很好地统一了机群文件系统在单一系统映像、高性能以及可扩展性等方面的需求. 相似文献
18.
海量存储文件系统CastorFS的设计与实现 总被引:1,自引:0,他引:1
文章首先介绍CERN存储管理软件CASTOR的体系结构及其特点。然后,详细描述基于CASTOR设计和实现的本地海量存储文件系统CastorFS,包括基本技术线路、内核模块和应用层模块设计以及性能测试和优化等。实验数据说明,该文件系统具有高性能、良好的可扩展性、使用方便等特点,能很好地满足高能物理实验的计算需求。 相似文献
19.
如何为上层应用和计算提供稳定高效的文件I/O性能,是分布式文件系统性能研究的热点。文中分析分布式文件系统在设计机理上的共同特征,基于此提出一种通用型的启发式文件预取模型,并选取HDFS平台进行系统实现。启发式文件预取对上层应用透明,采用在文件系统内部建立预取线程池的方法,以组成文件块的数据存储文件为预取单位,在分布式文件系统内部实现。这种设计思路具有一定的普适性,适合推广应用于多种分布式文件系统。实验结果表明,所述的启发式文件预取,能够有效提升分布式文件系统的I/O性能。 相似文献
20.
本文论述了在多处理机环境下UNIX 文件系统的设计和实现,以保证文件系统运行的正确性和极大限度地开发信息处理的并发性。文中提出多处理机UNIX 文件系统的模型、结构及特点。着重论述多处理机UNIX 文件系统主要数据结构低层缓冲区和内部其他数据结构的组织和管理。最后论述了多处理机环境中出现的数据一致性问题。 相似文献