共查询到10条相似文献,搜索用时 15 毫秒
1.
2.
3.
4.
《电子技术与软件工程》2016,(17)
在Hadoop云平台进行数据云存储系统的优化设计,提高大容量数据快速存取能力,构建基于Hadoop的大容量数据快速存储系统,采用负载均衡调度和云存储优化方法进行存储系统构架,进行Hadoop云平台的海量大数据进行信息融合处理,对Hadoop云平台大容量数据信息流进行非线性时间序列重组,采用特征空间降维方法降低存储开销,优化存储结构,提高存储和调度的速度。仿真结果表明,采用该方法进行Hadoop大容量云存储系统设计,提高了数据存储的吞吐性能和快速存取性能。 相似文献
5.
6.
文章提出了一种基于改进SVD++算法和K-means++算法的小文件合并方案。通过引入自适应学习率函数和基于并行分组的SVD++算法,优化了小文件的合并过程,以提高Hadoop存储小文件的效率。同时,利用K-means++算法对合并后的文件进行聚类,优化了数据存储方式,降低了存储空间的浪费。在Hadoop平台上进行的实验表明,该方案在保持数据处理准确性和稳定性的同时,显著提升了Hadoop存储与处理小文件的性能。 相似文献
7.
随着各种信息系统的建设和应用的不断深入,信息系统所产生的监控数据成级数增长,海量运维数据的有效存储与实时分析处理成为企业所面临的新挑战。为此,文中提出了基于大数据技术的IT运维数据管理系统解决方案,该方案从逻辑上将数据管理系统分为数据集成、数据存储、数据计算、数据访问4层,层与层之间既独立又协作,充分发挥大数据技术在数据存储、并行计算、大规模数据分析挖掘等方面的优势,为信息中心海量数据的储存提供了高效的处理能力和统一的数据管理模式,并全面支撑数据分析的应用,促进智能运维的建设。 相似文献
8.
我国民间艺术资源平台的建设和研究是当前文化艺术领域面临的一项重要而紧迫的课题,存在着诸多挑战。在大数据时代背景下,采用云计算和云存储技术是一个必然的趋势。文中介绍了Hadoop云计算与云存储技术,提出了基于Hadoop的民间艺术资源云存储平台建设方案。构建基于Hadoop的民间艺术资源云存储平台具有可行性和有效性。 相似文献
9.
目的:基于医院HIS数据库,开发一套绩效考核系统,对数据进行挖掘分析,生成绩效数据,该系统应具有良好的扩展性。方法:系统采用多层C/S结构,数据层采用Microsoft SQL Server数据库平台,应用服务层和客户应用程序采用Delphi开发。应用服务层采用ADO组件实现连接数据库,客户应用程序和应用服务层之间通过SOCKET协议通信。结果:绩效考核系统实现了一定的数据挖掘分析,具有灵活的报表生成功能.。系统实现了多维度的绩效考核分析,注重不同绩效考核指标间的关联,提供完善的决策支持。结论:该绩效考核系统符合设计要求,解决了通过对业务数据挖掘分析解决多维度的绩效考核问题,有效提高了绩效考核工作效率和质量,可满足科室的使用需求。系统采用动态菜单设计,具有良好的扩展性。 相似文献