海量MES监控数据的高效存储与处理

随着云制造和工业大数据时代的来临,传统的MES监控系统正面临着新的挑战。海量的工业数据存储需要更高的性能,日益增多的半结构化和非结构化数据则需要更加高效的存储功能。为了解决这一问题,文章研究并实现了基于Hadoop技术存储数据的MES监控系统,采用物联网技术,通过传感器网络,监控网络,RFID网络来获取MES监控系统有关设备,产品,人员的有关数据,数据存储使用Hadoop技术,将数据存储在远端的分布式存储数据库中,减轻了本地数据库的存储压力,提高了存储能力和存储速度。最后,文章以MES生产制造中的钻攻机为测试用例,验证了海量MES监控数据的高效存储与处理。     

虚拟网络存储系统关键技术研究

随着信息时代的到来,数据存储已经变得越来越重要,传统的数据存储方式已经不能满足海量数据的存储需求,虚拟网络存储已经变成当今时代数据存储的主流,基于此,本文对虚拟网络存储系统的实现方法、文件系统、数据分配、数据存取及其自适应性等方面分别进行了分析和探讨。     

海量数据信息在云存储中的安全研究

云存储模式是在云计算基础上的一个延伸和发展,云存储是一种服务,主要基于网络技术,提供给用户数据存储和访问服务。本文分析了云存储基本概念,云存储模式的基本结构,针对云存储中数据库服务的安全性问题,提出了一种适用于云存储数据库的加密策略。采用基于数据项的加密方式,降低数据库加密后的冗余度。以在保护云存储用户数据的隐私。     

关于云计算存储安全技术的研究

在云计算环境下,传统的下载到用户端的应用软件以及存储在用户端的数据信息,都被逐渐转移到了云计算服务提供的网络数据中心,本文基于云计算的存储安全问题,对云计算进行了全面的分析,讨论了云计算数据存储安全的现状,着重探究了云计算存储安全策略。     

基于局部敏感哈希的多维海量数据处理

针对多维海量的超精密加工机床状态监控数据难以被高效地存储与查询这一问题,文章提出了基于局部敏感哈希的多维海量数据处理方法。该方法利用P稳定的局部敏感哈希算法,一方面对数据进行散列化存储,使分散在各存储节点上的数据在存取时避免了读写热点;另一方面也实现了数据降维,通过其结果的碰撞操作,保证了各存储节点内数据具有一定的近邻性,这一性质以牺牲一定的查询准确率为代价极大地缩小了查询范围,从而间接地提高了查询效率。实验结果表明,该处理方法可以有效的提高多维海量数据的存储与查询效率。     

基于云计算环境下数据存储安全的关键技术初探

云计算的出现,极大地提高了网络资源利用率,让用户之间的资源共享变得更为便利,但其数据存储安全,也受到了广大用户群体的重视。基于此,文章就云计算环境下数据存储安全的关键技术进行分析,在明确其云计算环境下数据存储安全内容的基础上,进一步介绍了数据加密技术、Hadoop安全机制、数据敏感度模型。     

视频监控网络化时代云存储的机遇与挑战

随着云时代的到来,在大数据技术支持下,视频监控存储等技术应用,在智慧城市、智能交通等建设过程中,产生了海量的非结构化视、音频数据。值得一提的是,大数据技术在视频监控存储中的运用会带来诸多的挑战和机遇。无论是供应商还是存储厂商、解决方案提供商等,纷纷应对挑战,对存储网络计算虚拟化数据解决方案基础上的大量资源建设予以投入,从而产生了云时代下业界同仁一拥而上、热血沸腾的态势。     

基于LabVIEW软件的压力锅测试系统的设计与应用

在机械设备测试系统中涉及到大量的数据需要存储时,如将数据存储在数据库中,就可以方便地对数据进行查询、排序、筛选等一系列操作。文章介绍了在LabVIEW环境中利用Database Connectivity Toolset连接Access数据库的方法,并方便地应用在压力锅的压力和温度数据存储和查询等的操作中。     

浅谈云存储安全性与标准的制定实施

云存储是在云计算概念的基础上延伸出来的新的集合体,是一种提供数据存储和业务访问的服务。在概述了云数据存储的概念后,对云存储的安全性的云存储和管理标准化问题进行了研究和分析。     

ECC纠错算法在存储式测井仪器中的应用

存储式测井仪器在工作过程中把测井数据存储到本地,测井完毕后把数据读出到PC机进行处理。仪器采用NAND_Flash作为存储介质,使用ECC纠错算法对存储到NAND_Flash中的数据进行校验和纠错是非常重要的工作,文章使用STM32实现了ECC纠错算法。     

基于大容量仪器高速数据存储设计

在现场数据采集与存储中,往往有成千上万个采样点数据需要采集与存储。保证这些现场数据的可靠存储是智能测量仪器设计中的关键问题之一。     

私有云存储在数字化校园信息资源建设的应用探讨

随着高校数字化校园的建设步伐的加快,传统的存储技术已不能满足如今资源建设的需求。云存储技术为海量资源存储提供了一个新的方式。本文在介绍了云存储的基础上,阐述了公共云存储面临的威胁,研究分析了私有云存储在校园数据信息资源存储的应用。     

基于MongoDB存储和分析辅助决策系统中的海量日志

在辅助决策系统中,传统的关系型数据库已经难以满足对海量日志数据的管理,非关系型数据库的出现,为大规模数据存储挖掘问题提供了卓有成效的解决方案。文章着重分析非关系数据库MongoDB的特点和优势,通过存储和检索算法设计和实际的海量日志数据查询性能仿真,提出将MongoDB数据库应用于辅助决策系统中,有效提高了大规模日志数据存储和分析效率。     

基于面向文档的NoSQL数据库的RDF数据存储实现

以RDF格式发布的数据在语义Web上越来越多,需要有一个可以有效的存储和查询这些RDF数据的管理方案。本文设计并实现了基于面向文档的NoSQL数据库的RDF数据存储方案。该方案可以有效的实现管理RDF数据,并通过相应的索引来提高对数据的查询效率。实验结果表明,方案对RDF及其语义数据的存储和查询是有效并有性能的优势。     

基于ASP.NET平台的远程粮油数据更新

从简单、实用的角度出发,提出了利用存储过程更新远程粮油数据的方法。说明了如何在SQL Server建立存储过程,具体在ASP.NET中实现数据更新遇到的问题,同时给出了该方法的关键程序实现代码分析。而且经验表明,采用存储过程操纵数据方法不但可以提高数据的访问速度,并且很好地屏蔽了数据库表的逻辑,对于任何三层B/S结构管理信息系统的开发具有很好的参考价值。     

对计算机硬盘几种常见故障的简要分析

硬盘是计算机存储数据的重要设备,但是由于各种原因,硬盘在使用过程中极容易出现故障或者问题,导致数据无法有效的存储。因此我们在使用硬盘的过程中,不仅需要将存储的数据经常备份,还需要合理的应对硬盘出现的各种故障,尽量从出现故障的区域提取出存储的信息,将损失降到最低。本文就计算机硬盘中常见的几种故障进行简要分析,然后提出了解除故障的方法,以供参考。     

解析结构化数据存储检索系统

随着时代的发展和科技的进步，近些年来，在云计算领域内，逐渐出现了一种新型的数据，那就是BigData，这样在对其存储和检索的时候就不能继续采用传统的关系型数据库系统：虽然可以采用分布式No-SQL来进行存储，但是有一些功能依然无法实现。针对这种情况，本文提出了结构化数据存储检索系统，也就是俗称的MDSS。本文对结构化数据存储检索系统进行了简要的分析，希望可以提供一些有价值的参考意见。     

基于FreeNAS搭建网络存储系统

文章论述了使用NAS存储利用iSCSI解决虚拟化条件下重要数据及服务器相关日志等数据备份的问题。文章重点研究了基于IP网络的网络存储备份系统,使用iSCSI技术,将网络存储设备本地化使用,优化存储结构,降低数据备份耗时、数据丢失的风险,提高了数据的安全性。     

海量图像数据在SQL Server2000环境下存储

海量图像数据的存储、查询和管理工作一直是令大家头痛的问题.笔者在工作中总结出,在Visual Basic开发环境中,采用客户机/服务器的工作方式,针对Microsoft SQL Server2000数据库关系表中存储图像数据的问题进行了初步研究,提也海量图像数据在Microsoft SQL Server2000环境下的存储方法.     

基于Hadoop的校园网盘的设计与实现

目前,大多数学生均使用U盘进行数据存储,但这种方式存在数据容易中毒、U盘容易丢失、无法在实验室和寝室间同步等弊端,为此,需要开发一个以校园局域网为依托,可供学生使用的校园网盘。利用该网盘,学生可不再使用U盘进行数据存储,在校期间所涉及的所有数字化文件均可存储其中,同时,还可实现教学区域与寝室的数据同步,既保证了数据存储的安全性,又极大地提高了数据的应用效率。此外,校园网盘采用Hadoop架构完成整个底层系统的搭建,属于"云计算"应用的技术范畴,能够充分利用学校目前已有的PC机资源,降低项目投入。