共查询到20条相似文献,搜索用时 703 毫秒
1.
2.
工业大数据具有规模庞大、业务复杂等的特点,为数据存储、查询和分析计算带了难度。为了优化工业大数据存储管理,提高系统存储、查询、分析效率,利用基于Hadoop技术针对业务库和实时监控数据库的存储管理进行优化。系统设计业务库的集群化同步存储架构,基于Maxwell组件将MySQL业务库数据实时同步到HBase,实现业务库的读写分离、提高数据查询和数据分析的效率;其次,基于Kafka和Flink对业务库同步数据进行实时计算处理,实现高并发数据写入场景下的低延迟响应;最后,实验进行了HBase和MySQL的性能对比测试,结果表明本系统在大规模数据场景下具有更好的计算效率表现,能够有效进行工业大数据分析存储。 相似文献
3.
RFID技术具有条形码所不具备的防水,防磁、耐高温、使用寿命长、读取距离大、标签上的数据可以加密、存储数据容量更大、存储信息可更改自如等优点,其应用将给零售、物流等产业带来革命性的变化。 相似文献
4.
JSON数据交换格式及其在数据验证中的应用 总被引:3,自引:0,他引:3
为了解决Web应用中复杂数据验证的效率和安全性问题,提出了基于JSON(Java Script Object Notation)的数据验证方案。与XML比较,JSON在Web数据交换处理上的更具优势。采用JSON来缓存元数据,便于存储复杂的验证数据,客户端容易解析和使用。在具体实现上,通过服务器程序生成JSON存储验证数据和函数,利用AJAX技术设计客户端函数来访问元数据以验证用户输入。实现的结果表明:由于使用JSON存储复杂的元数据和验证规则,该方案在保证安全性和可扩展性的同时,提高了验证效率。 相似文献
5.
海量数据跨盘存储机制的设计与实现 总被引:1,自引:0,他引:1
针对石油勘探行业海量数据过大而单存储设备无法有效存储的问题,提出了海量数据跨盘存储机制.该机制充分利用面向对象的重载和多态技术,通过定义专门的文件类,封装标准函数库中的文件操作接口,提供对单数据体的各种文件操作,使文件跨盘存储通过软件方案得以实现.该机制有效地提高了单一存储设备存储空间的利用率. 相似文献
6.
研究了NAND文件系统YAFFS的数据存储结构、文件操作、加载、损耗平衡、垃圾回收、读写效率等问题.YAFFS以含有元数据的页为更新单位,相应设计的Tnode树结构能较快地索引数据,文件操作性能较好,加载时扫描OOB区重建文件系统的索引和结构,而YAFFS2的改进使加载大大加快.YAFFS的不覆写更新和块分配策略,保证了损耗平衡,但是线性复杂度的垃圾回收算法和大粒度的锁机制,不利于读写有时限的系统.通过性能测试发现,YAFFS加载和损耗平衡性能较好,写性能随空间的减少而减少,读性能连续文件和不连续文件基本相同.但YAFFS与MTD驱动层的兼容性不好,使用和测试也没JFFS2广泛,需进一步完善. 相似文献
7.
为了深入理解和管理3D模型,灵活处理3D模型,以Direct3D中3D模型文件为例,对.X文件格式进行深入研究,用C++对.X文件中的关键数据进行读取,处理文件中每个模板的数据,用相应集合存储数据,建立数据之间联系,设计出一种新的.X文件加载和展示算法,分别对静态模型和骨骼动画模型加载和展示进行了对比,通过分析和设计,运用Open GL对加载模型数据进行展示,并还原出3D模型。 相似文献
8.
利用Profile文件读取印刷分色参数 总被引:1,自引:0,他引:1
<正>随着科技与经济的发展,人们对印刷复制品的精度要求不断提高。分色参数的设置对色彩复制具有极大的影响。而目前,分色参数的确定均是通过预定义在制作ICC Profile文件时完成的。ICC Profile文件一旦确定,其印刷分色参数也一并确定。因此,可以通过ICC Profile文件来读取该文件的分色参数。本文主要介绍印刷分色参数、利用Profile文件读取分色参数的方法以及实例应用。 相似文献
9.
随着电视技术逐步进入数字化时代,电视与电脑的联系便越来越密切了,图形、图象数字化技术向深层发展,电子采集、后期编辑、节目播出设备将以网络方式互联,实行节目数据的交互式作业方式。作为体现新技术硬盘播出系统,由于它良好的非线性编辑性能、多通道的编解码器、长时间的节目存储量、周详的安全考虑和灵活的网络功能,在电视播出领域的应用已成为电视技术人员关注的焦点。但对于电视节目的海量存储和数据的高速读取,针对不同的用途,电视行业对电脑也有了不同的要求。除了电脑的CPU微处理器运算速度是否够快外,硬盘容量的大存储和数据的高速存储读取能力也是衡量电脑是否能胜任电视工作的重要因素。 相似文献
10.
计算机的硬盘是用来存储程序和数据的工具,对文字处理来说,除了存储计算机系统软件、排版软件外,还要用来存储录入、编排的用户文件。由于硬盘的容量非常大,存储着大量的软件和数据文件,所以在日常工作中,硬盘频繁地处于读、写、删改的状态中。天长日久,硬盘就会出现各种机械、电路或局部存储介质损坏等故障。如果未能及时发现、检查和修复,就有可能使刚存入的数据落在坏区上而无法读出,使文件数据丢失、错乱甚至死机。尤其是当0磁道损坏时,后果更为严重。因此,在文字的录人和排版过程中,我们应经常对计算机的硬盘进行维护和保… 相似文献
11.
12.
《科技创新与应用》2015,(32)
创新方法是创新经验和技巧的高度总结,是技术创新的"孙子兵法",传统创新方法在互联网技术推动下的"大数据"时代,在创新资源相关数据的获取和融合效率方面面临新的机遇与挑战。文章通过对大数据技术与方法以及围绕着大数据环境下的企业技术创新与管理决策相关技术与方法的研究,通过院校合作,构建起大数据环境下的技术创新与决策的技术框架体系,依据技术创新"双向决策模型",通过数据的在线收集与预处理、大数据存储与预处理技术体系、创新资源数据的可视化技术与决策技术方法和创新应用工具的开发四个子项的实施,实现技术创新的"评估与预测"和"监测与预警"。结合企业研发与技术创新实践,希望能帮助企业实现更加精准的技术创新决策。 相似文献
13.
14.
JDBC访问数据库的优化策略 总被引:1,自引:0,他引:1
数据库的访问方式直接影响网络应用系统的性能.为建立高性能的网络数据库应用系统,需要采用优化数据库处理的方法.优化数据库的访问,对提高网络数据库应用系统十分重要.优化要从连接开始,针对不同的应用,首先要选择合适的连接模型,以小型企业为例,一般选择模式4,在具体连接时,还可以使用连接池技术进一步改进连接性能.其次,在进行数据操作时还要使用预处理、存储过程以及优化过的SQL等来提高操作速度.使用PreparedStatement来处理SQL能大大提高系统的执行效率;在Java中利用CallsableStatement对象执行数据库中的存储过程,也具有很高的效率. 相似文献
15.
16.
17.
食品安全一直是人们关注的重要话题,而随着科技的发展,人工智能和大数据技术的应用为食品安全信息监管带来了新的机遇和挑战。人工智能技术可以通过模式识别、数据分析等方法,快速准确地发现食品安全问题,提高监管效率和监管精度。大数据技术则可以帮助监管部门实现对海量食品安全数据的收集、存储、分析和应用,为监管决策提供科学依据和数据支持。本文探讨了人工智能和大数据技术在食品安全信息监管中的应用,为相关工作人员提供参考。 相似文献
18.
19.
20.
大数据环境下的计算机网络信息安全是一个复杂的课题,不仅涉及到网络硬件、软件、内容安全,也涉及到管理与信息传播安全等众多安全问题。因此,要加强大数据环境下的网络安全就必须建立数据存储、数据应用与数据管理方面的安全控制措施,为网络安全奠定良好的基础。 相似文献