试谈复杂系统间的通用数据映射转化方案

信息化时代数据为王,描述相同特征或对象的数据在不同的系统中流转和处理都需要经过数据转换和映射,才能被目标系统使用,这主要是由于每个系统的数据模型不尽相同造成的.不同的系统由于数据模型不同,都需要进行与其系统自身模型相适应的转换.介绍了一种较为通用的方案解决复杂系统间的数据映射和转换问题.     

异地容灾系统和数据仓库中数据同步的设计及其关键技术实现

以异地容灾系统和数据仓库需要实时同步生产系统的数据为背景,介绍了一个异地容灾系统和数据仓库中数据同步软件的功能模型;对两个系统中数据同步的设计和体系结构作了介绍,并阐述了该数据同步软件所采用的Oracle高级复制技术.     

工矿企业监控系统中存储与查询系统的研究

根据工矿企业生产过程中监控系统的实际需要,建立了数据存储与查询系统的模型,重点阐述了数据查询的具体实现过程。研究结果表明:文章提出的数据库结构模型和数据查询方法能够满足目前工矿企业监控系统中数据管理的需要,同时也便于企业对事故的预测预报、以及事故发生后的原因分析。     

数据迁移掀开存储新篇章

在现今的网络建设中,硬件的架构和软件的设计是否完美,主要体现在系统的应用是否能够充分发挥资源使用的合理性上。其中,大量的系统数据需要不间断的提供完备的支持。从数据调用和数据的使用方面来说常用的技术多为数据备份。备份是把在线数据保存为离线数据的一种数据保护方式,备份的对象是文件系统。当需要调到主机中时,需要运用数据陕复技术,恢复的时间极长,还需要人工干预。     

ADO技术在监控系统数据存储中的应用

在监控系统中需要对监控参数进行存储,传统的监控系统是以文件的形式存储数据。文章利用最新的ADO技术在监控系统运行中创建数据库,并将数据以Access的形式进行存储。     

一种基于重复数据删除的网络文件备份系统设计与实现

针对广域网中网络备份系统存在备份速度低、网络带宽需求高和数据冗余等问题,提出并实现一种具有重复数据删除功能的网络文件备份系统。通过在客户端实现重复数据删除技术,对文件进行分块和在备份过程中去除重复数据块,减少客户端与服务期间需要传输的数据量,使得文件备份的速度获得较大提高,也较大地降低网络带宽要求,显著提高了网络备份系统的性能。此外,备份过程中客户端去除了重复的数据块使得服务器中存储的数据块都是唯一的,极大地降低了系统所需要的存储空间,同时,服务器端的数据块引用管理的设计很好地解决了空闲数据块耗费存储空间的问题。     

基于二叉树的STL冗余数据去除

STL数据是CAD系统中描述物体的常用格式.由于STL数据中包含大量的冗余数据,因此在后续CAD系统利用中需要首先将这些数据剔除以简化算法并提高效率.本文针对STL的数据冗余剔除问题剔除了一种基于二叉树结构的数据快速剔除方法,该方法与简单的坐标比较方法比较明显地提高了数据处理效率,有利于STL模型数据在CAD系统中的应用.     

一种新的利用操作链技术实现的数据持久层

为了给信息系统提供可靠的数据存取服务,探讨一种基于操作链的数据持久层.其原理为将系统的各个原子数据操作抽象出来构成操作的集合,当系统需要数据存取服务时,从集合中选取若干操作,按需要的逻辑处理过程组合起来提供所需的服务.数据持久层利用控制反转和依赖注入技术以非入侵的方式集成到信息系统中,为信息系统的数据存取提供了一个灵活、可靠、复用性高的解决方案.     

SAP同构系统数据库迁移方案探讨

完整的SAP系统由开发、测试、生产三个系统组成,其中生产系统拥有企业的核心业务数据。所有对其系统结构和业务逻辑的变更都必须在测试系统中严格测试后,才能在生产系统中实施。为保证测试数据的有效性,测试系统应尽可能与生产系统一致。这就需要将生产系统数据完整的迁移到新的测试系统中,以满足测试需要。本文以AIX+Oracle环境为例对"同构环境下SAP系统的数据库迁移"进行探讨。     

EEPROM在仪表系统应用中的几个问题

在仪器仪表及其他一些嵌入式系统中,通常需要存储一些设置参数、现场数据,这些参数和数据要求系统掉电时不丢失,在下次加电工作时系统能够自动恢复原先设定的数据。为了实现上述功能,通常需要给系统配置一定容量的EEPROM。本文以笔者设计某型号的智能流量计时,在应用EEPROM的过程中遇到的问题及解决方法为例,来说明EEPROM的应用方法。     

基于USB2.0的高速大容量数据采集存储系统

针对当前嵌入式采集系统中采用的寻址方式不能充分利用近几年出现的大容量硬盘所提供的存储空间,提出了一种基于USB2.0接口的高速大容量数据采集、存储系统的设计方案及其软硬件设计方法。文中设计的存储系统采用了ATAPI-6所定义的LBA48寻址方式,从而从根本上克服了LBA28寻址方式对存储空间的限制;采用UDMA传输方式,从而克服了传统PIO传输方式的速度瓶颈。研究表明此传输存储方案具有传输速度快、稳定性高、占用系统资源少、与外部接口简单等特点。     

ISCSI磁盘数据双控制器存储完整性测试技术研究

传统的ISCSI磁盘数据双控制器在存储数据时存在响应速度慢、数据丢帧等问题,为了改善传统方法在数据存储时遇到的这些问题,提出一种ISCSI磁盘数据双控制器存储完整性测试技术,在原始的磁盘数据双控制器存储系统中增加一种对数据完整性进行测试的技术,以达到提高存储响应时间,减小存储数据误差的目的;数据双控制器存储系统分为:数据采集、中心控制、动态存储、预警输出、网络接口及电源六大模块,通过采集模块获取存储信息,将采集到的数据经由中心控制模块进行去噪除杂等处理,将处理数据信息进行存储,当磁盘内存不够时,可由预警模块给出相应警告,通过网络接口扩展磁盘空间同时清除缓存,获得存储空间,电源模块为整个系统供电;实验结果表明,所提算法能够有效降低系统响应时间,获得完整的存储数据,同时数据丢帧率在0.05%以内。     

基于CPLD的雷达高度表数据采集系统设计

本文介绍了一种利用CPLD器件作控制核心,基于SCSI硬盘的雷达高度表高速大容量数据采集存储系统,分析了系统组成和设计思想,着重对CPLD实现的功能做了介绍并给出了代表信号的仿真结果,最后介绍了系统的性能测试和应用情况,体现了系统的独立性和灵活性。     

基于USB的CAN总线数据采集的大容量存储

介绍了在CAN总线数据采集系统中应用U盘作为采集数据的移动存储器的方案.该方案基于USB主/从控制芯片CH375A,在单片机的控制下,实现了CAN总线数据采集系统中嵌入USB主机,从而完成把各节点采集的数据存入U盘,取代了现场数据采集系统必须有一台计算机的模式.     

一种基于嵌入式USB-Host的大容量数据存储方案及应用

为解决在分布式数据采集系统中如何实现大量数据传输存储的问题，文章讨论了一种方案——嵌入式USB—Host大容量数据存储方案，对比传统的串口数据传输，提高了传输速度，且脱离了PC机的限制。具体阐述了该方案的硬件组成和软件实现，有较高的参考价值。该方案已经纳入分布式可控震源数据采集系统的构建方案，并通过了模块功能测试，验证了该方案的可行性与优越性。     

超高速数据采集系统设计与优化策略研究

为满足雷达信号高速采集实时存储的需求,设计了一个12 bit、200 MS/s的高速采集存储系统。基于CPCI总线解决高速数据传输的需求,并利用雷达信号的特点,提出了采样时间窗的概念,有效降低了采集数据量和数据传输压力。设计了一种二级缓存机制以提高DMA传输效率,并通过数据格式的组合来匹配总线宽度,提高CPCI总线带宽利用率。采用千兆以太网磁盘阵列,解决了海量数据的高速存储问题。系统最终实现的采样速率是200 MS/s,量化精度12 bit,连续采集。     

大容量数据采集存储系统设计与实现

为解决现有数字示波器和数据存储记录仪对复杂系统覆盖性和可靠性测试不适用问题,设计了基于PCIe总线架构的大容量数据采集存储系统,保证多路高速测量时完整保留测试数据便于后续分析和回顾。给出了基于主控单元片上系统的硬件框架和PCIe总线存储架构设计,多种数据存储方式满足不同数据量的需求。设计了系统通信协议,HPS与FPGA之间的控制指令和交互方式。对数据存储流程中HPS获取采样数据过程,HPS将采样数据写入磁盘过程,以及数据写入磁盘的数据格式进行了设计。测试结果表明,系统硬件、软件设计方案可行,运行稳定,在相同采样速率和分辨率下能存储记录数据量远优于现有数字示波器和数据存储记录仪,目前已投入多款产品的研制和生产过程,取得良好测试效果。     

Efficient journaling writeback schemes for reliable and high-performance storage systems

We propose a efficient writeback scheme that enables guaranteeing throughput in high-performance storage systems. The proposed scheme, called de-fragmented writeback (DFW), reduces positioning time of storage devices in writing workloads, and thus enables fast writeback in storage systems. We consider both of storage media in designing DFW scheme; traditional rotating disk and emerging solid-state disks. First, sorting and filling holes methods are used for rotating disk media for the higher throughput. The scheme converts fragmented data blocks into sequential ones so that it reduces the number of write requests and unnecessary disk-head movements. Second, flash block aware clustering-based writeback scheme is used for solid-state disks considering the characteristics of flash memory. The experimental results show that our schemes guarantee system’s high throughput while guaranteeing data reliability.     

数字图像声纳的数据采集与处理系统

对新型数字图像声纳系统中的高速多通道数据采集与信号处理部分的硬件设计和工作原理进行了论述。简述了数字成像声纳的工作原理．并提出了与成像声纳工作方式相适应的数据采集、缓存、传输和处理方案。详细讨论了多通道并行数据采集、缓存的机制．以及利用光纤进行远距离高速数据传输的实现方法和基于TMS320C6701的高速数字信号处理机的硬件设计和任务分配方法。     

基于CH375的单片机U盘控制器的设计与实现

介绍了一种以USB接口芯片CH375和单片机为核心,U盘为存储介质的数据存储方案,给出了系统硬件实现和单片机读写U盘的应用程序。实验结果表明,该方案具有成本低、通用性强、可靠性高等特点,可方便地集成到各种测控系统中。