城市 DLG 基础地理信息数据库的建立方法研究

本文以FME为转换平台,以某市数字化地图为例,通过对DLG数据进行分析预处理,并设计转换方案,设置转换流程及模型函数等,构建了CAD的DWG数据到GIS的GDB数据的无损转换模型。本文共构建了8个转换模型,包括高程点转换模型、控制点转换模型、水系转换模型、居民地转换模型、交通转换模型、植被转换模型、地物附属层转换模型、分幅表接边线转换模型,成功的转换了两种数据。结果表明,实验基本实现了CAD的DWG数据到GIS的GDB数据的空间和属性信息的快速、无损转换,转换结果基本没有属性信息丢失,为地图数据共享提供了可行的解决方案。     

通用数据转换平台研究与实现

针对数据集成中各种数据异构问题而产生的数据转换需求,提出了基于面向图编程的数据转换过程模型,设计并实现了一个基于Java和SWT技术的通用数据转换平台。同时也对系统的体系结构和具体实现如转换节点设计和数据转换引擎等关键部分进行了论述。     

利用FME实现GIS与CAD的语义转换

论文分析了GIS和CAD的数据结构,介绍了如何利用FME实现GIS数据与CAD的语义转换及其优势所在,采用这种方法进行数据转换,可以在数据转换过程中重构数据实体,在一定程度上解决了以往数据转换中存在的问题。     

基于DTS组件编程实现对文本数据的灵活抽取

探讨了利用SQL SERVER 2000数据转换服务（DTS）编程实现数据转换的一般过程，提出通过文本整理、列映射、数据规范化等操作，将原始文件转换为较为规范的中间文件，再利用通用转换过程实现数据转换的思路；并利用DTS的异常处理能力对无法自动转换的情况提供了人工介入的途径，大大提高了转换成功率。     

异构数据转换系统设计与实现

针对异构数据源分散存储给用户带来的不便,本文利用了ODBC数据转换技术和MD5算法数据校验,设计并实现了一个异构数据转换系统。该系统实现了txt、Excel、SQL数据库三种数据源间的相互转换和数据存储,保证了数据转换的正确性,达到了预期效果。     

XML的数据处理技术在ERP中的使用

由于XML自身的特点,它非常适合作为异构数据源之间数据转换的中介。本系统集成中采用XML作为数据转搀的中介．实现了不同数据库之间的数据转换,并且实现了XML文档与关系数据库之间数据相互转换的构件。提高了ERP系统的可扩展性、灵活性和可维护性。该文分析了ERP系统中数据转换的基本需求,结合面向对象的方法和构件技术．设计并实现了基于XML的通用数据转换系统。本文总结了在实施ERP系统的实践中所使用的技术,提出了用标准XML模式作为交换单据的数据标识：详细描述了关系模式与XML模式之间映射的转换脚本：讨论了XML文档与关系数据库之间相互转换的数据转换构件的设计和实现接口：并基于DOM解析器,详细介绍了数据库转换构件中的数据转换的算法。在具体的使用过程中,只要对每种单据都生成一份简单直观的转换脚本,并调用数据转换构件的接口,就可以非常容易地提取（或存储）带有层次关系的XML文档。     

基于动态语言的通用型EDI转换引擎设计与实现

EDI系统在国际贸易领域有广泛的应用。传统的数据转换引擎一般采用静态编程语言（C/C＋＋,Java,C#等等）开发实现的。在使用传统数据转换引擎过程中,开发维护,扩展传统数据转换引擎的成本较高。动态语言不需要编译,语法简捷,开发调试速度快,维护成本低,可移植性强的特点满足了业务人员对数据转换引擎的新需求。因此,基于动态语言实现的数据转换引擎,弥补了传统数据转换引擎的不足。本文主要介绍了基于动态语言Python开发实现的数据转换引擎。此数据转换引擎支持多种数据格式标准,易于使用,运行稳定,执行效率高。     

2011.04.001

：EDI 系统在国际贸易领域有广泛的应用。传统的数据转换引擎一般采用静态编程语言（C/C++,Java,C# 等等）开发实现的。在使用传统数据转换引擎过程中,开发维护,扩展传统数据转换引擎的成本较高。动态语言不需要编译,语法简捷,开发调试速度快,维护成本低,可移植性强的特点满足了业务人员对数据转换引擎的新需求。因此,基于动态语言实现的数据转换引擎,弥补了传统数据转换引擎的不足。本文主要介绍了基于动态语言Python 开发实现的数据转换引擎。此数据转换引擎支持多种数据格式标准,易于使用,运行稳定,执行效率高     

数据映射技术在ETL过程中的应用

为了使ETL系统能够高效的实现任意异构数据库之间的数据转换,需要通用的元模型支撑任意数据库之间数据转换元数据的定制。通过对数据转换中数据映射应用技术分析,重点对数据映射进行了抽象研究,定义数据映射的详细分类、基于数据映射关系的数据转换元数据描述形式,并构建支撑数据转换元数据定制的元模型,技术在中国石油数据中心大型数据迁移中应用,取得良好效果。     

基于．NET的XBRL数据转换引擎研究与实现

针对目前基于XBRL统一数据集成化处理平台中从各种不同数据库读取及转换数据等方面的困难及不足,分析了XBRL技术的特点和数据转换需求,然后探讨了数据转换引擎的工作原理及其实现过程.该研究有利于数据快速整合,为统一数据集成化处理平台数据转换提供了依据.     

试飞数据平台数据架构设计与应用

试飞数据是民机飞行试验的重要产物,具有测量参数数量大,数据体量大,飞行试验数据与试飞任务信息关联性强等特征,支撑飞机型号取证与设计优化等任务。试飞数据平台数据架构对多源异构数据集成接入、多类形态数据存储管理、多种层次数据处理分析等技术进行了研究,采用湖仓一体的关键技术和方法打造试飞数据全集。试飞数据接入采用流批一体的数据处理技术,融合Spark和Flink主流数据处理引擎,具备试飞数据快速入库能力。提出按秒聚合方法,具备PB级多维度试飞数据压缩存储功能,存储性能提升近10倍；采用以秒为索引条件支持快速检索,强化数据湖查询能力。研究数据仓库技术,设计试飞数据多层数据模型,具备多维信息精细查询,多层数据灵活钻取,多功能自定义函数集成等功能,并成功应用在某型国产民机的飞行试验数据管理中,服务于试飞数据用户,提高了试飞数据管理效率与试飞数据应用价值。     

飞行数据综合记录与分析系统的设计与实现

随着数字化航电系统的发展,飞行数据记录系统越来越向着综合化数据记录的方向发展,根据数字化飞行数据记录器对综合数据尤其是音视频数据采集的需要,设计和实现了飞行数据综合纪录与分析系统,该系统不仅可进行的飞行数据特别是音视频数据的采集和存储,还对数据量庞大的音视频数据进行基于MPEG4的压缩.系统集中管理分布式数据,存储并能提供数据回放分析功能.分析这些音视频数据,对于更准确的评估飞行训练水平具有十分重要的现实意义.     

数据仓库与数据挖掘的关系及其安全性问题

数据仓库与数据挖掘是当今新的技术热点,数据仓库是一种解决数据使用的高效技术,数据挖掘为之提供了更好的决策支持和服务,同时促进了数据仓库技术的发展。从数据仓库的相关技术和体系结构分析展开研究,分析了数据挖掘与数据仓库的关系,重点阐述了数据仓库的安全性问题,展望了数据仓库未来的研究方向。数据仓库和数据挖掘二者既相互结合、共同发展,又相互影响、相互促进。数据仓库越来越广泛地运用到各个领域中,成为企业获得竞争优势的关键武器。     

数据容灾备份与恢复的关键技术及应用研究

随着我国网络技术的不断发展和普及,人们对于网络的依赖程度也越来越大,社会各个企业对于网络数据的储存量越来越多,因此数据的安全工作就成为了数据保存中的重中之重本文通过对数据容灾技术重要性和必要性进行大致的介绍,并综合的阐述了数据容灾备份与恢复的关键技术,最后从数据定期备份、数据定期备份和关键数据的单独备份、关键数据备份的连续恢复、数据实时备份和异步更新、网络数据影像五个方面.对数据容灾备份与恢复的应用模式进行了科学合理的探究,给数据容灾备份与恢复的关键技术及应用研究带来了积极的指导意义     

ArcGIS与MapGIS空间数据转换技术与方法

ArcGIS的Geodatabase数据存放格式与MapGIS的Geodatabase数据存放格式各不相同，本文介绍两者之间的数据转换，并将其应用于国土资源地籍数据的转换，从而达到数据资源共享。     

科技政策库的系统集成与建设

为了满足科技政策研究需要,中国科协设计并实现了一种科技政策库系统.本文首先介绍了科技政策库的总体设计方案、系统工作流程;然后详细介绍了系统组成,整个系统由数据采集子系统、数据清洗子系统、数据分析子系统3个子系统组成.数据采集子系统基于网络爬虫框架Scrapy软件针对大量异构站点设计了可管理的网络爬虫,并基于ABBYY FineReader软件（俄罗斯软件公司ABBYY发行的一款文档识别软件）实现了历史文献OCR识别（Optical Character Recognition,光学字符识别）和入库.数据清洗子系统基于机器学习算法实现了数据去重、非相关数据识别、数据属性缺陷识别等功能.数据分析子系统则对有效入库的科技政策进一步进行了文本分类、关联关系分析、全文检索.从2018年10月上线以来,该系统从226个数据源采集564 749条数据,经过数据清洗之后入库404 083条数据,能够有力地支撑科技政策研究工作.     

矢量栅格一体化数据结构设计与应用

针对如何在“3S”集成过程中选择良好数据结构的问题,通过分析矢量数据结构与栅格数据结构的优缺点,以二级划分策略建立具有两种结构优点的矢量栅格一体化数据结构,使空间数据在栅格化的同时能满足矢量精度要求,并给出其逻辑表示。在此基础上,讨论基于该数据结构的空间数据采集与叠加分析策略。     

资源与环境信息系统的元数据组织与使用

由于建立资源与环境信息系统的统一元数据构架是对资源环境数据和模型实现管理和知识共享的有效途径之一,且由于资源与环境信息系统中的狭义数据已有描述其规格、质量控制和共享限制的元数据标准,为了能有组织地记录资源环境狭义数据和模型方法的详细信息,因此在对已有资源与环境信息系统中的元数据标准进行分析的基础上,首次提出模型方法元数据的概念,并指出资源与环境信息系统中对模型方法的规范描述即构成模型的方法元数据,还指出完备的资源环境元数据由狭义数据的元数据和模型方法的元数据组成。实践结果显示,基于元数据来实现系统集成和知识共享是可行的选择。     

CFD验证与确认数据库平台数据结构设计与应用

计算流体动力学（CFD,computational fluid dynamics）验证与确认数据库平台用于存储和管理精细风洞试验、飞行试验、数值计算产生的标准算例数据。针对结构复杂、维度较高且参数不固定的CFD验证与确认标准算例数据,设计一种灵活的数据结构,动态存储不同标准算例的来流状态数据与结果数据,减少数据冗余,提高数据可扩展性。基于该数据结构完成标准算例数据质检与元数据管理设计,确保数据库平台能够精准、高效的为CFD软件可信度评价或相关研究提供数据服务。应用证明,验证与确认数据库平台实现了标准算例数据的有效管理和高效应用,为国家数值风洞工程和国内相关CFD软件的验证和确认提供了有力支撑。     

数据仓库与数据挖掘技术的研究与应用

讨论了数据仓库的构建方法和数据挖掘技术的应用,介绍了使用分析服务器构建数据仓库及进行联机分析的方法,实现了一个利用决策树算法建立模型对顾客的信誉度进行分类的实例。