异构数据迁移方法研究

企业的信息管理系统更新时,经常会遇到不同数据库系统之间的数据互访和转换的问题,这种异构数据库数据转换和迁移的问题已经成为数据库技术领域重要的研究课题之一。该文根据数据存储特点,讨论了数据迁移的内容和实现方法,并给出迁移质量分析方法,为数据迁移的开发与研究提供指导。     

数据迁移工具的设计研究

数据迁移就是将数据从一种数据环境移入另一种数据环境中。它不仅仅是简单的数据搬家,还涉及到数据格式的转换。本文介绍了在Microsoft公司UDA技术基础上,利用SQL语句完成常用数据库数据间迁移的设计和实现流程。这一完整的数据流程如果定期发生,就可以频繁到实时数据转换或不频繁地每月为数据仓库进行更新,因此对于数据仓库的建立,以及后续的数据挖掘都有相当的实际价值,同时对于实用的应用程序更新也具有一定意义。     

数据管道的数据迁移技术及应用

本文介绍PowerBuilder的数据管道技术,并通过一个具体的实例说明如何在应用程序中使用数据管道进行数据的迁移或传输.     

大数据迁移研究

随着信息采集机制的演变,存储和数据库技术的进步,产生了大量异构信息,整合和使用这些信息成为了巨大的挑战。大数据是指庞大的,有异质数据字典且包含复杂操作的数据。数据迁移是指将数据从一个系统或多个系统迁移至一个新环境的过程。大数据由于自身的特点,迁移过程极其复杂,需要一个行之有效的方法和系统来管理这个过程。本文就是探讨如何行之有效的进行大数据的迁移,并确保信息迁移的完成以及数据的高准确性和一致性。     

大数据环境下的数据迁移技术研究

数据是信息系统运行的基础和核心,是机构稳定发展的宝贵资源。随着信息系统数据量成几何级数增加,特别是在当前大数据环境和信息技术快速发展情况下,海量数据迁移是企业解决存储空间不足、新老系统切换和信息系统升级改造等过程中必须面对的一个现实问题。如何在业务约束条件下,快速、正确、完整地实现海量数据迁移,保障数据的完整性、一致性和继承性,是一个关键研究课题。从海量数据管理的角度,阐述了海量数据迁移方法,比较了不同数据迁移的方案特点。     

存储系统数据迁移技术与实现

通过对存储系统数据迁移常用技术的分析,结合云铜数据迁移实际案例,综合阐述了存储系统数据迁移的技术实现、迁移策略、风险分析与规避、数据完整性与一致性验证方法,对类似系统架构的存储数据迁移具有良好的借鉴意义。     

基于．NET的异构数据源数据迁移技术

随着信息技术的不断发展,不同类型的数据之间的数据迁移变得更加频繁,为了能使数据快速、安全迁移到目标文件,必须有一个较合理的迁移方案。基于ASP．NET＋SQL Server2005开发环境,介绍了从Excel到SQLServer2005的迁移模型。以教务管理系统中的成绩处理为例,具体阿述了对获取Excel数据库,自动侦测Excel数据库表名,利用存储过程实现行列转换等技术的阐述,实现了数据快速批量迁移到SQLServer2005的方法。实践结果表明,此方法大大提高了工作效率。     

基于.NET的异构数据源数据迁移技术

随着信息技术的不断发展,不同类型的数据之间的数据迁移变得更加频繁,为了能使数据快速、安全迁移到目标文件,必须有一个较合理的迁移方案。基于ASP．NET＋SQL Server2005开发环境,介绍了从Excel到SQLServer2005的迁移模型。以教务管理系统中的成绩处理为例,具体阿述了对获取Excel数据库,自动侦测Excel数据库表名,利用存储过程实现行列转换等技术的阐述,实现了数据快速批量迁移到SQLServer2005的方法。实践结果表明,此方法大大提高了工作效率。     

企业级信息系统数据迁移

随着当今社会信息化程度的提高,企业的关键业务对信息系统的依赖性越来越大,而科技的进步以及企业IT环境随业务需求发生的改变,企业常常面临着对现有信息系统相关数据的迁移.而数据迁移会带来用户业务的中断,时间的浪费意味着机会的丧失,所以要求系统迁移必须要迅速、准确.电力企业信息科技发展迅速,信息系统更新换代频繁,因此如何保证系统间数据迁移方便、快捷、安全、可靠执行,是电力企业信息部门的重要研究课题.以企业级数据管理的角度,详细分析了数据迁移过程的各个环节,并综合电力系统数据迁移经验,提出电力生产系统数据迁移方案,对企业级信息系统数据迁移的执行有一定的参考价值.     

PB中利用数据管道进行数据迁移的技术

详细阐述了PowerBuilder的数据管道对象．以及创建和使用数据管道对象的技术细节，并通过实例介绍了利用数据管道实现数据迁移的方法。     

MIS数据迁移中的映射规则

在MIS更替中,数据迁移必不可少,通常包括数据抽取、数据转换和数据加载.源系统和目的系统可以看作两个逻辑模型,以此为前提,本文主要讨论了数据迁移过程中应该保证数据完整性约束,在此原则之上提出了映射规则,并在此基础上进一步讨论了映射规则中实体间、表格间以及字段间的对应关系,及其规则中存在的运算法则.     

企业级信息系统数据迁移方法

数据是业务运转的基础,这些数据都是关乎着企业命脉的宝贵资产。随着业务不断发展,数据量的增长是十分惊人的,在庞大的数据量背后,企业面临的数据管理问题主要涉及存储空间不足、数据安全等几个方面。本文从企业级数据管理的角度,阐述企业级数据迁移中遇到的问题、数据迁移方法论、以及技术方案的特点比较等。     

混合云存储中海洋大数据迁移算法的研究

海洋数据是一种典型的大数据,如何利用混合云存储架构存储海洋大数据是海洋数据管理面临的一个挑战.针对混合云存储架构中的关键问题——数据迁移,提出了海洋大数据的生命周期,并且基于此给出混合云存储中海洋大数据的迁移算法.在迁移算法中,将海洋数据的敏感度、数据访问频率、数据大小、数据时间长度等因素作为迁移因子.迁移算法兼顾考虑了数据存储容量、海洋数据本身的属性特征和数据访问过程中的动态变化.实验验证混合云存储模式能大大降低数据管理成本,同时,通过提出的迁移算法保证了数据的访问速度.     

使用Java和XML实现数据移植

异构数据源的移植问题是当前数据处理领域内研究的一个热点,通过数据移植能有效地利用信息资源、实现数据共享。作为数据表示和交换的工业标准,XML的应用日益广泛,JDOM是一个应用Java语言对XML文档进行读写等操作的API,结合两者的优点,提出了一种以XML文件作为中介实现数据移植的方法。该方法结合Java和XML技术,使用JDOM和JDBC接口实现了数据移植功能,并给出了详细的设计与实现。     

数据流查询计划的并行迁移策略

数据流中的查询计划需要不断进行适应性优化,针对该特征提出一种查询计划的并行迁移策略。该策略能确保在输出过程中不丢。失元组或产生冗余元组,维持正确的元组输出时序。实验结果证明,该策略可以使查询计划平滑过渡,避免迁移过程出现无元组输出的空自期,在系统资源紧张和数据流流速过大时,维持较少的中间元组数和较大输出速率。     

基于Delphi 开发的应用系统数据通用迁移

数据集中管理和跨应用流动的发展需求使得异构数据库的数据迁移技术越发重要。本文提出一种通用的数 据迁移新方法, 可以直接远程提取Delphi 语言编写的应用系统数据,能够有效保障数据迁移过程中的正确性和兼容性,为数据 共享和复用提供有力抓手。     

数据映射技术在ETL过程中的应用

为了使ETL系统能够高效的实现任意异构数据库之间的数据转换,需要通用的元模型支撑任意数据库之间数据转换元数据的定制。通过对数据转换中数据映射应用技术分析,重点对数据映射进行了抽象研究,定义数据映射的详细分类、基于数据映射关系的数据转换元数据描述形式,并构建支撑数据转换元数据定制的元模型,技术在中国石油数据中心大型数据迁移中应用,取得良好效果。     

面向云端Key/Value存储系统的开销敏感的数据迁移方法

Key/Value存储系统在大规模、高性能云应用支撑方面扮演了重要的角色,对云端Key/Value存储系统而言,数据迁移是实现节点动态扩展与弹性负载均衡的关键技术.如何降低迁移开销,是云服务提供商需着力解决的问题.已有研究工作大多针对非虚拟化环境下的数据迁移问题,这些方法对于云端Key/Value存储系统而言往往并不适用.为应对上述挑战,将数据迁移问题纳入负载均衡场景解决.提出一种基于面积的迁移开销模型,该模型可以有效感知底层VM性能干扰状况,权衡迁移时间与性能衰减值.进一步提出一种开销敏感的数据迁移算法,该算法基于开销模型与均衡度制订数据迁移计划,选取最优的迁移操作.基于雅虎的云服务基准测试工具YCSB验证了该方法的有效性.