网格数据检索中结果集的合并算法

随着网格从科学计算转到企业级应用,要求数据库提供多种服务支持以实现更强更丰富的资源共享和应用。网格上的数据库只能通过网格服务进行访问,而数据库中的数据也只能通过网格服务接口来存取。因此如何在网格环境下直接对分布在各地的数据库进行高效的检索就是迫切要解决的问题。本文首先提出了一个网格环境下数据检索的体系结构,然后针对该结构下的数值型数据的Top-k查询问题给出了GrangM算法,它有效解决了来自不同数据源查询结果的合并问题。对该算法的模拟实现表明,它可以快速、高效地合并网格中多结点检索出的结果,减少连接中间结果的大小,降低发送查询请求的通信量。     

网格数据库管理模型与策略

越来越多的网格应用需要管理大容量和广域分布的数据。开放网格服务体系结构中的网格服务提供了动态创建、管理和在网格服务中交换的一致接口。本文探讨了以OGSA网格服务管理网格数据库的模型，网格数据库服务提供支持数据访问的控制和发现、执行数据管理的操作，实现数据资源的虚拟化，通过网格实现现有数据库的访问与集成。同时讨论了相关的优化策略。     

一种基于移动Agent的网格数据库服务模型

网格数据库技术已经成为网格计算领域的一个研究热点。网格数据库是对现有数据库的网格化,以达到对数据资源的访问更加透明、高效、可靠。移动Agent是融合了人工智能技术的一种新型分布式计算模式。网格数据库服务是连接现有数据库和网格应用的桥梁。文章针对网格数据库所面临的主要问题,在网格数据库的数据处理中引入移动Agent技术,提出了一种网格环境下基于移动Agent的服务模型,并介绍了该模型下的事务处理流程。     

金融网格框架设计及金融数据分析的仿真实现

银行的业务数据分散地存储在不同的数据库(可能是同构的,也可能是异构的)中,不易于统一查询访问,而且大量的历史数据脱机存放,无法进行联机查询.网格技术的出现给解决这一问题提供了新的方案.对实现金融网络环境下的资源共享的方法进行了设计,并以此为基础设计了一个金融网格服务实例.最后利用开放网格体系结构OGSA构建了一个网格实验平台,平台上实现金融网格服务的部署和异构数据系统的访问.仿真结果表明网格技术能较好地解决金融网络环境下的资源共享的问题,能消除金融网络的信息孤岛.     

网格环境下的异构空间数据库集成技术

网格建立在服务的基础之上,使得空间数据库在网格环境中面临着如何提供相应的数据库服务、异构系统间的空间数据集成、空间数据如何进行互操作等问题。该文针对网格环境下异构空间数据库之间数据集成的困难,提出将OGSA-DAI中间件技术引入到空间数据库系统应用中,对OGSA-DAI进行空间数据访问的扩展,以实现异构空间数据库的有效集成,通过一个应用实例验证该方法的可行性。     

基于.net的校园网格异构数据统一访问接口

针对开放网格服务架构-数据访问与接口中间件只面向JDBC的局限性,提出构建一个基于.net架构的异构数据统一访问接口中间件。采用XML Web Service技术跨平台性和ADO.net增强的数据库访问能力,既实现了接口实现的通用性与易扩展性,又实现了接口对数据访问、数据库连接、数据格式转换、数据传输、数据库集成等底层细节的屏蔽。测试结果表明,该接口中间件具有通用性、灵活性和可靠性。     

基于网格服务的数据发布系统

网格的核心任务是管理分布在Internet广域环境中的各种类型的软硬件资源，为基于Internet的分布式应用提供一个统一的、虚拟的共享资源的计算平台。如何将数据库资源并入现有的网格架构，满足更加广泛的网格应用的数据访问需求，已经成为一项亟待解决的课题。文章提出了一套网格环境中的数据发布系统的设计方案，以网格服务的形式封装对数据库的访问，实现跨越异构网络环境、异构操作系统环境和异构数据库平台的统一访问模式，从而将数据库资源加入到网格环境中。     

基于遥感数据访问与集成的网格中间件

借助数据网格强大的数据管理功能，可以整合分散复杂的遥感数据，为遥感数据处理提供一致的存取环境。遥感数据访问与集成网格中间件的研究目的是为访问分散的、异构的遥感数据提供统一的网格服务接口，使孤立的遥感数据之间实现资源共享。该文利用OGSA-DAI设计，实现了遥感数据访问和集成网格服务，构建了一个高性能遥感数据共享系统，分析了系统的关键性技术及实际应用。     

基于OGSA标准的发票数据库网格IDBGrid的设计与实现

该文根据OGSA标准提出将分布于全国各地的成千发票数据库虚拟化,通过对原系统的重新规划与设计,建成一个具有超强的存储和运算能力的发票数据库网格IDBGrid,IDBGrid在Web服务资源框架基础上提供网格数据库管理系统注册服务、网格数据库管理服务、网格数据服务、网格数据库复制服务、网格数据库监控服务、网格数据库故障转移服务等,提供一个统一、透明的数据库网格访问和整合界面,通过网格环境下数据库服务器之间的协同处理达到提高资源利用率、运行性能,降低开发和维护成本,增强系统健壮性和可用性的目的,文章重点研究了异构环境下数据库管理系统的网格化管理的关键技术。     

网格数据访问中间件的设计与实现

网格服务的一个重要目标是实现数据资源的共享,然而网格环境的复杂性阻碍了对数据的有效访问。利用中间件屏蔽底层的复杂性,实现对网格环境下跨平台,异构数据资源的统一访问是当前研究的重点。该文结合中科院科学数据网格项目的特点,阐述了在开放网格服务架构下用中间件来实现网格中数据的统一访问的原理,并给出了实现的方法。     

面向内存数据网格的分布式事务保障机制

在线事务处理（online transaction processing,OLTP）应用面临并发量和数据量持续增长的问题,并且高并发读写操作使得后台数据库成为瓶颈。内存数据网格（in-memory data grid,IMDG）是基于内存的新型分布式数据访问平台,是解决系统数据库写操作瓶颈的有效技术途径之一。然而内存数据网格中数据访问操作涉及的数据分布是不可预知的,需要提供分布式事务保障。针对内存数据网格的系统特点,提出了一种分布式事务保障机制,设计实现了事务处理模型、请求处理和数据定位方法以及事务保障协议,并规范化地定义了客户端与服务器端以及服务器端之间的操作接口。在事务处理基准测试TPC-W上的实验结果表明,新机制可以提高在线事务应用的处理速度,并具备良好的扩展性。     

基于.NET的Web Service技术的分布式异构数据库的集成

本文分析了Web Service的特点,提出了一种基于Microsoft.NET的Web Service技术访问分布异构数据库的体系结构,并采用.NET技术实现了原型系统.在原型系统中,使用Web Service将分布于Internet上不同的数据库系统中的数据集成,向访问数据库的应用程序提供统一的数据操作接口,实现了分布式数据库的透明访问.     

Dispatching mobile Agents for DDM applicationss

Techniques for mining information from distributed data sources accessible over the Internet are a growing area of research. The mobile Agent paradigm opens a new door for distributed data mining and knowledge discovery applications. In this paper we present the design of a mobile agent system which couples service discovery, using a logical language based application programming interface, and database access. Combining mobility with database access provides a means to create more efficient data mining applications. The processing of data is moved to network wide data locations instead of the traditional approach of bringing huge amount of data to the processing location. Our proposal aims at implementing system tools that will enable intelligent mobile Agents to roam the Internet searching for distributed data services. Agents access the data, discover patterns, extract useful information from facts recorded in the databases, then communicate local results back to the user. The user then generates a global data model through the aggregation of results provided by all Agents. This overcomes barriers posed by network congestion, poor security, and unreliability.     

基于数据网格环境的连接操作算法

数据网格是一种分布式数据管理体系结构，能够为分布在网格中的资源提供协同的管理机制．数据库管理系统在数据网格中发挥着重要作用，在各种数据库操作中，连接操作是一种最常用也是最耗时的操作，到目前为止，尚未有文献提出数据网格环境下的连接操作算法．主要对数据网格环境下海量数据的连接操作算法进行了研究，针对网格中各结点之间网络带宽异构的特点，采取关系缩减算法、行分块传输技术和流水线并行机制来减少查询的响应时间．理论分析和实验结果证明，算法在减少网络通信开销、增加I／0和CPU并行、降低响应时间方面具有较好的性能．     

网格环境中模式复用的异构数据库访问和集成方法

如何为网格环境的资源使用者提供异构数据库资源的全局统一视图和一致访问接口,是网格技术及其应用的关键问题和研究热点.由于大学数字博物馆网格(university digital museum grid,简称UDMGrid)需要整合和共享分布在8个城市12个大学数字博物馆的异构数据库资源,因此提出了一种网格环境下模式复用的异构数据库访问和集成方法(database access and integration in UDMGrid,简称UDMGrid-DAI).该方法首先提出了一种模式复用的虚拟数据库构建策略,定义了异构数据库资源的全局统一视图;在此基础上给出了数据库资源注册方式和虚拟数据库查询映射方法,为资源使用者提供了访问数据库的一致访问接口;最后,在UDMGrid的异构数据库资源环境下,实验了从数据库资源注册到使用的全过程,验证了UDMGrid-DAI方法的正确性和实用性.     

网格环境下数据集成模型研究

基于OGSA—DAI给出了一个用于解决网格环境下异构数据源数据集成和分布式查询处理的数据集成模型,在此基础上利用客户端元数据库解决了用户对目标数据库信息了解匮乏的问题,从而为用户的分布式查询处理提供了一种直观透明的、可视化的虚拟数据库视图环境。     

Development of a distributed collaborative design framework within peer-to-peer environment

Distributed collaborative design and manufacture enables manufacturing organizations to maintain competitiveness in the fiercely competitive global industry. This requires that the distributed system not only maintains data consistency across globally-distributed locations seamlessly, but also allows team members to access the storage system and computing resources transparently and securely. Current grid applications mainly based on client-server architecture are inflexible and rigid for fast changing collaborations among manufacturers, especially for small and medium enterprises. In this paper, a distributed collaborative design framework is presented with a hybrid of grid and peer-to-peer technology. In order to access computational resources for design, analysis and process simulation, a meta-scheduler is designed and implemented. It helps in resource discovery and optimal utilization of resources. A test bed is established, based on the framework proposed to demonstrate a distributed collaborative design and manufacturing environment.     

基于网格的Web可视化系统设计与实现

面向网格的数据可视化共享地理分布的数据源、分析设备、可视化设备等，提供透明访问能力。基于网格开发了一个Web可视化系统，分为3层：Web页面，Web服务器，可视化服务器。通过JSP为可视化用户提供Web访问界面，内嵌的VisPortal提供网格访问门户；Web服务器通过Portal服务器管理、调度、使用网格资源，协调用户与网格资源之间的交互；基于Vis5D构建的可视化服务器作为网格资源，实现对数值天气模型产生的5-D网格数据集的可视化。