首页 | 官方网站   微博 | 高级检索  
     

JPPF在构建高性能ETL过程中的应用
引用本文:许力,牟晓光,马云存.JPPF在构建高性能ETL过程中的应用[J].计算机应用,2008,28(Z2).
作者姓名:许力  牟晓光  马云存
作者单位:东软集团(大连)有限公司基础软件事业部,辽宁,大连,116023
基金项目:国家863计划项目 , 国家科技支撑计划项目  
摘    要:数据仓库中数据规模的不断膨胀和数据实时性需求的提高使得对ETL过程性能要求越来越高.通过对并行处理框架JPPF分析,提出了利用JPPF构建高性能ETL系统架构方案和一种ETL数据处理任务提交算法.经过测试和性能对比证明了该方案在处理包含大规模计算任务的ETL过程优势明显.

关 键 词:数据装载工具  数据仓库  并行计算  网格计算

Research of constructing JPPF based ETL process with high performance
XU li,MU Xiao-guang,MA Yun-cun.Research of constructing JPPF based ETL process with high performance[J].journal of Computer Applications,2008,28(Z2).
Authors:XU li  MU Xiao-guang  MA Yun-cun
Affiliation:XU li,MU Xiao-guang,MA Yun-cun(Fundamental Software Department,Neusoft Corporation,Dalian Liaoning 116023,China)
Abstract:With the expansion of the data scale and increased real time data need in data warehouse,high performance ETL process is requested.According to the analysis of JPPF,put forward a solution of constructing high performance ETL structure by using JPPF and an ETL data procession tasks submission algorithm.After testing and performance comparison proves the prototype system has advantage in processing ETL process containing massive computation tasks.
Keywords:Extract Transform Load(ETL)  data warehouse  parallel computing  grid computing  
本文献已被 CNKI 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司    京ICP备09084417号-23

京公网安备 11010802026262号