可扩展数据仓库若干关键问题研究与分析

当大量复杂异构的数据不断进入数据仓库以后,最初的配置渐渐适应不了新的环境,因此数据仓库必须要设计成为可扩展的体系结构,从而能够满足将来数据仓库的性能要求,它能够随着数据、最终用户、复杂性和功能性的增长而增长,并且在增长的同时其性能水平并不会下降。文中通过对数据集成、高效查询和非规格化等几个可扩展数据仓库关键问题进行研究,使得当大量异构数据涌入可扩展数据仓库中时系统性能不会下降,很好地满足决策支持,取得较好效果。     

可扩展数据仓库若干关键问题研究与分析

当大量复杂异构的数据不断进入数据仓库以后，最初的配置渐渐适应不了新的环境，因此数据仓库必须要设计成为可扩展的体系结构，从而能够满足将来数据仓库的性能要求，它能够随着数据、最终用户、复杂性和功能性的增长而增长，并且在增长的同时其性能水平并不会下降。文中通过对数据集成、高效查询和非规格化等几个可扩展数据仓库关键问题进行研究，使得当大量异构数据涌入可扩展数据仓库中时系统性能不会下降，很好地满足决策支持，取得较好效果。     

基于数据仓库的派单式营销模型的研究

针对各种异构和层次化的Web数据提出了Web数据仓库化模型--MIX数据模型,它是基于语义对象概念的自述型模型,能把Web页面各种异构数据统一起来,完成数据集成,按数据仓库预定义的模式载入数据仓库,较好地解决了派单式营销中Web数据进入数据仓库的难点问题.     

高校财务项目管理系统的数据仓库的设计

数据仓库系统是存储大量历史数据供分析和对决策进行支持的系统,本文详细描述了在高校财务项目管理系统的基础上建立和维护数据仓库的过程,包括数据仓库模型设计、异构数据的转换、数据冗余、汇总数据存储等数据仓库设计过程和数据的抽取、转换和加载（ETL）以及元数据管理等维护过程,并简单地介绍了数据仓库在OLAP方面的应用。     

基于多级片上总线的并行图像处理系统设计*

采用基于平台级FPGA的SOC设计方法, 设计了一种基于多级PLB总线的可扩展并行图像处理系统。系统采用总线桥并行扩展处理单元来增加系统处理性能和扩展存储访问带宽;通过数据分发模块实现图像数据输入与处理流水线操作。时序功能仿真与硬件实现表明,该设计能灵活高效地实现系统结构的并行扩展,显著提高了系统并行处理性能。     

OpenMP数据分布子句自动生成算法

将OpenMP程序扩展到异构多核结构时,非本地存储访问会导致访存开销增加,影响程序性能。针对该问题,引入带数组划分信息的数据分布子句,对数据在异构多核存储系统的布局进行管理,提出一种基于并行循环识别和数组引用模式分析的算法,实现该类子句的自动生成。实验结果表明,自动生成的OpenMP程序包含数据分布子句,具有较好的数据局部性,可降低访存开销,在异构多核系统上获得明显的性能提升。     

变电站数据库管理系统的开发

设计采取了改进的有特色的数据仓库方案,在110 kV变电站综合自动化系统中建立了数据库管理系统,将异构系统的数据通过串口、网络等方式实现数据交互并采用了双层C/S的结构;设计门户站作为各异构系统的整合交流站,建立了数据库同步与数据库更新等应用程序,使全系统数据能够很好地满足一致性、实时性与完整性的要求.     

MIOS:面向大规模CCNUMA系统的多实例操作系统

MIOS是一个面向大规模CCNUMA系统设计的新型高可扩展操作系统.MIOS创新地采用了多实例内核结构,每个内核实例执行相同代码,分别独立运行和管理一个处理器,多核间通过分布存储管理构成高可扩展的一致性系统映像空间,支持弱共享进程、线程并行模型.MIOS针对大规模CCNUMA系统特点和高性能并行科学计算应用的需求,采用了显式共享数据分布、层次式任务调度、自适应任务间通信以及寄存器锁等优化.在大规模CCNUMA体系结构的银河深度并行计算机上的测试表明,MIOS对MPI应用具有同传统操作系统类似的性能,并可以有效支持2048处理器规模的OMP应用高效运行,具有良好的系统可扩展性.     

大数据环境下的电力客户服务数据分析系统

作为电网企业对外服务窗口,电网客户服务中心需要整合企业内部各种异构数据资源、存贮和分析海量的客户服务语音信息和 WEB 服务信息。如何对电网企业各类数据进行高效、可靠、低廉地存储,并快速访问和分析,是当前重要的研究课题。首先分析了大数据的特征和大数据的关键技术,其后,设计了大数据时代下的电力客户服务数据分析系统,提出了系统的数据体系架构,设计了系统功能,总结了系统的关键技术和算法,该系统利用大数据技术和数据仓库技术集中存储、管理和应用电网数据,通过元数据管理实现统一的数据服务平台,使用Hadoop数据库作为非结构数据的存贮平台和数据分析与挖掘的支撑平台,基于CDC数据仓库ETL模型设计数据仓库 ETL 构件,在数据展示层使用多维数据分析技术。最后,综述了系统应用案例,实践表明,系统具有成本低、扩展性较好、可靠性高、并行分析等特点,可以大大提高电网企业的客户服务水平。     

电厂异构系统数据交互的实现

采取改进的有特色的数据仓库方案,在三遥系统中建立整合数据库,将两系统的数据通过串口,网络等方式整合到三遥系统中,采用双层C/S的结构,设计门户站作为各异构系统的整合交流站,并建立异构系统数据库和数据管理服务等应用程序,在对各个数据进行服务的同时进行统一的管理,使数据能够准确的为用户服务.