通用Web日志挖掘系统设计实现

论述了通用Web日志挖掘系统的总体结构以及它的设计实现过程,为用户从Internet中提取知识,改进站点设计提供帮助.     

一种通用综合日志系统的设计与实现

日志系统伴随着大型系统产生,用来记录系统运行时的状态等各方面信息.设计并实现了一种通用综合日志系统,能适应更多系统的日志管理需求.通过这个系统,提高了程序的复用性,并使时间复杂度控制在合理范围内,极大地减少了企业在日志系统方面的开发投入.     

基于日志分析平台的监控系统的设计与实现

介绍基于日志分析平台的监控系统的设计与实现。针对复杂软件系统的监控点类型多样、监控点数量多、监控点易变化、监控数据量大等问题,提出一种基于日志分析平台ELK的监控系统的设计与实现方法。通过对日志分析平台ELK进行改造,把日志处理中的收集、存储、索引、搜索、分析方法引入到监控系统的设计与实现中,解决了传统监控方法存在的问题,为监控系统的设计提出了新的思路。     

基于关联规则的日志分析系统的研究与设计

日志文件作为系统和网络用户行为的记录管理工具,对保护系统安全,方便调查系统故障,监控系统运行状况起着极其重要的作用。该文提出了一个基于关联规则的日志分析系统,将数据挖掘技术运用在日志分析中,并针对挖掘的数据特点对Apriori算法进行了改进。日志分析系统可以利用关联规则对日志进行分析获取其中所蕴合的重要信息。     

基于iFIX操作日志模块设计与实现

针对工业生产中实时监控软件的不足,设计了一种系统操作的日志记录方案.该方案分为操作日志插入、删除和查询三个部分.当对系统进行操作时,记录下当前操作状态,然后生成一条日志记录,并将其存入数据库的日志表中.同时,可以通过调用日志表删除和查询等接口对日志表进行管理.方案实现了对系统操作的实时跟踪,为系统出错恢复和故障诊断提供...     

通用数据处理系统的设计与实现

随着社会信息化的日益加强，传统的数据处理系统存在专用性太强、安全性不高、数据共享性差等缺陷，不利于企业应用。为了充分利用企业信息资产所带来的优势，本文主要论述了一个通用数据处理系统的设计与实现过程，从而帮助企业简单、快捷的组织、处理数据信息并将其直观展现。     

基于数据挖掘的IDS日志数据分析处理

日志数据分析处理是安全模型中的重要组成部分，对该问题的研究具有较高的应用价值。将数据挖掘的方法应用于IDS日志分析系统，并构造出了入侵模式提取与检测分类器建立的处理流程，从而解决了日志分析自动化的问题。     

基于Web日志的数据挖掘初探

Web日志挖掘是Web数据挖掘研究领域中一个最重要的应用方面。该文首先介绍了Web日志挖掘产生的背景,然后介绍了Web日志挖掘的基本概念,着重阐述了Web日志挖掘的预处理和日志挖掘算法两个关键技术,最后介绍了Web日志挖掘的应用,提出了其发展方向。     

防火墙日志分析系统的设计与实现

提出了一个防火墙日志分析系统的完整实现方案,对日志格式的特点、日志预处理方法进行了深入的分析。利用一个后台处理程序实现了日志数据的自动导入及维护,并提供了基于ASP.NET的用户查询界面。另外,后台程序还以用户自定义规则的形式,根据防火墙日志的统计结果实现自动报警,或以C#调用VBScript脚本的方式,自动地对防火墙设备进行配置,从而使防火墙的参数配置与日志相关联,具有一定的自适应性。     

日志挖掘中的数据预处理

日志信息的预处理是日志挖掘任务中的重要阶段,是当前研究的重点,同时也是整个日志挖掘过程的基础和实施有效挖掘算法的前提,在日志挖掘中起着重要的作用.目前主要的日志挖掘主要采用国外的几种软件,而日志挖掘中重要的数据预处理软件国内暂无.文中主要介绍了数据挖掘中的日志挖掘,分析了数据预处理的过程,以及如何实现日志挖掘中的数据预处理,并在Delphi开发工具中成功完成了IIS文本日志文件到Xls格式及XNIL格式文件的转换,实现了日志挖掘中的数据预处理.     

基于贝叶斯网络的遥感数据处理软件

航空航天对地观测系统利用遥感数据获取地表信息的过程中,存在数据误差造成的不确定性和成像时间限制造成的不完整性。针对上述问题该文开发了一款以贝叶斯网络及其相关算法为基础的遥感数据处理软件——BayesNetEX,介绍BayesNetEX的体系结构及使用方法,以三时相北京市TM遥感影像为对象进行变化检测数据处理试验,说明该软件能有效地应用于遥感影像处理。     

构件式遥感信息处理系统

软件重用是降低开发费用、提高软件生产效率和系统的可靠性、可维护性的有效方法,而构件软件是目前发展最快的软件重用技术。本文介绍一个遥感信息处理系统,阐述了其基于构件软件体系结构的开发思想及其特点。     

基于数据融合的遥感图象处理技术

简要地回顾了数据融合技术产生，发展的必然性，以及学者们提出的几种相关定义；尽可能详细地分析了数据融合的框架结构。包括像素层，特征层和决策层三层数据融合，并重点分析了各个数据融合层中的融合方法，以及这些方法在遥感图象处理中的应用，由于数据融合与遥感图象分类，目标检测，变化检测，目标识别的密切相关性，还对数据融合与这些应用的结合作了一定的分析。最后给出了结论和展望。     

基于设计模式的遥感图像处理平台设计与实现

设计模式作为一种面向对象软件开发过程中针对特定问题的解决方案,已经成功应用到了多个软件的系统设计和架构中。遥感图像软件开发是一个复杂的系统工程,其中遥感图像输入输出类库、算法类库和视窗类库是整个软件体系架构中最重要的3个部分。该文结合遥感图像的特点,利用设计模式的思想,论述实现这些类库的过程。     

基于卫星遥感数据的恶劣气象监测预警系统设计

针对传统恶劣气象监测预警系统的检测准确率低、预警时效性较差的问题,提出基于卫星遥感数据的恶劣气象监测预警系统。利用GDAL软件自带的读写功能,处理已读取的遥感影像基本信息,再根据辐射定标与亮温计算数值,完成卫星遥感影像的预处理模块设计。连接插件模块的逻辑结构,利用待集成的平台插件,控制下级遥感信息显示与预警模块,实现恶劣气象监测预警系统的设计与应用。按照系统多线程的同步与通信关系,完成遥感数据的云识别处理,实现卫星遥感程序与恶劣气象监测预警模块之间的实时交互。选取风向指标作为实验对象,分析对比实验数据可知,在不同风向条件下,卫星遥感型监测系统所检测出的风向指标均呈现显著性状态,能够及时响应系统主机的预警指令。     

基于网格的遥感图象处理原型系统设计和实现

网格被誉为是下一代的INTERNET。文章以遥感图象处理为主线,提出了基于网格的遥感图象处理原型系统的设计方案,有效地集成了分散的遥感图象处理算法和处理能力。最后结合OTSU算法在该原型系统中发布、调用等实际运行过程来详细分析几个关键技术的实现。     

海洋灾害遥感元数据及数据系统设计

提出一个海洋灾害遥感元数据框架,用来对海洋灾害遥感数据进行描述、组织、存储和管理;在此基础上,建立了海洋灾害遥感数据系统,实现了卫星数据及灾害专题产品的网络发布、查询检索和数据获取,为国家灾害应急监测与灾后恢复重建等重大应急任务提供数据交换与数据共享服务。     

基于DSP和binLBT的卫星遥感图像数据压缩系统设计

卫星数据压缩要求实时压缩、低比特率和良好的图像质量,系统压缩算法选择基于定点叠式变换的低复杂度图像压缩方法,给出了定点叠式变换的实现流程和一种改进的零数编码的思路;在综合考虑成本、功耗、数据接口和处理能力的基础上,提出了多DSP FPGA的硬件方案,主要由DSP完成压缩运算,型号选取TMS320C6416,对压缩算法的DSP实现中的一些关键问题,如数据溢出、代码优化、并行计算等技术进行了研究,以一组遥感灰度图像为样本,分4:1和8:1两种压缩比对数据压缩模块进行了测试;在CCD相机时钟频率为50 MHz、帧频为1.3 K、每帧4096字节的输出条件下,每个DSP可以处理两路图像数据,压缩图像质量良好.     

基于流式计算的遥感卫星数据快视处理方法

随着高分辨率遥感卫星数据获取能力和地面数传接收能力的提高，现有遥感卫星快视处理系统的处理负载增大，实时性要求越来越难以满足。针对这些问题，采用流式计算思想提出了一种新的遥感卫星数据快视处理系统设计方法。在分析遥感卫星数据快视处理数据流特点的基础上，应用Storm框架对现有系统进行并行优化，设计遥感数据流处理任务拓扑结构，同时利用消息队列中间件Kafka改进处理单元间数据交换和数据缓存方式。实验表明，该系统在数据吞吐率和可靠性方面测试效果良好。     

基于WebService的遥感数据流监控系统

随着遥感技术的不断发展,遥感数据普及应用程度逐步提高,海量遥感数据安全和版权问题面临着巨大的挑战。由于WebService技术的跨平台性和低耦合等优势,其对处于复杂网络环境中的监控系统有着重要的作用,因此,通过WebService技术实现对数字水印加密过程的监控具有一定的研究意义。以Java EE的三层结构为设计思想,文中开发了一套基于B/S架构的数字水印加密监控系统,通过模块化的编程,实现了3种功能:水印实时监控、叛逆者追溯、水印操作情况统计。其主要的服务用WebService接口提供,具有异构程序耦合性及高可靠性和可扩展性,更适合当前网络技术的发展。通过对WebService技术的研究及海量遥感数据流的特点设计出了更为实用、可靠的监控系统,在保证系统稳定的前提下,提高了开发效率及数据监控的实时可靠性。