点击流中事务数据模型的设计与实现

点击流数据简单说就是Web服务器上一系列有序的日志记录。随着WWW应用及电子商务的高速发展,电子商务网站的Web服务器上自动收集了大量的用户访问信息记录,即所谓的Web日志。Web日志蕴涵了大量的有用信息,如客户来源、客户访问趋势、客户兴趣、网站流量等,因而记录和分析Web日志数据已逐渐成为e企业的一项重大活动。点击流数据仓库对原始的Web日志数据进行过滤、清洗并集成,以便于利用联机分析处理和数据挖掘技术对点击流数据做进一步分析,从而为企业创造巨大的信息财富。     

蚁群算法在Web站点导航中的应用研究

Web站点导航是Web数据挖掘的一个重要研究领域,是准确理解用户访问网站行为的关键;传统Web站点导航技术很难全面反映出用户对页面浏览的兴趣程度,找到用户感兴趣页面路径准确度比较低;为提高找到用户感兴趣页面路径准确度,提出一种基于蚁群算法的Web站点导航技术;将网络用户看作人工的蚂蚁,用户的浏览兴趣作蚂蚁的信息素,通过利用Web日志数据采用正负反馈机制和路径概率选择机制建立一个Web站点导航模型,挖掘用户感兴趣页面的导航路径;仿真实验结果表明,基于蚁群算法的Web站点导航技术提高了找到用户感兴趣页面路径准确度,更加能够准确反映出用户的浏览兴趣,用于Web站点导航是可行的。     

通过挖掘Web日志改进站点结构

在一些商业站点中Web页面的结构有时与用户的浏览习惯不相一致,即用户在某个位置去寻找某个特定的页面,而这个页面却买际在另一个位置。该文提出一种算法找出站点中那些实际位置与用户期望位置不相一致的页面。算法的主要思想是如果访问者没有在特定的位置找到所需的页面就会回退,把这个产生回退的位置作为访问者希望相应的页面内容出现的可能的候选期望位置。然后站点管理者可以改进站点的结构,在用户的期望位置增加相应的页面的连接,这样可以使用户能够较为方便地找到所期望的页面。     

基于Web挖掘的自适应站点优化设计

现有的静态Web站点结构不能满足人们准确地找到所需信息和享用个性化服务的要求。本文不但通过Web日志文件的挖掘,找出用户的频繁访问路径来改进Web站点结构,而且分析当前访问页面与后续候选推荐页面的内容相关性,形成经过内容裁剪的个性化页面来压缩Web页面内容。这样,用户可快速定位到频繁访问的后续页面位置,且页面内容大多是用户感兴趣的主题信息。在此基础上,提出了一个自适应站点模型AdaptiveSite,经过推荐质量分析,该模型具有较好的优化性能。     

基于Web挖掘的个性化网络教学系统的设计与实现

设计了一种基于Web挖掘的个性化网络教学系统，该系统结合Web使用挖掘、web内容挖掘和Web结构挖掘的挖掘结果为学生提供个性化的推荐服务，即使在使用数据比较少，或教学内容变化比较频繁的情况下，也能为学生提供高质量的个性化推荐服务。     

一个自适应Web站点构架的设计

现今Web站点是越来越复杂而且不智能化。用户在访问Web站点时经常会碰到很多问题,主要原因是Web站点对用户的需求缺乏适应性。文中研究了自适应Web站点,提出一个理论框架,并针对此框架给出一个构建自适应Web站点的系统架构,介绍了使用文本挖掘方法和Web用法挖掘方法,改善Web站点的结构和组织形式以使站点达到更好的效果。主要通过挖掘Web服务器日志数据使站点更容易访问。     

基于Web挖掘的用户兴趣建模方法的研究

基于用户兴趣的不同,研究如何针对用户的浏览行为来获取用户的有效兴趣数据,并根据现有用户兴趣模型存在的不足,结合Web挖掘中的相关技术,先显式构建用户兴趣模型,后隐式更新用户兴趣模型,从而实现能适应用户兴趣变化的用户兴趣模型。     

一个自适应Web站点构架的设计

现今Web站点是越来越复杂而且不智能化。用户在访问Web站点时经常会碰到很多问题，主要原因是Web站点对用户的需求缺乏适应性。文中研究了自适应Web站点，提出一个理论框架，并针对此框架给出一个构建自适应Web站点的系统架构，介绍了使用文本挖掘方法和Web用法挖掘方法，改善Web站点的结构和组织形式以使站点达到更好的效果。主要通过挖掘Web服务器日志数据使站点更容易访问。     

Web挖掘妙用

浩如烟海的Web数据,如果有挖掘技术能充分利用其价值,其意义不可估量。     

基于CORBA的分布式Web挖掘系统的设计与实现

提出了一提出了一个基于CORBA的分布式Web挖掘系—DWMBC,它采用基于Web的管理模式,利用CORBA进行分布式处理。将分布式信息处理和Web挖掘有效地结合起来,具有跨平台、较好的安全性和可扩展性。另外,利用JAVA技术,它还能满足一些挖掘结果实时表示的要求。     

中小型Internet网站的设计与实现

本文讨论了当前莛限展的中小型Ｉｎｔｅｒｎｅｔ网站的设计与实现。从应用的角度提出了网站的设计与实现。从应用的角度提出了网站的设计,着重讨论了网络系统结构设计,包括局域网站的设计原则,着重讨论了网络系统结构设计,包括局域网结构设计,广域网和Ｉｎｔｅｒｎｅｔ网的接入方法,以及网络的安全管理 介绍了网络操作系统和设备的选择原则和方案。     

点击流数据仓库系统应用研究

电子商务网站逐渐成为商务智能中数据量最大的地方之一。把数据仓库技术引入电子商务应用中,把用户在电子商务网站上的点击流(Click Stream)和Web日志文件作为数据源,利用高效的改进的关联规则算法,可以有效地分析出其中蕴涵的知识,如用户行为模式等。利用这些知识,商务人员能够拓展他们的市场,改善客户关系,降低成本,使操作流水化,有效地辅助他们改进商业策略。     

NAT专网下的数据流穿透研究与实现

设置NAT能有效防止外部用户访问局域网内部资源,但却给同机构不同地域局域网间访问带来很多限制,已布署的实时流媒体软件因不具备NAT穿透功能,从而导致传输受阻,单方面地去改造这些流媒体软件,将会引发诸如：时间、成本、安全性等一系列问题。本文提供的agent原型,利用端口映射机制,代理穿透通道并对它们进行动态分配、释放及安全认证,从而打破NAT屏障。Agent同时提供很好的可扩展性,可方便集成到其它传输系统之中,具有极高的使用价值。     

面向数据分析的Web页面静态化方法研究与实现

Web应用系统多采用动态网页技术,通过客户端页面频繁与服务器交互完成动态数据展示,但对大型分布式系统而言,频繁的数据交互给后台服务器带来沉重负担,不但影响系统正常运行效率同时也加重网络负荷。结合南方电网超高压输电公司与各基层单位网络系统分布式架构,提出一种Web页面静态化方法,在不影响系统响应速度、各级数据一致性、系统可连续访问的前提下,实现超高压输电各级单位静态报表的多点存储,减轻系统及网络负荷,避免多级用户数据不一致、跨地域网络间断等问题。     

基于Lip-切比雪夫方法的数据流异常检测分析①

近年来计算机软硬件性能飞速发展,数据流被广泛应用于传感器阵列、互联网信息的传输、数据决策支持系统(DSS)等诸多领域。数据流的传输速度越来越快,传输规模越来越大,人们对数据处理的时间要求越来越高。利用Lipschitz指数和切比雪夫定理,提出了一种数据流异常检测的算法,与传统方法相比具有同时包含整体和局部数据信息、计算量稳定的特点。     

面向流数据的分布式时序同步系统的设计与实现

针对目前分布式流数据管理方案的不足,本文从实际的业务需求出发,结合雷达流数据的单消息体规模大、消息流压力大以及流量波动明显的特征,采用主从式的分布式结构,利用Akka异步通信框架,设计并实现了一个面向流数据的分布式时序同步系统。该系统可扩展性强,容错性好,同时也是后续的分布式流数据实时计算系统和实时存储系统能够正常运行的重要前提。本文首先分析了系统使用的关键技术,然后结合实际背景设计了系统的整体框架,接着从消息类型、数据结构和主从节点的处理流程三个方面详细剖析了系统的实现细节,最后通过实验进一步验证了系统设计的可行性。     

一种红外仿真图像数据流播放器设计与实现

现有光学仿真训练系统主要应用在可见光测量系统,而红外系统的仿真训练手段极为匮乏。为满足红外图像仿真需求,本文提出了一种基于FPGA和DSP技术实现的红外仿真图像高速实时数据流播放器设计,实现了高带宽、高帧频、高分辨率的红外图像流数据的实时输出,解决了仿真目标与真实背景融合的大数据量运算问题。在实际应用中,取得了较好的视觉效果和训练效果,具有广泛的应用价值。     

基于数据流分析与识别的Web资源访问控制

针对动态Web页面资源中的实施细粒度和透明访问控制问题,定义片断的概念,提出基于数据流分析的“片断”级Web页面资源的访问控制方法,分析数据流中的请求信息与响应片断的关系,设计并实现了2种数据流片断识别算法。模拟系统的实验结果证明,该方法能有效识别动态Web页面资源的片断,满足细粒度访问控制的需求。     

一种高效Web数据抽取包装器的设计与实现

Web包装器是根据特定的抽取规则从特定的Web数据源执行数据抽取程序,设计Web包装器是Web信息抽取和集成的关键技术.详细阐述了一种基于预定义模式的Web包装器的设计与实现过程,并选取了几个出版社的新书发布Web页面进行了数据抽取验证和抽取结果分析,取得了较好的效果.充分体现了此Web包装器的可行性、高效性及可维护性,能够应用在基于Wrapper/Mediator方法的Web数据集成.     

虚拟光盘库数据流服务器的设计与实现

文中通过分析虚拟光盘库的数据流服务器的功能，把数据流服务器划分为主控、管理、访问控制及数据Cache四大模块，具体阐述了每个模块的作用。在分析数据流服务过程基础上，重点研究了数据流服务系统设计与实现中的几个关键问题：用户访问数据流服务器的权限、流量、计费的方面的控制问题；在用户访问过程中超时处理技术；为提高数据流服务器的数据传输效率而采用的数据Cache技术。实验结果表明：虚拟光盘库具有较高的数据传输速率。