可扩展负载均衡Spider的设计

随着Web信息的快速增长,如何对Web信息进行检索,获取有价值的信息,已经成为Web信息检索的重点研究内容.本文设计一种可扩展的蜘蛛程序Spider,运用负栽均衡策略调度分布Spider的协同工作,实现Web站点页面的分布式下载,在获取页面信息的同时,获取站点的拓扑结构.     

高速网络自适应负载均衡技术的实现

Gbit网络的出现,其规模和速度都给网络处理带来了新的挑战。高速网络处理技术的困难是处理速度与网络速度的匹配,而负载均衡技术能够解决这个困难。目前的研究都在NP上实现,硬件要求较高。本文提出一种软件方案实现网络处理的负载均衡,实践证明该方案性能良好。     

中间件负载均衡的模型和实现

由于客户机访问服务器的随机性,中间件服务器负载不均衡的现象时有发生,所以负载均衡是提高三层系统效率的重要手段.文中介绍了中间件负载均衡的原理,提出了两种中间件负载均衡的实现模型,并且评价了这两种模型的性能,指出了各自的优越点与适用范围,最后给出了基于COM+的的实现方法与关键技术.     

分布式ETL负载均衡策略研究

在分析分布式ETL中负载均衡重要性的基础上,针对传统ETL应用于分布式数据仓库中效率低的缺陷,提出一种根据ETL节点所抽取的数据类型不同对分布式ETL节点抽取的数据进行分割的策略,以及一种新的负载均衡模型—链网模型和Routers相结合的R-CN模型。在此基础上提出一种基于ETL数据分片和R-CN模型相结合的分布式ETL节点负载调度和均衡策略。此策略使ETL节点的数据处理能力有了很大的提高,有效地提高了分布式ETL的效率。     

中间件负载均衡的模型和实现

由于客户机访问服务器的随机性,中间件服务器负载不均衡的现象时有发生,所以负载均衡是提高三层系统效率的重要手段。文中介绍了中间件负载均衡的原理,提出了两种中间件负载均衡的实现模型,并且评价了这两种模型的性能,指出了各自的优越点与适用范围,最后给出了基于COM 的的实现方法与关键技术。     

高速网络自适应负载均衡技术的实现

Gbit网络的出现,其规模和速度都给网络处理带来了新的挑战.高速网络处理技术的困难是处理速度与网络速度的匹配,而负载均衡技术能够解决这个困难.目前的研究都在NP上实现,硬件要求较高.本文提出一种软件方案实现网络处理的负载均衡,实践证明该方案性能良好.     

网络负载均衡策略的研究与应用

1 引言目前,无论是对企业内部网、校园网还是对互联网服务运营商如ISP、ICP、IDC等,新的应用和服务层出不穷,使得IP网络的数据流量剧增,尤其是对网络的各个核心部分,都提出了越来越高的性能要求。如何提供一种廉价、有效的方法来扩展服务器带宽及增加其吞吐量,加强网络数据处理的能力,提高IP网络的灵活性和可用性的问题就摆在了我们面前。在现在的IP网络中,网络的数据流量分布并不均匀,例如,电子商务网站属于计算集中型的应用,服务器计算负荷会很大;网络中的数据库服务属于读写频繁的应用,存储系统的压力比较大;网络中的视频服务属于传输量大的应用,数据在     

EJB集群系统负载均衡策略的研究与实现

分析了常用EJB集群系统的设计方法与负载均衡算法,设计了一种软件Proxy系统,并针对常用算法的不足提出了一种基于BP神经网络的负载均衡算法。该算法具有较强学习能力、容错性强和自适应能力强的特点。仿真实验证明,基于该算法的集群系统具有较好的适应能力和伸缩性。     

基于退火策略的分布式资源负载均衡算法

针对分布式资源导致的访问热点等一系列问题,建立了一个用于分布式资源退火的处理模型.根据该模型,提出了基于退火策略的分布式资源负载均衡算法;该算法通过访问分类、定向扩散等方法提高了系统性能.性能及试验分析表明,该算法能够减少系统内部通信量,抑制资源扩散的抖动现象等.     

OpenFlow网络中控制器负载均衡策略研究

控制器是软件定义网络(SDN)的核心,控制平面的可用性、可扩展性对SDN至关重要。本文首先提出了一种基于角色的分布式控制平面,并在此架构下,提出了一种交换机迁移的控制器负载均衡策略,从而解决控制平面可扩展性问题。     

分布式多线程Spider的设计与实现

搜索引擎已经是当今从浩瀚的同上资源获取信息的最快最方便的工具,因此也已成为计算机工业界和学术界争相研究、开发的对象.Spider是搜索引擎的核心模块,通过设计一个分布式多线程Spider系统,在实验中得到较好的测试结果.     

抢先式多线程Spider在智能搜索引擎中的实现

互联网的迅速发展,导致了网上信息的爆炸性增长.智能搜索引擎技术已经成为计算机工业界和学术界争相研究、开发的对象.文章在分析网络蜘蛛的工作原理的基础上,结合多线程、类的设计等技术,设计了一种抢先式多线程的Spider程序,并给出了该系统运行的结果.     

节点对等WebSpider设计与实现

由于互联网具有海量信息并且快速增长,提高搜索引擎的信息采集器WebSpider的数据采集和更新速度有重要意义。受计算资源限制,单机多线程WebSpider的采集速率不高。带中心节点的分布式并行webSpider又容易产生中心节点瓶颈问题。利用ProActive网格网络并行分布计算中间件提供的主动对象技术、网络并行计算技术、自动部署机制等设计和实现了一个名为P—Spider2．0的节点对等的分布式并行WebSpider,并设计了一个基于Raibin算法的URL去重算法。实验表明该WebSpider方便管理和部署,并且比单机多线程webSpider具有更高的采集速率。     

基于ProActive的分布式并行Web Spider设计

单机Web Spider的数据采集速度较慢,采用MPI技术或直接用Java开发分布式Web Spider代价较高。该文利用ProActive中间件提供的主动对象技术、网络并行计算技术、自动部署机制设计实现了P-Spider分布式并行Web Spider。实验结果表明,该P-Spider采集速率是单机多线程Web Spider的2.2倍。     

一种基于实现仓库的负载均衡模型

分析了已有的CORBA负载均衡模型,提出了一种基于实现仓库的新的模型,该模型不仅可以通过请求重定向实现负载均衡,而且还通过对象和服务程序迁移降低结点的负载。     

基于"网络蜘蛛原理"的搜索引擎技术剖析

主要介绍网络蜘蛛的基本原理及相关技术.     

无线传感网络能量有效负载均衡的多路径路由策略

由于无线传感网络中网络节点的能量受限性,路由成为最受关注的问题.鉴于多路径传输既要考虑能量节约,又要考虑负载均衡,提出了一种新型能量有效负载均衡的多路径路由算法.该算法综合考虑了路径的跳数、节点剩余能量和网络的能量状况,数据沿着最小跳数或路径关键能量比较高的路径传输,降低了网络的能量消耗,也避免关键节点的过量负载.实验结果验证了和传统的AODV算法相比该算法在分组投递率、端到端时延和死亡节点出现的数量方面的优势.     

大规模用户登录服务的负载平衡实现

PASNMP协议和LDAP目录服务为基础,利用DNS服务对用户请求进行调度,该文提出了一套符合本地实际情况的大最用户登录的解决方案,并实现了一个完整的登录调度系统,很好地解决了集群、网格环境下的大量用户登录的负载平衡问题。