基于ProActive的P-Spider1.0改进

针对带中心节点结构的分布式并行Web Spider的中心节点负担过重、通信负载不均衡、可扩展性差的问题,提出基于Rabin指纹算法的URL去重改进算法和节点对等结构的改进方案,利用ProActive中间件设计开发改进的分布式并行Web Spider。对比实验表明,改进后的Web Spider采集效率更高,通信负载均衡,无节点瓶颈问题,具有良好的可扩展性。     

节点对等WebSpider设计与实现

由于互联网具有海量信息并且快速增长,提高搜索引擎的信息采集器WebSpider的数据采集和更新速度有重要意义。受计算资源限制,单机多线程WebSpider的采集速率不高。带中心节点的分布式并行webSpider又容易产生中心节点瓶颈问题。利用ProActive网格网络并行分布计算中间件提供的主动对象技术、网络并行计算技术、自动部署机制等设计和实现了一个名为P—Spider2．0的节点对等的分布式并行WebSpider,并设计了一个基于Raibin算法的URL去重算法。实验表明该WebSpider方便管理和部署,并且比单机多线程webSpider具有更高的采集速率。     

异构机群系统上并行计算双序列的最长公共子序列*

针对处理机节点具有不同计算速度、不同通信能力的情况,考虑计算和通信启动开销,给定处理机分配顺序,基于可分负载理论,提出一种存储受限异构机群系统的序列串最优分配线性规划模型,给出相应的序列串最优分配方法。实验结果表明,基于最优序列串分配方法的双序列最长公共子序列并行算法优于平均分配序列串算法,获得了较好的加速,并具有良好的可扩展性。     

土木工程现代与未来的发展和特点

土木工程可以说是一种文明，随着社会的产生而产生，当今的土木工程已经得到了一定的发展。土木工程是不可缺少的存在形式，未来的生活中更会得到大力的发展。以满足人们更多的需求。     

基于Rabin指纹方法的URL去重算法

针对现有URL检索算法占用存储空间较大,对重复率高的URL集合检索速度较慢,使Web Spider的效率降低的问题,提出了一种改进的URL去重算法.此算法基于Rabin指纹方法,以URL的指纹为地址,仅用一位数据标识一条URL,每次检索仅需对相应的一位数据的值做一次判断.实验表明,该算法能有效去除URL集合中重复的URL.提高检索速度.     

基于ProActive的分布式并行Web Spider设计

单机Web Spider的数据采集速度较慢,采用MPI技术或直接用Java开发分布式Web Spider代价较高。该文利用ProActive中间件提供的主动对象技术、网络并行计算技术、自动部署机制设计实现了P-Spider分布式并行Web Spider。实验结果表明,该P-Spider采集速率是单机多线程Web Spider的2.2倍。     

佛山：卫星城市零售商夹缝求生存

佛山是典型的卫星城,尤其在2010年广佛地铁(国内第一条连接两座城市的地铁)通车后,佛山到广州仅需半小时。这样看来,佛山的IT市场地位略显尴尬,一方面佛山受广州的辐射影响将越来越大;另一方面乡镇的电脑市场逐步规范,本地服务的优势也能吸引一部分用户。一个问题必须思考,夹缝     

佛山：卫星城市零售商夹缝求生存

佛山是典型的卫星城，尤其在2010年广佛地铁（国内第一条连接两座城市的地铁）通车后，佛山到广州仅需半小时。这样看来，佛山的IT市场地位略显尴尬，一方面佛山受广州的辐射影响将越来越大；另一方面乡镇的电脑市场逐步规范，本地服务的优势也能吸引一部分用户。一个问题必须思考，夹缝中的零售商如何生存？     

节点对等Web Spider设计与实现

由于互联网具有海量信息并且快速增长,提高搜索引擎的信息采集器WebSpider的数据采集和更新速度有重要意义。受计算资源限制,单机多线程WebSpider的采集速率不高。带中心节点的分布式并行webSpider又容易产生中心节点瓶颈问题。利用ProActive网格网络并行分布计算中间件提供的主动对象技术、网络并行计算技术、自动部署机制等设计和实现了一个名为P—Spider2．0的节点对等的分布式并行WebSpider,并设计了一个基于Raibin算法的URL去重算法。实验表明该WebSpider方便管理和部署,并且比单机多线程webSpider具有更高的采集速率。