基于多agent强化学习的语义Web爬虫设计

Web的海量信息导致了搜索引擎的出现,同时,Web数据的迅速膨胀以及频繁的更新对搜索引擎提出了更高的要求,而并行搜索引擎可以提高抓取速度,并改善更新效率.语义Web是对未来Web的一个设想,语义Web的数据同传统Web一样面临着数据的膨胀更新问题.于是研究语义Web并行搜索引擎成了一个重要的研究方向.介绍了如何设计一个基本的面向语义Web的并行爬虫系统.该系统由一个中央控制器和若干个子爬虫组成.中央控制器负责为爬虫分配抓取任务,并汇总抓取的数据;子爬虫负责抓取并抽取URLs的工作.而对于每个子爬虫除了处理RDF文档之外,还试图从传统HTML网页中通过强化学习的方法发现更多RDF文档链接.     

智慧排水系统建设创新思考

结合目前城市排水系统现状,吸收国内外城市排水信息化建设的成熟案例和优秀经验,充分利用物联网、移动互联网、大数据、云计算、地理信息集成(GIS)、建筑信息建模技术(BIM)、人工智能等新一代信息技术,以大数据理念"、互联网+"思维建设一套城市智慧排水系统。本文主要介绍了智慧排水需求与建设目标,并分析了智慧排水的基础架构及在城市中的实际应用。     

基于Tableau的合肥市空气质量可视化分析

以"天气后报网"为数据源,通过现实情况验证数据准确性,利用Python爬虫技术,选用2014—2018年合肥市空气质量数据,基于Tableau软件对收集的空气质量数据进行了可视化分析。分别从空气质量指数、质量等级、空气质量预测三个方面对合肥市空气质量进行可视化分析和总结,揭示合肥市空气质量特征和未来空气质量发展趋势。     

爬虫技术下非法获取计算机信息系统数据罪与侵犯著作权罪的关系

【目的】研究非法获取计算机信息系统数据罪与侵犯著作权犯罪的区别与联系,在实现数据法益刑法保护的同时,让其与传统罪名良好衔接。【方法】通过对爬虫技术下非法获取计算机信息系统数据罪、侵犯著作权犯罪以及涉及两罪的相关案例进行实证研究,分析两罪保护的法益与其实行行为的差异,进而研究两罪关系。【结果】在司法实践中非法获取计算机信息系统数据罪与侵犯著作权罪不是非A即B的关系。【结论】将数据犯罪与传统犯罪区分是必然的,但不应将数据犯罪与传统犯罪相排斥,非法获取计算机信息系统数据罪与侵犯著作权罪可以数罪并罚。     

《互联网+时代浙江省物联网大数据应用技术发展前景及社会价值的实证研究》课题研究报告

本文从物联网大数据应用入手,论述了"互联网+"时代浙江省物联网大数据应用技术的发展现状;从互联网Web数据集成、物联网数据空间管理、物联网数据外包、移动互联网上的数据应用等角度分析了"互联网+"时代浙江省物联网大数据应用技术发展前景;简单探讨了"互联网+"时代浙江省物联网大数据应用技术的社会价值。最后进行了总结。     

网络安全协议SSL协议的分析及应用

<正>近来,随着互联网技术的发展,信息安全越来越引起人们的关注。安全套接层协议(Security Socket Layer Protocol,SSL)是针对该互联网上该问题进行保密通信的安全协议。SSL是对计算机之间整个会话进行加密的协议,采用了公开密钥和私有密钥两种加密方法。由于SSL的安全性,被广泛的应用于互联网上的数据传输应用中,如对信用卡和个人信息提供较强的保护,以及商家电子商务应用中。     

面向微博爬虫系统的分析

信息技术的快速发展使得互联网逐渐延伸到人们生活,对社会的每个方面都产生巨大的影响。最新调查显示,中国的网民数量已经位居全球第一,互联网用户入网户随时都在迅速递增。网络用户可以在网络上相互交流,畅所欲言,所以微博已经成为了虚拟"公共话语空间",是所有网络用户都能参与的新兴交流平台。微博爬虫系统的分析对抓取分析微博上的信息有重要意义。     

网络安全协议SSL协议的分析及应用

近来,随着互联网技术的发展,信息安全越来越引起人们的关注.安全套接层协议(Security Socket Layer Protocol,SSL)是针对该互联网上该问题进行保密通信的安全协议.SSL是对计算机之间整个会话进行加密的协议,采用了公开密钥和私有密钥两种加密方法.由于SSL的安全性,被广泛的应用于互联网上的数据传输应用中,如对信用卡和个人信息提供较强的保护,以及商家电子商务应用中.     

基于问卷星的新生报到系统设计与实现——以唐山工业职业技术学院为例

在"互联网+"大背景下,各高校都在加紧创建数字化校园,而每年新生报到工作是对其建设成果的一次很好的检验。随着近年来招生规模不断加大,迎新工作的投入也随之增多。唐山工业职业技术学院设计了基于问卷星的新生报到系统,通过移动端扫描系统生成的二维码,实现个人信息统计及宿舍查询,有效减少了人员及经费投入,提高了报到效率,为全面建成数字化校园打下了坚实的基础。     

大数据技术在互联网中的应用

随着新一代信息技术的融合发展,现在社会迈进了大数据时代。本文从大数据的概念、应用领域、来源、特征和所面临的问题等方面对大数据技术在互联网中的应用进行研究,以期让科技更好地服务于人们的生活。     

大数据时代监控环境下的用户信息安全保护

随着数字通信、移动互联、大数据处理等新兴技术的飞速发展,对网络用户个人信息及隐私侵害的行为、途径以及手法也多种多样。其中,最常见的是通过构建监控环境,对普通网络用户进行监控、追踪甚至窃听,截取海量数据,进行分析、计算、筛选、整理甚至预测,以获取用户私密信息。     

基于Node.JS的轻量级定向爬虫算法的设计与应用

首先介绍了网络爬虫的定义,给出其分类及工作原理,最后在介绍垂直爬虫Web magic框架的基础上,设计并实现了基于Node.JS的轻量级网络爬虫,并应用于交通应急网站新闻抓取模块,效果较好.     

互联网技术在城市规划中的应用

城市规划对城市建设具有重要作用。在城市建设前期,通过城市规划对城市总体建设作出科学布局,并在此基础上进行城市建设能有效保障城市建设的一体性和科学性。随着科学技术的发展,各种新的技术开始被用于各个行业中,其中表现最为突出的就是互联网技术。互联网+时代的到来标志着网络已经实现了大众化发展趋势,其在实际生活中的运用已然十分普遍,并且为人们的生活带来了很多便利,互联网技术在社会发展中所起到的作用是任何技术都无法取代的。互联网在城市规划中的应用,对于推进城市整体规划科学性发展以及完善城市布局具有重要意义。由此,本文就城市规划中互联网技术的应用进行探讨。     

互联网流量监控技术的应用

现阶段,大量的数据信息导致了互联网的流量呈数十倍的增长。这种急剧的增长给我们在互联网的使用上带来了很多不利的影响。本文以互联网流量监控技术为题,分析了互联网流量快速增长的原因,并引出了流量监控的重要意义。从互联网的识别方式,到具体的流量监控与疏堵技术系统的应用过程,本文都做了具体的介绍。     

基于大数据的生鲜配送平台后台系统的设计与实现

【目的】互联网大数据技术的迅猛发展使各行各业的通信变得非常便捷，应用互联网大数据技术能有效提高工作效率。在生鲜行业，传统生鲜配送存在物流环节复杂、存储成本高、时效性差等问题，如何解决这些问题已迫在眉睫。【方法】将互联网大数据技术应用于生鲜行业，构建一个安全性高、数据透明、能解决生鲜配送难点的平台。【结果】针对传统生鲜产品生产营销模式存在的问题，基于前沿技术，从安全性强、功能完善、易于维护等方面探索基于大数据生鲜配送平台的后台系统设计与实现方法。【结论】构建的平台能有效解决维护难、技术落后、开发维护周期长的问题。     

MATLAB双语教学个性化作业设计与实现

为了克服MATLAB双语教学过程中学生学习的枯燥和单调性问题,设计了一款可用于整个课程的作业案例.本案例利用学生的个人信息(照片和学号),让学生在设计具有个性的图形用户接口过程中,体会到其中的乐趣,从而有效地提高教学质量,并在一定程度上杜绝代码复制问题.教学实践表明,该方法能够收到更好的教学效果.     

基于快递运输中隐私单面的加密研究

目前快递行业在快递管理、配送的过程中,客户的个人信息处于完全暴露的状态下,导致不法分子有机会获取个人信息并进一步实施违法行为,针对这一现象提出关于快递运输中隐私单面加密的研究.现有应用技术对于信息加密有一定的保护性,但其对于信息的保护不够全面和有效,还存在信息泄露等隐患.这就需要设计一种利用云端信息储存、信息加密及部分信息下载的信息保密机制,对物流过程中的信息进行加密及部分信息处理,因此设计物流过程中二维码信息加密、等级权限处理机制至关重要.云端信息储存技术具有加密性良好,信息传递高效、快速的特点,这一设计旨在解决物流信息加密与物流过程中物流信息不同步保密的矛盾,实现了个人信息隐私加密保护,确保了客户个人信息的安全性,其方法及思路可以推广用于其它信息加密处理领域.     

大数据处理与挖掘在智能交通系统中的应用

当前,互联网及通信技术的广泛应用为智能交通系统提供了大量的实时数据,亟需对其进行管理、交换、译制、汇聚和分析研判。互联网及通信技术大大提高了智能交通系统的用户友好度及有效性,提供了可观的经济和社会影响。在物联网和云技术的大背景下,软件架构的需求和智能交通系统新特性需要真实的应用场景来推导。本文主要阐述大数据处理与挖掘技术的应用对智能交通系统所产生的有利影响,并指出智能交通系统下大数据挖掘和处理领域新的工作方向。     

基于光纤以太网的纵联保护通信方案

根据纵联保护通信的基本要求,对光纤以太网通信所涉及的数据建模、服务数据及通讯网络技术进行分析探讨,提出纵联保护信息通讯的最佳模式。该方案是在总结了大量工作案例经验的基础上制定出来的,结合了各项数据信息,使用此方案,可以满足纵联保护对通信实时性和稳定性的要求。     

基于GPRS的远程控制系统方案设计

<正>一、GPRS简介GPRS是通用分组无线服务技术(General Packet Radio Service)的简称,它利用现有的GSM网络,以分组数据包的方式进行数据传送。相对于GSM拨号网络而言,它不仅在数据流量上有了很大的提高,而且不占用通信连接,且能保持"永远在线",因此成为移动互联网、互联网的宠儿