基于访问热点预测的油田大数据负载均衡研究

油田生产数据量巨大,而大数据在生产网络中反复流转给整个系统的稳定与性能带来了极大的压力.为解决这一问题,本文提出了基于访问热点预测的油田大数据负载均衡算法,该算法基于就近访问原则,通过测算大数据块在存储网络中的访问热点,将其部署在对应的服务器上,从而避免其反复在生产网络中生灭与流转.实地测试表明:该算法具有良好的存储负载均衡效能,能够节约大量的流量与存储开支,具有一定的实用价值.     

改进的云存储系统数据分布策略

针对当前云存储系统海量数据应用环境中数据分布策略可扩展性以及灵活性的不足,提出一种高效的数据分布策略。一方面,该策略基于一致性哈希数据分布算法,引入了虚拟化的设计思路,采用虚拟节点进行存储资源分配;另一方面,该策略采用了一种基于节点容量感知的负载均衡方法,有效地优化了系统性能,提高了系统可扩展性。通过实验分析,不管在同构还是异构的云存储架构中,该策略改善了存储资源负载均衡程度,有效优化了系统整体性能。     

基于数据分布一致性最小最大概率机

针对既包含有标记样本又包含未标记样本的分类数据,提出数据分布一致性原理,并将其融入到最小最大概率机中。把有标记样本和无标记样本映射到决策超平面所在空间（简称超空间）,通过最小化有标记样本和无标记样本在超空间的概率分布差异,充分利用无标签样本来修正最小最大概率机的误差,使得修正后的决策超平面更接近于真正的分类超平面。实验证明,数据分布一致性最小最大概率机（DCMPM）比最小最大概率机（MPM）具有更好的分类性能。     

基于超平面的块数据分布策略

文章提出了基于超平面的块数组分布策略.这是一种单向的数组分布方法,它以简单的方式有 效解决了不一致计算环境和不规则数组扫描情况下的数组分布问题.它可以作为对传统方法 的一个补充.更重要的是,此项工作为自动数据分布提供了一种思路.     

一种流媒体文件的分块放置方法

在研究了文件内部访问倾向性特征的基础上,提出了一种新型的流媒体文件分块放置策略．它能够有效消除流媒体访问倾向性对服务器性能的负面影响,提高流媒体服务器的服务能力．     

自适应的集群流媒体文件副本放置策略*

提出了资源负载的三种负载均衡状态,分析了这三种状态的均衡程度,并据此提出一种自适应的副本放置算法,成功地应用于集群VOD系统中,弹性地解决负载均衡与后端存储带宽的矛盾.通过仿真证明,该算法在不同数据量的情况下均具有很好的负载均衡性和优异的整体性能.     

一种基于反向代理的Web资源访问控制系统的设计

Web是信息发布的重要途径，如何保证Web资源在允许用户正常访问的同时不被恶意下载，是一件非常棘手的事情，作者设计的Web资源访问控制系统，采用反向代理技术，实现了对用户访问Web资源的控制，文章介绍了该系统的功能，模型与关键技术。     

学生网上选课系统中应对高峰访问的策略和实现

在实际项目案例中,针对多校区大规模学生选课系统存在的突发高峰访问,分析其存在问题,提出一系列应对突发高峰访问的策略及解决方案,并且根据项目现状,提出下一步应对突发高峰访问的策略,规划整个系统架构,探讨负载均衡的实现.     

基于资源约束的流媒体服务QoS策略

对于流媒体服务，端表现质量是衡量系统性能的关键指标。本文对流媒体服务瓶颈资源进行了分析并提出了基于资源约束的策略来保证端服务质量。通过仿真测试，验证了QoS策略的有效性。     

基于Nash-Pareto策略的自动数据分布方法及支持工具

大数据时代的来临为数据存储与管理提出了新的挑战.随着数据量的迅猛增加,自动数据分布逐渐成为分布式系统中的研究重点和难点.根据对数据分布问题中数据、负载和节点3个要素的研究和分析,将数据分布问题抽象为称为DaWN(data,workload,node)的三角模型,并将3要素之间的相互关联关系抽象为数据分片、数据分配和负载执行3条纽带;据此,提出了解决自动数据分布问题的基本架构,对各功能模块的协动关系进行探讨;同时,结合已有的研究工作,采用Nash-Pareto优化均衡策略使得前述各机制相得益彰,实验结果验证了其有效性.为使研究工作更多地应用于实践,设计并实现了自动数据分布辅助原型工具ADDvisor(automatic data distribution advisor),协同支持自动数据分布的执行,共同促进大规模分布式联机事务处理系统的并行性能和自动化管理技术的发展.     

基于流行度预测的流媒体代理缓存替换算法

针对流行度随时间变化的特性,利用回归分析技术给出了一种流媒体文件的流行度预测算法,并在增加少量存储空间及计算时间消耗的情况下,将该预测算法应用于流媒体代理缓存服务器的缓存替换算法之中,模拟实验表明,该方法能减少缓存的替换次数,提高缓存命中率,性能较优。     

基于多步下溢概率估计的自适应媒体播放算法

自适应播放(AMP)是一种通过动态调整播放速率减少这种中断的技术。多数AMP算法都基于缓存的满溢度或者其变化调整播放速率,其难点在于如何选择合适的调整门限值。本文算法,利用滑动窗口估计到达帧率的经验分布,再利用统计计算方法估计多步缓存下溢概率,然后根据一步和多步下溢概率调整播放速率。仿真实验证明在一般的信道假设和多种片源的测试中,本算法较其他同类算法有更好的表现。     

基于流媒体文件字节有用性的代理服务器缓存替代策略

将流媒体文件缓存到离用户最近的代理服务器上,能够减少广域网络带宽的消耗,减轻服务器的负载压力以及降低用户的始播延迟,文章关注代理服务器的缓存替代问题．通过对问题建立模型并分析后得到替代算法模型,提出了流媒体文件字节有用性的概念并反映到替代算法的设计之中,并提出了BB,BBLRU-K和BBLCB-K缓存替代算法,在与LRU-2,LFU,LCB-2和LRU等算法的性能模拟实验比较中,BBLCB-2算法性能最优,但BB算法简单有效。     

面向新媒体广播的云CDN系统

互联网用户的快速增长使得流媒体访问需求不断增加,庞大的流媒体访问需求和有限的服务器分发能力,造成了系统响应慢、用户体验下降等问题.针对以上问题,结合新媒体广播项目中流媒体分发的实际应用,提出了一种基于云计算的流媒体分发系统,主要利用云计算的分布式处理和CDN（Content Distributed Network）分发系统来使用户能够就近访问所需资源,在保证流媒体分发质量的同时提高分发速度,降低企业成本改善用户访问体验.本文主要阐述了面向新媒体广播的云CDN系统的总体框架和主要功能,具体介绍了借助于Hadoop实现的客户端测速技术以及基于用户访问行为的缓存策略.     

一种流媒体系统中文件存储分配算法

随着集群搭建的高性能计算中心快速发展,海量数据处理中CPU和内存的速度已经有了质的飞跃,但是I／O部分的速度仍是制约整个系统性能的瓶颈。本论文目的在于通过深入研究流媒体系统的特性,来提取出一种高效、均衡的文件存储分配策略,增大服务并行度并且减小服务延时。首先对媒体文件进行特征评估,然后通过存储调度器进行磁盘间的均衡性平摊,进而应用更细粒度的分划。做到每个磁盘内部的存储分布优化。仿真结果验证了算法的有效性,这样的分配策略可使盘间、盘内在数据组织上更为合理,有效的提高了并行服务能力,提供了更加迅捷的用户体验。。     

基于P2P流媒体分发技术的直播系统

针对流媒体直播系统流量对冲的问题,设计基于P2P流媒体分发技术的直播系统。该系统在现有内容分发网的基础上,将边缘服务器作为流媒体分发中心,采用用户身份验证和直接交互。实例证明该系统的播放启动延时小、流量均衡。     

基于流媒体技术的视频点播系统的研究

该文对基于流媒体技术的VOD系统进行分析,并介绍了数据压缩技术在VOD中的应用,最后谈了VOD发展现状和弊端,最后提出VOD未来的研究方向。     

基于C#的网络视频分发策略的研究

网络分发策略对于视频应用的服务质量起着至关重要的作用。本文在分析现有分发策略的基础上,提出了基于启发式视频媒体数据分发策略的思想,并给出了基于C#平台的启发式分发策略的算法描述。     

基于直接数据访问的并行文件系统

并行文件系统是高性能计算机为提高I／O带宽在软件方面采用的主要并行I/O技术之一。该文介绍了一种基于直接数据访问的并行文 件系统的设计和实现,阐明了该并行文件系统具备的主要功能及解决的关键技术问题。     

流媒体访问技术的探索与实践

如今,网络资源尤其是视频在教学中已经广泛应用,但常常出现一些影响教学的因素。本文采用一种基于实时协议的多媒体数据流并发服务控制模型,介绍了数据并发传送的调度控制,由实时协议的反馈机制动态调整控制参数,达到平滑时延的目的。最后通过对时延参数的测试,说明这一数据流控制方式的合理性,同时该方法也适用于网络视频的多点实时传输、网络多点实时监控,有较高的应用价值。