动态环境中的分层强化学习

现有的强化学习方法都不能很好地处理动态环境中的学习问题,当环境变化时需要重新学习最优策略,若环境变化的时间间隔小于策略收敛时间,学习算法则不能收敛.本文在Option分层强化学习方法的基础上提出一种适应动态环境的分层强化学习方法,该方法利用学习的分层特性,仅关注分层任务子目标状态及当前Option内部环境状态的变化,将策略更新过程限制在规模较小的局部空间或维数较低的高层空间上,从而加快学习速度.以二维动态栅格空间内两点间最短路径规划为背景进行了仿真实验,实验结果表明,该方法策略学习速度明显高于以往的方法,且学习算法收敛性对环境变化频率的依赖性有所降低.     

隧道掘进聚能水压光面爆破新技术与应用

为了解决成兰铁路金瓶岩隧道出现围岩扰动和隧道超挖的问题,采用聚能水压光面爆破技术。在实施该技术的过程中,根据聚能水压光面爆破技术原理、聚能装置装药和装填技术的要点,严格执行每一操作步骤,并结合隧道掘进工程实践进行现场写实记录。然后将写实记录结果与常规光面爆破进行技术、经济效果对比分析,效果明显。即新技术成型效果好,造孔率减少了50%,又节约了爆破材料,降低施工成本,提高了劳动生产率。该项技术有助于实现隧道开挖"精细化"和"绿色施工",对类似工程具有一定的参考价值。     

不完备决策表的知识约简算法研究

知识约简是祖糙集理论处理信息系统的重要手段,本文首先给出了不完备信息系统的相关概念和定义,提出了不完备决策表的一种知识约简算法．实例计算结果证明了算法的可行性。     

催化燃烧式瓦斯传感器技术研究进展

首先分析了催化燃烧式瓦斯传感器的工作原理,然后综述了催化燃烧式瓦斯传感器的标定与补偿技术现状,最后指出,综合考虑催化燃烧式瓦斯传感器的稳定性和一致性,探索研究在初始不一致和工作过程不稳定的双重作用下,传感器数据的变化规律,通过智能信息处理的方法予以动态补偿,将是下一步需要研究的主要方向。     

自动化制造系统的产生与发展

探讨了自动化与制造业的产生和互促发展过程,论述了自动化制造系统的形成和不同发展阶段的内涵及重大作用,指出自动化技术与制造技术是驱动自动化制造系统发展的两个轮子,不能忽视任何一个侧面,自动化研究与制造技术研究相结合是发展先进制造技术的必由之路。     

利用ASP技术开发基于Web的电话号码查询系统

利用ＡＳＰ技术开发出了一个基于ＷＥＢ的电话号码查询系统,介绍了ＡＳＰ技术的基础原理及系统开发中解决的主要问题。     

从悉尼大学看澳洲的本科办学特色

笔者根据对澳大利亚悉尼大学的了解,从课程设置和人才培养、教师教学方式和学生学习方式、校园文化、商业化倾向等几个方面介绍了澳大利亚本科阶段的办学特色,并指出了值得学习和借鉴之处。     

用科学发展观指导研究生培养方案的修订

本文以科学发展观为出发点和指导,提出了在修订研究生培养方案中坚持科学发展的注意事项,并介绍了我院的一些具体做法。     

如何在Unix系统上实现Sybase数据库的自动备份和远程备份

分析了制定数据库备份策略应当考虑的几种因素,举例说明在Unix系统上实现Sybase数据库自动备份的原理,介绍了Sybase数据库远程备份的原理及步骤。     

数域筛法中线性代数的硬件设计*

近来,针对数域筛法分解大数算法中线性代数步骤提出了几种硬件设计方案。对这些硬件设计,总结了其实现思想,描述了具体实现过程,分析了它们的优缺点,给出了实现费用和时间。随着设计的不断更新和完善,硬件设计的可行性不断提高,“费用×时间”函数不断降低,但是上升到具体实现仍有待于更深入的研究。