计算机网络语音交互技术

介绍了一种在校园网上实现语音交互（“网络电话”功能)的方法。具体介招了VC 对音频处理的支持,以及实现谈话权自动切换的技术。     

Windows环境下的立体视频测试平台技术

介绍了在Windows环境下利用双USB摄像头捕获立体图像和立体视频,自定义立体视频文件,并基于OpenGL进行立体视频显示,从而快速构造起一个立体视频的集成测试平台.它简单易行,且成本低,可很容易地集成到立体视频的应用系统中.     

手机视频监控系统及其性能

系统分为服务器、现场终端、用户终端3个组成部分,各部分之间采用TCP/IP进行互连,特别介绍了现场终端的实现、手机软件中GPRS通信链路的建立、视频显示技术以及流量控制方法.测试数据表明,在现有GPRS数据速率条件下,对于MPEG-4编解码算法以及QCIF画面大小,帧速率能够达到11 f/s(帧/秒),且视频质量可以接受.     

运动视频对象分割的一种快速算法

为了能够实时地对运动视频对象进行分割,提出了一种对视频序列图象中的运动对象进行快速分割提取的算法,该算法首先对图象进行滤波,并求出连续两帧图象之间的差分,然后应用“同化填充”技术和基于对象的“整体运动估计”来对差分图象进行修正,进而得到对象模板,同时利用模板缓冲区的帧间迭代来维持模板的完整性,该算法不仅不依赖于固定背景,而且能够消除差分图中的显露背景,还能得到运动目标较为精确的形状,并且算法简单,快速,鲁棒性好。     

由嘴唇视频直接生成语音的研究

为了更便捷地实现唇声转换,提出了一种由嘴唇视频直接生成语音的方法,并对相关问题进行了研究。首先同步地计算视频文件中的嘴唇运动特征和对应的LPC10话音编码参数,然后借助LSTM人工神经网络进行端到端的训练。训练后的网络模型可以将嘴唇运动特征映射为语音编码参数,再采用语音合成技术将语音编码参数转换成可以播放的语音样值数据。该方法跳过了中间的文字环节,因此称为直接生成,具有可方便地得到训练样本、无须人工标注的优点,同时也可以避免文本重建语音方法中存在的发音歧义。测试结果表明,在词汇量有限的应用情境中,该方法可以由嘴唇视频重建较为清晰可懂的语音。     

基于Web服务的传感器网络和Internet集成(英文)

随着无线传感器网络的迅速发展和广泛应用,如何把传感器网络和应用系统通过Internet连接在一起就成了一个必须面对的挑战,SOA的软件体系结构是解决这一问题的有效方法.将无线传感器网络的访问封装成Web服务,通过服务注册和服务发现,应用程序可以通过HTTP发现,绑定和调用这些服务.通过定义一些核心服务和辅助服务,传感器网络可以很容易地集成到应用系统中.通过讨论这些核心服务和辅助服务及其实现,典型应用场景的介绍,证明了这种方法的有效性.     

基于STM32和SIM900A的无线通信模块设计与实现

针对厂方提出的设计一个可以实现短信收发与数据无线传榆的模块的要求,本文采用了ARM Cortex-M3内核的主流产品STM32作为主控芯片,采用SIMCom公司的SIM900A作为通信芯片.在查阅大量相关文献以及相关芯片的数据手册之后,本文设计了一个远程无线通信模块.该模块在实验室试运行一周后,没有出现摔线的情况,数据收发的速度也很快.该模块具有性能稳定,外形小巧,性价比高等优点.厂方投入使用之后,反应良好.     

改进的三维人体姿态估计算法

针对目前三维人体姿态由于遮挡、姿态复杂等预测不准确的问题,提出了一种改进的三维人体姿态估计算法以获得准确的三维人体姿态,提高人体姿态估计性能.本文采用时空图注意力卷积网络中的图注意力块来构建整个网络,在此基础上对全局多头图注意力部分的网络结构进行改进,使节点间更好传播和融合信息,捕获图中没有显式表示的语义信息.同时引入运动学约束,在MPJPE损失的基础上,加上骨骼长度损失.通过对局部和全局的空间节点信息建模,实现对局部运动学连接、对称性和全局姿态的人体骨骼运动学约束的学习.通过实验证明,本文改进后的模型有效地提高了人体姿态估计性能,在Human3.6M数据集上相较于原始模型,实现了1.8%的平均关节位置误差(MPJPE)提升和1.3%的预测关节与真值关节刚性对齐后的平均关节位置误差(P-MPJPE)提升.     

基于CISSA的冗余机械臂逆运动学求解

基于冗余机械臂在求逆解过程中无法获得封闭解的问题，针对性地提出了综合改进麻雀搜索算法(CISSA)。首先，在初始化过程中对算法中的种群进行混沌处理，增加种群的丰富度；其次，将自适应动态权重融入到探索者的位置更新公式以及种群中探索者与追随者的数量中，提高算法快速收敛的能力；同时，在迭代过程中引进柯西变异和Tent混沌扰动，提升算法的抗停滞能力；对于越界的个体处理后重新放入种群中，提升算法性能。CISSA在多项指标上明显优于PSO、WOA和GWO等传统群智能算法；将CISSA应用到冗余机械臂逆运动求解，在算法精度上较SSA提高了2～3个数量级，在算法稳定性上较SSA提高了3～4个数量级，说明了CISSA在实际应用的过程中，有收敛快、精度高、稳定性好的特点。