新型的Web使用挖掘数据预处理方法

大数据背景下,Web使用挖掘的目的是通过识别Web数据使用模式更好地为Web应用需求提供服务,高效地处理大数据并从中找到有用的信息,数据预处理是保证Web使用挖掘数据质量的必要阶段。首先,论述了Web使用挖掘数据预处理领域的相关工作;其次提出了在数据挖掘开始之前的接入流数据预处理技术,这项技术能通过识别单独用户和会话来提高数据预处理的性能;最后进行了实验验证。结果表明,文中方法有助于发现来自于用户数据流的有意义的模式和关系,因此具有可行性和有效性。     

应急通信监控系统中的数据预处理方法

数据预处理是监控系统所有工作中重要的一环，预处理的效果影响应急通信系统的维护。本文根据应急通信监控系统自身的特性，提出相应的数据预处理方法。     

多传感器数据融合中的数据预处理技术研究

数据预处理是进行多传感器数据融合的基础,也是多传感数据无误差坐标转换的必不可少的处理过程.阐述了数据空间对准技术和时间对准技术,介绍了基于该方法的技术在实际应用中取得的效果,提高了融合数据的一致性、准确性和可靠性.     

多雷达数据融合中的数据预处理

多雷达数据融合的数据来自不同的雷达,在融合处理前要作相应的处理,如点迹过滤、点迹合并、野值剔除、空间对准、时间对准等等,本文就这些问题作一些讨论.     

示例学习的数据预处理

在各种学习方法中,示例式学习被看作是自动建立基于知识的系统的关键,数据预处理是示例学习的一个重要步骤。本文介绍了预处理的两个算法,解决了小内存处理大数据的问题,     

导弹遥测数据预处理方法研究

数据预处理是导弹遥测数据处理工作的重要环节,文中对数据预处理的方法和过程进行系统阐述和研究,给出工程实践方法,并根据试验任务需求制定相应的判定准则和计算公式,大量试验应用证明,这些方法简单易行、可靠性高,为导弹遥测数据处理奠定了基础。     

基于数据挖掘的图书馆数据预处理方法研究

通过挖掘高校图书馆大量的借阅历史数据,从中提取出切实有用的信息及有效的借阅规则,可为读者提供个性化的推荐服务,进而提高图书馆馆藏图书的流通率。但是,高校图书馆数据具有类型复杂、数据量庞大、冗余值较多等特点,很大程度上影响了挖掘效率。因此,在对图书馆数据挖掘之前,先对这些数据进行预处理,就可很好地解决挖掘效率问题。本文结合内蒙古工业大学图书馆一段时间的流通数据,借助SQL Server2012数据库管理工具,详细研究了基于数据挖掘的数据清洗、数据转换和数据规约3种图书馆数据的预处理方法。     

基于ARIMA模型的数据预处理技术研究

时间序列处理的精确性是影响现代工业控制系统发展的重要因素之一。数据预处理是时间序列处理的基础,它通过异常值辨识与修正、缺省值补充等工作,改进数据质量进一步的处理提供较为精确的目标数据和必要信息。由于工业生产过程中的时间序列多是非平稳序列,经典的平稳模型和回归分析不再适用。因此,本文通过建立ARIMA模型对时间序列进行预处理,并最终得到了较为精确的数据拟合信息。     

牛奶成分近红外光谱数据的预处理研究

本文介绍了预处理方法在近红外光谱数据处理中的应用,并以牛奶为例探讨了具体的预处理参数．牛奶中脂肪和蛋白质含量的预测偏差为0．1g/dl～0．3g/dl,测量值与浓度参考值有良好的相关性．结果表明,数据预处理方法在模型优化中具有重要作用,对牛奶模型的建立有重要的参考价值。     

基于分层聚类的并行数据预处理算法

分层聚类技术在图像处理、入侵检测和生物信息学等方面有着极为重要的应用,是数据挖掘领域的研究热点之一。针对目前并行分层聚类算法处理大数据集时速度较慢的特点,提出一种并行数据预处理算法,该算法可使原始输入数据的规模最多减少为原来的1/10,从而可减少总的并行分层聚类时间。在测试数据集上的实验结果表明使用本算法进行预处理后,能显著减少分层聚类的运行时间。     

Web日志挖掘数据预处理研究

数据预处理在Web日志挖掘过程中起着至关重要的作用.论文分析了Web日志挖掘数据预处理的主要步骤,设计了用户识别、访问操作识别和路径完善三个步骤的关键算法.实验结果表明,设计的关键算法是有效的.     

Web日志数据挖掘中数据预处理模型的研究与建立

数据的质量直的好坏接关系到数据挖掘的结果,因此数据预处理是Web日志数据挖掘首要的步骤,基于前期提出的几种数据预处理方法,提出了通用的Web日志挖掘的数据预处理模型,将Web日志数据的预处理分为5个步骤:数据清理、用户标识、会话标识、路径补充和格式化,并结合旅游网站进行了实例验证。证明该数据预处理模型是完全可行,并且具有良好的通用性和可扩展性。     

FBG传感器微弱信号预处理

针对光纤Bragg光栅(FBG)传感器微弱信号,设计了一种具有电流电压转换,多级放大和滤波功能的低噪声光电信号预处理电路。仿真实验表明,该电路具有增益大、信噪比大、灵敏度高等特点,满足FBG传感系统的要求,可实现nW级微弱光信号检测。     

一种无人飞行器监控数据预处理方法

阐述了对无人飞行器进行监控的必要性和重要意义,设计了一种无人飞行器监控数据预处理流程。首先采用空间对准算法将各传感器数据统一到空管系统坐标系下。然后根据无人飞行器的运动特点提出了基于改进“当前”统计模型的自适应卡尔曼目标滤波算法对航迹数据进行平滑滤波,该算法根据滤波新息的变化自适应调整机动频率,仿真表明改进后的算法能够实现对目标更为精确的跟踪。之后对航迹数据中的野值进行了判别和剔除。最后规范统一了各传感器的数据帧格式,实现了对监控数据进行预处理的目的。     

复杂背景下立体图像的预处理和数据净化

面向具有复杂背景的立体图像分析，针对其中的图像预处理和数据净化问题进行研究，提出了一套用于提取图像中目标区域的算法。实验结果证明，该算法能快速、有效地消除立体图像中的无用背景信息，降低图像数据的冗余，对提高后续分析的速度及结果精度有帮助。     

信息系统中的数据集成方法研究与应用

针对数据集成问题,在分析了目前数据集成方法的基础上,结合了Excel的特点,提出了一种适合于中小型企业的异构数据转换体系结构.详细介绍了此集成方法的思路和具体实现模型,并将其应用于实际项目中.     

基于Web2.0的数据集成系统的设计与实现

为了丰富原有的语料库,以满足自然语言理解与处理研究所需,根据对基于Web 2.0的数据源的分析,设计并实现了一个可扩展的基于Web 2.0的数据发布与集成系统.该系统采用B/S模式,以用户参与发布的信息为数据来源,综合应用Ajax等先进的Web技术,集成了自然语言理解研究所需数据,具有良好的性能和应用价值,为相关领域的研究和应用提供了参考.     

基于小波分析的迎角传感器信号预处理

针对基于四象限压力传感器阵列的迎角测量方法中,传感器信号受到干扰的问题,讨论了在其预处理中应用小波变换进行信号分离提取的方法.根据小波分解理论,对信号进行多尺度的小波变换,信号中频率不同的部分落在不同的尺度上,剔除反映干扰的小波变换尺度,提取出有用信息.结果表明,该方法可较好地提取信号的主要特征信息,有效的去除了确定性干扰和随机噪声,与传统的信号滤波方法相比较具有明显的优点,同时为后续的信号处理奠定了基础.