| 机器学习算法的网络大数据级应用实践 |
| |
| 引用本文： | 许春玲,范志刚,宋应文. 机器学习算法的网络大数据级应用实践[J]. 微计算机应用, 2012, 1(6): 63-69 |
| |
| 作者姓名： | 许春玲 范志刚 宋应文 |
| |
| 作者单位： | 中国科学院上海高等研究院 上海201210 |
| |
| 基金项目： | 中科院先导项目子课题：未来网络现网无扰验证技术及环境研究（子课题编号：XDA06010301）;中国科学院重点部署项目：NGB有线无线融合关键技术研究与应用示范一面向用户行为管理的智能搜索（子课题编号：KGZD-EW-103-2（1））;基金项目：中科学院百人计划择优支持;国家自然科学基金：辐射流体力学异构多核大型并行机的可扩展新型算法研究（项目编号：91130024）;上海市科委项目：GPU加速器高机能中间件（课题编号：11D1500400）;上海市科委项目：基于云计算的金融信息服务平台（课题编号12D1506600）. |
| |
| 摘 要： | 提出了基于hadoop平台的关于大数据级协同过滤推荐系统的一系列关键技术和实践.前期大数据处理平台hadoop的搭建,包括底层的硬件平台以及基于hadoop的数据处理工具；以基于物品的协同过滤推荐算法——slopeone算法为核心实现了协同过滤推荐并设计了整套实验流程,实验选择了一个具有代表性开放数据源作为处理对象,最后地实验结果给出了预测的均方根误差以及实验的耗时和数据量等指标.
|
| 关 键 词： | 大数据 hadoop 协同过滤 |
The Practice of Machine Learning Algorithms on Web Big Data |
| |
| XU Chunling , FAN Zhigang , SONG Yingwen. The Practice of Machine Learning Algorithms on Web Big Data[J]. Microcomputer Applications, 2012, 1(6): 63-69 |
| |
| Authors: | XU Chunling FAN Zhigang SONG Yingwen |
| |
| Affiliation: | (Chinese Academy of Sciences Shanghai Advanced Research Institute,Shanghai ,201210, China) |
| |
| Abstract: | This paper focus on the practice of a series of key technologies of implement a recommender system of collaborative filtering based on hadoop cluster. Fist we set up a hadoop cluster as platform for big data, include the hardware and the tools based on hadoop to process data;then we carry out an experiment as a recommender to process big data sets based on itembased list out of elapsed time and data size of evry step in the experiment. |
| |
| Keywords: | big data hadoop collaborative filtering |
| 本文献已被 维普 万方数据 等数据库收录！ |
