(转载请注明出处:http://blog.csdn.net/buptgshengod)

1.背景

      协同过滤(collaborative filtering)是推荐系统经常使用的一种方法。cf的主要思想就是找出物品类似度高的归为一类进行推荐。cf又分为icf和ucf。

icf指的是item collaborative filtering,是将商品进行分析推荐。同理ucf的u指的是user,他是找出知趣类似的人,进行推荐。

通常来讲icf的准确率可能会高一些。通过这次參加天猫大数据比赛。我认为仅仅有在数据量很庞大的时候才适合用cf,假设数据量很小。cf的准确率会很可怜。

博主在比赛s1阶段,大概仅仅有几万条数据的时候,尝试了icf,准确率不到百分之中的一个。

。。

。。

2.经常用法

     cf的经常用法有三种,各自是欧式距离法、皮尔逊相关系数法、余弦类似度法。

       測试矩阵,行表示三名用户,列表示三个品牌。对品牌的喜爱度依照1~5添加。

(1)欧氏距离法

        就是计算每两个点的距离,比方Nike和Sony的类似度aaarticlea/png;base64,iVBORw0KGgoAAAANSUhEUgAAAIoAAAAWCAYAAAAfIwRcAAAEN0lEQVRoBe2Xu2sVQRTGfaJGUwhaiM2KojaConZKmrTBQhDSSOwkjQ+wsFvBSm0tUhkUUthK/oBg6QPBxhcmYucDBV/49vtd94TDsPdm9t5ZLrnsB9+d2ZkzZ745c2Z37ooVDZoINBFoIpAqAisjHe2R3YZI28ZscCLwWkt5z3LWRKyJZLomzkbYNiaDFYEfWk4rUWKWtVtGZ2IMG5vBjcCqiKUdlM2DCLvGZIAjEJMoB7T+R32MQaa558TJPmqoOvWQBtwRp6oO7KN9R80xibJJ4j+7BWxX3S7BlJvFYfGQa1c1CpmsGOd18Knz2KKHEfG6b6xYT6nZpt6qiukONe9U35j4SVwndgPuj2wesPgS625h+5TJAfWkmkkEv0Es3p+SGT3/LciprwLsP4g23oLCAsp8caHuBik12/xoRbcFO7Vm/BMbEnFUZC6LFeupCvRZnClJwqSacXZWBJxKxBo4KUxKMlUFvi4UgxiPnxPFM8WkmFMp4PusLaZMqdnPx6cYzZlrDDUfUZ+9cZxZVNU2E2P/2eew+D2IciajebHsbZRM87gmOFqoQSCJY2ASFgT9W8b6O5VktAcL4eR44Bc7Eopg8c0fEsvA+LJNSanZ5mWzMhFNlB6meZ8amZu4+Jh523aaeWOwVoP/dBEjxlUBn0h0QcaGMaSdOMdollk5rqh5WLRTH24Gi5gQmSwXuwXjfUDwE25yJ98EIEQdmtl0OxToy4JJe9WMO3xwbysDCdTN25V9IxGIM/SI0kwmeezVwxPXQJJwIaMsw3c1TosvxLtiLgJEHRe/8FBgo8pLYiiUxR8W8eXxUQ/HxKu+0dVJrIviGzETcxHMiM9ELuFl6FYzwX4qrhZJQsBFe4FKgV41m593VnElMQW3/xeLvxOq8dbweKuHadfwR/XH4lrxp4g9NmApzS0jnyin1HJZ5FPzUiQYtqnfVO+Eh0Enm0GSwE6YVOct8X4bo6XG+35fx11qzdsKjb+d1nuq7xAXXFuow3W1qr7f10M7/8z9gjjt941F/avK0A9tZfilRhKD0iMc7/tK6+fVeqPo4TV7rqhb0vhPD/32zOswL2xji1EZzou8GYZEvv3mT9VWkmZUIoCfEHVo9nOUvbI5WJk36lAv04w5b1gOkIHDjF+ShThxSYaxYBwExBpfHlU0L45br9orcZc4Lo6IhilVJuxBJRNAFpaLVYBwG28l/g0WHHteqpyXgU8ys0+p2XxaSaLwr8qQSjM+iYnB4uNL64spiQFj5wqi01BVs41rlaf1e1PkbuDvJnZCW0bFD5tDe2qQfO0udFXmWo6aWR/rtztJlfW2s2Wfyg5ST3HmwvNcnC2ZlcQhM+tELudjCSdYjppZPnFGe13I5bjnOJ+UE/499AN1vKHqXkddmuvySzyS+OY11e7vZd1Bb/w3EWgi0ESgicBAR+AfZ/buoQR9owcAAAAASUVORK5CYII=" alt="" />。

数值越小。表示类似的越高。

def OsDistance(vector1, vector2):
sqDiffVector = vector1-vector2
sqDiffVector=sqDiffVector**2
sqDistances = sqDiffVector.sum()
distance = sqDistances**0.5
return distance

(2)皮尔逊相关系数

       

两个变量之间的相关系数越高。从一个变量去预測还有一个变量的准确度就越高,这是由于相关系数越高,就意味着这两个变量的共变部分越多,所以从当中一个变量的变化就可越多地获知还有一个变量的变化。

假设两个变量之间的相关系数为1或-1,那么你全然可由变量X去获知变量Y的值。

·         当相关系数为0时。X和Y两变量无关系。

·         当X的值增大。Y也增大。正相关关系,相关系数在0.00与1.00之间

·         当X的值减小,Y也减小,正相关关系。相关系数在0.00与1.00之间

·         当X的值增大。Y减小,负相关关系。相关系数在-1.00与0.00之间

当X的值减小。Y增大,负相关关系,相关系数在-1.00与0.00之间

相关系数的绝对值越大。相关性越强,相关系数越接近于1和-1,相关度越强,相关系数越接近于0,相关度越弱。

在python中用函数corrcoef实现。详细方法见http://infosec.pku.edu.cn/~dulz/doc/Numpy_Example_List.htm

(3)余弦类似度

         通过測量两个向量内积空间的夹角的余弦值来度量它们之间的类似性。

0度角的余弦值是1,而其它不论什么角度的

余弦值都不大于1;而且其最小值是-1。从而两个向量之间的角度的余弦值确定两个向量是否大致指向同样的方向。两
个向量有同样的指向时,余弦类似度的值为1;两个向量夹角为90°时,余弦类似度的值为0;两个向量指向全然相
反的方向时。余弦类似度的值为-1。

在比較过程中。向量的规模大小不予考虑,仅仅考虑到向量的指向方向。余弦相

似度通经常使用于两个向量的夹角小于90°之内,因此余弦类似度的值为0到1之间。

       
       
def cosSim(inA,inB):
num = float(inA.T*inB)
denom = la.norm(inA)*la.norm(inB)
return 0.5+0.5*(num/denom)

【机器学习算法-python实现】协同过滤(cf)的三种方法实现的更多相关文章

  1. python每次处理一个字符的三种方法

    python每次处理一个字符的三种方法 a_string = "abccdea" print 'the first' for c in a_string: print ord(c) ...

  2. Python 文件行数读取的三种方法

    Python三种文件行数读取的方法: #文件比较小 count = len(open(r"d:\lines_test.txt",'rU').readlines()) print c ...

  3. Python 判断文件是否存在的三种方法

    通常在读写文件之前,需要判断文件或目录是否存在,不然某些处理方法可能会使程序出错.所以最好在做任何操作之前,先判断文件是否存在. 这里将介绍三种判断文件或文件夹是否存在的方法,分别使用os模块.Try ...

  4. python webdriver api-上传文件的三种方法

    上传文件: 第一种方式,sendkeys(),最简单的 #encoding=utf-8 from selenium import webdriver import unittest import ti ...

  5. Python 中删除列表元素的三种方法

    列表基本上是 Python 中最常用的数据结构之一了,并且删除操作也是经常使用的. 那到底有哪些方法可以删除列表中的元素呢?这篇文章就来总结一下. 一共有三种方法,分别是 remove,pop 和 d ...

  6. python列表删除重复元素的三种方法

    给定一个列表,要求删除列表中重复元素. listA = ['python','语','言','是','一','门','动','态','语','言'] 方法1,对列表调用排序,从末尾依次比较相邻两个元素 ...

  7. 用Python获取Linux资源信息的三种方法

    方法一:psutil模块 #!usr/bin/env python # -*- coding: utf-8 -*- import socket import psutil class NodeReso ...

  8. Python判断文件是否存在的三种方法

    通常在读写文件之前,需要判断文件或目录是否存在,不然某些处理方法可能会使程序出错.所以最好在做任何操作之前,先判断文件是否存在. 这里将介绍三种判断文件或文件夹是否存在的方法,分别使用os模块.Try ...

  9. Python判断文件是否存在的三种方法【转】

    转:http://www.cnblogs.com/jhao/p/7243043.html 通常在读写文件之前,需要判断文件或目录是否存在,不然某些处理方法可能会使程序出错.所以最好在做任何操作之前,先 ...

  10. python删除list中元素的三种方法

    a.pop(index):删除列表a中index处的值,并且返回这个值. del(a[index]):删除列表a中index处的值,无返回值. del中的index可以是切片,所以可以实现批量删除. ...

随机推荐

  1. Web框架之Django_08 重要组件(form组件、cookie和session组件)

    摘要: form组件 cookie组件 session组件 一.form组件 form介绍我们之前在html页面中利用form表单向后端提交数据时候,都需要对用户的输入进行校验,比如校验用户是否输入正 ...

  2. Web框架之Django_02基本操作(Django项目启动配置、数据库连接、orm、增删改查)

    摘要: Django项目简单现实过程 pycharm连接数据库 Django之orm简单操作增删改查 一.新建Django项目.配置.设置: 新建Django项目:(为了熟悉Django操作,暂时全部 ...

  3. 2017 ACM-ICPC 亚洲区(南宁赛区)网络赛 F题

    The Heaviest Non-decreasing Subsequence Problem 解题心得 这个题就是一个简单的动态规划,非递减最长子序列的改版(加一个权重),只要把权重为5的改成5个权 ...

  4. Java面试——String、StringBuider以及StringBuffer的区别和使用场景

    1.  String.StringBuider.StringBuffer的区别  String是不可变的对象,因此在每次对String类型进行改变的时候,都会生成一个新的String对象,然后将指针指 ...

  5. django的rest framework框架——认证、权限、节流控制

    一.登录认证示例 模拟用户登录,获取token,当用户访问订单或用户中心时,判断用户携带正确的token,则允许查看订单和用户信息,否则抛出异常: from django.conf.urls impo ...

  6. JMeter学习笔记21-如何添加思考时间

    本文来介绍,JMeter如何插入思考时间.前面介绍过一个真实的性能测试场景,是需要加入思考时间,来模拟真实用户行为.本文就来介绍,如何在三个请求之间添加思考时间. 1. 在Test Plan下新建一个 ...

  7. 【Go】并发编程

    Go语言宣扬用通讯的方式共享数据. Go语言以独特的并发编程模型傲视群雄,与并发编程关系最紧密的代码包就是sync包,意思是同步.同步的用途有两个,一个是避免多个线程在同一时刻操作同一个数据块,另一个 ...

  8. 【Openjudge】岛屿(并查集)

    题目链接 此题是并查集.考虑到水位不断上涨,所以将时间倒转.先统计最后一天的联通块个数,每一天浮出水面的块进行计算.复杂度O(玄学). 代码如下 #include<cstdio> #inc ...

  9. Codeforces 894.A QAQ

    A. QAQ time limit per test 1 second memory limit per test 256 megabytes input standard input output ...

  10. Java定时器Web(转)

    通过定时器进行任务的执行是比较常见的情况,下面的是个简单的示例: 主要借助于监听器和TimerTask和Timer类进行实现,另外spring提供了定时器的高级实现好像是quarts. package ...