(转载请注明出处:http://blog.csdn.net/buptgshengod)

1.背景

      协同过滤(collaborative filtering)是推荐系统经常使用的一种方法。cf的主要思想就是找出物品类似度高的归为一类进行推荐。cf又分为icf和ucf。

icf指的是item collaborative filtering,是将商品进行分析推荐。同理ucf的u指的是user,他是找出知趣类似的人,进行推荐。

通常来讲icf的准确率可能会高一些。通过这次參加天猫大数据比赛。我认为仅仅有在数据量很庞大的时候才适合用cf,假设数据量很小。cf的准确率会很可怜。

博主在比赛s1阶段,大概仅仅有几万条数据的时候,尝试了icf,准确率不到百分之中的一个。

。。

。。

2.经常用法

     cf的经常用法有三种,各自是欧式距离法、皮尔逊相关系数法、余弦类似度法。

       測试矩阵,行表示三名用户,列表示三个品牌。对品牌的喜爱度依照1~5添加。

(1)欧氏距离法

        就是计算每两个点的距离,比方Nike和Sony的类似度aaarticlea/png;base64,iVBORw0KGgoAAAANSUhEUgAAAIoAAAAWCAYAAAAfIwRcAAAEN0lEQVRoBe2Xu2sVQRTGfaJGUwhaiM2KojaConZKmrTBQhDSSOwkjQ+wsFvBSm0tUhkUUthK/oBg6QPBxhcmYucDBV/49vtd94TDsPdm9t5ZLrnsB9+d2ZkzZ745c2Z37ooVDZoINBFoIpAqAisjHe2R3YZI28ZscCLwWkt5z3LWRKyJZLomzkbYNiaDFYEfWk4rUWKWtVtGZ2IMG5vBjcCqiKUdlM2DCLvGZIAjEJMoB7T+R32MQaa558TJPmqoOvWQBtwRp6oO7KN9R80xibJJ4j+7BWxX3S7BlJvFYfGQa1c1CpmsGOd18Knz2KKHEfG6b6xYT6nZpt6qiukONe9U35j4SVwndgPuj2wesPgS625h+5TJAfWkmkkEv0Es3p+SGT3/LciprwLsP4g23oLCAsp8caHuBik12/xoRbcFO7Vm/BMbEnFUZC6LFeupCvRZnClJwqSacXZWBJxKxBo4KUxKMlUFvi4UgxiPnxPFM8WkmFMp4PusLaZMqdnPx6cYzZlrDDUfUZ+9cZxZVNU2E2P/2eew+D2IciajebHsbZRM87gmOFqoQSCJY2ASFgT9W8b6O5VktAcL4eR44Bc7Eopg8c0fEsvA+LJNSanZ5mWzMhFNlB6meZ8amZu4+Jh523aaeWOwVoP/dBEjxlUBn0h0QcaGMaSdOMdollk5rqh5WLRTH24Gi5gQmSwXuwXjfUDwE25yJ98EIEQdmtl0OxToy4JJe9WMO3xwbysDCdTN25V9IxGIM/SI0kwmeezVwxPXQJJwIaMsw3c1TosvxLtiLgJEHRe/8FBgo8pLYiiUxR8W8eXxUQ/HxKu+0dVJrIviGzETcxHMiM9ELuFl6FYzwX4qrhZJQsBFe4FKgV41m593VnElMQW3/xeLvxOq8dbweKuHadfwR/XH4lrxp4g9NmApzS0jnyin1HJZ5FPzUiQYtqnfVO+Eh0Enm0GSwE6YVOct8X4bo6XG+35fx11qzdsKjb+d1nuq7xAXXFuow3W1qr7f10M7/8z9gjjt941F/avK0A9tZfilRhKD0iMc7/tK6+fVeqPo4TV7rqhb0vhPD/32zOswL2xji1EZzou8GYZEvv3mT9VWkmZUIoCfEHVo9nOUvbI5WJk36lAv04w5b1gOkIHDjF+ShThxSYaxYBwExBpfHlU0L45br9orcZc4Lo6IhilVJuxBJRNAFpaLVYBwG28l/g0WHHteqpyXgU8ys0+p2XxaSaLwr8qQSjM+iYnB4uNL64spiQFj5wqi01BVs41rlaf1e1PkbuDvJnZCW0bFD5tDe2qQfO0udFXmWo6aWR/rtztJlfW2s2Wfyg5ST3HmwvNcnC2ZlcQhM+tELudjCSdYjppZPnFGe13I5bjnOJ+UE/499AN1vKHqXkddmuvySzyS+OY11e7vZd1Bb/w3EWgi0ESgicBAR+AfZ/buoQR9owcAAAAASUVORK5CYII=" alt="" />。

数值越小。表示类似的越高。

def OsDistance(vector1, vector2):
sqDiffVector = vector1-vector2
sqDiffVector=sqDiffVector**2
sqDistances = sqDiffVector.sum()
distance = sqDistances**0.5
return distance

(2)皮尔逊相关系数

       

两个变量之间的相关系数越高。从一个变量去预測还有一个变量的准确度就越高,这是由于相关系数越高,就意味着这两个变量的共变部分越多,所以从当中一个变量的变化就可越多地获知还有一个变量的变化。

假设两个变量之间的相关系数为1或-1,那么你全然可由变量X去获知变量Y的值。

·         当相关系数为0时。X和Y两变量无关系。

·         当X的值增大。Y也增大。正相关关系,相关系数在0.00与1.00之间

·         当X的值减小,Y也减小,正相关关系。相关系数在0.00与1.00之间

·         当X的值增大。Y减小,负相关关系。相关系数在-1.00与0.00之间

当X的值减小。Y增大,负相关关系,相关系数在-1.00与0.00之间

相关系数的绝对值越大。相关性越强,相关系数越接近于1和-1,相关度越强,相关系数越接近于0,相关度越弱。

在python中用函数corrcoef实现。详细方法见http://infosec.pku.edu.cn/~dulz/doc/Numpy_Example_List.htm

(3)余弦类似度

         通过測量两个向量内积空间的夹角的余弦值来度量它们之间的类似性。

0度角的余弦值是1,而其它不论什么角度的

余弦值都不大于1;而且其最小值是-1。从而两个向量之间的角度的余弦值确定两个向量是否大致指向同样的方向。两
个向量有同样的指向时,余弦类似度的值为1;两个向量夹角为90°时,余弦类似度的值为0;两个向量指向全然相
反的方向时。余弦类似度的值为-1。

在比較过程中。向量的规模大小不予考虑,仅仅考虑到向量的指向方向。余弦相

似度通经常使用于两个向量的夹角小于90°之内,因此余弦类似度的值为0到1之间。

       
       
def cosSim(inA,inB):
num = float(inA.T*inB)
denom = la.norm(inA)*la.norm(inB)
return 0.5+0.5*(num/denom)

【机器学习算法-python实现】协同过滤(cf)的三种方法实现的更多相关文章

  1. python每次处理一个字符的三种方法

    python每次处理一个字符的三种方法 a_string = "abccdea" print 'the first' for c in a_string: print ord(c) ...

  2. Python 文件行数读取的三种方法

    Python三种文件行数读取的方法: #文件比较小 count = len(open(r"d:\lines_test.txt",'rU').readlines()) print c ...

  3. Python 判断文件是否存在的三种方法

    通常在读写文件之前,需要判断文件或目录是否存在,不然某些处理方法可能会使程序出错.所以最好在做任何操作之前,先判断文件是否存在. 这里将介绍三种判断文件或文件夹是否存在的方法,分别使用os模块.Try ...

  4. python webdriver api-上传文件的三种方法

    上传文件: 第一种方式,sendkeys(),最简单的 #encoding=utf-8 from selenium import webdriver import unittest import ti ...

  5. Python 中删除列表元素的三种方法

    列表基本上是 Python 中最常用的数据结构之一了,并且删除操作也是经常使用的. 那到底有哪些方法可以删除列表中的元素呢?这篇文章就来总结一下. 一共有三种方法,分别是 remove,pop 和 d ...

  6. python列表删除重复元素的三种方法

    给定一个列表,要求删除列表中重复元素. listA = ['python','语','言','是','一','门','动','态','语','言'] 方法1,对列表调用排序,从末尾依次比较相邻两个元素 ...

  7. 用Python获取Linux资源信息的三种方法

    方法一:psutil模块 #!usr/bin/env python # -*- coding: utf-8 -*- import socket import psutil class NodeReso ...

  8. Python判断文件是否存在的三种方法

    通常在读写文件之前,需要判断文件或目录是否存在,不然某些处理方法可能会使程序出错.所以最好在做任何操作之前,先判断文件是否存在. 这里将介绍三种判断文件或文件夹是否存在的方法,分别使用os模块.Try ...

  9. Python判断文件是否存在的三种方法【转】

    转:http://www.cnblogs.com/jhao/p/7243043.html 通常在读写文件之前,需要判断文件或目录是否存在,不然某些处理方法可能会使程序出错.所以最好在做任何操作之前,先 ...

  10. python删除list中元素的三种方法

    a.pop(index):删除列表a中index处的值,并且返回这个值. del(a[index]):删除列表a中index处的值,无返回值. del中的index可以是切片,所以可以实现批量删除. ...

随机推荐

  1. Day08字符编码

    Day08: 知识储备: 硬盘:由硬盘加载到内存,cpu从内存中取 软件产生的数据都是先保存在内存中 文件,输入文字,保存到内存,内存是硬件,硬件只能保存2进制,所以需要转换 文本编辑器,输入文字的时 ...

  2. web开发框架之DRF

    RESTful架构解释: # Representational State Transfer 表现层状态转化 到底什么是RESTFul架构: 如果一个架构符合REST原则,就称它为RESTful架构. ...

  3. HttpServlet RequestDispatcher sendredirect和forward

    Servlet的框架是由两个Java包组成:javax.servlet和javax.servlet.http. 在javax.servlet包中定义了所有的Servlet类都必须实现或扩展的的通用接口 ...

  4. <题解>洛谷P3385 【模板】负环

    题目链接 判断一张图中是否存在关于顶点1的负环: 可以用SPFA跑一遍,存在负环的情况就是点进队大于n次 因为在存在负环的情况下,SPFA会越跑越小,跑进死循环 在最差的情况下,存在的负环长度是“n+ ...

  5. iphone丢了以后发现关机了怎么办?

    有好几个办法都可以尝试一下: 1. "ICCID法",但目前这个办法只能寻找苹果iPhone手机,而对于安卓手机,则不能采取相同的方法进行寻找.之所以能采取该方法寻找苹果 iPho ...

  6. BNUOJ 19297 Code Refactoring

    Code Refactoring Time Limit: 3000ms Memory Limit: 131072KB   This problem will be judged on UVA. Ori ...

  7. MySQL 待解决死锁

    官方文档:https://dev.mysql.com/doc/refman/5.6/en/innodb-locks-set.html 线上出现一个死锁现象,信息显示的是两条对同一个表的不同记录的upd ...

  8. Terracotta服务器的不同配置方式

    Terracotta服务器的不同配置方式 博客分类: 企业应用面临的问题 Java&Socket 开源组件的应用 Terracotta双机多机镜像服务器阵列分片模式企业应用 Terracott ...

  9. MAC生成公钥私钥

    前言 需要开发者在本地上使用openssl来生成私钥和公钥 由于mac 自带openssl工具,所以不用像windows那样要下载安装openssl工具 步骤 1.创建一个文件夹,终端进入该文件夹 c ...

  10. ubuntu问题解答集锦

    一.su root提示认证失败 su root提示认证失败 ubuntu root是默认禁用了,不答应用root登陆,所以先要设置root密码.   执行:sudo passwd root 接着输入密 ...