基于物品的协同过滤算法的Python实现

作者:冯向博
微信:supermvn
介绍:推荐系统学习整理

目录

一. 基于物品的协同过滤
二. 物品相似度计算与实现
三. ICF 的推荐实现
四. 总结一下
五. 练习

一. 基于物品的协同过滤

基于物品的协同过滤,是将用户 Aitem 物品最相近(关联)的物品集合 items 推荐给用户 A
给用户 A 推荐之前喜欢过的物品 item 最相近的物品 items
itemitems 列表里的物品相近(相似)程度,可以从用户以往的打分(购买、点击、收藏)等的物品统计数据来计算。

例如:


image

左上数据是用户以往的购买物品数据
右上是单个物品所有用户购买的统计数据矩阵
下左是统计user_1中物品之间购买关系统计数据矩阵
下中是user_1+user_2中物品之间购买关系统计数据矩阵
下右是user_1+user_2+user_3中物品之间购买关系统计数据矩阵

最终我们会有一个单个物品的所有用户购买的统计记录和一个所有用户的物品之间购买关系的统计数据矩阵。

我们可以用这两个矩阵计算出物品相似度矩阵。

步骤如下:
1.输入 user-item-rating 数据矩阵
2.计算 item-item 相似度矩阵
3.根据相似度求评分

二. 一物品相似度计算与实现

计算两个物品的相似度,我们将所以用户的购买数据进行统计计算,计算两个物品的相似度。
我们会构建一个如下图的数据出来

image

相似度我们可以通过统计相同的 items1 个数与他们购买的 items 个数的平均值的比值来表示。
具体的代码实现如下

def item_sim(d):
    '''
    :param data: {user_id:{item_id:rating}}
    :return: {item_id:{item_id:sim_rating}} 物品相似度矩阵
    '''
    item_item_same_cnt = dict()
    item_user_cnt = dict()

    for u, items in d.items():
        for i in items:
            if item_user_cnt.get(i, -1) == -1:
                item_user_cnt[i] = 0
            item_user_cnt[i] += 1

            if item_item_same_cnt.get(i, -1) == -1:
                item_item_same_cnt[i] = dict()

            for j in items:
                if i == j:
                    continue
                elif item_item_same_cnt[i].get(j, -1) == -1:
                    item_item_same_cnt[i][j] = 0
                item_item_same_cnt[i][j] += 1

    W = dict()
    for i, related_items in item_item_same_cnt.items():
        if W.get(i, -1) == -1:
            W[i] = dict()

        for j, cij in related_items.items():
            if W[i].get(j, -1) == -1:
                W[i][j] = 0
            W[i][j] += 2 * cij / ((item_user_cnt[i] + item_user_cnt[j]) * 1.0)

    return W

三. ICF 的推荐实现

这一步主要根据相似度求评分进行推荐

def recommend(user, d, item_item_sim, k):
    '''
    :param user: 用户id
    :param d: user-item-rating 矩阵
    :param item_item_sim: 物品相似度矩阵
    :param k: 推荐个数
    :return: icf推荐列表
    '''
    rank = dict()
    Ru = d[user]

    for i, rating in Ru.items():
        for j, sim in sorted(item_item_sim[i].items(), key=operator.itemgetter(1), reverse=True)[0:k]:
            if j in Ru:
                continue
            elif rank.get(j, -1) == -1:
                rank[j] = 0
            rank[j] += sim * rating
    return rank

四. 总结一下

  1. ICF的数据处理步骤
  2. 物品相似度矩阵计算实现算法
  3. 使用物品相似度进行评分推荐的算法实现
  4. ICF算法和UCF算法有相同的地方,可以对比一下

五. 练习

  1. 了解ICF推荐的总体步骤、总体框架,建立总体的概念和流程。
  2. 物品相似度矩阵算法实现部分,需要掌握基本算法。
  3. 掌握ICF的相似用户评分推荐实现,需要掌握练习。

微信公众号
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,884评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,755评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,369评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,799评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,910评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,096评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,159评论 3 411
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,917评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,360评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,673评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,814评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,509评论 4 334
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,156评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,882评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,123评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,641评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,728评论 2 351

推荐阅读更多精彩内容