《推荐系统实践》读书笔记
2024-02-22 15:09:26 0 举报AI智能生成
登录查看完整内容
推荐系统实践
作者其他创作
大纲/内容
\b用户冷启动
\b物品冷启动
\b系统冷启动
3.1 冷启动问题简介
\b年龄、性别、职业、民族、学历、居住地
\b人口统计学信息
\b用户兴趣的描述
\b从其他网站导入的用户站外行为数据
\b获取用户的注册信息
\b根据用户的注册信息对用户进行分类
\b给用户推荐他所属分类中用户喜欢的物品
基于注册信息的个性化推荐流程
\b粒度越细，精度和覆盖率越高
3.2 利用用户注册信息
\b通过让用户对物品进行评分来收集用户兴趣
思路
\b比较热门
\b具有代表性和区分性
\b启动物品集合需要有多样性
\b物品特点
3.3 选择合适的物品启动用户的兴趣
\b内容相似度和ItemCF相结合
3.4 利用物品的内容信息
心情
剧情
\b类别
\b时间
\b地点
\b观众
\b获奖
\b风格
\b态度
\b画面
\b标记
3.5 发挥专家的作用
3. 推荐系统冷启动问题
\b作者、专家打标
\b用户打标
\b标签是一种无层次化结构的、用来描述信息的关键词
4.1 UGC标签系统的代表应用
\b如何利用用户打标签的行为为其推荐物品
\b如何在用户给物品打标签时为其推荐合适该物品的标签
问题
4.2.1 用户为什么进行标注
表明物品是什么
表明物品的种类
表明谁拥有物品
表达用户的观点
\b用户相关的标签
\b用户的任务
4.2.3 用户打什么样的标签
4.2 标签系统中的推荐问题
4.3.1 实验设置
统计每个用户最常用的标签
\b对于每个标签，统计被打过这个标签次数最多的物品
\b对于一个用户，首先找到他常用的标签，然后找到具有这些标签的最热门物品推荐给这个用户。
4.3.2 基础算法
1. TF-IDF
计算标签相似度进行标签扩展
2. 数据稀疏性
\b不是所有标签都能反应用户的兴趣
\b将标签作为推荐解释
why
\b去除词频很高的停止词
\b去除因词根不同造成的同义词
\b去除因分隔符造成的同义词
\bhow
3. 标签清理
4.3.3 算法的改进
4.3.4 基于图的推荐算法
\b让用户认同推荐的标签
\b让用户认同基于某个标签推荐的结果
标签云
\b客观事实类标签比主观感受类标签对用户更有作用
4.3.5 基于标签的推荐解释
4.3 基于标签的推荐系统
\b方便用户输入标签
\b提高标签质量
4.4.1 为什么要给用户推荐标签
1. 推荐给个系统最热门的
2. 推荐此物品上的最热门标签
3. 推荐用户常使用的标签
4. 将2和3融合，进行线性加权
4.4.2 如何给用户推荐标签
\b结论：方法2结果较好，方法4在不同的融合系数下差距大
从物品的内容本身抽取关键词作为标签
标签扩展
\b冷启动问题
4.4.3 实验设置
4.4.4 基于图的标签推荐算法
4.4 给用户推荐标签
4.5 扩展阅读
4. 利用用户标签数据
\b用户的兴趣是变化的
\b物品也是有生命周期的
\b季节效应
5.1.1 时间效应简介
5.1.2 时间效应举例
\b数据集每天独立用户数的增长情况
\b物品平均在线天数
\b相隔T天系统物品流行度向量的平均相似度
\b系统的物品变化情况
\b用户访问情况
系统的时间特性
5.1.3 系统时间特性的分析
5.1.4 推荐系统的实时性
\b生成推荐结果时加入一定的随机性
\b对一直出现的推荐结果降权
使用不同的推荐算法
5.1.5 推荐算法的时间多样性
1. 最近最热门
2. 时间上下文相关的itemCF算法
3. 时间上下文相关的userCF算法
5.1.6 时间上下文推荐算法
5.1.7 时间段图模型
5.1.8 离线实验
5.1 时间上下文信息
\b兴趣本地化
\b活动本地化
5.2 地点上下文信息
5. 利用上下文信息
\b1.1 什么是推荐系统
\b电子商务
\b电影和视频网站
\b物品空间大
\b消费每首歌的代价很小
物品种类丰富
\b听一首歌耗时很少
\b物品重用率很高
\b用户充满激情
\b上下文相关
\b次序很重要
\b很多播放列表资源
\b不需要用户全神贯注
\b高度社会化
\b个性化音乐电台
社交网络信息对用户进行个性化的物品推荐
\b信息流的会话推荐
\b给用户推荐好友
\b社交网络
\b个性化阅读
\b基于位置的服务
\b个性化邮件
上下文广告
\b搜索广告
\b个性化展示广告
\b个性化广告
\b1.2 个性化推荐系统的应用
1. 离线实验
2. 用户调查
3. 在线实验
\b推荐系统实验方法
1. 用户满意度
2. 预测准确度
3. 覆盖率
4. 多样性
5. 新颖性
6. 惊喜度
7. 信任度
8. 实时性
9. 健壮性
10. 商业目标
\b评测指标
用户
\b物品
时间
\b评测维度
\b1.3 推荐系统评测
1. 好的推荐系统
浏览
点击
\b购买
\b评分
评论
\b日志
2.1 用户行为数据简介
长尾分布
\b用户活跃度：用户产生过行为的物品总数
\b物品流行度：对物品产生过行为的用户总数
2.2.1 用户活跃度和物品流行度的分布
\b用户越活跃，越倾向于浏览冷门的物品
2.2.2 用户活跃度和物品流行度的关系
2.2 用户行为分析
2.3.1 数据集
\b训练集和测试集的划分
多次试验防止过拟合
2.3.2 实验设计
\b准确率：最终的推荐列表中又多少比例是发生过的
\b召回率：有多少比例的用户-物品评分记录包含在最终的推荐列表中
覆盖率：最终推荐列表中包含多达比例的物品
2.3.3 评测指标
2.3 实验设计和算法评测
1）找到和目标用户兴趣相似的用户集合
2）找到这个集合中的用户喜欢的，且目标用户没有听说过的物品推荐给目标用户
1. 基础算法
惩罚两用户共同兴趣列表中热门物品对他们的相似度影响
2. 用户相似度计算的改进
3. 实际在线系统使用的例子
2.4.1 基于用户的协同过滤算法
1）计算物品相似度
2）根据物品的相似度和用户的历史行为给用户生成推荐列表
活跃用户对物品相似度贡献小于不活跃用户
2. 用户活跃度对物品相似度的影响
增加推荐的准确度
\b提高覆盖率和多样性
3. 物品相似度的归一化
2.4.2 基于物品的协同过滤算法
\b性能：适用于用户较少的场合
\b领域：时效性较强，用户个性化兴趣不太明显的领域
\b实时性：用户有新行为，不一定造成推荐结果的立即变化
\b冷启动：新用户对少量物品产生行为猴不能立即进行推荐；新物品上线后，如有行为发生，则会推荐给其他用户。
\b推荐理由：无
\bUserCF
\b性能：适用于物品数明显小于用户数的场合
\b领域：长尾物品丰富，用户个性化需求强烈的领域
\b实时性：有新行为，一定导致结果事实变化
冷启动：新用户只要对一个物品产生行为，就可推荐其他物品；但新物品没有办法立即推荐给用户
\b推荐理由：可让人信服
ItemCF
\b热门物品对算法的影响，对热门物品施加惩罚
哈利波特问题
2.4.3 UserCF和ItemCF的综合比较
2.4 基于领域的算法
\b思路：对于某个用户，首先得到他的兴趣分类，然后从分类中挑选他可能喜欢的物品
如何给物品进行分类
如何确定用户对哪些类的物品感兴趣，以及感兴趣的程度
\b对于一个给定的类，选择哪些属于这个类的物品推荐给用户，以及如何确定这些物品在一个类中的权重
\b问题
\b按照用户行为进行分类
\b分类粒度可调节
\b可给出一个物品属于每个类的权重
多维度分类
\b通过统计用户行为计算物品在分类中的权重
\b隐语义模型
\b隐性反馈数据集抽取负样本：采样并保持正负样本量相当；选取热门却没有用户行为的物品
\b隐特征的个数F
\b学习速率alpha
\b正则化参数lambda
\b负样本/正样本比例ratio
\b重要参数
LFM
2.5.1 基础算法
\b雅虎首页
2.5.2 基于LFM的实际系统的例子
LFM有较好的理论基础，是一种学习方法
\b离线计算的空间复杂度，LFM在大量用户物品时能节省内存空间
\b离线计算的时间复杂度，由于进行迭代，LFM的时间复杂度稍高于领域算法
LFM不能进行\b在线实时推荐
LFM无法进行推荐解释
2.5.3 LFM和基于领域的方法的比较
2.5 隐语义模型
2.6.1 用户行为数据的二分图表示
两个顶点之间有很多路径相连
连接两个顶点之间的路径长度都比较短
\b连接两个顶点之间的路径不会经过出度比较大的顶点
\b相关性较高的顶点
\b随机游走的personalRank算法
2.6.2 基于图的推荐算法
2.6 基于图的模型
2. 利用用户行为数据
6.1.1 电子邮件
6.1.2 用户注册信息
6.1.3 用户的位置数据
6.1.4 论坛和讨论组
6.1.5 即时聊天工具
\b社交图谱
\b兴趣图谱
6.1.6 社交网站
6.1 获取社交网络数据的途径
\b双向确认的社交网络数据
\b单向关注的社交网络数据
\b基于社区的社交网络数据
\b社交网络数据类型
\b入度反应用户的社会影响力：影响力大的用户占少数
\b出度代表一个用户关注的用户数：关注很多人的用户占少数
\b社交网络数据中的长尾分布
6.2 社交网络数据简介
\b社交网络可以解决冷启动的问题
好友推荐可以增加推荐的信任度
优点
6.3.1 基于领域的社会化推荐算法
6.3.2 基于图的社会化推荐算法
6.3.3 实际系统中的社会化推荐算法
6.3.4 社会化推荐系统和协同过滤推荐系统
6.3.5 信息流推荐
6.3 基于社交网络的推荐
6. 利用社交网络数据
\b推荐系统实践
0 条评论
回复 删除
下一页
