AI时代精准个性化推荐

2020-02-27 56浏览

  • 1.热门微博 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com "*ൈսࣚሙ֥۱ྟ߄๷ࡩ 演讲⼈人:苏传捷 时间:2018年年7⽉月7⽇日
  • 2.目录 CONTENTS 01 整体介绍 业务介绍 系统架构 算法架构 02 特征工程 ⽤用户特征 关系特征 内容特征 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! 03 推多路荐路召排回序 ⼤大规模多⽬目标排序 ibaotu.com 04 场景实例 热点消费场景实例例
  • 3.01 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 整体介绍 业务介绍 系统架构 算法架构
  • 4.业务介绍 关注流 基于⽤用户的关注 关系推送内容 关系Feed 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com FEED 兴趣Feed 热门流 基于⽤用户的个性 化兴趣推送内容
  • 5.系统架构 存储系统 Level Db Rocks Db Hbase Redis Memcache MySQL 内容数据与模型 倒排 内容模型 内容池 去重 原创 用户数据与模型 画像 IDM 查询 短期模型 ⻓长期模型 在线计算 ⼿手机微博 极速版微博 PC微博 前端 渲染 ⼴广告 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 算法与策略 热点、协同、兴趣 视频、即时反馈、本地 兴趣关注等 LR、FM DNN 请求 约XXX条 约XXX条 召回 粗排 精排 扶持、打压 、多样性 产品策略略 ⼏几万条 物料料库 特征⼯工程 常规模型 离线评 估系统 实时模型 物料料规模百万 ⽣生存周期模型 离线模型训练 在线⽇日志系统 基础和平台 业务隔离 资源隔离 A/B Test平台 ⾃自动扩缩容 ⾃自动运维 内容管理理 ⼲干预平台 核⼼心报表 监控报警 trace
  • 6.算法架构 排序层 LR 召回层 FM GBDT 深度学习 ······ 关系召回 语义召回 热点召回 话题召回 地理位置召回 分类召回 基础层 内容特征 关键词召回 协同召回 视频召回 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 用户特征 ······ 上下文特征 静态特征 ↓ 分类 语义 关键词 图片 视频 ······ 动态特征 ↓ 全局热度 人群热度 分类热度 语义热度 关键词热度 ······ 画像特征 ↓ 兴趣 自然属性 博主权威度 关系特征 ↓ 关注 亲密度 环境特征 时间 地理位置 网络状态 最近N条推荐内容 最近N条点击内容 相关性特征 分类匹配 关键词匹配 语义匹配 uid-mid匹配
  • 7.02 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 特征工程 ⽤用户特征 关系特征 内容特征
  • 8.特征工程 热门微博推荐算法是根据用户特征、关系特征、内容特征、环境特征等,计算用户对微博感兴趣的概率 内容特征 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 环境特征 0.85 博主特征 关系特征 阅读者特征
  • 9.用户特征——博主 挖掘博主的领域权威度,一方面可以作为其内容分类特征,另一方面根据微博网络关系,挖掘粉丝兴趣 用户能力 内容分析 ↓ 文本分类 图片分类 视频分类 关系分析 ↓ PageRank 用户分组 PageRank 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com A 3.3% 潘石屹 38.4% B 34.3% D 3.9% 1.6% 1.6% C 8.1% 1.6% F 3.9% 1.6% 1.6% Node:微博用户 Edge: 微博用户之间的信息流 用户分组 名人 41.8W 地产 5674 ··· 经济 3.0W 商业 ··· 15.7W 明星 ··· 财经 12.7W 1.5W ··· 房地产 5.8W 潘石屹
  • 10.用户特征——读者 微博ID:叠石 自然属性 账号属iba性otu.com 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! 一级兴趣 二级兴趣 三级兴趣 历史画像
  • 11.关系特征 根据粉丝对博主的互动、浏览、分组行为,挖掘粉丝与博主的亲密度特征,便于给用户推荐其亲密博主的内容 来去之间 0.96 杨幂 0.88 ··· 邢晓瑶 0.39 地产八卦男 0.96 ··· 财上海 ··· 刘雯 0.94 0.56 ··· 文怡 0.92 叠石 用户亲密度图谱 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 关系 分组 SVM 组内用户关系特征/创建者关系特征 组内用户互动特征/创建者互动特征 组内用户发博量/创建者发博量 …… 亲密度计算过程 关注特征 互动特征 浏览特征 分组特征 亲密度
  • 12.内容特征 微博短文本内容特征构建难点 >> ① 长度较短,特征词少 ② UGC内容,结构差异大 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com
  • 13.内容特征 针对短文本内容特征的解决方案: 根据博文特征、评论特征、多媒体特征、博主特征、短链内容特征,对微博进行分类和语义分析 博文特征 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 评论特征 SVM 多媒体特征 博文分类 博主领域特征 短链特征 LDA 博文语义
  • 14.内容特征——评论 ① 文本预处理:超短评论、表情符、链接、水军评论…… 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com ② 词性过滤,TF-IDF
  • 15.内容特征——博主领域 微博短文本内容特征构建——博主领域 ① 博主领域属性挖掘:动漫、火影忍者 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com ② 物料标签:动漫、火影忍者
  • 16.内容特征——多媒体 利用图片分类、图像识别、视频关键帧识别和缩略图裁剪等技术进行多媒体内容挖掘 美妆 动物宠物 数码 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 动漫
  • 17.03 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 推荐排序 多路路召回 ⼤大规模多⽬目标排序
  • 18.多路召回——概况 推荐系统召回是给用户粗选一批待推荐的候选内容,用于后续排序 为了提高召回效率,需要根据用户特征、关系特征、内容特征做个性化召回 关系召回 一度关系 二度关系 兴趣 兴趣召回 协同召回 热点 地理位置 …… Item协同 User协同 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 矩阵分解 物料库 特征 内容特征 关系特征 用户特征 粗排候选集
  • 19.多路召回——Item协同 用于用户行为的及时反馈 推荐微博的相关微博 解决难以刻画内容的微博的分发问题 协同① Item 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 协同② 协同③ 协同④ 协同⑤
  • 20.多路召回——User协同 1、用户行为向量化 2、向量降维 3、均匀的聚类簇 感ib谢a您o下载tu包图.c网o平m台上提供的PPT作品,为了您和包图网以及原创作者·的利·益··,·请····勿·····复·····制·····、·······传·····播······、···销·······售····,····否·······则····将·····承······担····法·····律········责······任······!······包··图···网·····将·····对········作··品···进·····行·····维·······权···,·····按····照······传······播·······下·······载·······次·······数······进···········行········十········倍·····的·······索····取········赔·········偿····!·················································································································································································································································································· 
  • 21.多路召回——矩阵分解 在线矩阵分解 离线⼤大规模矩阵分解 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 隐向量量 ANN 检索 ⽤用户反馈
  • 22.大规模多目标排序 问题 >> 广泛的用户面对多样的内容、在不同的情景环境下,如何精准预估感兴趣的概率? 80后 90后 00后 学生 白领 工人 男 女 iPhone 小米 华为 △ 用户 美女帅哥 健康养生 电视剧 历史 财 体育 娱乐明星 情感 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! 经 互联网 搞笑 军ibaotu.com 电 事 影 NBA 数 汽车 美妆 码 时尚 美食 社会时事 综艺 △ 内容 解决方案 >> 大规模模型:千万维特征 + 千亿样本 北京 上海 南京 早中晚 工作日/节假日 3G 4G WIFI 多云 晴 下雨 △ 环境
  • 23.大规模多目标排序 大规模需要优化的目标 >> 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 页面停留时长 负反馈 加关注 点击 转发 评论 点赞
  • 24.大规模多目标排序 多目标如何融合 >> 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 常规方案:分别训练多个模型,模型结果做merge 常规方案的不足: ① 各个模型训练结果不可比 ② 只有少数几个参数,控制merge效果 新方案:一个模型综合考虑多个目标,此方案获得了较好的效果收益 新方案通过样本标注不同权重,优势在于: ① 一个模型兼顾多个目标,不同目标的权重体现在损失函数中 ② 多目标参与了优化求解,全部参数共同控制merge效果
  • 25.04 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 场景实例 热点场景消费实例例
  • 26.热点消费场景实例 PUSH下发 热门流落地 ⽤用户点击后 更多相关推荐 Push内容 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 相关推荐
  • 27.谢谢聆听 感谢您下载包图网平台上提供的PPT作品,为了您和包图网以及原创作者的利益,请勿复制、传播、销售,否则将承担法律责任!包图网将对作品进行维权,按照传播下载次数进行十倍的索取赔偿! ibaotu.com 演讲人:苏传捷 时间:2018年7月7日