全球架构师峰会 Arch Summit 2018

知识内容平台AI技术应用思考 知乎李大海

1. 知识内容平台 AI 技术应用思考 李大海 知乎合伙人、CTO
3. u 新内容时代的挑战 u 知乎如何连接「人与内容」 u 知乎如何连接「人与人」 u 知乎如何连接「内容与内容」 u 知乎的网络 — 「智能社区」
4. 信息过载 超负荷接收信息成为常态,知识获取成本持续提升。
5. 内容消费升级 优质、有用信息一直是稀缺品,低质、无用信息却容易泛滥。
6. 知乎:综合性全⺠民知识内容平台 25 万 话题 2700 万 问题 1.2 亿 回答 290 亿 月浏览量
7. 「信息过载」解决方案 —— 个性化推荐 程序员的时间线 产品运营的时间线
8. 「信息过载」解决方案 —— 个性化推荐 用户关注问题 3.0 用户收藏答案 2.0 用户创建问题 1.0 用户赞同文章 0.8 ...... ...... Edge Rank 算法
9. 「信息过载」解决方案 —— 个性化推荐 + + + ............ GBDT 模型
10. 「信息过载」解决方案 —— 个性化推荐
11. 「信息过载」解决方案 —— 个性化推荐 Feed Embedding 的获取和更新
12. 「信息过载」解决方案 —— 个性化推荐 基于深度学习的 CTR 预估模型 - v1.0
13. 「信息过载」解决方案 —— 个性化推荐 基于深度学习的 CTR 预估模型 - v2.0
14. 「信息过载」解决方案 —— 个性化推荐 基于深度学习的 CTR 预估模型 - 多目标预估
15. 人机结合 —— 泰戈尔计划 内容数据 AI 识别/标签化 运营纠偏 用户行为数据 内容标签存储 用户偏好标签 应用(信息流/搜索 /问题路由/推荐)
16. 「信息过载」解决方案 —— 个性化推荐 RBase 架构示意图
17. 「信息过载」解决方案 —— 个性化推荐 Invertedlndex Server 1 (Followship) Invertedlndex Server 2 (Interest) Invertedlndex Server 3 (Keyword) Invertedlndex Server 4 (Local News) 水晶球 - 多召回源融合的推荐结果生成框架
18. 「信息过载」解决方案 —— 搜索 MatchPyramid模型图 KNRM 模型图
19. 「信息过载」解决方案 —— 搜索 在线数据中心 在线数据中心
20. 「内容消费升级」解决方案 —— 问题路由 话题、关键词 embedding
21. 「内容消费升级」解决方案 —— 问题路由
22. 「内容消费升级」解决方案 —— 问题路由 Topic People Rank 模型
23. 「内容消费升级」解决方案 —— 瓦力机器人 识别「阴阳怪气」内容举例 1. 呵呵,就你厉害。 2. 你赢了,高兴吗? 3. 你站在道德的高地上就不冷么? 4. 就你懂,可真把你牛逼坏了。 5. 脑子是个好东西,不建议智商太低、听风就是雨的人拥有。
24. 「内容消费升级」解决方案 —— 瓦力机器人 !"#$ %❌'(
25. 「内容消费升级」解决方案 —— 瓦力机器人 全站图片 人脸检测:HOG特征+SVM 爆照、明星、表情包等 Blinear CNN 细粒度分类 爆照R=83%,P=69% AC自动机产生明星特征+ 朴素贝叶斯 文本分类算法区分是否是明星 “最好看的当然是妹妹 啦”——爆照 “团宠兼团霸,外号大 佬”——明星 爆照、明星对应文本 爆照、明星
26. 「内容消费升级」解决方案 —— 视频理解 视频.mp4 HSV特征提取 改进的Kmeans聚类 关键帧:内容代表性、低重复性 关键帧:内容代表性、低重复性 WILDCAT模型,模糊识别 候选封面
27. 社区特有的问题:如何连接「人」与「人」
28. 「连接人与人」解决方案 —— 用户连接 基于用户行为的 Embeeding 表示模型
29. 「连接人与人」解决方案 —— 用户连接 基于用户关注用户、话题、问题等结构的 Embedding表示 模型,目前已覆盖 8000 万用户 应用场景 l 用户聚类 user representation + Cluster + CF l 用户关注推荐 user affnity l 基于种子用户和 user representation 的人群扩展
30. 知乎特有的问题:如何连接「内容」与「内容」
31. 「连接内容与内容」解决方案 —— 知识图谱
32. 人 用 户 推 荐 人 知乎的网络 个性化推荐 搜索 内容 知 识 图 谱 内容
33. 知乎的网络:智能社区 个性化推荐 人 内容 用 知 户 识 推 图 荐 谱 「智能社区」 人 内容 搜索
2019/01/03

相关幻灯片