目前工业界常用的推荐系统模型有哪些?

39 篇文章 2 订阅
订阅专栏

目前工业界常用的推荐系统模型有哪些? - 知乎前言众所周知,推荐可分为以下四个流程,分别是召回、粗排、精排以及重排。其中,召回是源头,在某种意义…https://www.zhihu.com/question/314773668/answer/2479450276

  目前工业界常用的推荐系统模型有哪些? - 知乎DIN(Deep Interest Network)模型是阿里妈妈团队在2018年发表的文章,基于阿里广告业务场景(电商业…https://www.zhihu.com/question/314773668/answer/2422958180

  • 召回策略:
  1. 统计类,热度,LBS;
  2. 协同过滤类,UserCF、ItemCF;
  3. U2T2I,如基于user tag召回;
  4. I2I类,如Embedding(Word2Vec、FastText),GraphEmbedding(Node2Vec、DeepWalk、EGES);
  5. U2I类,如DSSM、YouTube DNN、Sentence Bert;
  • 排序策略,learning to rank 流程三大模式(pointwise、pairwise、listwise),主要是特征工程和CTR模型预估;
  1. 常见的特征挖掘(user、item、context,以及相互交叉);
  2. CTR预估,如LR、GBDT、FM、FFM、DNN、Wide&Deep、DCN、DeepFM、DIN、DFN;
  • 探索与发现(bandit、Q-Learning、DQN);
  • 推荐理由:
  1. 统计式,如:全城热搜、区域热搜;
  2. 行为,如:看过、买过、看了又看、搜了又搜;
  3. 推荐语生成(抽取式,生成式);

作者:tracholar

  • 召回层:召回解决的是从海量候选item中召回千级别的item问题
  1. 策略规则类:热度召回、LBS、历史行为重定向(买了又买、点了没买)、基于标签召回、业务特有的其他规则
  • 模型类:模型类的模式是将用户和item分别映射到一个向量空间,然后用向量召回,这类有itemcf,usercf,embedding(word2vec),Graph embedding( node2vec等),DNN(如DSSM双塔召回,YouTubeDNN等),RNN(预测下一个点击的item得到用户 emb和item emb);向量检索可以用Annoy(基于LSH),Faiss(基于矢量量化)。此外还见过用逻辑回归搞个预估模型,把权重大的交叉特征拿出来构建索引做召回
  • 粗排层:本质上跟精排类似,只是特征和模型复杂度上会精简,此外也有将精排模型通过蒸馏得到简化版模型来做粗排
  • 精排层:精排解决的是从千级别item到几十这个级别的问题
  1. 预估:lr, gbdt,fm及其变种(fm是一个工程团队不太强又对算法精度有一定要求时比较好的选择), widedeep,deepfm,NCF各种交叉,DIN,BERT,RNN
  2. 多目标:MOE,MMOE,MTL(多任务学习)
  3. 打分公式融合: 随机搜索,CEM(性价比比较高的方法),在线贝叶斯优化(高斯过程),带模型CEM,强化等
  • 重排层:重排层解决的是展示列表总体最优,模型有 MMR,DPP,RNN系列(参考阿里的globalrerank系列)
  • 展示层:
  1. 推荐理由:统计规则、行为规则、抽取式(一般从评论和内容中抽取)、生成式;排序可以用汤普森采样(简单有效),融合到精排模型排等等
  2. 首图优选:CNN抽特征,汤普森采样
  • 探索与利用:随机策略(简单有效),汤普森采样,bandit,强化等
  • 产品层:交互式推荐、分tab、多种类型物料融合
AI上推荐 之 YouTubeDNN模型(工业界推荐系统的灯火阑珊)
Miracle8070
01-26 5234
1. 写在前面 这个系列很久没有更新了, 主要是前段时间经历了一波秋招, 后面的方向可能稍微偏数据挖掘和cv多一些,所以向这两块又稍微延展了一下,没来得及看推荐相关的论文,这次借着和如意大佬整理fun-rec项目的机会, 才重新又看起了之前一直想整理的经典模型, 对于推荐, 还是想把之前学习的知识沉淀下来的, 当然,可能后面的整理比较适合像我一样的初学者了吧,想法还是以经典paper解读为主, 学习一些新思想,并进行NLP, 推荐,cv, ML和DL等各种知识的串联。 关于后面的整理, 我也梳理了一个思维框
推荐系统(一)概述
Jin_Kwok的博客
07-07 5094
在互联网领域,推荐系统(Recommendation Systems)的应用非常广泛。在音视频方面,如抖音、快手、哔哩等;在电商平台方面,如京东、淘宝、拼多多等。推荐有助于帮助用户快速发现潜在感兴趣的内容(音视频、商品、新闻等信息流),从而提升用户体验,同时有助于提升商业效率。从本文开始,笔者将结合自身在信息流推荐领域的经验,通过系列文章对推荐系统展开介绍。
系统模型
FiyaZ的博客
06-23 1306
系统模型 系统模型简介(概念)物理模型(概念)体系结构模型体系结构元素通信实体对象组件Web服务通信范式进程间通信远程调用请求-应答协议间接通信角色和责任客户 - 服务器(CS)对等体系结构(P2P)放置(部署)系统结构模式**重点思想:分层**:功能分解一些关键技术基础模型 简介(概念) 分布式系统的三个重要且互补的解释方法: 物理模型: 考虑组成系统的计算机和设计的类型以及他们的互连,不涉及特定的技术细节 体系结构模型: 从系统的计算元素执行的计算和通信任务方面来描述系统 计算元素指单机或通过
推荐系统常用模型
vir_lee的博客
06-20 410
文章目录 推荐系统算法学习(二)——DNN与FM DeepFM 推荐系统算法学习(一)——协同过滤(CF) MF FM FFM Muti-Task之MMOE (作者:阿猫阿狗)
传统推荐模型
Celeste小天地
04-19 802
1.CF 1.1 UserCF和ItemCF 原理:基于用户x物品的共现矩阵R,根据用户(行)和物品(列)相似度进行推荐 特点:UserCF社交性强,更适合推荐热点;ItemCF适用于兴趣变化较为稳定的应用,例如视频 缺点:泛化能力差,处理稀疏矩阵能力差,推荐结构的头部效应明显 1.2 MF 原理:R=UV,将共现矩阵分解为用户矩阵和物品矩阵,生成对应的隐向量 方法:梯度下降 优点:泛化能力强、空间复杂度低、更好的扩展性和灵活性 缺点:不方便加入用户、物品和上下文特征 2. LR 综合利用用户、物
浅谈工业推荐系统
10-09 553
我们在这一篇文章中为大家阐述了三个工业推荐系统的重要特征。这三个特征都有别于推荐系统的主流学术研究,但都是推荐系统应用到工业界产品中所需要思考的问题。我希望这三个特性所涵盖的三方面问题可以指导对工业推荐系统产生更加有高度的认识,从而能够让我们对今后的研究工作有新的启发,起到抛砖引玉的作用。
工业界推荐系统必读论文:基于深度学习的推荐模型——DLRM
Paper weekly
11-25 2000
作者丨纪厚业单位丨北京邮电大学博士生研究方向丨异质图神经网络及其应用引言推荐系统尤其是深度推荐系统已经在工业界得到了广泛应用,尤其是在电商场景下(如淘宝和京东的商品推荐)...
工业界推荐系统整体架构了解
元气满满晨
05-07 1331
工业推荐系统一般分三部分:在线+近线+离线部分 A、在线部分,一般要经历几个阶段: **召回环节:**将给用户推荐的物品降到千以下规模; 粗排阶段:可选阶段。如果召回阶段返回的物品还是太多,可以加入粗排阶段,该阶段通过一些简单排序模型进一步减少往后续环节传递的物品; 精排阶段: 这里可以使用复杂的模型来对少量物品精准排序; **上业务策略:**对某个用户来说,即使精排推荐结果出来了,一般并不会直...
深度学习流行的框架有哪些?分别有什么特点
m0_51339444的博客
01-25 1037
深度学习流行的框架有哪些?分别有什么特点
市面上的数学规划求解器都有哪些?
ML OR 智能决策的博客
10-26 5184
国内外常见优化求解器梳理总结
一文带你了解推荐系统常用模型及框架
热门推荐
timerring的博客
07-31 11万+
通过对用户之间的关系,用户对物品的评价反馈一起对信息进行筛选过滤,从而找到目标用户感兴趣的信息。用户—商品的评分矩阵(该矩阵很可能是稀疏的)用户\物品xxxxxx行向量表示每个用户的喜好,列向量表明每个物品的属性余弦相似度皮尔逊相关系数欧氏距离曼哈顿距离主要有基于用户的协同过滤与基于物品的协同过滤。.........
谈谈工业界落地能力最强的机器学习算法
夕小瑶科技说
12-14 678
文 | 石塔西尽管BERT为代表的预训练模型大肆流行,但是身处工业界才会知道它落地有多难,尤其是QPS动辄几百的在线推荐、搜索系统,哪怕在大厂也很难在线上系统见到它们。今天就想反其道而行...
工业界真实的推荐系统(小红书)-涨指标的方法:召回、排序、多样性、特殊人群、利用交互行为
qq_17065591的博客
03-14 1080
王树森老师的硬核课程,由于PPT很多,并且老师的很多经验是口述,没有写在PPT里,网上有一些网友的笔记,但不是很完整,学习起来也比较费事,所以我自己整理了120页的PPT(这里放的是截图),期望能比较完整地把老师的经验呈现出来,同时缩短学习时间。课程特点:系统、清晰、实用,原理和落地经验兼具。
(5)工业界推荐系统-小红书推荐场景及内部实践【线上召回和模型更新】
Pain is inevitable but suffering is optional.
05-10 1132
系列文章传送门 工业界推荐系统-小红书推荐场景及内部实践(1) 工业界推荐系统-小红书推荐场景及内部实践(2) 工业界推荐系统-小红书推荐场景及内部实践(3) 该系列文章根据小红书搜推算法工程师、团队负责人王树森B站上主讲的《工业界推荐系统》之小红书业务场景及内部实践整理而得。感谢大佬分享工业界前沿的推荐系统实战技术! 双塔模型:线上召回和更新 线上召回 将物品的 representation 向量离线存储到向量数据库中: 离线存储 完成训练之后,用物品塔计算每个物品的特征向量 𝐛 。 把几亿个物品向
推荐系统(十一) 2021-2022年工业界推荐算法实践经验汇总
hong__fang的专栏
03-19 1170
对2021-2022年,工业界推荐算法实践经验进行了梳理,主要以下七个维度进行归纳:推荐系统演化、召回、双塔模型、排序模型、重排模型、多目标模型、智能算力。
系统论重要模型_笔记
AnlaGodness的博客
04-03 4090
今天的主题是系统论重要模型,内容有: 系统的三个组件 系统的五种模型 杠杆解 和 储蓄池 两种工具 好系统的三大特征 系统的三个组件:要素、关系、作用 要素分为: 正信息 正能量 资产 负信息 负能量 负债 正信息让这个世界减少不确定性 负信息就是让世界变得更混乱的信息,欺骗、撒谎、谣言都是负信息。 关系分为: 正关系 是加强关系。 负关系 是减弱关系。 系统的五种模型: (正负要素、正负关系的组合就形成了四种循环:良性循环、恶性循环、贤者时刻、回归平庸) 正要素+正关系 构成
人工智能|推荐系统——工业界推荐系统之召回
也许有一天我们再相逢 睁开眼睛看清楚 我才是英雄!
05-04 447
离散特征可以用Embedding Layers,连续特征可以归一化、分桶等处理。Swing额外考虑重合的⽤户是否来⾃⼀个⼩圈⼦,两个⽤户重合度⼤,则可能来⾃⼀个⼩圈⼦,权重降低。简单负样本可以是全体物品(考虑非均匀采样打压热门物品)或者Batch内负样本。⽤户兴趣动态变化,⽽物品特征相对稳定,事先存储物品向量𝐛,线上现算⽤户向量𝐚。困难负样本主要考虑被召回,但是被排序淘汰的样本。一个物品的两个向量可以通过一些特征变换得到。⽤索引,离线计算量⼤,线上计算量⼩。正样本的选择需要考虑冷门、热门物品。
工业界推荐系统实践总结-- 持续更新
ciecus_csdn的博客
07-14 454
从学校毕业从19年实习在美团做广告推荐,然后20年开始一直在华为做视频推荐,从业时间不长,但是较学校的认知相比,还是完善了很多,故此总结,方便以后回顾。 文章目录端到端流程初始阶段:了解推荐需求,了解业务特点,设计需要采集样本特征、标签阶段一:检查数据质量、初步挑选特征阶段二:挑选模型,进一步特征处理阶段三:根据离线指标优化模型阶段四:线上A/B实验,根据case分析推荐瓶颈,制定优化方案 端到端流程 实践中的推荐系统或者“推荐”这个需求的设计,相对来说是一个比较长的链路, 初始阶段:了解推荐需求,了解业务
人工智能|推荐系统——工业界推荐系统之冷启动
最新发布
也许有一天我们再相逢 睁开眼睛看清楚 我才是英雄!
05-09 445
UGC的物品冷启有哪些⼩红书上⽤户新发布的笔记。B站上⽤户新上传的视频。今⽇头条上作者新发布的⽂章。为什么要特殊对待新笔记?新笔记缺少与⽤户的交互,导致推荐的难度⼤、效果差。扶持新发布、低曝光的笔记,可以增强作者发布意愿。优化冷启的目标精准推荐:克服冷启的困难,把新笔记推荐给合适的⽤户,不引起⽤户反感。激励发布:流量向低曝光新笔记倾斜,激励作者发布。挖掘⾼潜:通过初期⼩流量的试探,找到⾼质量的笔记,给与流量倾斜。
写文章

热门文章

  • 深度学习之卷积神经网络CNN 常用的几个模型 51612
  • Ubuntu16.04查看用户和密码以及忘记密码后重置解决方案 44661
  • batch norm、relu、dropout 等的相对顺序和BN、dropout的几个问题和思考 34359
  • XGBoost之类别特征的处理 23480
  • 深度学习之卷积神经网络CNN详解 21248

分类专栏

  • 机器学习和深度学习实战 付费 7篇
  • 缺陷检测 付费 9篇
  • 论文解读和大咖技术号记录 付费 70篇
  • scikit-learn源码阅读 付费 2篇
  • 计算机视觉 15篇
  • 模型优化和压缩 16篇
  • 爬虫 2篇
  • 推荐系统 39篇
  • tensorRT从零起步高性能部署 50篇
  • 异构加速与并行计算 3篇
  • 其他
  • 机器学习 31篇
  • 算法工程 13篇
  • 分布式深度学习 2篇
  • C++代码优化 7篇
  • docker 7篇
  • Django 3篇
  • 深度学习 19篇
  • keras 9篇
  • pytorch 7篇
  • TensorFlow 25篇
  • C/C++ 5篇
  • 集成学习 15篇
  • NLP 22篇
  • spark 18篇
  • 项目实战 7篇
  • 基础算法和数据结构 35篇
  • 专栏文章链接 3篇
  • 软件安装和使用说明 13篇

最新评论

  • caffe卷积神经网络中im2col 详解

    李犇: 实际上不是这样的,你把w和h换一下,就不对了

  • Ubuntu16.04查看用户和密码以及忘记密码后重置解决方案

    hxsln11: 其实博主可以直接说:不能明文查看密码。忘记密码只能sudo去改 ~

  • 决策树中的类别特征问题(关于label encode还是one-hot的讨论)

    gfjy10: 有个问题,比如 特征的具体实例如果都是文字,区域特征下包括 非洲,北美等等文字,类似的这种没有 先后、大小关系的特征,而lightgbm好像不能直接处理这种文本特征吧,也要转换成数值么,用哪种编码方式合适呢,看过很多帖子说,决策树不适合用one-hot?

  • Ubuntu 16.04安装docker详细步骤

    zhazhay: 请问有解决吗,我遇到了同样的问题

  • Word2vec模型原理与keras、tensorflow实现word2vec

    weixin_45865797: 用到的模块: import tensorflow.keras.backend as K from tensorflow.keras.layers import Input from tensorflow.keras import Model from tensorflow.keras.layers import Embedding, Lambda

大家在看

  • 用docker Desktop 下载使用thingsboard/tb-gateway
  • 【李艳波主任】痉挛性斜颈:并非只是太累,老方有奇效
  • 灵敏度——传声器的一个参数
  • 第四届蓝桥杯真题及答案
  • Android开发贝塞尔曲线

最新文章

  • GOOGLENET V4
  • SENET
  • YOLOV3
2024年25篇
2023年82篇
2022年126篇
2021年39篇
2020年95篇
2019年46篇
2018年65篇
2017年2篇

目录

目录

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值

玻璃钢生产厂家东莞市商场美陈软装陈列设计玻璃钢花盆哪家用料好玻璃钢雕塑制品厂电话贵州玻璃钢仿铜雕塑价格山东个性化玻璃钢雕塑价位景洪市玻璃钢雕塑定制河南玻璃钢景观雕塑生产雕塑彩带玻璃钢广东主题商场美陈供应商杭州抽象玻璃钢雕塑定制自贡市玻璃钢雕塑莆田玻璃钢人物雕塑价格范围兰州玻璃钢 雕塑制作铜陵人物玻璃钢雕塑生产厂安徽创意玻璃钢雕塑定做价格郑州泡沫玻璃钢雕塑上街区玻璃钢智能雕塑金昌仿真人物玻璃钢雕塑公司承德玻璃钢雕塑生产厂家玻璃钢雕塑兔子玻璃钢动物马雕塑批发赣县玻璃钢雕塑厂家东莞发光景观玻璃钢雕塑制作南京天筑玻璃钢雕塑价格云南水果玻璃钢雕塑价位湖州火烈鸟玻璃钢雕塑生产厂家梅州玻璃钢人物雕塑定制宝应玻璃钢雕塑生产玻璃钢卡通雕塑批发宁夏玻璃钢雕塑加工香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声单亲妈妈陷入热恋 14岁儿子报警汪小菲曝离婚始末遭遇山火的松茸之乡雅江山火三名扑火人员牺牲系谣言何赛飞追着代拍打萧美琴窜访捷克 外交部回应卫健委通报少年有偿捐血浆16次猝死手机成瘾是影响睡眠质量重要因素高校汽车撞人致3死16伤 司机系学生315晚会后胖东来又人满为患了小米汽车超级工厂正式揭幕中国拥有亿元资产的家庭达13.3万户周杰伦一审败诉网易男孩8年未见母亲被告知被遗忘许家印被限制高消费饲养员用铁锨驱打大熊猫被辞退男子被猫抓伤后确诊“猫抓病”特朗普无法缴纳4.54亿美元罚金倪萍分享减重40斤方法联合利华开始重组张家界的山上“长”满了韩国人?张立群任西安交通大学校长杨倩无缘巴黎奥运“重生之我在北大当嫡校长”黑马情侣提车了专访95后高颜值猪保姆考生莫言也上北大硕士复试名单了网友洛杉矶偶遇贾玲专家建议不必谈骨泥色变沉迷短剧的人就像掉进了杀猪盘奥巴马现身唐宁街 黑色着装引猜测七年后宇文玥被薅头发捞上岸事业单位女子向同事水杯投不明物质凯特王妃现身!外出购物视频曝光河南驻马店通报西平中学跳楼事件王树国卸任西安交大校长 师生送别恒大被罚41.75亿到底怎么缴男子被流浪猫绊倒 投喂者赔24万房客欠租失踪 房东直发愁西双版纳热带植物园回应蜉蝣大爆发钱人豪晒法院裁定实锤抄袭外国人感慨凌晨的中国很安全胖东来员工每周单休无小长假白宫:哈马斯三号人物被杀测试车高速逃费 小米:已补缴老人退休金被冒领16年 金额超20万

玻璃钢生产厂家 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化