抖音公开推荐算法原理

3 月 30 日消息,抖音总裁韩尚佑今日宣布,“抖音安全与信任中心”网站(95152.douyin.com)上线。网站首次公开抖音推荐算法原理,介绍其推荐算法如何预估用户行为概率,并通过多目标建模等方式实现更优质、丰富的内容推荐,而算法需由平台治理体系对其进行约束和规范。

抖音公开推荐算法原理插图

网站也披露了抖音平台治理的审核流程,阐述平台如何应对谣言、网暴等违规内容带来的挑战。

同时,抖音还介绍了自家的“Wide&Deep”和“双塔召回”两种模型。

Wide&Deep 模型的主要思路正如其名,是由单层的 Wide 部分和多层的 Deep 部分组成的混合模型。其中,Wide 部分的主要作用是让模型具有较强的“记忆能力”(memorization),“记忆能力”可以被理解为模型直接学习并利用历史数据中物品或者特征的“共现频率”的能力;Deep 部分的主要作用是让模型具有“泛化能力”(generalization),“泛化能力”可以被理解为模型传递特征的相关性,以及发掘稀疏甚至从未出现过的稀有特征与最终标签相关性的能力。

Wide&Deep 模型的这一结构特征,可以解决协同过滤算法的短板。协同过滤算法优点突出,但是其局限性也很明显,就是泛化能力差,推荐的结果头部效应比较明显。也就是容易造成信息单一问题。

抖音公开推荐算法原理插图1
抖音公开推荐算法原理插图2

一条视频从海量信息中被选中,推送给用户,一般要经过进入内容池、召回、排序三个环节。用户发布的新视频首先要经过初步评估进入内容池,然后进入召回环节,其作用是从海量的内容池中,初步快速粗筛出一大批用户可能感兴趣的内容。

举例来说,召回环节需要用到召回模型,抖音最常用的召回模型是“双塔召回模型”(Two-Tower Retrieval Model)。双塔召回模型把用户和内容都转化为数学空间里的一个个点,就像是给用户和内容贴上了独特的“数字标签”,这个过程叫做向量化表征学习。其大概过程如下:

  • (1)分别将用户特征、内容特征进行数学转化(如展示小猫的视频为 0,展示小狗的视频为 1,短视频为 0,长视频为 1,那么一个展示小猫的长视频即(0,1),其实际长度取决于特征有多少维度,用户特征同理);
  • (2)将转化后的数学特征输入到用户塔、内容塔两个深度学习模型中,经过训练,各自形成一组新的数字集合,这叫做用户表征和内容表征。在这一步,原本各自代表一个现实特征的数字不再具备任何实际语义,两个模型会把用户特征和内容特征都转化为没有现实意义的数字代码 —— 因此,算法不用理解现实语义,只需处理纯粹的数学符号;
  • (3)将两组形式为纯粹的数字集合的用户表征和内容表征,放入同一个向量空间中,每一组数字集合便在向量空间中拥有了一组专属的向量值,好比一组独有的“数字指纹”;
  • (4)将训练过的所有内容表征的向量值和当前用户表征的向量值的距离进行对比,距离越接近代表用户越喜欢。当你的“数字指纹”和某个视频的“数字指纹”在坐标系里刚好比较“匹配”(距离近),算法就会推荐它。
抖音公开推荐算法原理插图3
抖音公开推荐算法原理插图4

今年 1 月,抖音集团宣布拟推出 10 项措施,推动平台工作透明化,创建安全与信任的平台环境,打造更良好的网络生态,其中包括推进算法透明化推进平台治理透明化

1.推进算法透明化。2025 年,抖音将建设安全与信任中心网站和线下公示展厅,面向社会全面深入地公开抖音的算法基础运作原理、运营机制,也将对外公布各类热点榜单的计算原理和机制,提高透明度。

2.推进平台治理透明化。抖音将持续加大治理工作的技术研究、产品人力、资金投入。在抖音安全与信任中心,我们将面向社会全面公开抖音的社区规范、审核标准、审核机制;并将定期公开平台治理的各类典型违规案件和现象,明确对各类问题的治理态度,接受公众监督。

给TA打赏
共{{data.count}}人
人已打赏
0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
在线客服
主机邦
我们将24小时内回复。
2025-04-02 07:10:53
您好,有任何疑问请与我们联系!
您的工单我们已经收到,我们将会尽快跟您联系!
[QQ客服]
176363189
suduwangluo
[小黄]
17307799197
[企业邮箱]
sudu@yunjiasu.cc
取消

选择聊天工具: