利用基于Transformer的序列编码器进行对比学习,在序列推荐方面取得了优势。它最大化了共享相似语义的成对序列扩充之间的一致性。然而,现有的序列推荐对比学习方法主要以左右单向Transformer为基础编码器,由于用户行为可能不是严格的从左到右的顺序,因此对于序列推荐来说,这种方法不是最优的。为了解决这个问题,我们提出了一种新的框架,名为对比学习与双向Transformer序列推荐(CBiT)。具体来说,我们首先在双向Transformer中对长用户序列应用滑动窗口技术,它允许对用户序列进行更细粒度的划分。然后我们结合完形填空任务掩码和dropout掩码生成高质量的正样本,进行多对对比学习,与普通的一对对比学习相比,表现出更好的性能和适应性。此外,我们还引入了一种新的动态损失加权策略来平衡完形任务损失和对比任务损失。在三个公共基准数据集上的实验结果表明,我们的模型在序列推荐方面优于最先进的模型。
当前位置:网站首页>CIKM2022 | 基于双向Transformers对比学习的序列推荐
CIKM2022 | 基于双向Transformers对比学习的序列推荐
2022-08-10 22:02:00 【智源社区】
边栏推荐
- 2022年8月10日:使用 ASP.NET Core 为初学者构建 Web 应用程序--使用 ASP.NET Core 创建 Web UI(没看懂需要再看一遍)
- Service - DHCP principle and configuration
- ASCII、Unicode和UTF-8
- c语言之 练习题1 大贤者福尔:魔法数,神奇的等式
- What are the concepts, purposes, processes, and testing methods of interface testing?
- How to translate financial annual report, why choose a professional translation company?
- 为什么一般公司面试结束后会说「回去等消息」,而不是直接告诉面试者结果?
- 这款可视化工具神器,更直观易用!太爱了
- uni-app微信小程序——下拉多选框
- shell(文本打印工具awk)
猜你喜欢
LeetCode-36-Binary search tree and doubly linked list
2022年8月的10篇论文推荐
解码2022中国网安强星丨正向建、反向查,华为构建数字化时代的网络安全防线
文件IO-缓冲区
C # Hex file transfer skills necessary article 】 【 bin file code implementation
【PCBA scheme design】Bluetooth skipping scheme
测试4年感觉和1、2年时没什么不同?这和应届生有什么区别?
VLAN huawei 三种模式
The Thread State,
shell(文本打印工具awk)
随机推荐
xshell (sed command)
port forwarding
艺术与科技的狂欢,阿那亚2022砂之盒沉浸艺术季
String类的常用方法
配电网络扩展规划:考虑使用概率性能源生产和消费概况的决策(Matlab代码实现)
新一代网络安全防护体系的五个关键特征
The Thread State,
阿里云张新涛:支持沉浸式体验应用快速落地,阿里云云XR平台发布
链表中的节点每k个一组翻转
过滤器
深度学习之 12 循环神经网络RNN2
shell脚本循环语句for、while语句
链表相加(二)
Thread State 详解
关于 DataFrame: 处理时间
Why general company will say "go back messages such as" after the end of the interview, rather than just tell the interviewer the result?
[SQL brush questions] Day3----Special exercises for common functions that SQL must know
翻译科技论文,俄译中怎样效果好
Self-organization is a two-way journey between managers and members
12 Recurrent Neural Network RNN2 of Deep Learning