当前位置:网站首页>【论文笔记1】小样本分类
【论文笔记1】小样本分类
2022-08-10 05:29:00 【Time.Xu】
FSL学习笔记
最新论文&代码收集网站:网址连接
论文1:孪生网络 (Metric Based)
Siamese Neural Networks for One-shot Image Recognition
通过Siamese神经网络借助监督度量的方法学习图像表示,然后重用该网络的特征进行OneshowtLearning,而不需要任何再训练。
孪生网络由两个结构相同(参数也相同:权重绑定了)的网络组成,这两个网络接受不同的输入,并且这两个网络最后由一个能量函数(Energy fuction)汇合到一起。这个Energy Fuction用于计算两个特征图之间的距离。
使用加权的L1距离来进行特征向量之间的距离,并结合了sigmoid激活函数。(使用了交叉熵损失函数)
孪生网络的模型结构如图所示。 最后的卷积层中的单位被压平成一个矢量。
预测向量(prediction vector)的公式是:p =
其中,σ是sigmoi的函数,αj是对每个向量的第j维的权重进行调节(是可学习的参数)。
所定义的交叉熵损失函数如下所示:
当两张图片相同时y=1;当两张图片不同时y=0。
论文2 匹配网络 (Metric Based)
Matching Networks for One Shot Learning
比较高明的解读:链接
研究背景:
- 少样本数据经常存在,但是
- 数据增强和正则化方法能够避免过拟合,却不能让网络学习的很好
- 需要随机梯度下降多次,这是浪费时间的
研究贡献:
- 提出了一种匹配网络MN
- test and train conditions must match. (为了使得网络能够更快的适应新的模型算法,即 训练的时候就和测试一样都是一样的输入方式)
- 关键:经过训练后,匹配网络能够为未观察到的类产生合理的测试标签,而不需要对网络进行任何更改
边栏推荐
- flinkcdc 读取pgsql 的时间被放大了 有大佬知道咋回事吗 gmt_create':1
- 8.STM32F407之HAL库——PWM笔记
- SQL Server查询优化
- Flutter development: error The following assertion was thrown resolving an image codec: Solution for Unable to...
- Nexus_Warehouse Type
- OAuth2的使用场景、常见误区、使用案例
- 看了几十篇轻量化目标检测论文扫盲做的摘抄笔记
- 咨询cdc 2.0 for mysql不执行flush with read lock.怎么保证bin
- 如何在报表控件FastReport.NET中连接XLSX 文件作为数据源?
- Qiskit 学习笔记1
猜你喜欢
随机推荐
论文精读 —— 2021 CVPR《Progressive Temporal Feature Alignment Network for Video Inpainting》
SQL Server query optimization
Rpc interface stress test
Ask you guys.The FlinkCDC2.2.0 version in the CDC community has a description of the supported sqlserver version, please
FPGA engineer interview questions collection 31~40
FPGA工程师面试试题集锦1~10
The sword refers to Offer 033. Variation array
FPGA工程师面试试题集锦11~20
应用在智能触摸遥控器中的触摸芯片
Get started with the OAuth protocol easily with a case
基于BP神经网络的多因素房屋价格预测matlab仿真
How does Jenkins play with interface automation testing?
基于Qiskit——《量子计算编程实战》读书笔记(一)
Jenkins 如何玩转接口自动化测试?
canvas canvas drawing clock
How does flinksql write that the value of redis has only the last field?
Qiskit官方文档选译之量子傅里叶变换(Quantum Fourier Transform, QFT)
pytorch 学习
MySql之json_extract函数处理json字段
SSM框架整合实例