Fast Fourier Convolution 阅读笔记
创始人
2024-03-29 19:31:50
0

快速傅里叶卷积

论文链接
NeurIPS 2020

摘要: 目前深度网络中的普通卷积以局部且固定scale的方式运行(例如,面向图像的任务广泛采用3×3 kernel),导致网络低效连接两个远距离位置。本文提出了一种具有 non-local 感受野卷积单元内 cross-scale fusion 的新卷积算子:快速傅里叶卷积(Fast Fourier Convolution FFC)。根据傅里叶理论中的谱卷积定理,全局谱域中的逐点更新会影响傅里叶变换中涉及的所有输入特征,是 non-local 感受野的设计线索。本文提出的FFC旨在将三种不同的计算封装在一个运算单元中:
① 一个进行普通 small-kernel 卷积的 local 分支;
② 一个处理频谱叠加图像 patch 的 semi-global 分支;
③ 一个处理图像级别频谱的 global 分支。
所有分支互补处理不同的scale,通过一个多分支聚合步骤进行 cross-scale fusion。无需任何调整 FFC 就可直接替换现有网络中的普通卷积,且复杂性(例如FLOPs)相当。我们在三个视觉基准(用于图像识别的ImageNet、用于视频动作识别的Kinetics、用于人体关键点检测的MSCOCO)上对FFC进行了实验评估&#

相关内容

热门资讯

保存时出现了1个错误,导致这篇... 当保存文章时出现错误时,可以通过以下步骤解决问题:查看错误信息:查看错误提示信息可以帮助我们了解具体...
汇川伺服电机位置控制模式参数配... 1. 基本控制参数设置 1)设置位置控制模式   2)绝对值位置线性模...
不能访问光猫的的管理页面 光猫是现代家庭宽带网络的重要组成部分,它可以提供高速稳定的网络连接。但是,有时候我们会遇到不能访问光...
表格中数据未显示 当表格中的数据未显示时,可能是由于以下几个原因导致的:HTML代码问题:检查表格的HTML代码是否正...
本地主机上的图像未显示 问题描述:在本地主机上显示图像时,图像未能正常显示。解决方法:以下是一些可能的解决方法,具体取决于问...
表格列调整大小出现问题 问题描述:表格列调整大小出现问题,无法正常调整列宽。解决方法:检查表格的布局方式是否正确。确保表格使...
不一致的条件格式 要解决不一致的条件格式问题,可以按照以下步骤进行:确定条件格式的规则:首先,需要明确条件格式的规则是...
Android|无法访问或保存... 这个问题可能是由于权限设置不正确导致的。您需要在应用程序清单文件中添加以下代码来请求适当的权限:此外...
【NI Multisim 14...   目录 序言 一、工具栏 🍊1.“标准”工具栏 🍊 2.视图工具...
银河麒麟V10SP1高级服务器... 银河麒麟高级服务器操作系统简介: 银河麒麟高级服务器操作系统V10是针对企业级关键业务...