imagefusion-nestfuse icon indicating copy to clipboard operation
imagefusion-nestfuse copied to clipboard

请问在ECB和DCB中为啥第一个和第二个卷积层中的输出通道为什么要除2

Open scz5221201 opened this issue 1 year ago • 3 comments

在DenseBlock_light中,这里为啥要做这个操作:out_channels_def = int(in_channels / 2),有什么原因吗

scz5221201 avatar Jul 19 '23 02:07 scz5221201

主要是为了防止通道数太大,因为dense每层都要级联。

hli1221 avatar Jul 19 '23 04:07 hli1221

好的,谢谢李博士。我目前已顺着您博士论文的看算法,请问下在RFN-Nest的后续还能往哪个方向走会有潜力些

scz5221201 avatar Jul 19 '23 05:07 scz5221201

还是能做一些增量性的工作。 1 可以引入transformer,虽然有人已经做了,但是可以更深入一些。 2 其次就是在这个训练框架上做纯transformer的结构。

hli1221 avatar Jul 19 '23 09:07 hli1221