【Pytorch】使用Pytorch实现简单的Residual Network
创始人
2025-05-30 21:53:55

文章目录

  • 1. 题目描述
  • 2. 代码实现
    • 验证
  • 写在最后


1. 题目描述

在这个例子中网络结构如下所示(网络结构取自李宏毅老师的HW3)

在这里插入图片描述

需要注意的是,当我们在计算卷积的特征图的维度时,常用以下公式:

OutputDim=(InputDim−KernelSize+2∗Padding)Stride+1OutputDim = \frac{(InputDim-KernelSize+2*Padding)}{Stride} + 1OutputDim=Stride(InputDim−KernelSize+2∗Padding)​+1

  • 当分子不能整除Stride的时候,输出维度默认向下取整,而对于MaxPooling的情况则相反(向上取整)
  • kernel size, output dim, input dim 这些通常都只考虑正方形的输入输出,所以上面的公式只考虑一个维度即可
  • stride对于卷积核的平移时,不论横轴还是纵轴都需要移动相同的stride

2. 代码实现

class MyResNet(nn.Module):def __init__(self):super(MyResNet, self).__init__()# input 128 * 128 * 3# Out = (Input - Kernel + 2 * Padding) / Stride + 1# layer1 O = (128 - 3 + 2)/1 + 1 = 128self.cnn_layer1 = nn.Sequential(nn.Conv2d(in_channels=3, out_channels=64, kernel_size=3, stride=1, padding=1),nn.BatchNorm2d(64))# layer2 O = (128 - 3 + 2)/1 + 1 = 128self.cnn_layer2 = nn.Sequential(nn.Conv2d(in_channels=64, out_channels=64, kernel_size=3, stride=1, padding=1),nn.BatchNorm2d(64))# layer3 O = (128 - 3 + 2)/2 + 1 = 64self.cnn_layer3 = nn.Sequential(nn.Conv2d(in_channels=64, out_channels=128, kernel_size=3, stride=2, padding=1),nn.BatchNorm2d(128))# layer4 O = (64 - 3 + 2)/1 + 1 = 64self.cnn_layer4 = nn.Sequential(nn.Conv2d(in_channels=128, out_channels=128, kernel_size=3, stride=1, padding=1),nn.BatchNorm2d(128))# layer5 O = (64 - 3 + 2)/2 + 1 = 32self.cnn_layer5 = nn.Sequential(nn.Conv2d(in_channels=128, out_channels=256, kernel_size=3, stride=2, padding=1),nn.BatchNorm2d(256))# layer6 O = (64 - 3 + 2)/1 +1 = 32self.cnn_layer6 = nn.Sequential(nn.Conv2d(in_channels=256, out_channels=256, kernel_size=3, stride=1, padding=1),nn.BatchNorm2d(256))# fcself.fc_layer = nn.Sequential(nn.Linear(32*32*256, 256),nn.ReLU(),nn.Linear(256, 11))self.relu = nn.ReLU()def forward(self, x):# 第一层不做加法,但是保存x1 = self.cnn_layer1(x)x1 = self.relu(x1)res1 = x1 # 第一层出来的作为残差记录# 第二层做加法x2 = self.cnn_layer2(x1)x2 = x2 + res1 # 第一次残差操作x2 = self.relu(x2)# 第三层不做加法,但是保存x3 = self.cnn_layer3(x2)x3 = self.relu(x3)res3 = x3# 第四层做加法x4 = self.cnn_layer4(x3)x4 = x4 + res3x4 = self.relu(x4)# 第五层不做加法,但是保存x5 = self.cnn_layer5(x4)x5 = self.relu(x5)res5 = x5# 第六层做加法x6 = self.cnn_layer6(x5)x6 = x6 + res5x6 = self.relu(x6)# 第七层全连接分类xout = x6.flatten(1) #(256,32,32) --> (256, 32*32)xout = self.fc_layer(xout)return xout

验证

随便找个图片数据集load进来就行,这里就不细说了

data_iter = iter(train_loader)
images, labels = next(data_iter) # 取出一个batchimage = images[0] # batch中的第一章图片
print(images.shape)
print(image.shape)image_np = np.transpose(image.numpy(), (1, 2, 0)) fig, ax = plt.subplots() 
ax.imshow(image_np) # 其实是一个tensor

模型实例化

modeltest = MyResNet().to(device)
images, labels = next(data_iter) # 取出一个batchouts = modeltest(images.to(device))

运行了之后没报错就说明维度的输入输出没问题


写在最后

各位看官,都看到这里了,麻烦动动手指头给博主来个点赞8,您的支持作者最大的创作动力哟!
才疏学浅,若有纰漏,恳请斧正
本文章仅用于各位作为学习交流之用,不作任何商业用途,若涉及版权问题请速与作者联系,望悉知

相关内容

热门资讯

数据结构---队列 专栏:数据结构 个人主页:HaiFan. 专栏简介:这里是...
数字操作方法 系列文章目录 前端系列文章——传送门 JavaScript系列文章——传送门 文章目录系列文章目录...
Cartesi 2023 年 ... 查看 Cartesi Machine、Cartesi Rollups 和 Noether 的更新正在...
JavaWeb——jsp概述入... JSP定义:  在如下一个jsp文件里面有如下的代码  <%@ page content...
一切喜怒哀乐都来自于你的认知 01 有个学子,准备出国,父母请来清华的教授宁向东。请问教授࿱...
JAVA并发编程——synch... 引言         Java语言为了解决并发编程中存在的原子性、可见性和有序性问题,...
git学习----3.21 未... 文章目录前言Git :一个分布式版本控制工具目标一、概述1.1 开发中的实际场景1.2...
Qt优秀开源项目之十七:QtP... QtPromise是Promises/A+规范的Qt/C++实现。该规范的译...
【前端八股文】JavaScri... 文章目录Set概念与arr的比较属性和方法并集、交集、差集Map概念属性和方法String用索引值和...
海康硬盘录像机接入RTSP/o... EasyNVR安防视频云服务平台可支持设备通过RTSP/Onvif协议接入平台,能提供...
在混合劳动力时代如何避免网络安... 在混合劳动力时代如何避免安全网络风险 三年多来,混合工作一直是工作生活中不可或缺的一...
2023还不懂Jmeter接口... 这里介绍的Jmeter接口测试的的实战,如果文章内容没遇看懂的话,我这边...
基于4G/5G弱网聚合的多链路... 基于4G/5G多卡聚合(弱网聚合)的智能融合通信设备技术亮点 增强带宽提供可靠连接 通过将多个有线和...
如何使用Synplify综合v... 文章目录使用Synplify综合的好处synplify的教程方法1(无效)...
2023年全国最新高校辅导员精... 百分百题库提供高校辅导员考试试题、辅导员考试预测题、高校辅导员考试真题、辅导员证考试题库等ÿ...
2022年18个值得期待的Le... 有数百个独特的LearnDash附加组件,您可能很难选择您的LearnDash LMS...
【java基础】Stream流... 文章目录基本介绍流的创建流的各种常见操作forEach方法filter方法map方法peek方法fl...
javaweb高校行政办公自动... 本课题基于我国高校管理信息化建设现状,结合在实际工作中所遇到的问题和收获,...
一款专门为自动化测试打造的集成... 你好,我是不二。 随着行业内卷越来越严重,自动化测试已成为测试工程师的...
【go-zero】golang... 一、casbin 概览 1、casbin基本了解 casbin的GitHub:https://git...
现在开发低代码平台算晚吗? 现在开发低代码平台算晚吗?作为低代码的亲戚——零代码厂商,这篇就以“厂商...
【JavaWeb】书城项目(2... 222.书城项目-第三阶段:修改所有html页面为jsp页面 改成jsp页面之后&#x...
基于jeecgboot的大屏设...      通过前面设计好数据源后,就要进行数据集的设计了。      一、还是在onl...
Linux命令小技巧:显示文件... 工作中会有很多千奇百怪的需求,比如:如何在 Linux 命令行中快速找到...
【找工作】-- 大数据工程师找... 目录 1.前言 2.找工作的理论知识 2.1 分析个人特征 2.1.1 你自身优势是什么?
C++基础算法④——排序算法(... 排序算法 1.插入排序 2.桶排序 1.插入排序 基本思想:将初始数据分为有序部分和...
nginx快速入门.跟学B站n... nginx快速入门.跟学B站nginx一小时精讲课程笔记nginx简介及环境准备nginx简介环境准...
ORACLE存过互相调用之间事... 今天在问答区看到一个问题是 假如有procedureA、procedureB和procedureC&...
基于java中Springbo... 基于java中Springboot框影视影院订票选座管理系统 开发语言:Java 框...
CVE-2018-18086 最近闲来无事,看到青少年CTF平台,感觉对新手还是比较友好的࿰...