当前位置: 首页 > wzjs >正文

需要网站建设百度快照是什么意思?

需要网站建设,百度快照是什么意思?,编程猫少儿编程官网,阳泉做网站多少钱知识点回顾: resnet结构解析CBAM放置位置的思考针对预训练模型的训练策略 差异化学习率三阶段微调 ps:今日的代码训练时长较长,3080ti大概需要40min的训练时长 作业: 好好理解下resnet18的模型结构尝试对vgg16cbam进行微调策略 R…

知识点回顾:

  1. resnet结构解析
  2. CBAM放置位置的思考
  3. 针对预训练模型的训练策略
    1. 差异化学习率
    2. 三阶段微调

ps:今日的代码训练时长较长,3080ti大概需要40min的训练时长

作业:

  1. 好好理解下resnet18的模型结构
  2. 尝试对vgg16+cbam进行微调策略

ResNet结构解析与CBAM微调策略

1.ResNet18核心结构

# ResNet18基础结构(基于torchvision实现)
from torchvision.models import resnet18
model = resnet18(pretrained=True)# 核心组件:
# - 初始卷积层(conv1): 7x7卷积+BN+ReLU
# - 4个layer结构(包含BasicBlock)
# - 平均池化层(avgpool)
# - 全连接层(fc)

 2.CBAM放置策略

class VGG16_CBAM(nn.Module):def __init__(self):super().__init__()self.features = nn.Sequential(# 第一个卷积块nn.Conv2d(3, 64, kernel_size=3, padding=1),CBAM(64),  # 在卷积层后添加CBAMnn.ReLU(inplace=True),nn.Conv2d(64, 64, kernel_size=3, padding=1),CBAM(64),  # 每个卷积块添加nn.ReLU(inplace=True),nn.MaxPool2d(kernel_size=2, stride=2)# ... 后续层同理)

3.三阶段微调策略

# 阶段1:冻结特征层
for param in model.features.parameters():param.requires_grad = False# 阶段2:解冻后半部分层
for layer in list(model.features.children())[-4:]:for param in layer.parameters():param.requires_grad = True# 阶段3:全解冻+小学习率
optimizer = optim.SGD([{"params": model.features.parameters(), "lr": 1e-4},{"params": model.classifier.parameters(), "lr": 1e-3}
], momentum=0.9)

作业

一、ResNet18结构理解 :

- 使用torchsummary查看详细结构

from torchsummary import summary
summary(resnet18().to("cuda"), (3, 224, 224))

二、VGG16+CBAM微调 :

- 训练命令建议

python train.py --model vgg16_cbam --batch-size 64 --lr 1e-3 --freeze-epochs 5

 

 

http://www.dtcms.com/wzjs/220789.html

相关文章:

  • 北京商城网站开发公司百度搜索引擎的优缺点
  • 网站怎样做链接关键词抓取工具都有哪些
  • 梅州网站建设求职简历南京seo整站优化技术
  • wordpress.com vip江苏seo排名
  • 有什么好的书写网站品牌网站建设解决方案
  • wordpress手机版主题模板下载seo数据优化
  • 网站系统建设需要什么资质bittorrentkitty磁力猫
  • 广州云脑网站建设如何成为百度广告代理商
  • 龙华公司网站建设新冠病毒最新消息
  • 分享信息的网站seo门户网站建设方案
  • 网站的术语成都电脑培训班零基础
  • 网站建设学什么语音最新发布的最新
  • 此网站在美国进行维护百度快速优化排名软件
  • 维护一个网站要多少钱万网注册域名查询
  • 做网站需要学习哪些诊断网站seo现状的方法
  • 政府门户网站建设思路项目推广方案怎么写
  • 外部链接对网站的影响好推建站
  • 临海市城乡建设规划局网站搜索关键词软件
  • 海口网站建设服务关键词排名优化提升培训
  • 杭州模板建站软件网站域名怎么注册
  • 自己做网站 搜索功能开发百度搜索智能精选
  • 网站搜索引擎友好性分析软文写作范文
  • 微网站建设制作设计网站关键词优化排名推荐
  • 做抛物线的网站网络营销的方法是什么
  • 广州的十七做网站百度指数热度榜
  • 武汉婚纱摄影网站建设列表网推广效果怎么样
  • 国家建设工程质量检查标准网站seo网络推广软件
  • 做网站插背景图片如何变大泰州seo外包公司
  • 做presentation的网站全网整合营销推广系统
  • 2021年最新的网站惠州seo排名公司