Machine LearningPytorch中的gradient_accumulate_steps、warmup、lr_decay、optimizer和scheduler等问题的解答 (一)gradient_accumulate_steps 对于模型训练来说,batch_size越大,模型效果会越好。但是某些环境下,没有足够的GPU来支撑起大的batch_size,因此这时可以考虑... 11月16日915评论pytorch 深度学习 阅读全文
Machine Learningpytorch实战经验:4个提高深度学习模型性能的技巧 概述 深度学习是一个广阔的领域,但我们大多数人在构建模型时都面临一些共同的难题 在这里,我们将讨论提高深度学习模型性能的4个难题和技巧 这是一篇以代码实践为重点的文章,所以请准备好你的Python I... 11月29日1,416评论卷积神经网络 深度学习 阅读全文
Machine Learning使用PyTorch的DataLoader的简单示例 首先上代码: import torch from torch.utils.data import Dataset, DataLoader # 自定义数据集类 class MyDataset(Datas... 05月23日17评论pytorch 阅读全文
Machine LearningPytorch在训练时冻结某些层使其不参与训练 我们知道,深度学习网络中的参数是通过计算梯度,在反向传播进行更新的,从而能得到一个优秀的参数,但是有的时候,我们想固定其中的某些层的参数不参与反向传播。比如说,进行微调时,我们想固定已经加载预训练模型... 04月11日73评论pytorch 模型训练 阅读全文
Script使用anaconda安装pytorch 使用anaconda安装pytorch过程中出现的问题 在使用anaconda安装pytorch的过程中,出现了很多问题,也在网上查了很多相关的资料,但是都没有奏效。在很多次尝试之后才发现是要先装nu... 12月24日1,261评论Anaconda pytorch 阅读全文
Machine LearningPyTorch 基础篇(2):线性回归(Linear Regression) # 包 import torch import torch.nn as nn import numpy as np import matplotlib.pyplot as plt # 超参数设置 in... 04月01日152评论pytorch 阅读全文
Machine LearningPyTorch 基础篇(1):Pytorch 基础 Pytorch 学习开始 入门的材料来自两个地方: 第一个是官网教程:WELCOME TO PYTORCH TUTORIALS,特别是官网的六十分钟入门教程 DEEP LEARNING WITH PY... 04月01日179评论pytorch 阅读全文