返回顶部
首页 > 资讯 > 后端开发 > Python >python中的Pytorch建模流程是什么
  • 839
分享到

python中的Pytorch建模流程是什么

2023-06-29 09:06:51 839人浏览 八月长安

Python 官方文档:入门教程 => 点击学习

摘要

小编给大家分享一下python中的PyTorch建模流程是什么,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!一般我们训练神经网络有以下步骤:导入库设置训练参数的初

小编给大家分享一下python中的PyTorch建模流程是什么,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

一般我们训练神经网络有以下步骤:

  • 导入库

  • 设置训练参数的初始值

  • 导入数据集并制作数据集

  • 定义神经网络架构

  • 定义训练流程

  • 训练模型

以下,我就将上述步骤使用代码进行注释讲解:

1 导入库

import torchfrom torch import nnfrom torch.nn import functional as Ffrom torch import optimfrom torch.utils.data import DataLoader, DataLoaderimport torchvisionimport torchvision.transfORMs as transforms

2 设置初始值

学习率lr = 0.15# 优化算法参数gamma = 0.8# 每次小批次训练个数bs = 128# 整体数据循环次数epochs = 10

3 导入并制作数据集

本次我们使用FashionMNIST图像数据集,每个图像是一个28*28的像素数组,共有10个衣物类别,比如连衣裙、运动鞋、包等。

注:初次运行下载需要等待较长时间。

# 导入数据集mnist = torchvision.datasets.FashionMNIST(    root = './Datastes'    , train = True    , download = True    , transform = transforms.ToTensor())    # 制作数据集batchdata = DataLoader(mnist                       , batch_size = bs                       , shuffle = True                       , drop_last = False)

我们可以对数据进行检查:

for x, y in batchdata:    print(x.shape)    print(y.shape)    break# torch.Size([128, 1, 28, 28])# torch.Size([128])

可以看到一个batch中有128个样本,每个样本的维度是1*28*28。

之后我们确定模型的输入维度与输出维度:

# 输入的维度input_ = mnist.data[0].numel()# 784# 输出的维度output_ = len(mnist.targets.unique())# 10

4 定义神经网络架构

先使用一个128个神经元的全连接层,然后用relu激活函数,再将其结果映射到标签的维度,并使用softmax进行激活。

# 定义神经网络架构class Model(nn.Module):    def __init__(self, in_features, out_features):        super().__init__()        self.linear1 = nn.Linear(in_features, 128, bias = True)        self.output = nn.Linear(128, out_features, bias = True)        def forward(self, x):        x = x.view(-1, 28*28)        sigma1 = torch.relu(self.linear1(x))        sigma2 = F.log_softmax(self.output(sigma1), dim = -1)        return sigma2

5 定义训练流程

在实际应用中,我们一般会将训练模型部分封装成一个函数,而这个函数可以继续细分为以下几步:

  • 定义损失函数与优化器

  • 完成向前传播

  • 计算损失

  • 反向传播

  • 梯度更新

  • 梯度清零

在此六步核心操作的基础上,我们通常还需要对模型的训练进度、损失值与准确度进行监视。

注释代码如下:

# 封装训练模型的函数def fit(net, batchdata, lr, gamma, epochs):# 参数:模型架构、数据、学习率、优化算法参数、遍历数据次数    # 5.1 定义损失函数    criterion = nn.NLLLoss()    # 5.1 定义优化算法    opt = optim.SGD(net.parameters(), lr = lr, momentum = gamma)        # 监视进度:循环之前,一个样本都没有看过    samples = 0    # 监视准确度:循环之前,预测正确的个数为0    corrects = 0        # 全数据训练几次    for epoch in range(epochs):        # 对每个batch进行训练        for batch_idx, (x, y) in enumerate(batchdata):            # 保险起见,将标签转为1维,与样本对齐            y = y.view(x.shape[0])                        # 5.2 正向传播            sigma = net.forward(x)            # 5.3 计算损失            loss = criterion(sigma, y)            # 5.4 反向传播            loss.backward()            # 5.5 更新梯度            opt.step()            # 5.6 梯度清零            opt.zero_grad()                        # 监视进度:每训练一个batch,模型见过的数据就会增加x.shape[0]            samples += x.shape[0]                        # 求解准确度:全部判断正确的样本量/已经看过的总样本量            # 得到预测标签            yhat = torch.max(sigma, -1)[1]            # 将正确的加起来            corrects += torch.sum(yhat == y)                        # 每200个batch和最后结束时,打印模型的进度            if (batch_idx + 1) % 200 == 0 or batch_idx == (len(batchdata) - 1):                # 监督模型进度                print("Epoch{}:[{}/{} {: .0f}%], Loss:{:.6f}, Accuracy:{:.6f}".format(                    epoch + 1                    , samples                    , epochs*len(batchdata.dataset)                    , 100*samples/(epochs*len(batchdata.dataset))                    , loss.data.item()                    , float(100.0*corrects/samples)))

6 训练模型

# 设置随机种子torch.manual_seed(51)# 实例化模型net = Model(input_, output_)# 训练模型fit(net, batchdata, lr, gamma, epochs)# Epoch2:[25600/600000  4%], Loss:0.524430, Accuracy:69.570312# Epoch2:[51200/600000  9%], Loss:0.363422, Accuracy:74.984375# ......# Epoch20:[600000/600000  100%], Loss:0.284664, Accuracy:85.771835

现在我们已经用Pytorch训练了最基础的神经网络,并且可以查看其训练成果。大家可以将代码复制进行运行!

虽然没有用到复杂的模型,但是我们在每次建模时的基本思想都是一致的

以上是“Python中的Pytorch建模流程是什么”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注编程网Python频道!

--结束END--

本文标题: python中的Pytorch建模流程是什么

本文链接: https://lsjlt.com/news/323861.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • python中的Pytorch建模流程是什么
    小编给大家分享一下python中的Pytorch建模流程是什么,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!一般我们训练神经网络有以下步骤:导入库设置训练参数的初...
    99+
    2023-06-29
  • python中的Pytorch建模流程汇总
    目录1导入库2设置初始值3导入并制作数据集4定义神经网络架构5定义训练流程6训练模型本节内容学习帮助大家梳理神经网络训练的架构。 一般我们训练神经网络有以下步骤: 导入库设置训练参数...
    99+
    2024-04-02
  • python中Pexpect的工作流程是什么
    这期内容当中小编将会给大家带来有关python中Pexpect的工作流程是什么,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。python可以做什么Python是一种编程语言,内置了许多有效的工具,Pyth...
    99+
    2023-06-14
  • PyTorch中创建张量的方法是什么
    在PyTorch中创建张量有多种方法,最常用的方法包括: 使用torch.tensor()函数:通过传入一个列表或数组来创建张量。...
    99+
    2024-03-05
    PyTorch
  • vitejs预构建的流程是什么
    本文小编为大家详细介绍“vitejs预构建的流程是什么”,内容详细,步骤清晰,细节处理妥当,希望这篇“vitejs预构建的流程是什么”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。为啥要预构建简单来讲就是为了提高本...
    99+
    2023-07-02
  • Python编程中的反模式是什么
    Python编程中的反模式是什么,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。这篇文章收集了我在Python新手开发者写的代码中所见到的不规范但偶尔又很微妙的问题。本文的目的是...
    99+
    2023-06-17
  • pytorch创建tensor的方法是什么
    在PyTorch中,可以通过以下几种方法来创建tensor: 使用torch.Tensor()函数创建一个空的tensor:ten...
    99+
    2024-04-08
    pytorch
  • PyTorch与PyTorch Geometric的安装过程是什么
    这篇文章主要讲解了“PyTorch与PyTorch Geometric的安装过程是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“PyTorch与PyTorch Geo...
    99+
    2023-07-05
  • 建企业网站的流程是什么
    1.确定网站目的和目标:明确企业网站的目的和目标,如宣传企业形象、展示产品或服务、提供在线销售等。2.制定网站策略:根据目的和目标制...
    99+
    2023-06-14
    建企业网站
  • asp网站建设的流程是什么
    ASP网站建设的流程一般包括以下几个步骤:1.需求分析:与客户沟通,了解客户的需求和要求,确定网站的基本功能、页面布局、交互方式等。...
    99+
    2023-06-05
    asp网站建设 asp
  • springboot创建项目的流程是什么
    Spring Boot创建项目的流程如下: 在官方网站下载并安装Spring Boot CLI(Command Line Int...
    99+
    2024-03-07
    springboot
  • python协程调度的流程是什么
    1、asyncRun调用可以将协程放入事件队列中,loop是进入事件循环(也可称为调度器)的入口,loop调用将将线程控制权交给协程调度器。2、该调度器将在未来不断地从事件队列中提取协程或普通函数,然后执行和调度它们。在调度和执行过程中,这...
    99+
    2023-05-14
    Python
  • C#中流模型的作用是什么
    C#中流模型的作用是什么,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。访问的两种模型:在程序中访问进而操作XML文件一般有两种模型,分别是使用DOM(文档对象模型)和流模型,使...
    99+
    2023-06-17
  • PyTorch模型剪枝的概念是什么
    PyTorch模型剪枝是指通过消除神经网络中不必要的参数或神经元,从而减少模型的大小和计算量的过程。剪枝技术可以帮助优化模型,提高推...
    99+
    2024-03-05
    PyTorch
  • PyTorch的模型部署方式是什么
    PyTorch模型的部署方式通常有以下几种: 部署到本地计算机:可以在本地计算机上使用PyTorch的预训练模型或自己训练的模型...
    99+
    2024-03-14
    PyTorch
  • PyTorch的神经网络模块是什么
    PyTorch的神经网络模块是torch.nn,它提供了用于构建神经网络的模块和函数。这个模块包含了各种神经网络层(如全连接层,卷积...
    99+
    2024-04-02
  • python中try语句的工作流程是什么
    python中try语句的工作流程是什么?相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。python的五大特点是什么python的五大特点:1.简单易学,开发程序时,专注的是解决...
    99+
    2023-06-14
  • pytorch教程之网络的构建流程笔记
    目录构建网络定义一个网络loss FunctionBackprop更新权值参考网址 构建网络 我们可以通过torch.nn包来构建网络,现在你已经看过了autograd,nn在aut...
    99+
    2024-04-02
  • PyTorch中的张量是什么
    在PyTorch中,张量是一种类似于多维数组的数据结构,可以存储和处理多维数据。张量在PyTorch中是用来表示神经网络的输入、输出...
    99+
    2024-03-05
    PyTorch
  • asp网站建设流程是什么
    1. 需求分析:了解客户需求,明确网站目标、功能和设计要求。2. 网站规划:根据需求分析结果,制定网站构架、页面设计、交互方式等方案...
    99+
    2023-06-14
    asp网站建设 网站建设
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作