百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分析 > 正文

PyTorch:基础知识

liebian365 2025-01-02 17:39 15 浏览 0 评论


如果您对机器学习感兴趣或正在阅读本文,那么您很有可能以前听说过PyTorch。 在机器学习开发人员中,这是一个非常著名的框架,由于很好的原因,我们将在本文中进行讨论。 另外,如果您只是从神经网络开始并且具有基础知识,那么这是一个完美的初学者工具。

好吧,让我们进入PyTorch的精髓吧?

PyTorch的历史

Torch最初是用Lua编写的,这种用法并不常见,很难理解,而且它没有python提供的一半功能。

因此,在2017年,Facebook的AI研究实验室决定建立一个与Torch库具有相同功能但不包含python的库,因此命名为PyTorch。 这在开发人员中立即受到打击,并使编写代码更容易,更有效。

认知计算-一种被广泛认为是……的最重要表现的技能

作为其用户,我们已逐渐将技术视为理所当然。 这些天几乎没有什么比这更普遍了……

趣闻:PyTorch Soumith Chintala的开发人员之一是VIT的校友,而这恰好是我目前就读的我的大学!

Pytorch与Tensorflow

我觉得在PyTorch和Tensorflow之间总是有一个比较,因为它们使用不同的方法来解决问题,因此我认为这是不必要的,并且根据数据集和算法,一种方法要比另一种效果更好。 但是,如果您仍然好奇,可以在这里查看这篇非常简洁的文章。

是什么使Pytorch成为一个好的框架?

· 命令式编程:在PyTorch中,计算会立即运行,这意味着用户无需等待编写完整的代码即可检查其是否有效。 这对于像我这样急躁的程序员来说是个好兆头,他们希望在每一行代码之后都能看到结果。 这还允许在python中提供更灵活的编码体验,并且更受性能驱动。

2.动态计算图:动态计算图框架是一个由库,接口和组件组成的系统,这些库,接口和组件提供了灵活的,编程的,运行时接口,通过连接有限但可能可扩展的一组操作来促进系统的构建和修改。 因此,基本上,PyTorch遵循运行定义的原理,这对于像RNN这样的非固定大小的网络非常有用。

1. Autograd:此类是计算导数的引擎(更精确地说,是Jacobian矢量积)。 它记录了在启用梯度的张量上执行的所有操作的图,并创建了一个称为动态计算图的非循环图。 该图的叶子是输入张量,根是输出张量。 通过从根到叶跟踪图并使用链法则将每个梯度相乘来计算梯度。

torch.nn.Autograd.Function

Pytorch的常用功能

· torch.sum():加法

(a*b).sum()

1. torch.mm():点积。

#torch.nm(a,b)

1. torch.randn():生成矩阵随机数

torch.manual_seed(7)

# Set the random seed so things are predictable

x = torch.randn(2,2)

1. torch.exp():计算指数

Sigmoid=1/(1+torch.exp(-x))

1. PyTorch提供了一个模块nn,它使构建网络更加简单。

from torch import nn

-nn.Linear():此行创建用于线性变换+的模块。

类似地,以下函数可用于计算相应的激活函数。

-nn.Sigmoid()

-nn.Softmax()

self.output = nn.Linearse

lf.sigmoid = nn.Sigmoid()

self.softmax = nn.Softmax(dim=1)

#columnwise

1. nn.Sequential:使用此方法,我们可以依次通过操作传递张量。

model = nn.Sequential(nn.Linear(input_size, hidden_sizes[0]), nn.ReLU(), nn.Linear(hidden_sizes[0], hidden_sizes[1]), nn.ReLU(), nn.Linear(hidden_sizes[1], output_size), nn.Softmax(dim=1))

7.损失计算

criterion = nn.CrossEntropyLoss()

criterion = nn.NLLLoss()

criterion = nn.LogSoftmax()

1. Autograd:Autograd的工作原理是跟踪对张量执行的操作,然后回溯这些操作,并计算沿途的梯度。

-loss.backward()计算用于计算参数的梯度。 这些梯度用于通过梯度下降来更新权重。

loss.backward()

optimizer.zero_grad()将每个训练遍的梯度归零,否则它将保留先前训练批次的梯度。

optimizer.zero_grad()

结论

我一直将本文的重点放在PyTorch的理论和语法上,在第二部分中,我将通过开发神经网络来演示PyTorch在数据集上的演示。 因此,请继续关注并感谢您的阅读。 干杯!

参考:https://classroom.udacity.com/courses/ud188-PyTorch简介。

(本文翻译自Puja Chaudhury的文章《PyTorch: The Basics.》,参考:https://medium.com/datadriveninvestor/pytorch-the-basics-7005e71cdb83)

相关推荐

Markdown 常用语法总结(markdown示例)

头条不能以代码模式查看,所以分两部分来写:效果、语法。效果和语法部分一一对应,最好自己把语法复制下来保存为.md用md编辑器打开。先看效果:Markdown常用语法注:查阅时在视图中切换为源代码模式...

CPU眼里的:字符串 vs 数组(字符数组与字符串区别)

“它们十分相似,但又非常不同”01提出问题字符串和字符数组,在内存分布上,跟普通数组(例如:int类型的数组)有很高的相似性。但使用字符串的危险系数,却远远高于普通数组。是什么细微的差异导致了二者在使...

rsync命令详解(rsync命令详解 -X)

1.rsync简介rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具RemoteSync可以远程同步,支持本地复制,或者与其他SSH、rsync主机同步。2.rsync特性rsy...

Linux操作系统安全配置(linux系统的安全配置有哪些方面)

一、服务相关命令systemctlenable服务名#开机自启动systemctldisable服务名#禁用开机自启动systemctlstop服务名#停止服务systemctls...

一篇文章学会数据备份利器rsync(备份数据语句)

阿铭linux近16年的IT从业经验,6年+鹅厂运维经验,6年+创业公司经验,熟悉大厂运维体系,有从零搭建运维体系的实战经验。关注我,学习主流运维技能,让你比别人提升更快,涨薪更多!作为一个系统管理员...

成功尝试在NetBSD9.0中安装Mate Desktop环境记录

NETBSD系统桌面安裝系統最新的NetBSD9.0:http://cdn.netbsd.org/pub/NetBSD/NetBSD-9.0/images/https://mirrors.tuna.t...

使用OpenLDAP集中式认证(openresty集群)

1OpenLDAP入门1.1什么是LDAP?1.2我不理解。什么是目录?1.3信息结构是什么样?1.4所以……它可以用来做什么?2OpenLDAP服务器配置2.1.1OLC样式的LDIF...

在 Ubuntu 22.04 上安装和配置 VNC 远程桌面

环境Ubuntu22.04.2LTSx86_64Step-1安装桌面环境Ubuntu默认使用GNOME桌面环境,但也可以安装其他桌面环境,如Xfce、KDE等。这个可以根据个人喜好选...

hdfs集群的扩容和缩容(hdfs容量)

1、背景当我们的hadoop集群运行了一段时间之后,原有的数据节点的容量已经不能满足我们的存储了,这个时候就需要往集群中增加新的数据节点。此时我们就需要动态的对hdfs集群进行扩容操作(节点服役)。2...

Zabbix入门操作指南(zabbix怎么使用)

上篇:安装与配置一.概述在开始之前,一些概念和定义需要我们提前了解一下(以下内容摘自官方网站)。1.1几个概念架构Zabbix由几个主要的功能组件组成,其职责如下所示。ServerZabbixs...

从0开始学习KVM-KVM学习笔记(6)- CentOS远程桌面连接

CentOS远程桌面连接CentOS系统上配置远程桌面连接有多种方法,其中最常用的是通过xrdp或vnc来实现。安装xrdr实现CentOS远程桌面安装xrdp安装epel库sudoyu...

systemd service之:服务配置文件编写(2)

接下来会通过示例来描述不同ServiceType值的应用场景。在此之前,强烈建议先阅读前后台进程父子关系和daemon类进程来搞懂进程之间的关系和Daemon类进程的特性。systemdservi...

Linux项目开发,你必须了解Systemd服务!

1.Systemd简介Systemd是什么,以前linux系统启动init机制,由于init一方面对于进程的管理是串行化的,容易出现阻塞情况,另一方面init也仅仅是执行启动脚本,并不能对服务本身...

Oracle 数据库日常巡检之检查数据库安全性

在本节主要检查Oracle数据库的安全性,包含:检查系统安全信息,如系统账户,系统防火墙策略,密码策略等。1.检查系统安全信息系统安全日志文件的目录在/var/log下,主要检查登录成功或失败的用户日...

「分享」非常全面的CentOS7系统安全检测和加固脚本

CentOS7系统检测和加固脚本脚本来源:https://github.com/xiaoyunjie/Shell_Script主要是为了Linux系统的安全,通过脚本对Linux系统进行一键检测和一键...

取消回复欢迎 发表评论: