研1日记5

x = torch.tensor(x),numpy 转tensor

三维矩阵相加

研1日记5_第1张图片

screen -S pid 进入之前创建好的screen

transpose()只能一次操作两个维度;permute()可以一次操作多维数据,且必须传入所有维度数,

transpose()中的dim没有数的大小区分;permute()中的dim有数的大小区分

PyTorch 两大转置函数 transpose() 和 permute(), 以及RuntimeError: invalid argument 2: view size is not compati_transpose permute-CSDN博客

torch.stack 默认按0维堆叠

研1日记5_第2张图片

nn.TransformerEncoderLayer详细解释,使用方法!!-CSDN博客

在pytorch中,tensor有一个requires_grad参数 ,当requires_grad设置为False时,反向传播时就不会自动求导,with torch.no_grad的作用:在该模块下,所有计算得出的tensor的requires_grad都自动设置为False。

【pytorch】 with torch.no_grad():用法详解_pytorch with no grad-CSDN博客

nn.TransformerEncoderLayer详细解释,使用方法!!-CSDN博客

【Numpy】基础学习:一文了解np.newaxis的作用、用法-CSDN博客,增加一个维度,即所在位置的维度为1

PyTorch之nn.Module类与前向传播函数forward的理解 - 知乎 (zhihu.com) 

你可能感兴趣的:(人工智能,深度学习)