目录（1）策略网络的更新（2）更新（3）NormalizedActions（代码中的）（4）详解DDPG和AC算法区别！！！（5）详解DDPG和AC的目标网络（6）其他（6）代码（8）OUNoise（Ornstein-UhlenbeckNoise）（9）DDPG解决离散动作问题（1）策略网络的更新为了最大化策略网络输出的动作在值函数网络中的Q值。DDPG的目标是让策略网络输出的动作能够最大化Q值，

outline神经元与神经网络激活函数前向算法损失函数反向传播算法数据的准备PyTorch实例：单层神经网络实现3.2激活函数3.2.2TanhTanh是一个双曲三角函数，其公式如下所示：image.png

博主简介：985高校的普通本硕，曾有幸发表过人工智能领域的中科院顶刊一作论文，熟练掌握PyTorch框架。技术专长：在CV、NLP及多模态等领域有丰富的项目实战经验。

-CSDN博客在卸载visiostudio之后就出现一系列怪事，首先pytorch在import的时候就会报错缺少fbge

PyTorch的设计目标是提供灵活且高效的工具集，用于深度学习和科学计算；2.下面主要介绍torch模块的五个功能：数据加载和处理，GPU加速，建立网络模型，模型的保存和加载，梯度更新和参数优化；上面功能主要用到的子模块如下

Pytorch的建模一般步骤1.导入必要的库2.准备数据3.定义数据集类（可选）4.加载数据5.定义模型6.定义损失函数和优化器7.训练模型8.评估模型9.保存和加载模型10.使用模型进行推理importtorch.nn.functionalasFimporttorch.nnasnnimporttorchfromtorchvisionimportdatasets

改用其他版本的networkx库，目前（2024.3）还可以用2.8.8版本的运行如下命令pipinstallnetworkx==2.8.8pip根据自己使用的版本进行替换。

thomas@ubuntu:~$pip3installtorchtorchvisiontorchaudio--extra-index-urlhttps://download.pytorch.org/whl

在PyTorch中，torch.randperm(n)函数用于生成一个从0到n-1的随机排列的整数序列。

torch.einsum是PyTorch中一个强大且灵活的张量运算函数，基于爱因斯坦求和约定进行操作。它允许用户通过简单的字符串表达式来定义复杂的张量运算，代替显式的循环或多个矩阵乘法操作。

在PyTorch中，tensor.expand()是一个用于扩展张量维度的函数。一、函数作用它允许你在不复制数据的情况下，将张量的形状扩展到指定的维度大小。

在官方文档中，主要是针对三维进行解释，但是它对数据索引的混乱使用，导致晦涩难懂。所以我主要针对2维的进行解释，更加通俗。1、gather()首先规定好。对于原始数据输入x（i，j）对于输出y（m，n）对于index（a，b）dim=0，代表行，dim=1代表列>>>x=torch.Tensor([[1,2],[3,4]])1234>>>torch.gather(x,1,torch.LongTens

1.在AnacondaPrompt中输入condalist，确认存在pytorch。

问题：pytorch已经安装好了。在anaconda的命令窗口提示符下，输入Python，再运行importtorch，可以正确导入模块。

安装好pytorch后，importtorch报错如下：Traceback(mostrecentcalllast):File"d:\work_space\01_code\BMCourse\exercises

PyTorch1.9.0及以上版本支持CUDA11.1。PyTorch1.8.0支持CUDA11.0。PyTorch1.7.0支持CUDA10.2。PyTorch1.6.0支持CUDA10.1。

python3.7opencv4.4cuda10.2tensorrt7xpytorch1.5DeepStream5.xOpenCV2.x：支持Python2.xOpenCV3.x：支持Python2.7

在PyTorch中使用CUDA，根据你的具体环境和需求调整版本号，确保安装的PyTorch版本与你的CUDA版本兼容。

常见的Python和PyTorch版本对应关系。

4.工具/途径①萝卜投研、同花顺等②公司上一年度年报③公司官方网站④相关新闻资料⑤公司/行业研报5.小知识①“H”代表年报数据②“1H16”代表16年第一个半年，也就是

装环境真的是好好好烦啊啊啊啊，之前在自己电脑上装pytorch的时候一次就成功了，现在在公司发的电脑上重新装，怎么也装不好！

一、参考资料使用Pytorch测试cuda设备的性能（单卡或多卡并行）GPU：使用gpu-burn压测GPU二、GPU压力测试方法1.PyTorch方式使用torch.ones测试CUDA设备。

特别是，它提供了焦光性，用于包装PyTorch优化器并管理动态生成参数的优化器(参见教程SVI第一部分供讨论)。任何自定义优化算法也可以在这里找到。

1.安装环境1.1.Conda虚拟环境condacreate--namemmrotatepython=3.8-ycondaactivatemmrotate1.2.安装PyTorchpipinstalltorch

引言：在多分类中，torch.gather常用来取出标签所对应的概率，但对于刚开始接触Pytorch的同学来说，torch.gather()可能不太好理解，这里做一些说明和演示，帮助理解。

在PyTorch中，torch.squeeze(input,dim=None)函数用于去除张量中尺寸为1的维度。一、函数参数input：输入张量。

torch.Wheretorch.where(condition,x,y)→Tensor返回一个tensor，tensor的元素从x或者y中的元素选择，选择依据是条件矩阵condition。要求：condition、x，y可以broadcastable到相同的shape。返回值也是相同shape的矩阵condition：参数：condition(BoolTensor)–条件矩阵，当元素为True时

torch.gather()torch.gather(input,dim,index,*,sparse_grad=False,out=None)→Tensor参数解释：input(Tensor)–thesourcetensordim(int)–theaxisalongwhichtoindexindex(LongTensor)–theindicesofelementstogathersparse_g

1什么是风格迁移howto：还是cnn，输入是图像，输出和上一章相比，不是数字，而是图像。意义：给一张图像输入，可以输出指定风格化处理的图像2风格迁移发展简史早期针对图像局部特征（纹理生成）或特定风格/场景建立模型，迁移时通过套用模型提取图片纹理或转化风格。缺点是特征/风格单一，无法通用。2015lerogatys尝试用神经网络做风格迁移，效果很好，并成为了主流。神经网络做风格迁移前，主要有纹理生

参考教材：动手学pytorch一、模型介绍Transformer模型完全基于注意力机制，没有任何卷积层或循环神经网络层。

1.机会成本为了得到某种东西而失去另一种东西的最大价值。比如说把10万元存5年定期5.5%的利率，如果在5年之间利率上调到7%，也就意味着失去了更大的利益!这是定期储蓄与年金保险都存在的问题。2.利率目前:银行活期(最高：0.385%单利)<银行定期(普遍：5年2.75%单利：建设银行)<保险产品：锦绣传承(终身3.5%复利)银行定期(最高5年4.5%单利:泉州银行)<年金保险万能账户(终身2.5

2实现思路实现思路是想通过pytorch做一个CNN模型的训练，然后根据给出的图片进行类型的预测。3数据集我没有数据集，仅有的一些图片是之前委托我做程序的bro给的

不管服用任何药物，都要忌吸烟烟中含有的盐碱会加快肝脏降解药物的速度，导致血液中药物浓度下降。得糖尿病不是因为吃糖多Ⅰ型糖尿病的主因是遗传，Ⅱ型糖尿病的主要原因是肥胖。别重复用药以感冒药为例，多数感冒药都含有解热镇痛的化学成分乙酰氨基酚，如同时服用多种感冒药，或是中西药物混合使用，总剂量会在不知不觉中超量，造成肝脏受损。

PyTorch是一个强大的深度学习框架，它提供了灵活的API和动态计算图，非常适合初学者和研究者使用。安装PyTorch确保安装了Python和pip。

第Ⅰ部分地球与地图一、地球与地球仪1.试描述地球的形状并列举出证据。形状：球体。证据：①麦哲伦环球航行路线；②地球卫星照片；③月食时月球表面地球的影子；④海边看帆船时，总是先看到桅杆，再看到船身；⑤站得高看得远。2.说明纬线的形状及纬线长度随纬度的变化规律。形状：圆。规律：自低纬度向高纬度递减。3.说出地球运动的形式及各种形式产生的地理现象。形式：自转和公转。自转地理现象：①昼夜更替；②时间差异；

在机器学习和深度学习中，优化器是用来更新模型参数以最小化损失函数的算法。通常，优化器会计算损失函数相对于参数的一阶导数（梯度），然后根据这些梯度来更新参数。但是，更高阶的优化器会使用更高阶的导数，比如二阶导数（Hessian矩阵），来指导参数的更新关于使用更高阶导数的优化器基类的描述。在机器学习和深度学习中，优化器是用来更新模型参数以最小化损失函数的算法。通常，优化器会计算损失函数相对于参数的一阶

Colab：https://drive.google.com/drive/home阿里天池实验室：https://tianchi.aliyun.com/60个小时gputianchi.aliyun.com/notebook-ai/天池实验室_实时在线的数据分析协作工具，享受免费计算资源-阿里云天池移动九天：https://jiutian.10086.cn/edu/#/homekagglekaggl

Pytorch报错如下：PytorchdistributedRuntimeError:Addressalreadyinuse原因：模型多卡训练时端口被占用，换个端口就好了。

查看Dockerfile以下是详细的解释：#使用更具体的标记来固定基础镜像版本，确保环境一致性FROMnvcr.io/nvidia/pytorch:23.01-py3#设置工作目录和环境变量WORKDIR

标题：并行处理的艺术：深入探索PyTorch中的torch.nn.parallel模块在深度学习领域，模型的规模和复杂性不断增长，这要求我们利用所有可用的计算资源来加速训练和推理过程。

它由几个关键组件组成：Transformers：这是一个基于PyTorch的库，提供了各种预训练的NLP模型，如BERT、GPT、RoBERTa、DistilBERT等。

在JupyterNotebook中使用Caffe框架并利用GPU加速，可以实现多种效果和目的，主要集中在深度学习领域。以下是一些主要的应用场景：快速训练模型：GPU加速可以显著提高模型训练的速度。对于大型数据集和复杂的神经网络结构，使用GPU可以大大减少训练时间。实时数据增强：在训练过程中，可以实时地对输入数据进行变换和增强，以提高模型的泛化能力。GPU加速使得这些操作更加高效。大规模数据处理：深

Torch在Python里面也有一个对应的API是PyTorch。这些框架都是高度抽象的工具集，适用于从头构建模型。Python社区开发了一些第三方库来简化这些底层架构的使用。

标题：TorchText宝典：解锁PyTorch下的NLP炼金术在深度学习与自然语言处理(NLP)的交叉领域中，PyTorch已经成为了一个强大的工具。

一、示例这里是一个示例，展示如何保存和加载模型、优化器的状态以恢复训练：保存与加载模型和优化器状态的示例importtorchimporttorch.nnasnnimporttorch.optimasoptim#定义一个简单的模型classSimpleModel(nn.Module):def__init__(self):super(SimpleModel,self).__init__()self.

在PyTorch中，学习率调度器（scheduler）用于动态调整优化器的学习率。调度器的状态文件保存了在训练过程中与学习率调度相关的信息。

技术栈深度学习框架：PyTorch目标检测算法：YOLOv4-tiny编程语言：Python硬件加速：GPU（如果可用）功能特

《子午流注拍八虚》早上5至7点大肠经当令，可按摩合谷穴（回阳救逆九穴之一），拍打肘窝。7至9点，按摩胃经合穴足三里。9至11点，拍打髀窝（腹股沟）。11至13点拍打肘窝。13至15点按摩关元穴或腕骨穴。15至17点按摩京骨穴。17至19点拍打腿窝。19至21点按摩内关穴。21至23点按摩阳池穴。23点以后拍打腋窝，治失眠神效，可一觉到天明。以上按摩拍打次数皆以365次为准，每个时辰占用时间也就5分

冬天气寒，保健小知识用的上。图片发自App冬季保健小常识——在严寒的恶劣气候条件下，人体机能容易发生紊乱，尤其是年老体弱者。

《葡萄酒小知识》葡萄酒中可能出现的奇妙风味：“桉树叶”…这种风味通常与澳大利亚凉爽地区出产的赤霞珠葡萄酒（CabernetSauvignon）联系在一起，很多人也把它描述成“薄荷”、“药草”的新鲜味道。