cs285深度强化学习课程笔记第18页

叶小鱼文案训练营初阶课40期 1班2组43号小八第1次作业

黄小八_z·2023-09-13 01:00

2018-06-03 入门5课程笔记

Lesson1:Greetings单词：1.dialogue：会话，对话2.alligator：鳄鱼对话：A：Goodmorning/afternoon/evening/night.（goodnight道别时使用是goodbye含义）A：Howareyou(doing/gettingalong)/Howhaveyoubeen?（you作为问句的主语，回答用I）A：What’sup/What’sha

悠然遇见·2023-09-12 14:18

【计算机组成课程笔记】5.1 处理器的设计步骤

课程链接：计算机组成_北京大学_中国大学MOOC(慕课)5-1-501-处理器的设计步骤（14-'49--）_哔哩哔哩_bilibili处理器，或者说是CPU，是现代计算机中最为复杂的一个部件。不过先不要劝退，要设计一个简单但是能工作的处理器，也没有那么的神秘。这一节我们就一起来探索处理器是怎么设计出来的。0.处理器的设计步骤要设计一个处理器，主要分为以下几个步骤。1.首先，需要分析指令系统。指令

Elaine_Bao·2023-09-11 22:55

【计算机组成课程笔记】5.2 处理器的设计步骤(2)

课程链接：计算机组成_北京大学_中国大学MOOC(慕课)5-3-503-运算指令的控制信号（14-'58-'-'）_哔哩哔哩_bilibili【计算机组成课程笔记】5.1处理器的设计步骤-CSDN博客中介绍了处理器的设计步骤中的前三步

Elaine_Bao·2023-09-11 22:51

Day4+2组77号雪菁#写手帐，就是记录你一生的账# - 草稿

昨日幸福小事和家人一起去买菜买了喜欢吃的水果和点心今日最重要三件事1.复习萌薇老师课程2.整理课程笔记

猫yoyo·2023-09-11 08:38

OpenMMLab-AI实战营第二期-课程笔记-Class 4：深度学习预训练与MMPretrain

Class4：深度学习预训练与MMPretrain课程链接：深度学习预训练与MMPretrain_哔哩哔哩_bilibili相关repo：open-mmlab/mmpretrain:OpenMMLabPre-trainingToolboxandBenchmark(github.com)文章目录Class4：深度学习预训练与MMPretrainMMpretrain介绍what？主要特性数据流数据加载

Yuetianw·2023-09-10 18:57

得到大学 | 完结，回应和金句集锦

我是3期学员，自然写的是3期的线上课程笔记，如果以后有返校复训的机会，还会将新的课程以笔记的

雾风的幻想·2023-09-10 11:44

网络安全预习课程笔记(前四节课)

目录目录前言笔记的内容思维导图1.走进黑客1.1预习说明1.2.黑客经典电影1.3作业：1.3.1观后感1：1.3.2观后感2：2.网络安全事件2.1国内安全事件：2.2国外安全事件：2.3.如何搜索到网络安全事件：2.4作业：3.走进网络安全3.1.网络安全的现状3.1.1现状13.1.2现状23.2网络安全的发展4.网络是把双刃剑4.1内容4.2作业：5.总结前言个人资料;软工准大二一名普通本

内心如初·2023-09-10 08:53

《思维导图用于笔记》常蓉

行动计划：1.绘制练习读书笔记2.练习绘制课程笔记

蓉儿蓉儿·2023-09-09 15:54

CS420 课程笔记 P8 - 如何编辑汇编代码 (最终篇)

文章目录IntroHardwareReturntovirtualmemoryCompilerFindingassemblycodeExample!AssemblylanguageRegistersAssemblyExampleIncDecAddSubMov!NegMulDivAssemblyproblem恭喜Congratulations!Intro大多数人在走到这里之前就退出了，这里是gameh

Nesb01t·2023-09-09 11:43

算法与数据结构——算法基础——排序理论(java)（b站左程云课程笔记总结）

排序理论汇总排序方法时间复杂度空间复杂度稳定性选择排序O(n^2)O(1)无冒泡排序O(n^2)O(1)有插入排序O(n^2)（常数时间极低）O(1)有归并排序O(n*logN)O(n)有快速排序O(n*logN)O(logN)无堆排序O(n*logN)O(1)无总结：优先使用快速排序（常数时间在三个时间复杂度为O(n*logN)的排序方法中最小）需要稳定性则使用归并排序空间复杂度有要求则使用堆排

Borslav·2023-09-09 03:03

建构知识体系课程笔记

图片发自App构建知识体系，让你的学习效能倍增！课程里首先让我们分别从广义与狭义上明确了学习的含义，广义上更多是抽象的概念，狭义上则描述得更加具体与形象，是指通过阅读或理解或听讲或研究或实践所获得的知识与技能。那知识又是什么呢？知识是一切探索世界的总和，是人们经验的固化。学习与知识密不可分。接下来学习了构建理论。构建理论的关键词是主动性，原有知识，构建理解。它是由2方面组成，包括新知识的构建与原有

诗意暖阳·2023-09-08 11:56

深度学习系列——6、深度强化学习

强化学习问题包含三个主要概念：环境状态行动奖励强化学习（ReinforcementLearning,RL），又称再励学习、评价学习或增强学习，是机器学习的范式和方法论之一，用于描述和解决智能体（agent）在与环境的交互过程中通过学习策略以达成回报最大化或实现特定目标的问题[1]。强化学习的常见模型是标准的马尔可夫决策过程（MarkovDecisionProcess,MDP）。按给定条件，强化学习

数据科学家修炼之道·2023-09-08 05:35

如何做课程笔记（转载）

为什么要做课程笔记？做课程笔记不等于课程速记。理解代替记忆，记录课程精髓，有逻辑，有重点，同时体现抓取能力。可以训练。用笔记第二大脑代替知识的遗漏。

王亚婷之心·2023-09-07 22:08

2022-11-2【日精进第45天】

：郑州鹿野苑餐饮管理有限公司（朵家甜品厨房）每日定课（根据实际情况，每十天微调一次）：1，晨跑：5：20前，18分钟内跑完3公里；【完成】2，读书笔记：阅读30min+，笔记200字以上；【完成】3，课程笔记

李庆是个做蛋糕的·2023-09-07 15:05

2022-10-21【日精进第33 天】

：郑州鹿野苑餐饮管理有限公司（朵家甜品厨房）每日定课（根据实际情况，每十天微调一次）：1，晨跑：5：20前，18分钟内跑完3公里；【完成】2，读书笔记：阅读30min+，笔记200字以上；【完成】3，课程笔记

李庆是个做蛋糕的·2023-09-07 12:39

深度强化学习算法的参数更新时机

深度强化学习算法的参数更新时机深度强化学习中往往涉及到多个神经网络来拟合策略函数、值函数等，什么时候更新参数因算法而异，与具体算法架构/算法思想紧密相关。

红烧code·2023-09-06 20:09

《区块链技术与应用》北大肖臻老师——课程笔记【6-8】

《区块链技术与应用》北大肖臻老师——课程笔记【6-8】一、BTC网络二、BTC-挖矿难度三、BTC-挖矿提示：以下内容只是个人在学习过程中记录的笔记，图片均是肖老师课程的截图，可供参考。

陆之沂·2023-09-06 19:22

【机组】计算机系统组成课程笔记第一章计算机系统概论

1.1计算机的基本概念电子计算机是一种不需要人工直接干预，能够自动、高速、准确地对各种信息进行处理和存储的电子设备。1.1.1存储程序的工作方式1.单一的处理部件2.存储单元是定长的线性组织3.存储空间的单元直接寻址4.使用低级机器语言，指令通过操作码来完成简单的操作。1.1.2信息的数字化表示1.以二进制表示数据2.字符编码：ASCII码3.十进制数编码：BCD码，用4位二进制数表示一位十进制数

令夏二十三·2023-09-06 00:04

【OS】操作系统课程笔记第一章操作系统概述

1.1什么是操作系统操作系统定义操作系统是加载在硬件之上，支持其他软件，并控制和管理计算机系统内各种硬件和软件资源，有效地组织各程序运行的系统软件，或程序集合。对操作系统定义的理解操作系统是系统软件，是第一次在计算机硬件上进行加载的一组计算机程序。与其他计算机程序类似，都需要在处理机上运行，区别在于它是控制管理其他程序的运行。它的基本职能是控制和管理计算机系统内各种资源，有效地组织作业或任务在CP

令夏二十三·2023-09-06 00:34

蒙特梭利 5期1班 09号赵菲第3节亮点 & 问答

1.听课笔记：建议使用思维导图输出课程笔记，不会用思维导图就用您自己的方式记笔记～图片发自App2.听课亮点：听课后马上把你最有感觉，最有亮点，最有帮助的点写下来。

cai迷·2023-09-05 23:12

学习职业生涯规划咨询师的课程笔记

上半边主要是向外的，目标型的。下半部分更多是向内的，关系型的。有人的生命之花上半截很好，下半截不行，头重脚轻，这种迟早会失衡。而脚重头轻的人，则容易长成土豆，过于保守和安逸。图片发自App每个象限也有自己的侧重：分为职业发展、个人幸福、他人关系、自我实现四个大类。一个人如果能够在一个月之内，为自己的职业、幸福、关系和梦想都做点事情，这个月怎么会不好呢？

英日粤语口译Jack·2023-09-05 17:05

CS420 课程笔记 P4 - 以16进制形态编辑游戏文件

文章目录IntroductionFindingsavefilesStringsUnicodeExample!ValuesearchHealthsearchConclusionIntroduction这节课我们将学习编辑十六进制，主要用于编辑保存文件，但十六进制编辑涉及的技能可以很好地转移到：SavefileeditingResourceseditingRawmemoryeditingPackete

Nesb01t·2023-09-05 01:12

《永不失业的秘密》课程笔记+感悟 03

第3课《在触碰世界之前，先端详自己》20200303【要点总结】by易贝1.关于学习：·如何让学习效果最大化？请看缈缈屿公众号文章：《如何将一堂课的价值最大化》·成功与幸福的人，与普通人的差异在于：元认知能力不同。·迷茫的时候就去学习，向书本，课程，电影，老师学习。·学习的时候常问自己：哪一条可以应用到我的生活？如果不能应用到生活，那听它有什么意义呢？2.关于学习的严肃提醒：第一条，听课本身几乎没

小贝观世界·2023-09-04 22:57

CS420 课程笔记 P7 - 虚拟内存 & 多级指针寻址

文章目录IntroPointersMemoryleaksPointerpathPointerscanningExample!Intro上节课我们学习了静态地址，这节课我们将着手关注动态地址，我们需要了解一个叫做指针的东西Pointers简单地说，指针是对象之间的单向连接Pointersareconnectionsbetweenobjects这里的箭头就是指针，指针不一定是从高层往低层，比如User

Nesb01t·2023-09-04 21:59

CS420 课程笔记 P5 - 内存编辑 & 数据类型

文章目录IntroductionDatatypesBooleansNegativenumbers(Signedintegers)Floating-pointnumbers(fractionalnumbers)UnknownvaluescansHealthfindingFloatfinding(Playerpositionhack/Teleporthack)AdditionalthingsIntro

Nesb01t·2023-09-04 21:58

CS420 课程笔记 P6 - 游戏逆向中的虚拟内存

文章目录IntroVirtualmemoryExample!StaticexampleIntro在上个视频中，我们知道有些地址在你重进游戏时就会无效，有的有时有效，我们需要了解称为虚拟内存的东西记住这些信息：当你双击打开Squally.exe游戏时，系统会复制一份并放到内存中！当程序运行时，首先给一组虚拟内存，此时系统内存的分配是：0~2GB之间某个地方作为开始，存放copiedexe2~8GB从

Nesb01t·2023-09-04 21:58

CS420 课程笔记 P2 - 内存编辑和基础的 GameHacking 尝试

文章目录IntroductionOperatingSystemToolsMemoryScanningMemoryScanExamples!ConclusionIntroduction本节将介绍操作系统的基础知识和内存扫描，这可以说是gamehacking中最重要的技能，我们不会深入讨论操作系统，因为这本身就是一门独立完整的课程，我们只需要学习gamehacking有关的部分。我们将继续学习内存扫描

Nesb01t·2023-09-04 21:57

MIT - 6.824 全课程 + Lab 博客总览

文章目录前言MIT-6.824全课程+Lab博客总览MIT-6.824课程笔记MIT-6.5840全Lab博客总览前言Hi,there,welcometomyblog写这篇博客的原因呢，是因为我最近刚开始接触分布式这块的内容

JehanRio·2023-09-04 18:10

调研笔记01-认知无线网络（Cognitive Radio Ad Hoc Networks）或者车联网（VANETs）下的频谱感知和频谱共享研究

认知无线网络（CognitiveRadioAdHocNetworks）或者车联网（VANETs）下的频谱感知和频谱共享研究引言以下是阅读认知无线网络相关书籍的一些笔记：认知无线网络中频谱感知技术的研究_黄博基于深度强化学习的动态频谱分配方法研究

lonyhai·2023-09-04 14:56

【计算机组成课程笔记】1.1 电子计算机的兴起

课程链接：计算机组成_北京大学_中国大学MOOC(慕课)1-1-101-电子计算机的兴起（16-'50-'-'）_哔哩哔哩_bilibili课程笔记转载自：2.1电子计算机的兴起随着人类文明的进步，人们对计算能力的需求也越来越大

Elaine_Bao·2023-09-04 07:12

【计算机组成课程笔记】4.2 除法器的硬件实现

课程链接：计算机组成_北京大学_中国大学MOOC(慕课)4-5-405-除法的运算过程（09-'43--）_哔哩哔哩_bilibili在加减乘除这样的基本算数运算中，除法是最为复杂的，因此我们想要实现硬件的除法器，还是从最简单的情况开始说起。1.除法的运算过程回想一下手算除法的过程。这里是两个由0和1组成的被除数和除数。首先将除数和被除数从高位开始对齐，将对齐的部分进行减法，当我们发现减完的结果是

Elaine_Bao·2023-09-04 07:12

【计算机组成课程笔记】4.1 乘法器的硬件实现

课程链接：计算机组成_北京大学_中国大学MOOC(慕课)4-1-401-乘法的运算过程（11-'33--）_哔哩哔哩_bilibili乘法是比加减法更复杂的算数运算。小学的时候我们学习乘法，需要背一个九九乘法表。那么如果是计算机，又是如何实现乘法的呢？1.乘法的运算过程我们回想一下手算乘法的过程。假设现在有两个数：2345x9876，首先我们要做的是最低位的乘法，5x6=30，这好像很简单，但其实

Elaine_Bao·2023-09-04 07:42

2019-01-23

图片发自App——牛人破局——【0123牛人破局】昵称看完猫叔的金句视频说说你对这些金句的理解吧，期待你分享自己或者他人与这些金句的故事哦～——————————001.利他就是最好的利己，整理群聊精华、导师课程笔记

本天才传说·2023-09-04 02:10

侯捷课程笔记（一）（传统c++语法，类内容）

侯捷课程笔记（一）（传统c++语法，类内容）2023-09-03更新：本小节已经完结，只会进行小修改埋下了一些坑，后面会单独讲或者起新章节讲最近在学习侯捷的一些课程，虽然其中大部分内容之前也都已经了解过了

gxt_kt·2023-09-03 22:33

思维导图双证班39期第3次作业

第三课：思维导图阅读法，让你快速透视一本书《思维导图阅读法：让你快速透视一本书》课程笔记一、导图绘制总结1、时间：边听课边记录关键词笔记，然后思维导图绘制用时60min。

Race贝贝妈·2023-09-03 14:00

一班主题 || 十年之约（2022年3月）

今年的10万字的小说计划要调整，调整为10万字的课程笔记。而且

每月读本书·2023-09-03 05:53

【计算机组成课程笔记】2.2 几种芯片架构：X86、ARM、RISC-V和MIPS

首先，是cpu的两大架构：ARM和X86。这部分之前写过一篇博客，感兴趣的可以移步CPU两大架构：X86和ARM_arm架构_Elaine_Bao的博客-CSDN博客第一个区别就是所谓的“复杂指令集”与“精简指令集”系统，也就是经常看到的“CISC”与“RISC”。Intel和ARM处理器，前者使用复杂指令集（CISC)，而后者使用精简指令集（RISC）。属于这两种类中的各种架构之间最大的区别，在

Elaine_Bao·2023-09-02 17:17

【计算机组成课程笔记】2.1 设计自己的计算机

课程链接：计算机组成_北京大学_中国大学MOOC(慕课)2-1-201-设计自己的计算机（14‘24’‘）_哔哩哔哩_bilibili什么是指令系统体系结构？这个问题其实非常简单，但要想解释清楚也没有那么容易。我们还是从一个小故事开始吧。有一天有两个小伙伴碰了面，发现对方都很愁苦，沟通后发现双方都碰到了一些运算上的问题，于是两人一拍即合，准备一起解决这个问题。怎么解决呢？不如一起设计一个计算机吧。

Elaine_Bao·2023-09-02 17:47

【计算机组成课程笔记】3.2 算数运算和逻辑运算的硬件实现

课程链接：计算机组成_北京大学_中国大学MOOC(慕课)3-2-302-门电路的基本原理（11-'39--）_哔哩哔哩_bilibili现代计算机的CPU和其他很多功能部件都是基于晶体管的集成电路，想要了解计算机组成的基本原理，还是需要有一些集成电路的基本知识。就让我们从最简单的门电路的实现开始吧。1.门电路的基本原理晶体管是构成现代集成电路的基本原件，通常使用的是MOS晶体管，MOS晶体管又主要

Elaine_Bao·2023-09-02 17:16

2018-11-19 不负韶华 24期训练营2组课程笔记

今天听了老猫老师的《时间管理计划模型》，受益匪浅：对为什么制定计划，何时制定计划，在哪里制定计划，谁来制定计划，计划里面要写什么，如何制定计划有系统的认识。总结起来就是5W1H.希望以后在工作中好好践行自己的计划。让自己目标能更好的完成。.

望黍·2023-09-02 10:42

想要高效工作？先学习这个精力管理干货

这次清姝分享的是得到app上大师课《怎样成为精力管理高手》的课程笔记，有兴趣可以自己听，清姝记得好像是99元，还不错。免费的课程有时候会觉得浪费时间，一般百元的课程基本没有

清姝·2023-09-02 08:22

用深度强化学习来玩Chrome小恐龙快跑

目录实机演示代码实现实机演示用深度强化学习来玩Chrome小恐龙快跑代码实现importosimportcv2frompygameimportRLEACCELfrompygame.imageimportloadfrompygame.spriteimportSprite

timberman666·2023-09-02 08:03

神经网络与数字货币量化交易系列（2）——深度强化学习训练比特币交易策略

1.介绍上一篇文章介绍了使用LSTM网络预测比特币价格https://www.fmz.com/digest-topic/4035，正如文章提到的，只是一个练手的小项目，用来熟悉RNN以及pytorch。本文将介绍使用强化学习的方法，直接训练交易策略。强化学习的模型为OpenAI开源的PPO，环境则参考了gym的样式。为了方便理解和测试，LSTM的PPO模型和回测的gym环境都直接编写未使用现成的包

发明者量化·2023-09-01 14:27

李宏毅机器学习课程笔记（更新ing）

CNN为什么AlphaGo可以用CNN？棋盘抽象成图片时需要注意什么？首先图片有两个特点：1，只观察局部就可以显示某种pattern，比如要得出一个鸟嘴的结论，只需要观察局部图片2，某种pattern可以出现在图片任意位置，比如鸟嘴可以出现图片左上角，右下角等位置那棋盘是否满足以上图片的两个特点？答案是肯定的。那棋盘就可以抽象成图片，然后使用CNN这种专门用来处理图片这两个特点的网络结构。另外再来

每天都想躺平的大喵·2023-09-01 13:20

用深度强化学习来玩Flappy Bird

目录演示视频核心代码演示视频用深度强化学习来玩FlappyBird核心代码importtorch.nnasnnclassDeepQNetwork(nn.Module):def__init__(self)

timberman666·2023-09-01 10:59

【计算机组成课程笔记】3.1 算数运算和逻辑运算

1.从模型机说起这是我们非常熟悉的模型机，我们在开始介绍模型机时（【计算机组成课程笔记】1.2冯·诺伊曼结构_Elaine

Elaine_Bao·2023-09-01 08:05

2020-11-23

它是互联派为培养大学生从事互联网市场运营方向推出的线上实习项目～（里面有很多大佬授课教师很多都是有百度、阿里等大厂工作经验的，很厉害哦）我的收获课程笔记一共有7节

林小梦lxm·2023-08-31 11:52

叶小鱼文案训练营初阶课40期1班1组21号琴小兽第1次作业

课程笔记直接用这位同学的图吧：WechatIMG1605.jpeg海报分析WechatIMG1607.jpeg这是天猫的CPB海报，属于销售文案。

琴小兽·2023-08-31 09:17

强化学习：实现了基于蒙特卡洛树和策略价值网络的深度强化学习五子棋(含码源)

汀、人工智能·2023-08-31 09:06

推荐频道

cs285深度强化学习课程笔记

叶小鱼文案训练营 初阶课40期 1班2组43号 小八第1次作业