markov

马尔可夫链 (Markov Chains)

目录马尔可夫链马尔可夫链的基本定义离散状态马尔可夫链(Finite-StateMarkovChains)转移概率矩阵状态分布平稳分布(steady-statevector/equilibriumvector)平稳分布的定义平稳分布的存在性如何找到平稳分布？连续状态马尔可夫链马尔可夫链的简单应用语言模型SignalTransmissionRandomWalkson{1,...,n}\{1,...,n
连理o·2022-06-27 21:09

马尔可夫链(Markov Chain)，隐马尔可夫模型

马尔可夫链：参考链接：https://blog.csdn.net/weixin_42509541/article/details/123332839我对它的理解就是：针对的数据是一组离散随机变量的集合。下一次（t+1)的输出仅取决于当前（t)的输入。它的计算就一直依靠前一次的结果进行计算，都是概率模型。上面链接中的例子写的很好。隐马尔可夫模型：我是通过《统计学习》（李航）的书进行的学习，写的也是很
求求你来BUG行不行·2022-06-22 07:49

随机过程——马尔科夫链

Markov过程已知现在的状态，未来状态与过去的状态无关。
Jokic_Rn·2022-06-20 07:08

【网络攻防原理与技术】第7章：口令攻击技术 第8章：网络监听技术

基于PCFG的算法和Markov算法是⽬前主流的2种漫步攻击算法定向攻击：尽可能以最快速度猜测出所给定⽬标（如⽹站、个⼈电脑）的⼝令。
Godams·2022-06-09 14:35

图像隐写分析-DCT特征编程实现

在图像隐写分析中，这几个特征是比较经典的图像隐写分析中DCT特征与Markov特征展现出了极大的潜力，小波变换的奇异值分解（WaveletSingularValueDecomposition，WSVD）
iamsongyu·2022-05-31 07:43

[机器学习入门]——第六课-Markov链

文章目录第六课-Markov链一、贝叶斯网半朴素贝叶斯朴素贝叶斯半朴素贝叶斯贝叶斯网变量之间的典型依赖关系独立与条件独立二、贝叶斯网到Markov模型三、Markov链Markov模型一步转移n步转移m
雨落俊泉·2022-05-14 15:08

切比雪夫不等式

马尔可夫不等式在讨论切比雪夫不等式之前，首先需要理解它的基础版本，即马尔可夫（Markov）不等式，它相对而言更简单，有着更直观的解释。马
·2022-04-05 00:50

R语言马尔可夫链（Markov Chain, MC）模拟赌徒破产模型Gambler's Ruin Problem可视化

原文链接：http://tecdat.cn/?p=26124赌徒的破产问题是指玩家有获胜的概率p和失败的概率q。例如，让我们来看看一个技能游戏，玩家X可以通过接近目标，以0.6的概率击败玩家Y。游戏开始时，玩家X被分配到5分，玩家Y被分配到10分。每轮游戏后，玩家的积分要么减少一个，要么增加一个，我们可以确定玩家X将赢过玩家Y的概率。这类问题的应用范围很广。这实际上是一个相当简单的问题，可以用纸笔
·2022-03-30 17:04

拓端tecdat|python贝叶斯随机过程：马尔可夫链Markov-Chain，MC和Metropolis-Hastings，MH采样算法可视化

原文链接：http://tecdat.cn/?p=25428原文出处：拓端数据部落公众号介绍本文，我们说明了贝叶斯学习和计算统计一些结果。frommathimportpifrompylabimport*马尔可夫链的不变测度考虑一个高斯AR(1)过程，，其中是标准高斯随机变量的独立同分布序列，独立于。假使.。然后，具有均值的高斯分布和方差是马尔可夫链的平稳分布。我们用马尔可夫链的单个轨迹所取值的直方
拓端研究室·2022-03-12 13:29

马尔可夫决策过程(Markov Decision Process)学习笔记

MarkovDecisionProcess学习笔记马尔可夫决策过程(MarkovDecisionProcess)学习笔记1.基本的概率定义2.如何理解状态SSS和动作AAA3.策略和价值函数4.价值函数的贝尔曼方程4.1何为贝尔曼方程4.2状态价值函数的贝尔曼方程4.3动作价值函数贝尔曼方程4.4回溯图理解法4.4.1状态价值函数回溯图分解如下4.4.2动作价值函数的回溯图分解如下4.5实例理解法
Jolen_xie·2022-03-05 07:41

隐马尔可夫模型HMM学习笔记

/pinard/p/6945257.htmlhttps://www.cnblogs.com/pinard/p/6991852.htmlhttps://www.hankcs.com/ml/hidden-markov-model.html
WUYANGEZRA·2022-03-05 07:11

隐马尔可夫模型（《统计学习方法》、python实现）

转载地址：http://www.hankcs.com/ml/hidden-markov-model.html本文是《统计学习方法》第10章的笔记，用一段167行的Python代码实现了隐马模型观测序列的生成
learn_tech·2022-03-04 07:08

David Silver UCL强化学习课程学习笔记二之Markov Decision Processes 马尔可夫决策过程

Lecture2:MarkovDecisionProcesseshttps://www.davidsilver.uk/wp-content/uploads/2020/03/MDP.pdfMarkovProcesses几乎所有的强化学习问题都可以表述为马尔可夫决策过程为题，而马尔可夫过程中的状态均满足马尔可夫性。根据定义式，马尔可夫状态包含了其history中全部的状态信息，即该状态是下一状态的充分
我不是zzy1231A·2022-03-03 07:53

python贝叶斯随机过程：马尔可夫链Markov-Chain，MC和Metropolis-Hastings，MH采样算法可视化

原文链接：http://tecdat.cn/?p=25428介绍本文，我们说明了贝叶斯学习和计算统计一些结果。from math import pifrom pylab import *马尔可夫链的不变测度考虑一个高斯AR(1)过程，，其中是标准高斯随机变量的独立同分布序列，独立于。假使.。然后，具有均值的高斯分布和方差是马尔可夫链的平稳分布。我们用马尔可夫链的单个轨迹所取值的直方图来检查这个属性
·2022-02-14 11:29

马尔科夫过程（Markov Process,MP）

马尔科夫过程描述的是空间状态经过一个状态到另一个状态转换的随机过程。该过程要求具备“无记忆”性质，也就是下一状态的概率分布只与当前的状态有关，再时间序列中其他前面的事件无关。马尔科夫随机序列由元组表示。S代表有限状态集，P是状态转移概率矩阵。公式,描述了一个状态转移到另一个状态发生的概率。本文主要以代码描述MP过程。若要详细看图文例子，可参考知乎https://zhuanlan.zhihu.com
miahuang·2022-02-07 05:07

R语言马尔可夫区制转移模型Markov regime switching

原文链接：http://tecdat.cn/?p=12280原文出处：拓端数据部落公众号总览本文简要介绍了一种简单的状态转移模型，该模型构成了隐马尔可夫模型（HMM）的特例。这些模型拟合时间序列数据中的非平稳性。从应用的角度来看，这些模型在评估经济/市场状态时非常有用。这里的讨论主要围绕使用这些模型的科学性。基本案例HMM的主要挑战是预测隐藏部分。我们如何识别“不可观察”的事物？HMM的想法是从可
·2022-01-11 17:32

Matlab用BUGS马尔可夫区制转换Markov switching随机波动率模型、序列蒙特卡罗、M-H采样分析时间序列数据

原文链接：http://tecdat.cn/?p=24498在这个例子中，我们考虑马尔可夫转换随机波动率模型。统计模型让是因变量和未观察到的对数波动率.随机波动率模型定义如下区制变量遵循具有转移概率的二态马尔可夫过程表示均值的正态分布和方差.BUGS语言统计模型文件“ssv.bug”的内容：file = 'ssv.bug'; % BUGS模型文件名model{  x\[1\] ~ dnorm(mm
·2021-12-02 16:17

stata马尔可夫Markov区制转移模型分析基金利率

原文链接：http://tecdat.cn/?p=19611原文出处：拓端数据部落公众号过程会随着时间的推移而发展，结果会发生变化。考虑一下经济衰退和扩张。在衰退开始时，产出和就业率下降并保持较低水平，然后，产出和就业率增加。从统计上讲，均值，方差和其他参数在各个状态之间都在变化。我们的问题是估计方案何时更改以及与每个方案关联的参数值。询问状态何时改变等同于询问状态持续多久。在马尔可夫模型中，除了
·2021-08-16 20:09

【游戏数值】装备强化模型

@知乎解答参考该问题下@刘昆和@朱元晨两位dalao的回答马氏链期望计算例子：[markov系列2]马尔可夫链中的期望问题装备有个等级，，对等级的装备强化有等级变为和两个结果（停留在等级也可以视作三个结果
Jweeeeee·2021-08-09 08:08

HMM理论及代码实现

Ref：https://web.stanford.edu/~jurafsky/slp3/A.pdfhttps://en.wikipedia.org/wiki/Hidden_Markov_model文中的例子和符号基本来自
第一个读书笔记·2021-07-05 16:08

岭回归

岭回归岭回归和lasso解决回归中重大疑难问题：排除多重共线性，进行变量的选择最小二乘估计在给定经典线性回归的假设下，最小二乘估计量是具有最小方差的线性无偏估计量（Gauss-Markov定理）线性回归模型可以写成
判笔·2021-06-06 15:15

一个隐马尔科夫模型的应用实例：中文分词

这类问题可以用Markov模型来描述。markov进一步，如果我们并不知道今天的天气属于什么状况，我们只知道今明后
不会停的蜗牛·2021-05-04 00:48

隐马尔可夫模型（Hidden Markov Model，HMM）是什么？隐马尔可夫模型（Hidden Markov Model，HMM）的三个基本问题又是什么？

隐马尔可夫模型（HiddenMarkovModel，HMM）是什么？隐马尔可夫模型（HiddenMarkovModel，HMM）的三个基本问题又是什么？隐马尔可夫模型(HiddenMarkovModel，HMM)最初由L.E.Baum和其它一些学者发表在一系列的统计学论文中，随后在语言识别，自然语言处理以及生物信息等领域体现了很大的价值。平时，经常能接触到涉及HMM的相关文章，一直没有仔细研究过，
Data+Science+Insight·2021-04-20 22:26

基于Markov链的重庆市二手房价预测分析

基于Markov链的重庆市二手房价预测分析⭕AdamCY888摘要：重庆市作为西部开发的龙头城市、新一线城市，其房价备受各界关注。
AdamCY888·2021-04-09 23:17

【图像隐写】DCT的图像隐写【Matlab 294期】

一、简介在图像隐写分析中，这几个特征是比较经典的图像隐写分析中DCT特征与Markov特征展现出了极大的潜力，小波变换的奇异值分解（WaveletSingularValueDecomposition，WSVD
星斗月辉·2021-02-26 12:41

《随机过程》重点考点整理|复习笔记

目录《随机过程》第一章随机过程及其分类1.随机过程与样本函数与随机变量的区别：2.典型分布第二章Markov过程1.markov的定义2.c-k方程3.首达时间4.状态分类5.马氏链的有限状态与极限分布
豆干花生·2021-02-09 17:49

stata马尔可夫Markov区制转移模型分析基金利率

原文链接：http://tecdat.cn/?p=19611过程会随着时间的推移而发展，结果会发生变化。考虑一下经济衰退和扩张。在衰退开始时，产出和就业率下降并保持较低水平，然后，产出和就业率增加。从统计上讲，均值，方差和其他参数在各个状态之间都在变化。我们的问题是估计方案何时更改以及与每个方案关联的参数值。询问状态何时改变等同于询问状态持续多久。在马尔可夫模型中，除了估算每个方案的均值，方差之外
拓端研究室·2021-01-22 14:02

隐式半马尔可夫模型简述——Hidden semi-Markov Model: My superficial review

本文介绍隐式半马尔可夫模型（HSMM）的基本概念与使用，以及一些个人理解。读者要求有一定隐式马尔可夫模型（HMM）基础。文中采用的符号系统取自附录2。文章目录从HMM到HSMMHSMM概述常用HSMM变体HSMM的推理方法（Inference）HMM的前向/后向算法HSMM的前向/后向算法从HMM到HSMM有关隐式马尔可夫模型模型的由来，此处不做过多阐述，只做简单介绍。详细内容读者可参考此文。给定
止于至玄·2021-01-03 20:25

LaTeX TIKZ画markov转移图（有限状态机FSM图）

作业要画markov转移图，找了半天TIKZ怎么画FSM，代码记录一下\documentclass[a4paper,UTF8]{article}\usepackage{tikz}\usetikzlibrary
good vegetable·2021-01-03 04:52

R语言BUGS/JAGS贝叶斯分析: 马尔科夫链蒙特卡洛方法（MCMC）采样

在这些情况下，我们倾向于利用称为Markov-ChainMonteCarlo算法的程序。此方法使用参数空间中的随机跳跃来（最终）确定后验分布。MCMC的关键如下：跳跃概率的比例与后验概率的比例成正比。
拓端研究室·2020-11-19 12:45

MATLAB中的马尔可夫区制转换(Markov regime switching)模型

原文链接：http://tecdat.cn/?p=17685我们被要求在本周提供一个报告，该报告将统计，优化等数值方法与金融结合在一起。分析师通常关心检测市场何时“发生变化”：几个月或几年内市场的典型行为可以立即转变为非常不同的行为。投资者希望及时发现这些变化，以便可以相应地调整其策略，但是这样做可能很困难。让我们考虑一个简化的示例。牛市可以被定义股票市场普遍看涨且持续时间较长的市场。熊市对应于指
拓端研究室·2020-11-10 10:41

matlab对国内生产总值（GDP）建立马尔可夫链模型（MC）并可视化

p=17549本示例说明如何创建并可视化Markov链模型的结构和演化。考虑从随机转移矩阵中创建马尔可夫链的四状态马尔可夫链，该模型模拟了国内生产总值（GDP）的动态。创建实际GDP的马尔可夫链模型。
拓端研究室·2020-10-30 10:51

期望值Markov过程（马尔科夫过程），hdu1204糖果大战

解：先设c=a+b；r=q/p;这个实际上是Markov过程（马尔科夫过程），具体细节不说了，结果就是：出自：http://www.cnblogs.com/hsqdboke/arc
Last0rder·2020-09-17 11:06

具有传感器非线性的耦合Markov神经网络的 有限时间状态估计

具有传感器非线性的耦合Markov神经网络的有限时间状态估计摘要：本文研究了受传感器非线性影响的耦合Markov神经网络的有限时间状态估计问题，其中考虑了部分未知转移概率的Markov链。
窝妮塔·2020-09-17 00:05

R语言如何做马尔可夫转换模型markov switching model

原文链接：http://tecdat.cn/?p=6962假设有时间序列数据，如下所示。经验表明，目标变量y似乎与解释变量x有关。然而，乍一看，y的水平在中间移动，所以它似乎并不总是有固定的关系（背后有多个状态）。上面的样本数据创建如下。数据根据时间改变x和y之间的关系。x|t|)#(Intercept)45.74681.720226.59|t|)#(Intercept)(S)69.32634.0
qq_19600291·2020-09-16 23:52

马尔科夫状态转移模型 Markov Model

马尔科夫状态转移模型MarkovModel版权声明：本文为CSDN博主「-柚子皮-」的原创文章，遵循CC4.0BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/pipisorry/article/details/46618991一个马尔科夫过程：状态pi向量：系统初始化时，每个状态的概率状态转移矩阵隐马尔科夫由观察的状态（水藻的状态变化）和隐
BlackPenguin·2020-09-16 21:39

NLP | 自然语言处理 - 标注问题与隐马尔科夫模型（Tagging Problems, and Hidden Markov Models）

什么是标注？在自然语言处理中有一个常见的任务，即标注。常见的有：1）词性标注（Part-Of-SpeechTagging），将句子中的每个词标注词性，例如名词、动词等；2）实体标注（NameEntityTagging），将句子中的特殊词标注，例如地址、日期、人物姓名等。下图所示的是词性标注的案例，当输入一个句子时，计算机自动标注出每个词的词性。下图所示的是实体标注的案例，当输入一个句子时，计算机自
Allanxl·2020-09-16 03:34

(NLP学习)(九)HMM(Hidden Markov Model)

隐马尔可夫模型(HidenMarkovModel,HMM)隐马尔可夫模型是马尔可夫链的一种，它的状态不能直接观察到，但能通过观测向量序列观察到，每个观测向量都是通过某些概率密度分布表现为各种状态，每一个观测向量是由一个具有相应概率密度分布的状态序列产生。所以，隐马尔可夫模型是一个双重随机过程----具有一定状态数的隐马尔可夫链和显示随机函数集。自20世纪80年代以来，HMM被应用于语音识别，取得重
Gavin_ggl·2020-09-12 23:01

隐马尔可夫模型导论《A tutorial of hidden markov models and selected applications in speech recognition》

《Atutorialofhiddenmarkovmodelsandselectedapplicationsinspeechrecognition》——LawrenceR.Rabiner虽然马尔可夫、隐马尔科夫模型的统计方法在20世纪60年代末和70年代初被首次引入和研究，但在最近几年却越来越流行。出现这种情况有两个重要原因。首先，该模型具有非常丰富的数学结构，因此可以形成广泛应用的理论基础。其次，
菜鸟的宝宝·2020-09-11 11:25

隐马尔可夫链模型学习总结

隐马尔可夫链模型简介及其Matlab工具箱应用隐马尔可夫链模型(HiddenMarkovModel，HHM)是一种用来描述含有未知参数的Markov过程的统计模型。
珠峰梦想·2020-09-11 10:32

Markov-modulated Poisson process 马氏泊松过程

MMPP非齐次泊松过程，其强调变量服从马氏过程一个双重随机过程：表现在测值特征的非齐次泊松过程；表现在该泊松过程密度变化转移特征的时间连续的马氏过程Markov-modulated泊松过程模型描述令{Xt
Evan_Gu·2020-09-11 08:28

手推隐马尔科夫模型HMM(Hidden Markov Model)01-背景介绍

目录1.写在前面2.概率图模型3.HMM模型3.1HMM模型的5元组3.2HMM模型中的两个假设3.3HMM模型中的三个问题1.写在前面这篇文章带大家看一个比较有意思的模型-HMM，扩展起来就是HiddenMarkovModel。HMM模型在深度学习流行之前，一直活跃在NLP领域，对该领域发展起到了非常大的作用，HMM可以处理自然语言处理和语音识别等领域。我们会在写HMM模型的过程中，将其所涉及到
敲代码的乔帮主·2020-08-26 12:47

手推隐马尔科夫模型HMM(Hidden Markov Model)02-Evaluation评估问题

目录1.写在前面2.Evaluation评估问题3.前向算法-ForwardAlgorithm（O(N·T^2)）4.后向算法-BackwardAlgorithm（O(N·T^2)）1.写在前面上一篇博客，我们重点介绍了HMM的一些基本概念，模型定义，说明了在使用HMM模型中的两个假设，引出在HMM中的三个重要的问题。HMM模型主要是用来解决三类问题：Evaluation问题、Learning问题
敲代码的乔帮主·2020-08-26 12:47

隐马尔可夫模型(Hidden Markov Model)

背景隐马尔可夫模型(HiddenMarkovModel)是一种常用的统计模型。应用也比较广泛，在时序问题，以及语音识别等问题上有广泛的应用。下面简单介绍一下隐马尔可夫模型。隐马尔可夫模型是在马尔可夫过程的基础上，加入了隐含状态后的一种结构。这里首先介绍一下什么是马尔可夫过程(MarkovProcess)在一个随机过程中，有一个状态变量III，其下一时刻的状态之和之前的状态有关。例如布朗运动，粒子的
FrankMartinet·2020-08-26 11:25

David silver 强化学习公开课笔记（二）：MP、MRP、MDP

1引言1.1Markov的性质正如上一节课提到的，Markov状态表示当前的状态包括了历史所有的信息，也就是给定当前状态，未来和历史是独立的。通俗的说就是未来只和现在有关，和过去是没有关系的！
taoyafan·2020-08-25 01:54

隐马尔可夫模型求解中文分词实例（转）

这类问题可以用Markov模型来
阿雅Yage·2020-08-24 03:35

HMM学习最佳范例笔记

HMM学习最佳范例http://www.52nlp.cn/hmm-learn-best-practices-four-hidden-markov-models一、定义一个隐马尔科夫模型是一个三元组（pi
qq_33638017·2020-08-24 01:36

HMM(Hidden Markov Model)

目录HMM定义HMM的确定从⽣成式的观点考虑隐马尔科夫模型，我们可以更好地理解隐马尔科夫模型。HMM的参数统一定义：HMM举例HMM的3个基本问题概率计算问题定义：前向概率-后向概率前向算法后向算法前后向关系单个状态的概率：两个状态的联合概率期望学习问题监督学习方法Baum-Welch算法（非监督学习方法）预测问题近似算法Viterbi算法python实现中文分词-------七月算法机器学习笔记
SunChao3555·2020-08-23 23:29

一个隐马尔科夫模型的应用实例：中文分词

这类问题可以用Markov模型来描述。markov进一步，如果我们并不知道今天的天气属于什么状况，我们只知道今
芦金宇·2020-08-23 22:11

机器学习笔记-Task04-条件随机场CRF（Conditional Random Field）

相关概念1.1有向图VS无向图1.1.1有向图1.1.2无向图1.2生成模型VS判别模型1.2.1生成模型(generativemodel)1.2.2判别模型（discriminativemodel）2.隐Markov
Yicen_Young·2020-08-22 14:53
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他