最大熵

MaxEnt: 最大熵模型(Maximum Entropy Models)(一)

刚看完HMM，因为有个ME-HMM方法，所以再看看最大熵模型，最后再把CRF模型看看，这一系列理论大体消化一下，补充一下自己的大脑，方便面试什么的能够应付一些问题。多读书，多思考，肚子里才有东西。
san_yun·2012-09-01 13:00

条件随机场 conditional random fields 及代码实现

它在观测序列的基础上对目标序列进行建模,重点解决序列化标注的问题条件随机场模型既具有判别式模型的优点,又具有产生式模型考虑到上下文标记间的转移概率,以序列化形式进行全局参数优化和解码的特点,解决了其他判别式模型(如最大熵马尔科夫模型
bookwormno1·2012-08-27 10:00

动态规划与信息熵，最大熵

阅读更多最优化原理1951年美国数学家R．Bellman等人，根据一类多阶段问题的特点，把多阶段决策问题变换为一系列互相联系的单阶段问题，然后逐个加以解决。一些静态模型，只要人为地引进“时间”因素，分成时段，就可以转化成多阶段的动态模型，用动态规划方法去处理。与此同时，他提出了解决这类问题的“最优化原理”(Principleofoptimality)：“一个过程的最优决策具有这样的性质：即无论其初
deepfuture·2012-08-22 22:00

动态规划与信息熵，最大熵

最优化原理  1951年美国数学家R．Bellman等人，根据一类多阶段问题的特点，把多阶段决策问题变换为一系列互相联系的单阶段问题，然后逐个加以解决。一些静态模型，只要人为地引进“时间”因素，分成时段，就可以转化成多阶段的动态模型，用动态规划方法去处理。与此同时，他提出了解决这类问题的“最优化原理”(Principle of optimality)：    “一个过程的最优决策具有这样的性质：即
deepfuture·2012-08-22 22:00

最大 熵模型

在数学上，这个原理称为最大熵原理(themaximumentropyprinciple)。这是一个非常有意思的题目，但是把它讲清楚要用两个系列的篇幅。] 
san_yun·2012-08-19 22:00

Maxent

Maxent（最大熵工具） 2008-05-19 18:07 Maxent最大熵工具是由中科院软件所张乐博士开发的。该工具提供了python接口，使用起来非常方便。
san_yun·2012-08-19 21:00

最大熵模型

转自廖先桃的最大熵PPT熵：描述事物无序性的参数，熵越大则越无序。熵在自然界的变化规律：熵增原理当熵处于最小值，即能量集中程度最高、有效能量处于最大值时，整个系统也处于最有序的状态（大爆炸前？）。
inte_sleeper·2012-07-31 16:00

标注偏置问题(Label Bias Problem)和HMM、MEMM、CRF模型比较

PS：标注偏置问题存在于最大熵马尔可夫模型（M
zhoubl668·2012-07-26 10:00

自然语言处理相关词条

NLP领域自然语言处理计算语言学自然语言理解自然语言生成机器翻译文本分类语音识别语音合成中文分词信息检索信息抽取句法分析问答系统自动摘要拼写检查统计机器翻译[编辑]NLP专题隐马尔科夫模型最大熵模型条件随机场数学之美支持向量机机器学习
zhoubl668·2012-07-18 15:00

最大熵，三硬币模型的R语言代码

#最大熵算法#《统计学习方法》最大熵，三硬币模型的R语言代码有3个硬币，分布为A、B、C，硬币正面的概率是pai，p，q。投币实验如下，先投A，如果A是正面，即A=1，那么选择投B；A=0，投C。
poson·2012-04-28 09:59

最大熵，三硬币模型的R语言代码

#最大熵算法#《统计学习方法》最大熵，三硬币模型的R语言代码  有3个硬币，分布为A、B、C，硬币正面的概率是pai，p，q。
poson·2012-04-28 09:00

最大熵 IIS算法中的一个证明和图

参考《TheImprovedIterativeScalingAlgorithm：AGentleIntroduction》其中一个公式：当x>0时，-log(x)>=1-x成立。证明：x-log(x)-1>=0令x=1+z，z>-1;得到:1-x=z由于：ln(1+z)=z-z^2/2+z^3/3-z^4/4..... 因此： -log(x)-1+x=-z+z^2/2-z^3/3+...+(-z)=
poson·2012-04-25 19:00

《统计学习方法》阅读笔记

详细看了一章最大熵，发现其实都是对已有文献的翻译，其中的部分符号修改了，更加通俗易读。不过翻译的非常好，是目前国内翻译的最好的吧。         
poson·2012-04-24 09:00

数学之美 系列十六 （下）－ 不要把所有的鸡蛋放在一个篮子里　最大熵模型

我们上次谈到用最大熵模型可以将各种信息综合在一起。我们留下一个问题没有回答，就是如何构造最大熵模型。
abc123456789cba·2012-04-09 14:00

数学之美系列十六：不要把所有的鸡蛋放在一个篮子里 -- 谈谈最大熵模型

数学之美系列十六（上）－不要把所有的鸡蛋放在一个篮子里--谈谈最大熵模型[我们在投资时常常讲不要把所有的鸡蛋放在一个篮子里，这样可以降低风险。在信息处理中，这个原理同样适用。
abc123456789cba·2012-04-09 14:00

自然语言处理的最大熵方法 之1

A Maximum Entropy Approach to Natural Language Processing（自然语言处理的最大熵方法）       最大熵的方法可以追溯到圣经时期（Biblical
Harry_lyc·2012-02-17 19:00

数学之美系列十六（上）－ 不要把所有的鸡蛋放在一个篮子里 -- 谈谈最大熵模型

转自：http://www.kuqin.com/math/20071204/2790.html数学之美系列十六（上）－不要把所有的鸡蛋放在一个篮子里--谈谈最大熵模型[我们在投资时常常讲不要把所有的鸡蛋放在一个篮子里
csharp25·2012-01-17 16:00

MaxEnt: 最大熵模型(Maximum Entropy Models)

转自：http://www.zhizhihu.com/html/y2011/3489.html刚看完HMM，因为有个ME-HMM方法，所以再看看最大熵模型，最后再把CRF模型看看，这一系列理论大体消化一下
daoqinglin·2011-10-26 11:32

MaxEnt: 最大熵模型(Maximum Entropy Models)

转自：http://www.zhizhihu.com/html/y2011/3489.html刚看完HMM，因为有个ME-HMM方法，所以再看看最大熵模型，最后再把CRF模型看看，这一系列理论大体消化一下
daoqinglin·2011-10-26 11:00

最大熵模型—读数学之美

最大熵原理：对一个随机事件的概率分布进行预测时，要满足全部的已知条件，对未知的情况不要做主观假设，概率分布越均匀，预测风险越小。要保留所有的不确定性。 
gls_liujia·2011-09-14 19:00

图像预处理之直方图均衡化

从信息论的角度可以得到最大熵。但是由于离散的数值算法，造成颗粒感太强了。一开始找资料，中文的介绍很是迷惑，怎么看也看不懂啊。
euler1983·2011-06-20 15:00

称硬币问题

   最大熵模型  假设的N个硬币，只有一个假币当知道假币的轻重的时候，信息熵为log(n),需要的最小一定能找到假币的称天平次数为log(n)/log(3)的上界当不知道假币轻重的时候，信息熵为log
qq675927952·2011-06-09 21:00

最大熵的两个证明

《A maximumentropy approachto naturallanguageprocessing》这篇论文是最大熵的经典论文。
luoleicn·2011-06-08 18:00

自然语言处理之三：最大熵马尔科夫模型

最大熵马尔科夫，看了N遍了。终于有点眉目。 最大熵马尔科夫在建模的时候考虑的问题和ME（最大熵模型）其实是一样的。 同样是马尔科夫的三个基本问题。 
chjjunking·2011-05-31 00:00

自然语言处理之二：隐马尔科夫模型

在谈最大熵马尔科夫模型之前，先熟悉一下隐马尔科夫模型  一个隐马尔可夫模型(HMM)是一个五元组： (ΩX,ΩO,A,B,π) 其中：   ΩX={q1,...qN}：状态的有限集合   ΩO={v1,
chjjunking·2011-05-28 21:00

最大熵模型

                               最大熵模型：读书笔记                                                                   
chjjunking·2011-05-28 19:00

自然语言处理之一：最大熵模型

今天看了一下这个“最大熵模型”（A MaximumEntropyApproach to Natural Language Processing），写写自己的想法吧。呵呵。 
chjjunking·2011-05-28 17:00

maxent 和CRF++使用中遇到的两个问题

注意最大熵不能识别，同一个event中，相同的feature，要加以区分。 CRF++ 在使用CRF++时要注意： 1. segment fault错误，可能是由于连续
cyzhang999·2011-03-08 09:00

Penn Treebank Tags做点小翻译 （上篇）

附注：我下的是英文的ME模型（Maxent model最大熵模型）实现的词性标注，openNLP还有感知模型（Perceptron mode
fuhao_987·2011-01-22 23:00

谈谈最大熵模型

谈谈最大熵模型最近工作中涉及到最大熵算法，下面这篇文章的解释算是自己比较满意的 From：http://www.cnblogs.com/KevinYang/archive/2009/02/01/1381798
tianya23·2010-12-22 14:48

数学之美 系列十七 不要把所有的鸡蛋放在一个篮子里 -- 谈谈最大熵模型 （下）

我们上次谈到用最大熵模型可以将各种信息综合在一起，我们留下一个问题没有回答，就是如何构造最大熵模型。我们已经所有的最大熵模型都是指数函数的形式，现在只需要确定指数函数的参数就可以了。
liuxinglanyue·2010-11-26 22:00

数学之美 系列十六（上） 不要把所有的鸡蛋放在一个篮子里 -- 谈谈最大熵模型

在数学上，这个原理称为最大熵原理(themaximumentropyprinciple)。这是一个非常有意思的题目，但是把它讲清楚要用两个系列的篇幅。]
liuxinglanyue·2010-11-26 22:00

数学之美 系列十六 （下）－ 不要把所有的鸡蛋放在一个篮子里　最大熵模型

我们上次谈到用最大熵模型可以将各种信息综合在一起。我们留下一个问题没有回答，就是如何构造最大熵模型。
liuxinglanyue·2010-11-26 22:00

最大熵模型

                             最大熵模型：读书笔记                                                                   
lengyuhong·2010-11-22 13:00

最大熵模型文献阅读指南

最大熵模型（MaximumEntropyModel）是一种机器学习方法，在自然语言处理的许多领域（如词性标注、中文分词、句子边界识别、浅层句法分析及文本分类等）都有比较好的应用效果。
lengyuhong·2010-11-22 11:00

最大熵工具包的使用

最大熵工具包的使用   最大熵是自然语言处理中经常用到的一种统计方法。网上也有很多最大熵方面的工具包，目前大家用得最多的应该是张乐博士写的最大熵工具包了。
Augusdi·2010-10-28 15:00

谈谈opennlp maxent

背景：最大熵模型可用于文本分类 简介 maxent是个非常不错的最大熵java实现 主要的功能还是分为两部分特征提取和GIS迭代算法 1）特征提取采取了简单将分词作为特征，目前只支持单个字段
isiqi·2010-09-08 20:00

谈谈opennlp maxent

背景：最大熵模型可用于文本分类 简介maxent是个非常不错的最大熵java实现主要的功能还是分为两部分特征提取和GIS迭代算法1）特征提取采取了简单将分词作为特征，目前只支持单个字段，但如过要实现多字段特征也是很简单的事情
pwlazy·2010-09-08 20:00

谈谈opennlp maxent

背景：最大熵模型可用于文本分类 简介 maxent是个非常不错的最大熵java实现 主要的功能还是分为两部分特征提取和GIS迭代算法 1）特征提取采取了简单将分词作为特征，目前只支持单个字段
beifenggo·2010-09-08 20:00

谈谈opennlp maxent

背景：最大熵模型可用于文本分类 简介 maxent是个非常不错的最大熵java实现 主要的功能还是分为两部分特征提取和GIS迭代算法 1）特征提取采取了简单将分词作为特征，目前只支持单个字段
beifenggo·2010-09-08 20:00

谈谈opennlp maxent

背景：最大熵模型可用于文本分类 简介 maxent是个非常不错的最大熵java实现 主要的功能还是分为两部分特征提取和GIS迭代算法 1）特征提取采取了简单将分词作为特征，目前只支持单个字段
xitong·2010-09-08 20:00

一种二维条码图像处理流程

本条码类似于Maxicode，处理过程大致为：(1)、图像灰度化：最大值法、平均值法、加权平均值法；(2)、图像二值化：迭代阈值法、OTSU算法(最大类间方差法、大津阈值算法)、一维最大熵阈值法、二维最大熵阈值法
fengbingchun·2010-08-21 22:00

条件随机场 (CRF) 分词序列谈之一

条件随机场(CRF)分词序列谈之一Langiner判别式机器学习技术来解决分词问题，其中判别式机器学习技术主要代表有条件随机场，最大熵/隐马尔科夫最大熵、感知机，支撑向量机等，有关它们的相同点与不同点以后有机会在谈
langiner·2010-08-18 14:15

条件随机场 (CRF) 分词序列谈之一

条件随机场(CRF)分词序列谈之一Langiner判别式机器学习技术来解决分词问题，其中判别式机器学习技术主要代表有条件随机场，最大熵/隐马尔科夫最大熵、感知机，支撑向量机等，有关它们的相同点与不同点以后有机会在谈
langiner·2010-08-18 14:15

条件随机场 (CRF) 分词序列谈之一

条件随机场(CRF)分词序列谈之一Langiner判别式机器学习技术来解决分词问题，其中判别式机器学习技术主要代表有条件随机场，最大熵/隐马尔科夫最大熵、感知机，支撑向量机等，有关它们的相同点与不同点以后有机会在谈
langiner·2010-08-18 14:15

matlab中的burg算法

    Burg算法曾一度被称为最大熵谱算法。其基本思想是利用向前滤波误差fn,t和向后滤波误差bn,t，求出保证平均滤波误差功率为最小的ann，再按levinson算法计算ani。
deco1515·2010-07-21 09:00

matlab中的burg算法

Burg算法曾一度被称为最大熵谱算法。其基本思想是利用向前滤波误差fn,t和向后滤波误差bn,t，求出保证平均滤波误差功率为最小的ann，再按levinson算法计算ani。
deco1515·2010-07-21 09:00

信息增益

因为这时概率分布的信息熵最大，所以称之为“最大熵法”。最大熵法在数学形式上很漂亮，但是实现起来比较复杂，但把它运用于金融领域的诱惑也比较大，比如说决定股票涨落的因素可能有几
zhouqiang128·2010-06-19 20:00

数学之美系列十六 -- 谈谈最大熵模型[zz]

数学之美系列十六--谈谈最大熵模型2006年10月8日上午07:27:00发表者：Google研究员，吴军 [我们在投资时常常讲不要把所有的鸡蛋放在一个篮子里，这样可以降低风险。
xianlingmao·2010-04-05 17:00

最大熵模型中的heldout accuracy（张乐老师提供的最大熵模型包相关技术）

最大熵模型中的heldoutaccuracy（张乐老师提供的最大熵模型包相关技术）里面有一段这样的描述，我想了解一下有关heldout的相关详情，并且为什么会因此引入高斯方差？谢谢！
firstboy0513·2010-04-01 16:00
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他