香农

漫画 | 99%的程序员都在第6层！

图灵（漫画中没有出现）提出了理论模型，布尔创立了布尔代数，香农的硕士论文（号称是本世纪最重要的硕士论文）证明这个布尔代数可以用继电器的开关电路实现，为以后计算机的发展铺平了道路。
码农翻身·2023-01-06 10:41

机器学习算法——决策树算法（ID3算法划分数据集，基于香农熵的python底层实现）

决策树算法是一种非参数的决策算法，它根据数据的不同特征进行多层次的分类和判断，最终决策出所需要预测的结果。它既可以解决分类算法，也可以解决回归问题，具有很好的解释能力。部分图片源自网络，侵删决策树就如上图所示，决策树算法能够读取数据集合，构建类似于上图的决策树。决策树的一个重要任务是为了厘清数据中所蕴含的知识信息，因此决策树可以使用不熟悉的数据集合，并从中提取出一系列规则，在这些机器根据数据集创建
零壹博弈·2023-01-05 13:01

人工智能期末——第一章绪论

第一章绪论1.1人工智能的发展历史1956年达特茅斯会议（DartmouthConference）被公认为是人工智能的起源Dartmouse大学，由麦卡锡、明斯基、香农等数学家、计算机专家、神经心理学家发起持续了
战士小小白·2023-01-04 16:14

【信息论与编码 沈连丰】第七章：信息率失真理论及其应用

信息率失真理论及其应用第七章信息率失真理论及其应用7.1失真函数和平均失真度7.2信息率失真函数7.3信息率失真函数R(D)的计算7.4保真度准则下的信源编码定理7.5信息率失真函数与信息价值第七章信息率失真理论及其应用香农第二定理告诉我们如何保证信息无失真的传输
傻fufu滴人儿～·2023-01-04 13:35

【信息论与编码 沈连丰】第六章：连续信息和连续信道

【信息论与编码沈连丰】第六章：连续信息和连续信道第六章连续信息和连续信道6.1连续消息的信息6.2连续消息在信道上的传输问题6.3香农信道容量公式6.4连续消息的识别和理想接收机6.5连续信源的数字处理及其编码第六章连续信息和连续信道
傻fufu滴人儿～·2023-01-04 13:34

【信息论与编码 沈连丰】第一章：信息科学及其发展

【信息论与编码沈连丰】第一章：信息科学及其发展1.1通信系统的基本概念1.2信息科学的有关概念1.3信息理论的研究内容1.4香农信息论概述1.1通信系统的基本概念通信的目的是传输信息，近代通信主要是电通信
傻fufu滴人儿～·2023-01-04 13:04

通信原理知识点汇总1

1.写出香农信道容量公式及所能得出的结论，和在实际生活中的体现？①香农信道容量公式：②结论：a.时，且时；b.时，且时；c.时，但时；（存在极限）③实际应用中的体现：a.
Moki金淦淦·2023-01-03 17:05

python3random linux熵_【机器学习数据集的信息熵】信息熵及其Python计算实现

熵，定义为信息的期望值，是大名鼎鼎的香农提出来的概念。信息的定义：如果待分类的Xi，可能处于多个类别中，那么Xi的信息定义为：L(Xi)=-log2p(xi)，其中p(Xi)是处于该分类的概率为了计
weixin_39522312·2022-12-31 09:06

熵及其相关概念

而机器学习中的熵是信息熵，是香农借鉴热力学熵而创造的概念。本节的说明是借鉴王木头的YouTube视频而来的。讨论熵的概念之前，先要解释清楚的是信息量这个概念，信息量的定性说明：针
圆月弯刀鞘·2022-12-31 09:58

图像采样与量化

根据香农采样定理，只要采样的频率大于
Rkun18·2022-12-30 07:35

decision_tree_glass

3.实验知识点香农熵信息增益4.实验环境python3.6.55.预备知识Python编程基础准备工作点击屏幕右上方的下载实验数据模块，选择下载decision_tree_glass.tgz到指定目录下
大暑这天开通了博客·2022-12-30 07:12

大话移动通信- -

走进现代通信香农-韦弗模式构建了一个直线单向的框架，描述了一般化的通信系统的信息传播过程。此模式包含了信源、发射器、信道、噪声、接收器、信宿6个部分。
剑轩~·2022-12-30 03:45

决策树[sklearn.tree/DecisionTreeClassifier/scatter/np.meshgrid/np.concatenate/Kfold/Cross-validation]

决策树概念举栗子importnumpyasnp引入数据：s='''在1948年，香农引入了信息熵，将其定义为离散随机事件出现的概率，一个系统越是有序，信息熵就越低，反之一个系统越是混乱，它的信息熵就越高
Doris_H_n_q·2022-12-30 02:48

安卓手机检测水表的帧率问题

通常手机相机的帧率是30fps，根据香农采样定律，帧率实际上决定了对旋转仪表的分辨率。30fps可以满足大部
bluesen·2022-12-29 15:48

香农采样定理（奈奎斯特采样定理）

香农采样定理，又称奈奎斯特采样定理，是信息论，特别是通讯与信号处理学科中的一个重要基本结论。采样是将一个信号（即时间或空间上的连续函数）转换成一个数值序列（即时间或空间上的离散函数）。
月疯·2022-12-29 07:59

通过matlab对比规则LDPC和非规则LDPC的误码率

它的性能逼近香农极限，且描述和实现简单，易于进行理论分析和研究，译码简单且可实行并行操作，适合硬件实现。LDPC码可以通过校验矩阵H来唯一确定
我爱C编程·2022-12-28 13:08

自然语言处理——金庸小说的信息熵计算

2.实验内容2.1信息熵1948年，为了解决信息量化的问题，香农从热力学中借用了热熵的概念提出了“信息熵”的概念，把信息中排除了冗余后的平均信息量称为“信息熵”，并给出了计算信息熵的数学表达式。
fraybit·2022-12-26 07:56

图像压缩算法简介

理论基础香农的信息论，在不产生任何失真的前提下，通过合理的编码，对于每个信源符号分配不等长的码字，平均码长可以任意接近于信源的熵。
_123杨子江·2022-12-26 01:29

信息论在人工智能方面应用

香农三大定理与新社会人工智能发展的羁绊：克劳德·艾尔伍德·香农(ClaudeElwoodShannon，1916年4月30日-2001年2月24日)是美国数学家、信息论的创始人。
白自·2022-12-25 19:08

如果是初学C语言请看完 一些成功人士的心得

如果是初学C语言请看完一些成功人士的心得转自程先的专栏今天，我能够自称是一个混IT的人，并能以此谋生，将来大家能一次谋生，都要感谢两个人：克劳德.香农和约翰.冯.诺依曼，是他们发现了所有的数字化信息，不论是一段程序
anmndy·2022-12-25 04:57

怎样学好C语言，一个成功人士的心得！

今天，我能够自称是一个混IT的人，并能以此谋生，将来大家能一次谋生，都要感谢两个人：克劳德.香农和约翰.冯.诺依曼，是他们发现了全部的数字化信息，不论是一段程序，一封email，一部电影都是用一连串的1
weixin_33889665·2022-12-25 04:52

（转）如何学好C语言，一个成功人士的心得！

zidier111发表于2013-1-2608:59:05今天，我能够自称是一个混IT的人，并能以此谋生，将来大家能一次谋生，都要感谢两个人：克劳德.香农和约翰.冯.诺依曼，是他们发现了所有的数字化信息
weixin_30699443·2022-12-25 04:21

C语言大牛的心得

本文转自网络今天，我能够自称是一个混IT的人，并能以此谋生，将来大家能一次谋生，都要感谢两个人：克劳德.香农和约翰.冯.诺依曼，是他们发现了所有的数字化信息，不论是一段程序，一封email，一部电影都是用一连串的
liufengtc·2022-12-25 04:15

Massive MIMO简介

扩展香农信息论从“标量”---->"向量“
香脆鱿鱼须·2022-12-23 10:43

机器学习 最大熵模型

一.信息熵1.信息熵(1)概述:该概念由克劳德·艾尔伍德·香农在1948年首次提出,最初来自于热力学中熵的概念.为避免混淆,故称为信息熵(Entropy).这是1个用于度量信息的不确定性的抽象概念.由于
EdVzAs·2022-12-22 16:47

合肥工业大学机器人技术第四次作业:生成决策树

机器人技术第四次作业:生成决策树,Python实现样本数据ID3生成决策树基本算法计算数据整体的香农信息熵对每个属性,分别计算条件熵计算条件增益选择最有条件增益作为决策树的根节点重复上述步骤,直到信息熵降为
叫我moonchild·2022-12-19 19:23

【机器学习实战】决策树 python代码实现

可能会产生过度匹配的问题适用数据类型数据型和标称型一般流程：收集数据准备数据分析数据训练算法测试算法使用算法数据重新加载的问题代码实现#coding:UTF-8frommathimportlog#计算给定数据集的香农嫡
小胡的博客号Aoife艺馨·2022-12-19 16:49

计算机网络——物理层

计算机网络——物理层涉及内容如下：（一）通信基础信道、信号、带宽、码元、波特、速率奈奎斯特定理与香农定理、编码与调制电路交换、报文交换、分组交换；数据报与虚电路（二）传输介质双绞线、同轴电缆、光纤与无线传输介质
我先睡会觉·2022-12-17 13:51

机器学习——03决策树算法

AIlearningMachine-Learning-in-Action庞善民.西安交通大学机器学习导论2022春PPT具体算法的原理步骤请参考本人的另一篇博文：[机器学习导论]——第四课——决策树一、信息熵与信息增益信息熵信息熵使信息得以量化1948年，香农
雨落俊泉·2022-12-17 11:22

杂七杂八的网络安全知识

杂七杂八的网络安全知识博客链接：https://www.blog.23day.site/articles/81一、信息安全概述1.信息与信息安全信息与信息技术信息奠基人：香农：信息是用来消除随机不确定性的东西信息的定义
23DAY·2022-12-17 10:59

机器学习算法基础 Day5

香农指出，它的准确信息量应该是：H=-(p1logp1+p2logp2+…+p32log32
小浩码出未来！·2022-12-16 16:39

计算机网络 第二章 物理层

目录前言一、传输媒体二、传输方式三、编码与调制四、信道的极限容量1、奈氏准则2、香农公式前言物理层考虑的是怎样才能在连接各种计算机的传输媒体上传输数据比特流。
小太阳的向日葵·2022-12-15 18:13

【算法】一个简单的决策树（DT）原理

构建方法交互式二分法（ID3），采用香农信息论中定义的熵作为度量，其反应该节点上的特征对样本分类的不纯度。假设采用特征A为根节点，计算下一级熵不纯度比上一级熵不纯度的减少量（信息增益），选择最大的信
YaoYee_7·2022-12-15 14:00

机器学习笔记-决策树

熵（Entropy）概念1948年，香农提出了“信息熵”的概念。一条信息的信息量大小和它的不确定性有直接的关系，要搞清楚一件非常不确定
小刘同学要努力呀·2022-12-15 11:18

数据通信与计算机网络复习笔记

到展示的简略过程数据通信基础知识模拟信号和数字信号概念数字通信的优点数据通信系统模型组成（从不同角度给与不同描述）数据通信系统的主要性能指标算机网络的定义、主要功能、性能指标网络的定义主要功能（五个）性能指标（七个）香农公式信号的分类
兼收并蓄和·2022-12-15 09:36

采样定理（香农定理）

http://baike.baidu.com/link?url=MC4d5v1Pbz2ATe8TLamjTnvYdyer_CUMffpWGFs3_Nkpjlo8KJqCJaFJzWYaLpAE_QyMhEA5mEWTri32_9iw9q采样定理是指，如果信号带宽不到采样频率的一半（即奈奎斯特频率），那么此时这些离散的采样点能够完全表示原信号。高于或处于奈奎斯特频率的频率分量会导致混叠现象。大多数应
weixin_33937499·2022-12-14 13:22

深度学习-tensorflow学习笔记(1)-MNIST手写字体识别预备知识

tf基本知识香农熵交叉熵代价函数cross-entropy卷积神经网络softmax这里用到的tf基本知识tf.tensor-张量,其实就是矩阵。
QRick·2022-12-14 05:35

决策树通过举例通俗理解

信息熵：不得不提香农这个大写的人啦！信息论里面的知识。在信息论里面，信息熵衡量信息量的大小，也就是对随机变量不确定度的一个衡量。熵越大，不确定性越大。
xunuo_nwpu·2022-12-13 06:23

机器学习-信息熵

熵熵是信息论中的一个基本概念，也称香农熵或信息熵，它衡量了一个概率分布的随机性程度，或者说它包含的信息量的大小。
FB1024·2022-12-12 16:40

【数字逻辑】——逻辑函数及其简化（学习笔记）

1938年克劳德．香农（ClaudeE.Shannon）将布尔代数应用到继电器开关电路的设计，因此又称为开关代数。随着数字技术的发展，布尔代数成为数字逻辑电路分析和设计的基础，又称为逻辑代数。
HinsCoder·2022-12-11 23:36

OFDM子载波频率 知乎_如何生成复杂的调制信号？

调制技术和元器件的持续改进以及纠错码的进步，促使信道容量更加接近香农定理设定的基础极限。
weixin_39876450·2022-12-11 18:32

怎样学好C语言，一个成功人士的心得！

今天，我能够自称是一个混IT的人，并能以此谋生，将来大家能一次谋生，都要感谢两个人：克劳德.香农和约翰.冯.诺依曼，是他们发现了全部的数字化信息，不论是一段程序，一封email，一部电影都是用一连串的1
weixin_30740581·2022-12-10 00:18

《白话大数据与机器学习》

白话大数据与机器学习第四章高斯距离曼哈顿距离同比和环比高斯分布（正态分布）泊松分布伯努利分布第六章信息论信息量香农公式信息熵多维空间第八章回归（分类算法）线性回归过拟合欠拟合第九章聚类9.1K-means
薯饼__·2022-12-09 15:24

机器学习算法基础 4 决策树与随机森林

决策树决策树思想的来源非常朴素，程序设计中的条件分支结构就是if-then结构，最早的决策树就是利用这类结构分割数据的一种分类学习方法信息论基础信息熵依据Boltzmann’sH-theorem，香农把随机变量
eddiechen10081·2022-12-09 13:07

MATLAB图像分割GUI

章毓晋等人提出基于最大类间后验交叉熵的阈值化分割算法，从目标和背景的类间差异性出发，利用贝叶斯公式估计象素属于目标和背景两类区域的后验概率，再搜索这两类区域后验概率之间的最大交叉熵.这种方法结合了基于最小交叉熵以及基于传统香农
matlab674_v·2022-12-09 11:17

【某航】人工智能复习思路和提纲

孕育期：1956年前图灵机、冯诺依曼提出存储程序的概念、香农信息论形成期：1956年-1969年人工智能概念、鲁滨逊归结原理知识应用期：1968-80年代末以知识为中心的专家系统综合集成期：80年代末-
向太阳的舒肤佳·2022-12-08 10:19

【计算机网络】计算机网络复习总结 ------ 物理层

【波特率B---信号v】比特率R----数据v基带信号baseband带通（频带）信号单工simplex半双工全双工失真理想信道奈奎斯特定理（理想）非理想信道信噪比signaltonosieratio香农定理
码农C风·2022-12-05 11:07

数学建模：熵权法（Matlab）

熵权法是一种客观赋权方法，由香农（Shannon）引入信息技术，原理：根据各指标的变异程度，利用信息熵计算出各指标的熵权，从而得出较为客观的指标权重。
云画Davin·2022-12-04 12:56

计算机网络学习笔记（Ⅱ）：物理层

目录1物理层概念1.1物理层基本概念1.定义2.主要任务3.特性1.2数据通信基础1.典型模型2.相关术语3.三种通信方式4.数据传输方式1.3物理层内容1.码元2.速率3.带宽1.4奈氏准则与香农定理
By4te·2022-12-04 09:02

深度学习之基础-概率和信息论

自信息：I(x)=−logP(x)I(x)=-logP(x)I(x)=−logP(x)香农熵：对整个概率分布中的不
qq_38876114·2022-12-04 04:17
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他