数据压缩

自编码器Auto-Encoder简介与应用潜力探索

（1）数据压缩，应用Encoder可以实现数据特征压缩，Encoder输出的code一般比输入维度低很多，可以认为是特征压缩的产
槛外散人·2023-01-22 07:19

【数据压缩】TGA文件格式分析

一、TGA文件格式简介TGA（TruevisionGraphicsAdapter）文件格式，通常又称为Targa（TruevisionAdvancedRasterGraphicsAdapter），是由Truevision公司1984年创建，并被用于该公司的首个视频图像产品中。1989年，Truevision公司制定了TGA文件格式的扩展格式，使得开发者可以依据其标准开发跨平台跨产品的兼容格式。TG
spadeK2020·2023-01-20 20:23

吴恩达机器学习系列课程笔记——第十四章：降维(Dimensionality Reduction)

14.1动机一：数据压缩https://www.bilibili.com/video/BV164411b7dx?p=79这个视频，我想开始谈论第二种类型的无监督学习问题，称为降维。
Lishier99·2023-01-20 17:30

机器学习之降维压缩数据

特征提取：将原始数据压缩为低纬度的5.1用主成分分析实现无监督降维5.1完成以下步骤：标准化数据构建协方差矩阵获取协方差矩阵特征值和特征向量以降序对特征值排序，从而对特征排序importpandasaspdimportnumpyasnpimportmatplotlib.pyplotaspltdf
热爱学习的小鲁同学·2023-01-20 05:56

python图片压缩算法_Python实现奇异值分解（SVD）压缩图片

这篇文章将通过一个图像压缩的例子教你如何在Python中使用SVD实现数据压缩，并说明其原理。
weixin_39666496·2023-01-18 13:58

Redis规范,让你的Redis原地起飞

Redis规范节省内存资源1)控制key的长度2)避免存储bigkey3)选择合适的数据类型4)把Redis当作缓存使用5)实例设置maxmemory+淘汰策略6)数据压缩后写入Redis持续发挥高性能
Fong灵·2023-01-17 01:42

stable diffusion原理

数据压缩的目的是学习数据中较重要的信息。以编码器-解码器网络为例，首先使用全卷积神经网(FCN)络学习图片特征，我们将特征提取中对数据的降维看作一种有损压缩。
ChrisWy26·2023-01-15 11:23

激活函数(sigmoid、Tanh、ReLU、Leaky ReLU、ELU、Maxout)

sigmoid函数公式：图像：sigmoid可以将数据压缩到[0,1]范围内，可看作神经元的饱和放电率。
沉沉沉小姐·2023-01-12 11:44

Apache Spark 机器学习 数据源 2

Parquet数据源该数据源是apacheparquet技术框架提供的数据存储格式，是面向列式存储结构，其设计的目标是提供高效以及高性能的数据存储、数据获取、数据压缩以及数据编码。图像数据源
uesowys·2023-01-12 08:05

XGBoost论文翻译

更重要的是，我们提供了对缓存访问模式，数据压缩和
独影月下酌酒·2023-01-11 14:47

XGBoost论文阅读

2.3收缩率和列采样2.4分裂点查找算法2.5稀疏数据感知的节点分裂方法3.工程实现3.1用block按列存储每个特征3.2分布式并行加速1.摘要提出了一种新的稀疏性感知算法，同时提供了一种缓存访问模式、数据压缩和分片
Bruce-XIAO·2023-01-11 14:46

数字图像处理学习笔记（四）

有限冲激响应滤波器(FIR）：哈尔变换:7.2多分辨率展开级数展开尺度函数7.3一维小波变换离散小波变换连续小波变换7.4快速小波变换7.5二维小波变换7.6小波包7.7小结第8章图像压缩8.1基础知识数据压缩
书生丶丶·2023-01-09 12:30

降维与特征选择

文章目录7.1概述7.2特征选择7.3特征降维/提取7.1概述机器学习算法的有效性和计算复杂度是敏感于数据的特征表达和维度数据的降维表示方法，主要包括特征选择和特征提取两种方法特征降维的意义：数据压缩简化数据表示
◝(⑅•ᴗ•⑅)◜..°♡·2023-01-08 09:16

吴恩达机器学习14-降维

吴恩达机器学习14-降维1.数据压缩数据压缩不仅压缩数据，因而使用较少的计算机内存或磁盘空间，而且加快了学习算法的收敛速度。如果你有几百个或成千上万的特征，它是它这往往容易失去你需要的特征。
小y同学在学习·2023-01-08 02:57

吴恩达机器学习（十一）—— 降维

降维1.动机1：数据压缩2.动机2：数据可视化3.主成分分析问题规划4.主成分分析算法5.重建压缩表示6.主成分数量的选择7.应用PCA的建议1.动机1：数据压缩  数据压缩不仅能对数据进行压缩，使得数据占用较少的内存或硬盘空间
青春是首不老歌丶·2023-01-08 02:54

7. 吴恩达机器学习-PCA

可起到数据压缩的作用（因而也就存在数据丢失）。  PCA：即主成分分析法，属于降维的一种方法。
NLP菜鸟·2023-01-08 02:54

吴恩达机器学习课程13——降维

目录降维与数据压缩降维与可视化数据主成分分析法（PCA）什么是PCA数据预处理算法操作主成分数量选择压缩重现PCA的应用如有不妥，还请不吝指正~降维与数据压缩降维可以使数据规模减小，从而起到节约空间、加快算法执行等作用
CtrlZ1·2023-01-08 02:54

吴恩达机器学习（十七）—— 降维

1.动机1：数据压缩2.动机2：数据可视化3.主成分分析问题规划4.主成分分析算法5.重建压缩表示6.主成分数量的选择7.应用PCA的建议1.动机1：数据压缩  数据压缩不仅能对数据进行压缩，使得数据占用较少的内存或硬盘空间
大彤小忆·2023-01-08 02:18

吴恩达《机器学习》——PCA降维

PCA降维1.主成分分析1.1数据降维动机1.2PCA降维目标问题分析2.PCA数学原理分析2.1求协方差矩阵的碎碎念2.2PCA实现方法3.Python实现3.1进行人脸数据压缩数据集、源文件可以在Github
Ace2NoU·2023-01-08 02:16

r语言删除csv中na行_R 利用 limma 包作简单的差异基因分析

下载、整理GEO预处理Matrix文件首先从GEO站点下载GEOmatrixfile数据压缩包，并将其解压到R的当前工作目录。
遗传密码·2023-01-07 13:50

【数据压缩（二）】PNG文件格式分析

PNG文件格式（一）概述PNG（可移植网络图形），是一种可扩展的文件格式，用于光栅图像的无损、可移植、压缩良好的存储。PNG是一种无损压缩的位图图形格式。其设计目的是试图替代GIF和TIFF文件格式，同时增加一些GIF文件格式所不具备的特性。PNG的名称来源于“可移植网络图形格式(PortableNetworkGraphicFormat，PNG)”，也有一个非官方解释“PNG'sNotGIF”。P
T.278·2023-01-05 14:40

Python数据预处理技术实验

MinMaxScaler有一个重要参数，feature_range，控制我们希望把数据压缩到的范围，默认是[0,1]。
怡怡小可爱咩·2023-01-05 14:05

转：无损压缩和有损压缩

图像有损压缩与无损压缩有损和无损压缩是两种数据压缩技术。在本文的此处，您将了解什么是有损和无损压缩，它们的区别和用途。什么是数据压缩？(WhatisDataCompression?)
35岁北京一套房·2023-01-05 12:10

数据压缩算法PCA使用指南

来源：投稿作者：小灰灰编辑：学姐PCA主成分分析算法PCA的使用范围PCA(principalComponentAnalysis)，即主成分分析方法，是一种使用最广泛的数据压缩算法。
深度之眼·2023-01-05 09:26

数据压缩实验四：DPCM编码

一、基本原理DPCM是典型的预测编码系统，采用负反馈的方式进行，由于解码端无法得到原始值，因此要用量化编码后的重建值来生成预测值，编码器中要内嵌解码器。DPCM编码框图如下：Q为量化器，由于整个系统由预测+量化+熵编码构成，熵编码对形如Laplace分布的信源，有很好的压缩效果，因此量化部分采用均匀量化，能够保持预测误差的Laplace分布特性，在熵编码获得较高的编码效率，非均匀量化会把原本呈现L
youyangstrong·2023-01-05 08:16

数据压缩实验4——DPCM编码

1实验目的掌握DPCM编解码系统的基本原理。初步掌握实验用C/C++/Python等语言编程实现DPCM编码器，并分析其压缩效率。2实验原理2.1DPCMDPCM是差分预测编码调制的缩写，是比较典型的预测编码系统。在DPCM系统中，需要注意的是预测器的输入是已经解码以后的样本。之所以不用原始样本来做预测，是因为在解码端无法得到原始样本，只能得到存在误差的样本。因此，在DPCM编码器中实际内嵌了一个
Jin_chenlang·2023-01-05 08:46

数据压缩实验四 DPCM压缩系统的实现与分析

如果模型足够好，且样本序列在时间上相关性较强，则误差信号的幅度将远远小于原始信号，从而得到较大的数据压缩。DPCM编解码系统框图如下：其中Xk^是Xk
zgyggy·2023-01-05 08:46

数据压缩【实验四】DPCM压缩系统的实现和分析

目录一、实验目的二、实验原理三、实验代码（1）代码（2）输出结果四、实验结果（1）压缩（2）PSNR峰值信噪比原理算法重建图像五、实验分析一、实验目的掌握DPCM编解码系统的基本原理用C/C++/Python等语言编程实现DPCM编码器，并分析其压缩效率。二、实验原理DPCM是差分预测编码调制的缩写，是比较典型的预测编码系统。在DPCM系统中，需要注意的是预测器的输入是已经解码以后的样本。之所以不
梁启蓉·2023-01-05 08:16

【数据压缩（六）】DPCM 压缩系统的实现和分析

一、实验目的掌握DPCM编解码系统的基本原理。初步掌握实验用C/C++/Python等语言编程实现DPCM编码器，并分析其压缩效率二、实验内容1、DPCM编解码原理在DPCM系统中，预测器的输入是已经解码以后的样本。之所以不用原始样本来做预测，是因为在解码端无法得到原始样本，只能得到存在误差的样本。因此，在DPCM编码器中实际内嵌了一个解码器。在本次实验中，采用固定预测器和均匀量化器三、实验代码1
T.278·2023-01-05 08:14

[数据压缩]LZW编解码算法实现与分析

目录实验目的实验原理实验结果实验目的掌握词典编码的基本原理，用C/C++/Python等语言编程实现LZW解码器并分析编解码算法。实验原理LZW编码LZW的编码思想是不断地从字符流中提取新的字符串，通俗地理解为新“词条”，然后用“代号”也就是码字表示这个“词条”。这样一来，对字符流的编码就变成了用码字去替换字符流，生成码字流，从而达到压缩数据的目的。LZW编码是围绕称为词典的转换表来完成的。LZW
lii_by·2023-01-05 08:11

数据压缩|DPCM压缩系统的实现和分析

1.实验目的：用DPCM编码输出预测误差图像和重建图像。将预测误差图像写入文件并将该文件输入Huffman编码器，得到输出码流、给出概率分布图并计算压缩比。将原始图像文件输入Huffman编码器，得到输出码流、给出概率分布图并计算压缩比。2.实验原理：在一个DPCM系统中，有两个因素需要设计：预测器和量化器。预测器采用左侧预测，采用8bit均匀量化。3.代码实现：量化以及预测部分：intp,q,t
m0_51286232·2023-01-05 08:11

[数据压缩]WAV文件格式分析及AVI数据结构分析

目录WAV文件格式分析WAV概述WAV文件格式分析根据实例的WAV文件结构分析AVI数据结构音频与视频的数据放置方式视频帧与音频帧的字节数参考引用WAV文件格式分析WAV概述WaveformAudioFileFormat（WAVE），后缀采用WAV，采用ResourceInterchangeFileFormat（RIFF）文件格式结构。通常用来保存PCM格式的原始音频数据，所以通常被称为无损音频。
lii_by·2023-01-05 08:41

[数据压缩]RGB文件转换YUV420文件

目录RGB文件与YUV文件格式RGB到YUV的转换公式c++代码实现结果展示RGB文件与YUV文件格式RGB文件格式RGB三个分量按照B、G、R的顺序储存（4:4:4）YUV文件格式此次选用YUV420文件格式，每四个Y共用一组U、V分量（4:2:0）RGB到YUV的转换公式Y=0.299R+0.587G+0.114BU=-0.1687R-0.3313G+0.5B+128V=0.5R-0.4187
lii_by·2023-01-05 08:41

[数据压缩]bmp序列转yuv文件

目录bmp文件分析bmp转yuv思路代码实现结果展示bmp文件分析bmp简介BMP是英文Bitmap（位图）的简写，是Windows采用的图像文件存储格式。在Windows环境下运行的所有图像处理软件都支持这种格式。在Windows环境下运行的所有图像处理软件都支持这种格式。Windows3.0以后的BMP文件都是指设备无关位图(DIB，device-independentbitmap)。BMP位
lii_by·2023-01-05 08:41

[数据压缩]PNG图像格式结构分析

PNG使用从LZ77派生的无损数据压缩算法。PNG在存储灰度图像时，灰度图像的深度可多到16位，在存储彩色图像时
lii_by·2023-01-05 08:40

DPCM

如果模型足够好且样本序列在时间上相关性较强，那么误差信号的幅度将远远小于原始信号，从而得到较大的数据压缩结果。预测编码方法分线性预测和非线性预测编码方法。
gwhcsdn·2023-01-05 08:40

【数据压缩】DPCM编码实验

一.DPCM编码原理在一个DPCM系统中，需要设计预测器和量化器两部分。在本次实验中，我们采取左向预测和8bit均匀量化。左向预测：即将当前像素的左边像素作为预测，两像素值相减即为当前像素的预测误差值。对于第一列像素，默认取其预测值均为128.8bit均匀量化：图像本身是8bit（灰度值为0-255），所以如果相减值就会变为-255——+255为了进行8bit量化，要将预测误差值（即像素相减的差）
ismismist·2023-01-05 08:40

[数据压缩] rgb文件三通道分量的熵计算及元音的时域频域波形分析

目录rgb文件三通道分量的熵计算的编程实现元音的时域频域波形分析基于Audacityrgb文件三通道分量的熵计算的编程实现该实验使用c++语言实现，所使用测试文件test.rgb分辨率为256*256。#include#includeusingnamespacestd;#defineMAX256#defineSIZE256*256intmain(){unsignedchar*buffer=newu
lii_by·2023-01-05 08:10

[数据压缩]DPCM压缩系统的实现和分析

目录实验目的实验原理实验内容实验结果代码实现实验总结实验目的掌握DPCM编解码系统的基本原理。初步掌握实验用C/C++/Python等语言编程实现DPCM编码器，并分析其压缩效率。实验原理DPCM是差分预测编码调制的缩写，是比较典型的预测编码系统。在DPCM系统中，需要注意的是预测器的输入是已经解码以后的样本。之所以不用原始样本来做预测，是因为在解码端无法得到原始样本，只能得到存在误差的样本。因此
lii_by·2023-01-05 08:08

CompressAI：基于pytorch的图像压缩框架使用

他是建立在PyTorch之上的，用于基于深度学习的数据压缩的自定义操作、层和模型，其中包括了基于tensorflow.compression压缩包的部分移植，还包括包括一些用于压缩任务的预训
小夭。·2023-01-05 01:36

【ELT.ZIP】OpenHarmony啃论文俱乐部——计算机视觉数据压缩应用

本文出自ELT.ZIP团队，ELTElite(精英)，.ZIP为压缩格式，ELT.ZIP即压缩精英。成员：上海工程技术大学大二在校生合肥师范学院大二在校生清华大学大二在校生成都信息工程大学大一在校生黑龙江大学大一在校生山东大学大三在校生华南理工大学大一在校生我们是来自7个地方的同学，我们在OpenHarmony成长计划啃论文俱乐部里，与华为、软通动力、润和软件、拓维信息、深开鸿等公司一起，学习和研
ELT.ZIP·2023-01-03 13:26

hadoop3.X学习笔记进阶篇-MapReduce

MapReduce概述MapReduce框架原理MapReduce内核源码解析Hadoop数据压缩MapReduce概述1.1MapReduce定义MapReduce是一个分布式运算程序的编程框架，是用户开发
404 Not Bug·2023-01-03 09:07

主成分分析法（PCA）

在数据压缩消除冗余和数据噪音消除等领域都有广泛的应用。一般我们提到降维最容易想到的算法就是PCA，下面我们就对PCA的原理做一个总结。
轩儿毛肚·2023-01-02 16:31

Sklearn专题五 逻辑回归

逻辑回归一、概述1、逻辑回归是用于分类的回归算法，可做二分类，也可做多分类2、逻辑回归的sigmoid函数（记住公式和图像）z越大g(z)越靠近1，z越小g(z)越靠近0，将任何数据压缩到（0,1）3、
Yuki_1999·2023-01-02 12:11

完全重建QMF滤波器组的设计

实验简介多抽样率技术的应用如今越来越广泛，它可以实现一个信道中的多路通信：可以用于数据压缩（如分频带编码后进行存储和传输）；可以用于图像处理和语音处理；可以用于窄带数字滤波的实现；可以用于保密系统等，多抽样率滤波器组已成为信号处理领域强有力的工具
打工小菜·2022-12-30 20:09

PNG文件格式分析

png使用从LZ77派生的无损数据压缩算法，由于它压缩比高，生成文件体积小，一般被应用于JAVA程序、网页或S60程序中。PNG文件结构PNG文件一般
打工小菜·2022-12-30 20:08

java位的概念_【JAVA基础】二进制基本概念及位运算

0前言二进制的相关概念是学习数据存储、数据压缩、数据序列化的基石，只有真正搞清楚了二进制，才能逐步深入到算法源码，达到理解和复现的目的。
werqvp·2022-12-30 15:31

音频编码格式——AAC简介

AAC(AdvancedAudioCoding),高级音频编码，是一种声音数据压缩格式。基于1997年，目的是为了取代MP3格式。优点：相较于mp3，AAC格式的音质更佳，文件更小。
VNanyesheshou·2022-12-30 11:09

换个数据结构，一不小心节约了 591 台机器！

视频链接在这里：www.bilibili.com/video/BV1eX…当时其实我是被他的这个图片给吸引到了（里面的12qps应该是12kqps）：他介绍了两个核心系统在经过一个“数据压缩”的操作之后
·2022-12-30 10:49

Uber应用分享 | 使用 Parquet Page Index 加速 Presto 查询

ApacheParquet是一种可用于高效存储和检索数据的开源列式文件格式，提供高效的数据压缩和编码方案，性能更优，能
Alluxio·2022-12-30 09:00
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他