数据压缩

大数据面试题集锦-Hadoop面试题(四)-YARN

2、简述hadoop1与hadoop2的架构异同3、Hadoop的调度器总结4、MapReduce2.0容错性5、HDFS的数据压缩算法?6、mapreduce推
张飞的猪大数据·2023-04-13 01:13

工作积累之ZIP的压缩原理与实现

无损数据压缩是一件奇妙的事情，想一想，一串任意的数据能够根据一定的规则转换成只有原来1/2-1/5长度的数据，并且能够按照相应的规则还原到原来的样子，听起来真是很酷。
startwithdp·2023-04-12 02:35

zip 的压缩原理与实现

无损数据压缩是一件奇妙的事情，想一想，一串任意的数据能够根据一定的规则转换成只有原来1/2-1/5长度的数据，并且能够按照相应的规则还原到原来的样子，听起来真是很酷。
menuconfig·2023-04-12 02:29

Clickhouse工作原理

1.数据分区（MergeTree）1.1命名规则&合并规则触发合并的时机1.2各文件含义1.3文件目录时序图2.列式存储3.一级索引（主键索引，稀疏索引）4.二级索引（跳数索引）5.数据压缩6.数据标记
游与寻·2023-04-11 06:47

Gateway网关和Feign调用开启gzip压缩

一：GateWay网关实现数据压缩思路：要网关吐出压缩后的数据，则要实现一个网关拦截器，在最后一层
＋二·2023-04-11 00:08

十二、主成分分析PCA

PCA（PrincipalComponentAnalgesic）降维、数据压缩、可做数据可视化降维分析：找到数据最重要的方向（方差最大的方向），第一个主成分就是从数据差异性最大（方差最大）的方向提取出来的
万物皆可代码·2023-04-10 22:33

什么是超融合？与传统架构有什么区别？.

所谓的超融合其实指代的是超融合基础架构，是指在同一套单元设备中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术，而且还包括备份软件、快照技术、重复数据删除、在线数据压缩等元素，而多套单元设备可以通过网络聚合起来
格格巫 MMQ!!·2023-04-10 14:51

EdgerOS之深入解析文件和数据压缩模块ZIP与Zlib

一、“数据压缩“简介数据压缩是采用某种压缩算法减少文件大小的一个过程，这个过程可能包括对源文件的编码、重组和修改等操作，该过程的主要目标是在减少文件大小的同时，确保源文件中的数据不会丢失。
╰つ栺尖篴夢ゞ·2023-04-10 14:41

H.266/VVC视频编解码标准

H.266多功能视频编码编解码器标准，新的H.266/VCC编解码器在保持清晰度不变的情况下，数据压缩效率获得极大提高，数据量减少了50%。
音视频开发老马·2023-04-10 09:49

数学原理—最小重构误差

1.最小重构误差最小重构误差（MinimumReconstructionError）是指在信号处理、数据压缩等领域中，用来衡量原始数据和经过压缩或降维后的数据之间差异程度的一个指标。
Top Secret·2023-04-09 07:30

堆排序及其应用

另外，还有在图搜索算法，数据压缩上面的应用。下面是一个优先队列的API及其实现publicclassMaxPQ>{pr
惊鸿只为卿·2023-04-08 16:43

python外篇（zip文件）

目录了解zipfile了解zip是一种数据压缩和文档存储的文件格式，后缀名为.zip，MIME类型为application/zip，在python中的内置模块zipfile提供了来操作zip文件类型，相关的学习实现类为
Mr.Joden·2023-04-08 14:57

基于MATLAB小波变换的的图像压缩

基于MATLAB小波变换的的图像压缩摘要：小波包分析理论作为新的时频分析工具，在信号分析和处理中得到了很好的应用，它在信号处理、模式识别、图像分析、数据压缩、语音识别与合成等等许多方面都取得了很有意义的研究成果
m0_55395440·2023-04-08 10:34

Linux系统-gunzip命令简介以及常用参数

命令–解压提取文件内容gzip命令gzip命令是一种数据压缩方式，它是在Linux操作系统中常用的一种压缩工具，是GNU项目中自带的压缩程序之一。
小蓝博客·2023-04-07 14:11

图像处理—霍夫曼编码

图像压缩编码是专门研究图像数据压缩的技术，就是尽量减少表示数据图像所需要的数据量。
爱抖腿的小松鼠·2023-04-06 20:12

【数据压缩】LZW编解码原理及算法实现

一、LZW简介LZW压缩（LZWcompression）是一种由AbrahamLempel、JacobZiv和TerryWelch发明的基于表查寻算法把文件压缩成小文件的无损压缩方法。LZW算法又叫“串表压缩算法”就是通过建立一个字符串表，用较短的代码来表示较长的字符串来实现压缩。其基本原理为提取原始文件数据中的不同字符，基于这些字符创建一个编译表，然后用编译表中的字符索引来替代原始文件数据中的相
spadeK2020·2023-04-06 17:25

【深度学习】使用ffmpg及gstreamer进行视频拉流及编解码（一）：ffmpg

而通过对视频进行编码和解码，可以将视频数据压缩到较小的体积，从而实现更高效的传输和存储。具体
颢师傅·2023-04-06 16:53

(三) 数据预处理

填写缺失值，光滑噪声数据，识别或删除离群点1，缺失值image.png2，光滑2.1，分箱image.png2.2，回归2.3，离群点分析image.png数据集成：不同数据源集合在一起数据归约：1，维归约：数据压缩技术
奇点_wu123·2023-04-06 10:24

【软件设计师09】多媒体技术

多媒体技术1～3分，考察范围比较局限多媒体技术基本概念、多媒体相关计算问题、常见多媒体标准、数据压缩技术1.音频相关概念小于20Hz次声波；大于20kHz超声波2.图显相关概念亮度：画面的明亮程度色调：
WalkingWithTheWind～·2023-04-05 22:37

树状数组或二叉索引树（Binary Indexed Tree）

其初衷是解决数据压缩里的累积频率的计算问题，现多用于高效计算数列的前缀和、区间和。它可以以O(logn)的时间得到任意前缀和。并同时支持在O(logn)时间内支持动态单点值的修改。空间复杂度O(n)。
Rory602·2023-04-05 09:21

数据压缩极限本质

lxlxlxlxlxlxlx”一共14个汉字加上14个字符，现在采用某种压缩算法，将其压缩为这样一种形式“6个我1个有点4个喜欢7个lx”一共9个汉字加上6个字符（包括数字跟字母），显然，总的空间变小了，这就是数据压缩
2young2simple·2023-04-05 05:41

版本发布：TDengine 3.0.3.0 为数据压缩、事件窗口等七大功能加“Buff”

TDengine3.0自去年8月份发布以来，已经被大量用户下载使用。在此过程中，涛思的研发同学也没有懈怠，针对大家在社群、各种我们能触达到的平台上提出的种种有价值的反馈，都一一进行了记录，并开始寻求更高效的实现方法。终于，在2023年的第一季度，TDengine第一个重要改进版本3.0.3.0发布，这一版本涉及到的更新内容包括数据重整、事件窗口、标签索引、taosX、taosExplorer等功能
涛思数据（TDengine）·2023-04-05 03:18

几种reactor模型

以事件驱动或事件回调的方式实现业务逻辑表述：将连接的I/O处理转化为事件处理单reactor使用1个epoll和1个线程代表：redis内存数据库操作redis当中的数据结构redis6.0多线程处理数据的解压缩数据压缩放在多线程中处理
为成大道踏平坎坷·2023-04-04 20:50

对于iOS性能能优化的一点看法

性能优化整体一览图如下：iOS性能优化（实践）.png一、数据压缩在程序的运行过程中，数据的传输也是影响程序性能的一个方面。在传输速度不变的情况下，数据量大，传输
无神·2023-04-03 08:36

算法| 贪心算法：如何用贪心算法实现Huffman压缩编码？

最小生成树算法和最短路径算法我们后面会讲到，所以我们今天讲下霍夫曼编码，看看它是如何利用贪心算法来实现对数据压缩编码，有效节省数据存储空间的。如何理解“贪心算法”？关于贪心算法，我们先看
诡异的笑容·2023-04-03 07:44

霍夫曼编码(贪心)

什么叫霍夫曼编码2.如何手工运算得到霍夫曼编码3.完整源码（1）只输出权值（2）输出树形1.什么叫霍夫曼编码霍夫曼编码（英语：HuffmanCoding），又译为哈夫曼编码、赫夫曼编码，是一种用于无损数据压缩的熵编码
驼驼学编程·2023-04-03 07:43

哈夫曼编码--贪心算法

哈夫曼编码（HuffmanCoding）是一种编码方式，是一种用于无损数据压缩的熵编码（权编码）算法。
m0_72431373·2023-04-03 06:00

霍夫曼编码 | 贪心算法 2

霍夫曼编码是一种无损数据压缩算法。其思想是为输入字符分配可变长度代码，分配代码的长度基于相应字符的频率。
TD程序员·2023-04-03 06:11

模块接口卡

高级集成模块（AIM）为高级服务的集成提供了可扩展性，其中这些服务包括硬件辅助数据压缩，加密，语音和ATM硬件辅助数据压缩，以及加密。
廖马儿·2023-04-03 03:38

ClickHouse概述

支持的特性真正的列式数据库管理系统数据压缩数据的磁盘存储多核心并行处理多服务器分布式处理：数据可以保存在不同的shard上，每一个shard都由一组用于容错的replica组成，查询可以并行的在所有shard
盗梦者_56f2·2023-04-03 00:57

Clickhouse-高级

Clickhouse使用场景列式存储、数据压缩、向量化执行、支持标准SQL、支持20多张表引擎、支持多线程与分布式、多主架构、交互式查询、数据分片与分布式查询等ClickHouse适合OLAP数据分析类的场景
阳光-星辰大海·2023-04-02 23:47

吴恩达-coursera-机器学习-week8

聚类(Clustering)13.1无监督学习：简介13.2K-均值算法13.3优化目标13.4随机初始化13.5选择聚类数十四、降维(DimensionalityReduction)14.1动机一：数据压缩
z-pan·2023-04-02 21:52

数据挖掘(2.4)--数据归约和变换

目录1.数据归约1.1数据立方体聚合1.2特征选择1.3数据压缩1.4其他数据归约方法回归分析直方图聚类简单随机采样（SAS）2.数据离散化2.1基于信息增益的离散化2.2基于卡方检验的离散化2.3基于自然分区的离散化
码银·2023-04-02 17:17

HTTP传输大文件的方法

1、数据压缩通常浏览器在发送请求时都会带着“Accept-Encoding”头字段，里面是浏览器支持的压缩格式列表，例如gzip、deflate、br等，这样服务器就可以从中选择一种压缩算法，放进“Content-Encoding
key_3_feng·2023-04-02 13:01

GBase 8a MPP Cluster产品简介

GBase8aMPPCluster具有联邦构架、大规模并行计算、海量数据压缩
Sunmengze·2023-04-02 11:45

NGINX服务搭建详解

http参数配置,对应Nginx的配置区块部分ngx_http_access_module访问控制模块,用来控制网站用户对Nginx的访问ngx_http_gzip_module压缩模块，对Nginx返回的数据压缩
拥抱云原生·2023-04-02 11:22

Protocol Buffer 序列化原理大揭秘 - 为什么Protocol Buffer性能这么好？

由于Google出品，我相信ProtocolBuffer已经具备足够的吸引力今天，我将讲解为什么ProtocolBuffer的性能如此的好：a.序列化速度&反序列化速度快b.数据压缩效
致守·2023-04-02 08:49

redis-主从复制+哨兵守卫

前言Redis是一个内存数据库，支持多样类型的数据存储和查询，而且采用了高效的算法把数据压缩到最小。
ssehs·2023-04-02 08:15

机器学习 - SVD分解算法的物理意义

奇异值分解算法是一种在机器学习中经常使用到的一个算法，SVD主要用于数据压缩和数据降维，在图像压缩、推荐系统有着极其重要的作用，本文将着重理解SVD分解算法的物理意义以及我们将用Python代码将这个过程可视化
L_1900·2023-04-02 08:37

数据结构_哈夫曼树(python实现)

换句话说，它可以将大量数据压缩为在传输过程中所需的最小比特数。
Scc_hy·2023-04-01 20:38

吴恩达机器学习 - PCA

问题数据压缩数据图形化展示PCA算法奇异值分解(SingularValueDecomposition，以下简称SVD)数据恢复K的选择
YANWeichuan·2023-04-01 03:29

【STL】优先级队列剖析及模拟实现

如入队、出队、获取最高优先级元素等priority_queue的模拟实现优先级队列的内部实现原理，如何利用堆来维护元素的优先级优先级队列的常用接口实现优先级队列的应用场景和示例，如任务调度、事件处理、数据压缩等优先级队列的优缺点和改进方向
阿润菜菜·2023-04-01 01:39

如何在Linux解压缩（打开）Gz 文件？

GNU的Gzip是一种流行的数据压缩程序，而GZ文件是由标准Gzip压缩的存档文件。它最初由Jean-loupGailly和MarkAdler于1992年10月31日开发。
黄瓜炒肉·2023-03-31 22:33

第二章 ClickHouse架构设计

一、核心特性1.MPP架构2.完备的DBMS功能DDLDML权限控制数据备份和恢复分布式管理3.列式存储和数据压缩同一个列的数据类型相同，相似度较高，相比行式存储压缩效率更高。
丿倚楼听风雨·2023-03-31 14:30

ClickHouse高级学习（一）架构概述（待更新）

文章目录Clickhouse的核心特性列式存储和数据压缩向量化执行引擎关系模型与SQL查询多样化的表引擎多线程与分布式多主架构数据分片与分布式查询Clickhouse架构设计Column与FieldDataTypeBlock
程序胖·2023-03-31 14:22

Clickhouse(3)---Clickhouse系统架构之Clickhouse特征

Clickhouse系统架构之Clickhouse特征Clickhouse特征1.完备的DBMS系统2.真正的列式数据库管理系统3.数据压缩4.数据的磁盘存储5.多核心并行处理6.多服务器分布式处理7.
Abner G·2023-03-31 13:44

mac golang grpc proto pb文件生成go文件.md

golang的grpc也是挺好玩的，基于http的rpc服务，可能还是为了更好的数据压缩？
夜月行者·2023-03-31 13:46

golang grpc使用

protocbuf和grpc的关系protocbuf是一种数据压缩格式，因为是二进制格式的，比xml、json序列化快很多。
爱健身的一只程序猿·2023-03-31 13:30

三次握手四次挥手

服务器必有内容：HTTP/1.1200okdeflate:是同事使用了LZ77算法与哈夫曼编码的一个无损数据压缩算法。general:常规普通的综合的2
星河入怀fd·2023-03-31 12:37

第十章.主成分分析PCA(Principal Component Analysis)

第十章.主成分分析(PCA)10.1主成分分析1.主成分分析的作用：降维1).数据压缩2D-1D2).数据压缩3D-2D3).数据可视化多特征的数据将多特征的数据降维为2维数据（不是挑选两个特征）用平面坐标系表示出来
七巷少年^ω^·2023-03-31 04:40
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他