parquet存储格式

苹果HEIC图片转换器怎么样？

HEIC现在是苹果的一种默认的图像存储格式，这种格式的图片在苹果手机上可以打开，不过若想传到电脑上打开就要用专门的软件了，苹果HEIC图片转换器就很不错。
科技的力量·2021-05-19 00:25

Matlab 操作 HDF5文件

HDF5文件则是一种灵活的文件存储格式，有一个最大的好处就是在Matlab的处理过程中可以对它进行扩展写入，也就是说不是所有数据处理完以后一次写入，而是边处理边写入，极大的降低了对系
学而时习之_不亦说乎·2021-05-16 20:35

一篇文章搞定一个大数据组件：kudu知识点全集

DiskRowSets4、kudu工作原理4.1Compaction4.2Tablet切分规则4.3kudu写过程：insert4.4kudu写过程：update4.5Kudu读过程1、kudu的定位HDFS:存储格式
明月十四桥·2021-05-14 18:27

NSManagedObjectContext

数据最终的存储类型可以是：SQLite数据库，XML，二进制，内存里，或自定义数据类型在MacOSX10.5Leopard及以后的版本中，开发者也可以通过继承NSPersistentStore类以创建自定义的存储格式
ysweiwei·2021-05-13 03:59

深入理解java虚拟机读书笔记，第六章：类文件结构

概述计算机只能识别0和1虚拟机以及建立在虚拟机上语言的出现，使编写的程序编译成二进制本地机码（nativecode）非唯一选择，越来越多编程语言选择了与操作系统和机器指令集无关、平台中立的格式作为程序编译后的存储格式
cremin·2021-05-11 18:08

Spark - SQL查询文件数据

有时候有没有这么一种情况，我拿到了一个sql,csv,parquet文件，一起来就想写sql，不想写那些乱七八糟的的东西，只是想快速实现我要的聚合查询数据。
kikiki2·2021-05-11 12:03

Apache Drill学习笔记一：环境搭建和简单试用

简介ApacheDrill是一个低延迟的分布式海量数据（涵盖结构化、半结构化以及嵌套数据）交互式查询引擎，使用ANSISQL兼容语法，支持本地文件、HDFS、HBase、MongoDB等后端存储，支持Parquet
陌辞寒·2021-05-10 21:12

两集群数据拷贝

集群专门做数据清洗和数据展现A集群每天定时把数据同步过来B集群后，B集群负责后续清洗和供业务系统使用集群背景两套集群都配有各自的KDC服务器A集群没做namenodeHA，B集群是HA集群拷贝的数据为parquet
阿甘骑士·2021-05-10 12:51

XML基础

XML就是为了解决这样的需求而产生数据存储格式。例如：。。。。我们
IT王魔王·2021-05-09 18:32

Redis数据库系列(二)、Redis数据类型

2.1、Redis数据存储格式redis自身是一个Map结构，其中所有的数据都是采用key:value的形式存储数据类型指的是存储的数据的类型，也就是value部分的类型，key部分永远
一宿君·2021-05-09 11:48

Spark SQL学习

正式成为生态系统的一员专门处理结构化数据的Spark重要组件提供了两种操作数据的方式SQL查询DataFrame和DataSetAPISparkSQL=Schema+RDD提供了非常丰富的数据源API如:Text、JSON、Parquet
溯水心生·2021-05-05 21:48

Java 中 Redis 五大基本类型的用法

存储格式基本用法Jedis工具[图片上传中...
编程小世界·2021-05-05 00:49

Q:org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException

所以在调用write.parquet前，先使用repartition合并碎片分区。因为减少了分区数，下次再读取这份数据进行处理时，减少了启动task的开销。
点点渔火·2021-05-04 12:18

精品架构透视：网络流量分析工具NTopng

NTopng主要特性多协议网络流量；IPv4/IPv6活跃主机网络流量监控（RRD存储格式）；基于nDPI实现应用协议发现作为NetFlow/sFlow采集器(Cisco/Juniper路由器)；交换机配合
RiboseYim·2021-05-03 18:22

Spark - SQL查询文件数据

>有时候有没有这么一种情况，我拿到了一个sql,csv,parquet文件，一起来就想写sql，不想写那些乱七八糟的的东西，只是想快速实现我要的聚合查询数据。
kikiki4·2021-05-02 23:59

rocket mq 底层存储源码分析(1)-存储总概

前言：从本节开始，我们将分七个章节从底层源码来分析Rocketmq是如何实现自己的消息持久化的:第(1)章节主要总从体上分析rmq消息的存储格式和文件组织以及实现上的技术选用。
萝卜头4lbt·2021-05-02 14:52

数据湖 Iceberg 在网易云音乐的实践

Iceberg详细设计ApacheIceberg是Netflix开源的全新的存储格式，我们已经有了Parquet、ORC、Arvo等非常优秀的存储格式以后，Netfix为什么还要设计出Iceberg呢？
NetEaseResearch·2021-04-30 15:29

Spark - SQL查询文件数据

有时候有没有这么一种情况，我拿到了一个sql,csv,parquet文件，一起来就想写sql，不想写那些乱七八糟的的东西，只是想快速实现我要的聚合查询数据。
kikiki2·2021-04-30 12:27

web图像

图像（image）常用的图像文件存储格式：CDR格式该格式是CoreDraw软件专用的一种图形文件存储格式；AI格式该格式是Illustrator软件专用的一种图形文件存储格式；DXF格式是AutoCAD
我才不是稻草人·2021-04-30 05:16

Go语言与Protobuf

ProtocolBuffers的简称,是Google开源的的一种数据描述语言,其初始定位类似于XML和json等数据描述语言,Protobuf最常见的使用场景是用于RPC系统中,这是因为protobuf是一种轻便高效的结构化数据存储格式
楚江云·2021-04-28 13:13

《深入理解Java虚拟机》笔记之类文件结构与类加载机制

一.类文件结构Java虚拟机多平台都是统一使用的程序存储格式——字节码.class文件任何语言都可以被特定的编译器编译为存储字节码的Class文件，Class文件中包含了Java虚拟机指令集和符号表以及若干其他辅助信息
Hohohong·2021-04-27 15:12

JVM学习笔记（四）——字节码执行引擎

代码编译的结果从机器码转变为字节码，是存储格式的一小步，确实编程语言发展的一大步。正是因为有了字节码这一中间格式才有了Java语言跨平台的特性。
李牙刷儿·2021-04-27 00:41

PAX：一个 Cache 友好高效的行列混存方案

今年，Spanner终于发了另一篇PaperSpanner:BecomingaSQLSystem，里面提到Spanner使用了一直新的存储格式-Ressi，用来支持OLTP和OLAP。
siddontang·2021-04-26 22:41

代码分布

表示未初始化的全局变量Code,RO-data,RW-data............flashRW-data,ZIdata...................RAM（运行时才分配）数据0x12345678存储格式大端格式低地址高地址小端格式低地址高地址
milomallo·2021-04-25 19:59

hbase之bulkload

hdfs存储格式为texthbase数据为列族是0列名是ou_codeou_level1把数据放到hdfs上去。这个如果你的表存储格式为text直接用存储目录也行二将文件转化为hfilehbaseo
cclovezbf·2021-04-25 18:34

Spark - SQL查询文件数据

>有时候有没有这么一种情况，我拿到了一个sql,csv,parquet文件，一起来就想写sql，不想写那些乱七八糟的的东西，只是想快速实现我要的聚合查询数据。
kikiki4·2021-04-25 08:51

二维数组做为形参问题

还是需要从内存考虑，当二维数组做为char*传递时候，其完全退化成地址值，而并不知道二维数据的存储格式。
郑行_aover·2021-04-25 01:15

JS基础-数字-0.1+0.2!=0.3（四）

IEEE754双精度存储格式（此图分成3部分，但是实际在内存中，它们是连续的一个整体，这里只是为了方便展示区分）。
火锅伯南克·2021-04-23 23:52

22 一套数据，多种引擎续---两种数据格式（Parquet/ORCfile）浅析

kylin）-大数据和云计算技术（欢迎关注同名微信公众号）-ITeye技术网站http://jiezhu2007.iteye.com/blog/2153589//一套数据，多种引擎续---两种数据格式（Parquet
葡萄喃喃呓语·2021-04-23 09:06

Spark - SQL查询文件数据

>有时候有没有这么一种情况，我拿到了一个sql,csv,parquet文件，一起来就想写sql，不想写那些乱七八糟的的东西，只是想快速实现我要的聚合查询数据。
kikiki4·2021-04-22 21:26

mongoDB

使用高效的二进制数据存储，文件存储格式为BSON（一种JSON的扩展）等。MongoDB支持各种编程语言，包括Python、Java、C++、GO、PHP等。
voidFan·2021-04-20 15:38

【ArcGIS风暴】ArcGIS平台上点云（.las）数据生成等高线方法案例精解

las是点云数据常见的存储格式，摄影测量和激光雷达数据均采用此格式，点云数据常用来生成等高线，地籍测量，土方量计算等。本文讲解在ArcGIS平台上生成等高线并转换为dwg格式供CASS使用。
刘一哥GIS·2021-04-18 18:10

深入理解MachO数据解析规则

作者丨zhangferry来源丨iOS成长之路我们知道Apple设备可执行文件的存储格式是MachO，一个二进制文件。
程序员大咖·2021-04-18 10:00

sprintf、strcpy及 memcpy 函数

：将格式化的数据写入某个字符串缓冲区入参：format，输出字符串的格式化列表，比如%d、%s、%c等入参：format对应的不定参数列表，与printf类似出参：buffer，指向一段存储空间，用于存储格式化之后的字符串返回值
PersisThd·2021-04-18 04:43

Flink集成数据湖之实时数据写入iceberg

此外由于列式存储格式如parquet或者orc在查询性能方面有着显著的提高，所以大家都会优先选择列式存储作为我们的存储格式。传统的这种架构看似不错，但是还是有很多没有解
大数据技术与应用实战·2021-04-14 20:14

P8架构师参透Kafka：设计原理、消息存储、消息消费原理等等

目录Kafka的基本介绍Kafka的设计原理分析Kafka数据传输的事务特点Kafka消息存储格式副本（replication）策略Kafka消息分组，消息消费原理Kafak顺序写入与数据读取消费者（读取数据
傻姑不傻·2021-04-13 13:12

如何用Python读取Excel中图片？又如何用Python往Excel中写入图片？

因为图片的存储格式与数字数据格式不一样，所以实现起来稍显复杂，本文就将对以下两个
小老鼠Python零基础速学·2021-04-13 03:17

Python面试篇（二）

Python语言考察点，本篇主要从常用算法和数据结构入手算法和数据结构常用内置数据结构和算法数据结构和算法是不分家的单纯的看数据结构，就是数据存储的格式，这里的线性、链式、KV、集合等等我们更关心基于存储格式的算法
Roy_Allen·2021-04-11 10:01

你的Parquet该升级了：IOException: totalValueCount == 0问题定位之旅

本文分享自华为云社区《你的Parquet该升级了：IOException:totalValueCount==0问题定位之旅》，原文作者：wzhfy。
·2021-04-06 18:00

你的Parquet该升级了：IOException: totalValueCount == 0问题定位之旅

本文分享自华为云社区《你的Parquet该升级了：IOException:totalValueCount==0问题定位之旅》，原文作者：wzhfy。
·2021-04-06 18:59

【分布式—基础】数据存储与检索

数据库核心：数据结构假设有一个世界上最简单的数据库，底层的存储格式非常简单：一个纯文本文件。其中每行包含一个键值对，用逗号分隔。
·2021-03-16 22:58

Opencv常见图像格式Data Type及代码实例

命名规则通用的参数命名格式为：CV_{元素比特数}{元素类型}C{通道数}1最常见的CV_8UC3就表示为3通道Unsigned8bits格式的矩阵8U：8bitunsignedC3：通道数为32有些图片存储格式是
·2021-03-13 17:16

3D点云基础知识(一)-初始入门-知乎整理（一）

点云的获取点云的内容点云的属性点云目前的主要存储格式包括：pts、LAS、PCD、.xyz和.pcap等
xiaoyaolangwj·2021-03-13 17:29

如何用pandas处理hdf5文件

什么是HDF5HDF5：HierarchicalDataFormatVersion5，对于存储大规模、具有相同类型的数据，HDF5是一种非常不错的存储格式，文件后缀名为h5。
·2021-03-13 03:42

图像的大小（所占存储空间）与哪些因素有关？

如题，首先给出结论：分辨率，图像深度，存储格式如图同样一部手机上的截图最小的只有60多kb最大的在1mb以上这跟哪些因素有关？
zeronose·2021-03-11 20:27

JVM-003-类文件结构

字节码构成平台无关性的基石实现与厌恶惯性的基础是虚拟机和字节码的存储格式Java虚拟机不与任何语言绑定，只与Class文件这种特定的二进制文件格式关联。
井易安·2021-03-11 10:23

分析rgb和yuv文件三个通道的概率分布并计算各自的熵

（编程实现）两个文件的分辨率均为256*256，yuv为4:2:0采样空间，存储格式为：rgb文件按每个像素BGR分量依次存放；YUV格式按照全部像素的Y数据块、U数据块和V数据块依次存放。
hxybxhbc·2021-03-11 00:25

七、虚拟机类加载机制

代码编译的结果从本地机器码变为字节码，是存储格式发展的一小步，却是编程语言发展的一大步。
wencai·2021-03-10 22:17

Nebula Storage 2.0 存储格式

NebulaGraph的底层存储是基于KV保存在RocksDB中，本文将介绍新老编码格式的差异，以及为什么要修改存储格式等一系列问题。
·2021-03-10 20:27

利用C++分析rgb和yuv文件的三个通道的概率分布，并计算各自的熵

（编程实现）两个文件的分辨率均为256*256，yuv为4:2:0采样空间，存储格式为：rgb文件按每个像素BGR分量依次存放；YUV格式按照全部像素的Y数据块、U数据块和V数据块依次存放。
CUC-Finneywong·2021-03-10 19:08
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他