partitions

hive修改表模式

hive用户可以通过alter语句更改table属性AlterPartitions增加partitions：ALTERTABLEtable_nameADD[IFNOTEXISTS]PARTITIONpartition_spec
yfk·2020-08-03 12:22

esp8266 rtos sdk示例工程

esp8266rtossdk示例工程上一篇文章说明了使用ubuntu14.04搭建esp8266编译环境，搭建成功后，在使用其sdk用户示例工程partitions_singleapp工程编译测试成功，
雪地里-成长之路·2020-08-03 11:38

spark SQL(11)sql语句执行流程源码

SQL语句：valspark_sess=SparkSession.builder().appName("SparkSQLbasicexample").config("spark.sql.shuffle.partitions
Rover Ramble·2020-08-03 04:07

Spark中Key-Value类型|partitionBy()按照Key重新分区|reduceByKey()按照K聚合V|groupByKey()按照K重新分组

代码实现Shuffle过程(落盘)需要把所有哦分区的数据拿到一起处理，会有shuffle自定义分区器源码分析classHashPartitioner(partitions:Int)extendsPartitioner
SmallScorpion·2020-08-03 03:48

isEmpty类型的action算子需要cache吗？

进入isEmpty方法defisEmpty():Boolean=withScope{partitions.length==0||take(1).length==0}如果
Wish大人·2020-08-02 16:53

linux系统中的存储管理

device，s表示sata（串口硬盘），d表示disk，a表示第一硬盘，1表示第一块硬盘的第一块分区/dev/hd0####hd表示ide（并口硬盘）fdisk-l查看系统中真实存在的设备cat/proc/partitions
C_teacher·2020-08-02 15:34

kafka入门：简介、使用场景、设计原理、主要配置及集群搭建（转）

4.partitions设计的目的的根本原因是什么？一、入门1、简介Kafkaisadistributed,partitioned,replicatedcommitlogservice。
weixin_33778544·2020-08-02 14:55

查看Android设备上的分区信息

可以通过下面的命令来查看目前系统中到底有多少分区：（项目车机上）cat/proc/partitions如果想知道每个挂载到文件系统上的分区大小和使用情况的信息，可以像普通L
weixin_30781631·2020-08-01 03:03

kafka实用命令大全

kafka精简总结的命令大全1.创建topicbin/kafka-topics.sh--create--zookeeper192.168.109.131:2181--partitions2--replication-factor2
liuzhiliang_·2020-07-31 19:59

查看oracle表的分区信息

DBA_PART_TABLES显示当前用户可访问的所有分区表信息：ALL_PART_TABLES显示当前用户所有分区表的信息：USER_PART_TABLES显示表分区信息显示数据库所有分区表的详细分区信息：DBA_TAB_PARTITIONS
huashanlunjian·2020-07-31 18:01

安卓平台如何查看分区信息

1.可以通过下面的命令来查看目前系统中到底有多少分区：cat/proc/partitions这条命令会显示系统中的所有分区，以及每个分区的大小是多少个block，还有主设备
一息尚存，从吾所好·2020-07-31 16:19

kafka命令行工具大全

创建主题shkafka-topics.sh--zookeeper--create--topic--replication-factor--partitions--if-not-exists示例：shkafka-topics.sh
seecsea·2020-07-31 15:26

Apache Kafka 简介与使用

分布式程序，除了其自身的基本概念外，最重要的就是要知道它是如何实现高并发和高可用的：Kafka用Partitions实现了高并发；Kafka用Partitions复制+Zookeeper实现了高可用；注
有且仅有·2020-07-31 10:12

kafka入门：简介、使用场景、设计原理、主要配置及集群搭建

4.partitions设计的目的
sunshingheavy·2020-07-31 10:48

Kafka命令行操作和Producer数据写入流程

zookeeperhadoop102:2181--list2.创建topicbin/kafka-topics.sh--zookeeperhadoop102:2181\--create--replication-factor3--partitions1
Nice_N·2020-07-30 16:31

(Scala语言)sparkstreaming手动提交offset值到kafka(0.10版本)简单示例

我用的是kafka0.10版本的，不是0.8的，旧版本的kafka的offset值是由zookeeper监管，在对应的brokers/topics/partitions下好像，具体记不清了。
luyanbin_lqq·2020-07-30 15:26

面试七：数据库mysql

table:输出结果集的表partitions
LYJ_er·2020-07-30 14:06

Kafka基础操作命令

/kafka-topics.sh--create--zookeeper192.168.17.52:2181--replication-factor2--partitions2--to
家有一老鹰·2020-07-30 10:48

Mysql (EXPLAIN) 执行计划 SQL优化必备技能

仍然可以识别这些语法的向后兼容性，但是默认情况下现在启用了分区和扩展输出，因此PARTITIONS和EXTENDED关键字已不再使用。
Java有货·2020-07-30 10:08

sparkSession访问hive，PARTITIONS表不可用

为分布式搭建hiveonspark;记录耗时最久的一个问题：太气人了2019-08-1518:53:03ERRORDatastore:115-ErrorthrownexecutingALTERTABLE`PARTITIONS
猩猩不相惜·2020-07-30 04:33

esp32-智能语音-dueros

分区文件要重新设置，在makemenuconfig中配置分区文件，文件位于dueros文件夹下的partitions_singleapp.csv（名称应一致）。
weixin_30439031·2020-07-30 02:52

解决ESP32 esp_image: Image length *** doesn't fit in partition length 1048576

背景：ESP32下载的时候遇到esp_image:Imagelength***doesn'tfitinpartitionlength1048576错误解决方法：项目文件夹下创建partitions.csv
SimonLiu009·2020-07-30 01:20

Mac安装测试kafka

kafkabrewservicesrestartkafka4、创建topickafka-topics.sh--create--zookeeperlocalhost:2181--replication-factor1--partitions1
0_cc·2020-07-29 20:49

linux运维开发之路（十五）— 磁盘管理篇

一、本地存储设备的识别fdisk-l##真实存在的设备cat/proc/partitions##系统识别的设备blkid##系统可使用的设备df##系统正在挂载的设备df-h##1M=2^10=1024kdf-H
Gql_317·2020-07-29 05:38

[SPARK-19680] Offsets out of range with no configured reset policy for partitions

在我司的风电大数据项目中，出现了一个报错比如Jobabortedduetostagefailure:Task2instage111.0failed4times,mostrecentfailure:Losttask2.3instage111.0(TID1270,194.232.55.23,executor2):org.apache.kafka.clients.consumer.OffsetOutOf
即墨灯火·2020-07-29 05:04

《Oracle Database Concepts 11g Release 2》读书笔记(1)-schema

(P31-P36)1.定义Schema是oracle中最基本的逻辑容器,包括tables,indexes,partitions,views,sequences,dimensions,synonyms(同义词
令帆·2020-07-29 02:50

spark core 入门实战之二（RDD的练习）

Transformation(即转换，延迟加载)#通过并行化scala集合创建RDDvalrdd1=sc.parallelize(Array(1,2,3,4,5,6,7,8))#查看该rdd的分区数量rdd1.partitions.lengthvalrdd1
_Wanananan·2020-07-29 01:48

SQL Server使用sp_spaceused查看表记录存在不准确的情况 ...

答案：个人测试以及统计来看，暂时发现多个索引的情况下，sys.partitions中的rows记录数都是一致的。暂时没有发现不一致的情况
weixin_34357267·2020-07-28 19:02

linux下kafka常用命令

/kafka-topics.sh--zookeeper10.42.123.183:2181--create--topickfcs--partitions1--repli
weixin_34032792·2020-07-28 18:39

Spark2 SQL configuration参数配置

keyvaluespark.sql.hive.version1.2.1spark.sql.sources.parallelPartitionDiscovery.threshold32spark.sql.hive.metastore.barrierPrefixesspark.sql.shuffle.partitions200spark
weixin_33967071·2020-07-28 18:54

MySQL Index--NOT IN和不等于两类操作无法走索引？

limit10\G***************************1.row***************************id:1select_type:SIMPLEtable:tb2001partitions
weixin_30740581·2020-07-28 17:21

kafka中partition和消费者对应关系

partition创建一个topic——test，bin/kafka-topics.sh--create--zookeeperlocalhost:2181--replication-factor1--partitions1
哥伦布112·2020-07-28 14:45

SQL：SQL Access Advisor.Quick Tune

一、功能：Materializedviews,partitions,andindexesareessentialwhentuningadatabasetoachieveoptimumperformanceforcomplex
treemini0·2020-07-28 13:50

Linux Kafka常用命令

/kafka-topics.sh--zookeeperlocalhost:2181--create--topictest--partitions1--replication-factor12、增加分区.
tmaczt·2020-07-28 12:42

zeebe内部实现机制

在内部，Zeebe被实现为在记录流（分区、partitions）上工作的流处理器的集合。
分享牛·2020-07-28 06:17

MySQL之Explain输出分析

个人博客导航页（点击右侧链接即可打开个人博客）：大牛带你入门技术栈Explain输出的字段内容id,select_type,table,partitions,type,possible_keys,key
jishulaozhuanjia·2020-07-28 00:14

Spark API 详解/大白话解释 之 RDD、partition、count、collect

RDD分区一个RDD分区只在一个机器上一个机器可有多个RDD分区http://stackoverflow.com/questions/31359219/relationship-between-rdd-partitions-and-node
guotong1988·2020-07-27 22:09

MySQL Explain详解

table:输出结果集的表partitions:匹配的分区type:表示表的连接类型possible_keys:表示查询时，可能使用的索引key:表示实际使用的索引key_len:索引字段的长度ref:
我顾子晨·2020-07-27 22:40

Kafka常用命令速查

创建主题（4个分区，2个副本）bin/kafka-topics.sh--create--zookeeperlocalhost:2181--replication-factor2--partitions4
alexdamiao·2020-07-27 18:04

查看kafka基本信息命令

将miner-profittopic副本由一个增加到3个replication.json{"version":1,"partitions":[{"topic":"miner-profit","partition
你若安好便是晴天·2020-07-27 17:51

Kafka扩容之分区扩容

分区扩容举例，主题“user_order”目前是1个分区，这里将该主题分区增加到6个，观察修改结果kafka-topics.sh--partitions6--alter--zookeeperdn1:2181
lewinlee·2020-07-27 17:42

kafka中partition和消费者对应关系

partition创建一个topic——test，bin/kafka-topics.sh--create--zookeeperlocalhost:2181--replication-factor1--partitions1
Kim_Weir·2020-07-27 16:05

【源码分析】Kafka分区重分配/迁移（kafka-reassign-partitions.sh）

1、查看kafka-reassign-partitions.sh脚本cdkafka_home/bincatkafka-reassign-partitions.sh#!
双椒叔叔·2020-07-16 07:15

为啥你的SQL慢？为啥你建的索引常失效？

partitions:没有分区type:连接类型，all表示采用全表扫描的方式。possible_keys:可能用到索引为null。key:实
焦焦^_^·2020-07-16 01:03

Spark kafka + streaming自适应topic partitions变化

背景sparkstreaming+kafka有两种方案接收kafka数据-基于receiver的方案和direct方案(noreceiver方案)。基于receiver的方案，属于比较老的方案，其采用Kafka’shigh-levelAPI通过专门的Rceiver去接收kafka数据。采用KafkaUtils.createStreamdirect方案，是当前的主流用法，其采用Kafka’ssimp
路飞_5611·2020-07-15 23:18

0511零散问题整理

1.consumer.assign()vs.consumer.subscribe()assign是给一个consumer手动分几个partitions，一般也不会触发rebalance；而subscribe
creepcheck·2020-07-15 21:09

SparkSQL性能优化

SparkSQL性能优化1、设置shuffle过程中的并行度,可以通过spark.sql.shuffle.partitions设置shuffle并行度。
JSON_ZJS·2020-07-15 17:58

批量修改Kafka线上环境的分区副本数

/kafka-topics.sh--zookeeperlocalhost:2181--alter--partitions3--topictest返回示例WARNING:Ifpartitionsareincreasedforatopicthathasakey
老郑来了·2020-07-15 16:19

《MapReduce 4》--自定义分区、shuffle技术、环形缓冲区(MapOutputBuffer源码解析)、Maptask源码解析

由于if(partition=partitions){thrownewIOException("Illegalpartitionfor"+key
yk_3215123·2020-07-15 11:39

hive 动态分区表

SEThive.exec.dynamic.partition=true;SEThive.exec.dynamic.partition.mode=nonstrict;SEThive.exec.max.dynamic.partitions
梦幻之窗·2020-07-15 10:16
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他