partitions

mount挂载导致根分区不可用

关机，重新添加了块磁盘后，使用cat/proc/partitions查看了分区信息，确实有了块20G的磁盘sdb第一步就开始了分区接下来就格式化了分区，格式化结束后就可以开始挂载了，于是我就想既然
菜鸟东哥·2017-07-30 14:59

Kafka分区策略浅谈

用过Kafka的同学用过都知道，每个Topic一般会有很多个partitions。
Wangqyoho·2017-07-27 09:44

kafka创建话题遇到的错误

，ZooKeeper可以查到所有的Brokers，但执行：kafka-topics.sh--create--zookeeperlocalhost:2181--replication-factor3--partitions1
丹江怒潮·2017-07-17 14:26

kafka常用命令

/kafka-reassign-partitions.sh-zookeeper127.0.0.1:2181-reassignment-json-filejson/partitions-to
51zhangyanfeng·2017-07-04 17:36

kafka重新分配partition

下面主要使用kafka-topics.sh和kafka-reassign-partitions.sh来解决问题。推荐使用kafk
u013063153·2017-06-28 09:32

7.DAGScheduler的stage算法划分和TaskScheduler的task算法划分

private[scheduler]defhandleJobSubmitted(jobId:Int,finalRDD:RDD[_],func:(TaskContext,Iterator[_])=>_,partitions
AlanHand·2017-06-22 18:43

kafka Consumer分区数与多线程消费topic

参考文档:http://kafka.apache.org/documentation.html对于一个topic,可以发送给若干个partitions.partition在创建topic的时候就指定分区的数目
ChinaUnicom110·2017-06-22 16:32

spark读取kafka数据流

两者区别如下：1、KafkaUtils.createDstream构造函数为KafkaUtils.createDstream(ssc,[zk],[consumergroupid],[per-topic,partitions
恶魔苏醒ing·2017-06-07 13:24

kafka 自定义分区实例

/kafka-topics.sh命令创建topic及partitions分区数bin/kafka-topics.sh--create--zookeeper192.168.31.130:2181--replication-factor2
liuxiangke0210·2017-05-08 17:08

Kafka常用命令

zookeeperlocalhost:2181--list创建topickafka-topics.sh--zookeeperlocalhost:2181\--create\--topicearth\--partitions1
Woople·2017-05-05 20:10

kafka 命令使用说明

/kafka-topics.sh--create--zookeeperlocalhost:2181--replication-factor2--partitions8--topicmaxmessagetest
能量守恒洛·2017-04-27 09:04

运维学习第九天

逻辑分区总个数不能超过15一般分区时，分三个主分区，第四个为扩展分区(容器),给其分配剩余所有空间###1.分区的划分####fdisk/dev/vdb##进入分区划分partprobe##加载分区表cat/proc/partitions
Adhuyanchong·2017-04-26 21:15

Linux查看硬盘总空间和未分配硬盘大小

/bin/bashtotal=$(grep'sda$'/proc/partitions|awk'{print$3}');used=0foriin$(grep'sda[[:digit:]]\+$'/proc
kyq叶鑫·2017-04-21 15:40

kafka常用命令

1.创建topicshkafka-topics.sh–zookeeper1.1.1.1:2181–create–topicgalileo.event–partitions8–replication-factor12
God_Ming·2017-04-13 14:22

使用python获取电脑的磁盘信息

在iPython交互界面中进行如下演示：查看电脑的磁盘分区：In[1]:importpsutilIn[2]:psutil.disk_partitions()Out[2]:[sdiskpart(device
grey_csdn·2017-04-13 00:35

shell 脚本实现每秒循环并在指定时间执行代码

考虑使用循环方式去执行代码实现：if[$#-eq0]thentime_id=`date-d"-1day"+%Y%m%d`BEGIN_DATE=`date+%Y-%m-%d`END_DATE=`date+%Y-%m-%d`CUR_PARTITIONS
止鱼·2017-04-05 15:51

Kafka使用中的两个问题总结

加负载均衡的问题Kafkaproducer上传数据的工作原理：producer先通过配置的broker列表中的其中一台，获取到整个Kafka集群的metadata，其中包含brokers,topics,partitions
petergz·2017-04-03 00:15

hive修改表模式

hive用户可以通过alter语句更改table属性AlterPartitions增加partitions：ALTERTABLEtable_nameADD[IFNOTEXISTS]PARTITIONpartition_spec
levy_cui·2017-03-30 17:22

鸟哥的linux私房菜学习笔记《三十三》逻辑卷管理

简介逻辑卷管理LVM（LogicalVolumeManager）（1）LVM的重点在于可以弹性调整文件系统的容量（2）LVM可以整合多个实体partition在一起，让这些partitions看起来就像是一个磁盘一样
青蛙爱轮滑·2017-03-19 17:49

kafka入门：简介、使用场景、设计原理、主要配置及集群搭建

4.partitions设计的目的的根本原因是什么？一、入门1、简介Kafkaisadistributed,partitioned,replicatedcommitlogservice。
Dove饭特稀·2017-03-15 12:36

Ubuntu下如何挂载以及卸载U盘？

l在挂载U盘前，首先运行命令cat/proc/partitions，看看现在系统中有哪些分区。
dongdong0071·2017-02-09 18:21

zookeeper删除kafka元数据

时报错，显示topic已存在[root@d96~]#kafka-topics--zookeeperd65:2181/kafka_hive--create--topichive-test-table--partitions5
XIAO的博客·2017-01-16 13:00

mac下kafka安装及配置

.配置config/server.propertiesbroker.id为依次增长的：0、1、2、3、4，集群中唯一idlog.dirs设置到大硬盘路径下num.network.threadsnum.partitions
嵇康·2017-01-15 16:35

mysql优化利器之explain使用介绍

tbl_name[col_name|wild]{EXPLAIN|DESCRIBE|DESC}[explain_type]SELECTselect_optionsexplain_type:{EXTENDED|PARTITIONS
踏雪无痕·2017-01-09 23:54

kafka的文件格式和副本的Leader选举

我们可以通过命令bin/kafka-topics.sh--create--zookeepermaster:2181--replication-factor2--partitions3--topictest
农村外出务工男JAVA·2017-01-09 16:00

Hive动态分区

SEThive.exec.dynamic.partition=true;SEThive.exec.dynamic.partition.mode=nonstrict;SEThive.exec.max.dynamic.partitions.pernode
孙张宾·2017-01-03 17:59

kafka与zookeeper

4.partitions设计的目的的根本原因是什么？一、入门1、简介Kafkaisadistributed,partitioned,replicatedcommitlogservice。
877986104·2016-12-19 17:40

kafka 常用命令

/kafka-topics.sh--create--zookeeperlocalhost:2181--replication-factor1--partitions
昵称诚诚·2016-12-07 20:14

Spark 重分区函数：coalesce和repartition区别与实现，可以优化Spark程序性能

ReturnanewRDDthatisreducedintonumPartitionspartitions.Thisresultsinanarrowdependency,e.g.ifyougofrom1000partitionsto100partitions
javartisan·2016-12-02 00:00

kafka入门：简介、使用场景、设计原理、主要配置及集群搭建

4.partitions设计的目的的根本原因是什么？一、入门1、简介Kafkaisadistributed,partitioned,replicatedcommitlogservice。
GoDevops·2016-11-30 09:08

常用Kafka命令实现

TopicCommandwriteTopicPartitionAssignment/brokers/topics/[topic]/partitions/[0…N]KafkaProducer初始化Metadata
aegeaner·2016-11-28 19:32

kafka笔记

4.partitions设计的目的的根本原因是什么？一、入门1、简介Kafkaisadistributed,partitioned,replicatedcommitlogservice。
KevinTeacher·2016-11-25 20:53

通过python查出服务器磁盘容量

devicemountpointfstype')usage_ntuple=namedtuple('usage','totalusedfreepercent')#获取当前操作系统下所有磁盘defdisk_partitions
luoguo·2016-11-25 14:09

Spark作业提交和DAG调度器生成Task

RDDaction=>SparkContext.runJob(rdd:RDD[T],func:Iterator[T]=>U)runJob()=>dagScheduler.runJob:对所有Partitions
aegeaner·2016-11-22 20:42

Spark Streaming -2. Kafka集成指南（Kafka版本0.10.0或更高版本）

dstream的方法，1、KafkaUtils.createDstream构造函数为KafkaUtils.createDstream(ssc,[zk],[consumergroupid],[per-topic,partitions
GE12·2016-11-22 10:19

python中系统信息模块--psutil

psutil.cpu_times()  获得CPU信息（2）psutil.vitual_memory() 获得内存使用信息  psutil.swap_memory() 获得交换分区使用信息（3）psutil.disk_partitions
akak2424·2016-11-08 00:58

显示oracle表的分区信息

DBA_PART_TABLES显示当前用户可访问的所有分区表信息：ALL_PART_TABLES显示当前用户所有分区表的信息：USER_PART_TABLES显示表分区信息显示数据库所有分区表的详细分区信息：DBA_TAB_PARTITIONS
chuquan.ou·2016-10-31 14:00

《Linux菜鸟入门》设备相关信息

linux中设备的访问1.设备识别/dev/xdxn硬盘设备/dev/sda1/dev/cdrom/dev/mapper/*虚拟设备2.设备的使用设备发现fdisk-l查看真实存在的设备cat/proc/partitions
BestHope·2016-10-27 00:27

《初入linux》--第十部分-设备使用与时间同步

一.设备使用1.设备访问进入/dev下，直接访问2.设备的发现fdisk-l       查看真实存在的设备（不一定识别）cat/proc/partitions  系统能识别出的设备（不一定能用）blkid
x221996515·2016-10-18 21:00

如何为Kafka集群选择合适的Partitions数量

如何为Kafka集群选择合适的Partitions数量Hadoop技术博文这是许多kafka使用者经常会问到的一个问题。本文的目的是介绍与本问题相关的一些重要决策因素，并提供一些简单的计算公式。
代立冬·2016-09-18 10:50

修改topic分区数和副本数

Partitions只能增加(扩容）bin/kafka-topics.sh--alter--zookeeperlocalhost:42182--topicmyboys1--partitions2修改备份数量
桃花惜春风·2016-08-21 18:54

hive动态分区

sethive.exec.dynamic.partition.mode=nonstrick//无限制模式，如果模式是strict，则必须有一个静态分区，切放在最前面sethive.exec.max.dynamic.partitions.pe
CrazyL-·2016-08-19 19:20

kafka自学之路--zookeeper中存储结构

1.topic注册信息/brokers/topics/[topic]:存储某个topic的partitions所有分配信息Schema:{  "version":"版本编号目前固定为数字1",  "partitions
tanggao1314·2016-07-18 16:00

Flink - FlinkKafkaConsumer08

 先看AbstractFetcher这个可以理解就是，consumer中具体去kafka读数据的线程，一个fetcher可以同时读多个partitions的数据来看看/** *Baseclassforallfetchers
fxjwind·2016-07-06 20:00

MySQL查询计划输出列的含义

4.partitions:匹配的分区信息（对于非分区表值为NULL）。5.type：连接操作的类型。6.possible_
moss_tan_jun·2016-07-04 23:00

Kafka.net使用编程入门(二)

1.首先创建一个Topic，命令如下:kafka-topics--create--zookeeperlocalhost:2181--replication-factor1--partitions1--topicMyTopic2
WuLex·2016-06-29 22:00

spark RDD的5个重要内部属性

例如上文中的代码实例里，HDFS文件作为输入，初始RDD的partitions代表文件中每个文件块的分区（包含文件块在每个分区对象中的偏移量），preferredLocations表示文件块
平凡de世界·2016-06-13 09:24

kafka集群启动遇到LeaderNotAvailableException错误

删除下面的路径/brokers/topic/${topic-name}kafka0.8.1自带的zookeeper-shell.sh程序很麻烦，需要一点点删除delete/brokers/topics/test/partitions
sheismylife·2016-06-04 18:00

Kafka学习整理七(producer和consumer编程实践)

/kafka-topics.sh命令创建topic及partitions分区数.
louisliao_1981·2016-06-03 15:46

Ubuntu挂载u盘

//blog.sina.com.cn/s/blog_6d2cab2e0100x3g9.html首先，需要在一个root控制台工作,使用如下命令:  sudo-i 挂u盘之前，运行命令cat/proc/partitions
yueguanyun·2016-06-01 15:00
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他