大数据组件服务的启动与关闭命令

本文主要整理了大数据组件服务的启动与关闭命令,主要包括Hadoop,Spark,HBase,Hive,Zookeeper,Storm,Kafka,Flume,Solr,ElasticSearch。 

1、Hadoop集群
1 )启动方式切换到主节点的hadoop安装目录下的sbin目录下a)/start-dfs .sh ./start-yarn .sh (建议使用)b)./start-all .sh 2 )关闭方式a)./stop-dfs .sh ./stop-yarn .sh (建议使用)b)./stop-all .sh

2、Spark集群
切换到主节点的Spark安装目录下的sbin目录下(1)启动方式./ start - all .sh( 2 )关闭方式./stop- all .sh

3、HBase集群
1 )启动方式 先启动Hadoop集群 ,后启动HBASE #cd $HBASE_HOME/bin #./start-hbase.sh 2 )关闭方式 #cd $HBASE_HOME/bin #./stop-hbase.sh 3 )web访问方式Masterhttp: //192.168.2.12:60010/master-status RegionServerhttp: //192.168.2.12:60030/

4、Hive
hadoop必须已经启动 切换到节点的Hive安装目录下的bin目录 (1)启动Hive: . /hive 如果配置环境变量 直接输入hive 或者 . /hive -- service cli

5、Kafka
切换到节点的Kafka安装目录下的bin目录 (1)启动Kafka服务: . /kafka - server - start . sh config/server . properties
后台启动命令: ./kafka-server-start.sh -daemon config/server.properties (2)查看Kafka状态: . /zkServer . sh status (3)创建topic: . /kafka - topics . sh -- create -- zookeeper localhost:主机ip -- replication - factor 3 -- partitions 1 -- topic topic名字 (3是在配置文件中配置的replication-factor,1是在partitions中配置的) (4)查看topic: . /kafka - topics . sh -- list -- zookeeper localhost:2181 (5)发送消息: . /kafka - console - producer . sh -- broker - list localhost:9092 -- topic topic名字 (6)接收消息: . /kafka - console - consumer . sh -- zookeeper localhost:2181 -- topic topic名字 -- from - beginning (7)查看topic情况: . /kafka - topics . sh -- describe -- zookeeper localhost:2181 -- topic my - replicated - topic (8)删除topic: . /kafka - topics . sh -- zookeeper localhost:2181 -- delete -- topic topic名字 (9)关闭Kafka服务:1、jps查看pid 2、kill - 9 pid


6、ZooKeeper
切换到节点的zookeeper安装目录下的bin目录( 1 )启动ZK服务:./zkServer .sh start( 2 )查看ZK服务状态:./zkServer .sh status( 3 )停止ZK服务:./zkServer .sh stop( 4 )重启ZK服务:./zkServer .sh restart

使用 jps 查看:
jps
结果
QuorumPeerMain

7、Storm
切换到节点的Storm安装目录下的bin目录( 1 )启动Storm主结点:nohup ./storm nimbus > ../logs/info 2 >& 1 &( 2 )启动Storm从结点:./storm supervisor > ../logs/info 2 >& 1 &( 3 )启动Storm管理界面:./storm z ui> /dev/ null 2 >& 1 &( 4 )启动Storm日志:nohup storm logviewer > /dev/ null 2 >& 1 &( 5 )查看任务:./storm list ( 6 )杀死任务:./storm kill lifeCycle(任务名称)


8、Flume
切换到Flume安装目录下
1 )启动服务 :bin/flume-ng agent -c conf -f flume-netcat.properties -name a -Dflume.root.logger=INFO,console 2 )停止服务: 1 、jps查看pid 2 、kill - 9 pid

9、Solr
进入安装目录下的example目录( 1 )启动服务:后台运行solr,默认监听 8983 端口nohup java -jar start . jar > /dev/ null & 2 )停止服务:java -DSTOP . PORT = 8983 -DSTOP . KEY = solr -jar start . jar –stop

10、ElasticSearch
下载并解压elasticsearch-servicewrapper-master把service目录拷贝到ES_HOME/bin / 目录下面cd ES_HOME/bin/service( 1 )启动服务: . /elasticsearch start( 2 )关闭服务: . /elasticsearch stop

11.sqoop
进入安装目录下
首先启动server,再打开shell
开启服务: ./bin/sqoop2-server start
打卡shell: ./bin/sqoop2-shell
查看安装版本: ./bin/sqoop2-tool verify


12.MySql
启动mysql mysql -u root -p

你可能感兴趣的:(随心随性)