Hadoop,Yarn,Zookeeper,kafka数据仓库集群命令集合
生活随笔
收集整理的這篇文章主要介紹了
Hadoop,Yarn,Zookeeper,kafka数据仓库集群命令集合
小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
1.HDFS
start-dfs.sh stop-dfs.sh2.Yarn;
start-yarn.sh stop-yarn.sh要先啟動(dòng)ZooKeeper 再啟動(dòng)Kafka 順序不可以改變。先關(guān)閉kafka ,再關(guān)閉zookeeper。
3.Zookeeper
zkServer.sh start zkServer.sh stop檢查ZooKeeper狀態(tài):zkServer.sh status
4.kafka
路徑根據(jù)自己的配置去修改
啟動(dòng)
kafka-server-start.sh -daemon /opt/apps/kafka/config/server.properties關(guān)閉
kafka-server-stop.sh新建一個(gè)主題
kafka-topics.sh --zookeeper node04:2181,node02:2181,node03:2181/kafka --create --replication-factor 1 --partitions 1 --topic topic_spider_jd kafka-topics.sh --zookeeper node01:2181 --create --replication-factor 3 --partitions 1 --topic t1 Created topic t1.flume采集數(shù)據(jù)
flume-ng agent --name a1 --conf-file /opt/apps/flume/conf/spider-flume-kafka.conf & 與50位技術(shù)專(zhuān)家面對(duì)面20年技術(shù)見(jiàn)證,附贈(zèng)技術(shù)全景圖總結(jié)
以上是生活随笔為你收集整理的Hadoop,Yarn,Zookeeper,kafka数据仓库集群命令集合的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: Linux配置Java,kafka,Ha
- 下一篇: 基础数据仓库环境搭建(一)数据仓库概述