jjzjj

大数据技术之——zookeeper的安装部署

it春和 2024-05-11 原文

🙆‍♂️🙆‍♂️ 写在前面

​🏠​ 个人主页:csdn春和
📚 推荐专栏:更多专栏尽在主页!
Scala专栏(spark必学语言 已完结)
JavaWeb专栏(从入门到实战超详细!!!)
SSM专栏 (更新中…)
​📖​ 本期文章:大数据技术之——zookeeper的安装部署


如果对您有帮助还请三连支持,定会一 一回访!🙋🏻‍♂️

📌本文目录


大数据技术之—— Zookeeper的安装

一、本地模式安装部署

1.1、安装前准备

1、安装jdk 确保已将安装好了jdk

2、拷贝zookeeper安装包到linux系统

3、解压到指定目录

解压到指定的目录

tar -zxvf apache-zookeeper-3.5.7- bin.tar.gz -C /opt/module/

修改名称(由于名称太长,可不修改直接下一步):

mv apache-zookeeper-3.5.7 -bin/ zookeeper-3.5.7

1.2、修改配置

1、将/opt/module/zookeeper-3.5.7/conf 这个路径下的 zoo_sample.cfg 修改为zoo.cfg

mv zoo_sample.cfg zoo.cfg

2、打开 zoo.cfg 文件,修改 dataDir 路径:

vim zoo.cfg

修改如下内容:

dataDir=/opt/module/zookeeper-3.5.7/zkData 

3、在/opt/module/zookeeper-3.5.7/这个目录上创建 zkData 文件夹

mkdir zkData


1.3、操作zookeeper

(1)启动 Zookeeper

bin/zkServer.sh start

(2)查看进程是否启动

jps

(3)查看状态

bin/zkServer.sh status

(4)启动客户端

bin/zkCli.sh

(5)退出客户端:

quit

(6)停止 Zookeeper

bin/zkServer.sh stop

1.4、配置参数解读

Zookeeper中的配置文件zoo.cfg中参数含义解读如下:

1、tickTime = 2000:通信心跳时间,Zookeeper服务器与客户端心跳时间,单位毫秒

2、initLimit = 10:LF初始通信时限

3、syncLimit = 5:LF同步通信时限

4、dataDir:保存Zookeeper中的数据

​ 注意:默认的tmp目录,容易被Linux系统定期删除,所以一般不用默认的tmp目录

5、clientPort = 2181:客户端连接端口,通常不做修改。

二、zookeeper集群安装

1、集群规划

在hadoop02、hadoop03 hadoop04上部署zookeeper

2、解压安装

因为已经在hadoop02上安装过zookeeper了

在hadoop02上的zkData目录下创建一个myid的文件

vi myid

在文件中添加与 server 对应的编号(注意:上下不要有空行,左右不要有空格)

3、将zookeeper·分发到其他两台机器上

并分别在 hadoop03、hadoop04 上修改 myid 文件中内容为 3、4

xsync zookepper-3.5.7

4、配置zoo.cfg文件

【1】重命名/opt/module/zookeeper-3.5.7/conf 这个目录下的 zoo_sample.cfg 为 zoo.cfg

【2】打开 zoo.cfg 文件

【3】配置

#修改数据存储路径配置

dataDir=/opt/module/zookeeper-3.5.7/zkData

#增加如下配置

#######################cluster##########################

server.2=hadoop02:2888:3888

server.3=hadoop03:2888:3888

server.4=hadoop04:2888:3888

【4】配置参数解读

server.A=B:C:D

A 是一个数字,表示这个是第几号服务器;

​ 集群模式下配置一个文件 myid,这个文件在 dataDir 目录下,这个文件里面有一个数据 就是 A 的值,Zookeeper 启动时读取此文件,拿到里面的数据与 zoo.cfg 里面的配置信息比

​ 较从而判断到底是哪个 server。

B 是这个服务器的地址;

C 是这个服务器 Follower 与集群中的 Leader 服务器交换信息的端口;

D 是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的

Leader,而这个端口就是用来执行选举时服务器相互通信的端口。

5、同步zoo.cfg文件

xsync zoo.cfg

6、集群操作

分别启动zookeeper

[zhou@hadoop02 zookeeper-3.5.7]$ bin/zkServer.sh start
[zhou@hadoop03 zookeeper-3.5.7]$ bin/zkServer.sh start
[zhou@hadoop04 zookeeper-3.5.7]$ bin/zkServer.sh start

查看状态

7、zookeeper集群启动脚本

1、在 hadoop02 的/home/zhou/bin 目录下创建脚本

vim zk.sh

#!/bin/bash
case $1 in
"start"){
for i in hadoop02 hadoop03 hadoop04
do
 echo ---------- zookeeper $i 启动 ------------
ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh start"
done
};;
"stop"){
for i in hadoop02 hadoop03 hadoop04
do
 echo ---------- zookeeper $i 停止 ------------ 
ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh stop"
done
};;
"status"){
for i in hadoop02 hadoop03 hadoop04
do
 echo ---------- zookeeper $i 状态 ------------ 
ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh status"
done
};;
esac

增加脚本的执行权限 chmode u+x zk.sh

分发 xsync zk.sh

测试
zk.sh stop 停止zookeeper集群
zk.sh start 启动zookeeper集群
zk.sh status 查看zookeeper集群状态

有关大数据技术之——zookeeper的安装部署的更多相关文章

  1. ruby - 在 64 位 Snow Leopard 上使用 rvm、postgres 9.0、ruby 1.9.2-p136 安装 pg gem 时出现问题 - 2

    我想为Heroku构建一个Rails3应用程序。他们使用Postgres作为他们的数据库,所以我通过MacPorts安装了postgres9.0。现在我需要一个postgresgem并且共识是出于性能原因你想要pggem。但是我对我得到的错误感到非常困惑当我尝试在rvm下通过geminstall安装pg时。我已经非常明确地指定了所有postgres目录的位置可以找到但仍然无法完成安装:$envARCHFLAGS='-archx86_64'geminstallpg--\--with-pg-config=/opt/local/var/db/postgresql90/defaultdb/po

  2. ruby - 解析 RDFa、微数据等的最佳方式是什么,使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  3. ruby - 完全离线安装RVM - 2

    我打算为ruby​​脚本创建一个安装程序,但我希望能够确保机器安装了RVM。有没有一种方法可以完全离线安装RVM并且不引人注目(通过不引人注目,就像创建一个可以做所有事情的脚本而不是要求用户向他们的bash_profile或bashrc添加一些东西)我不是要脚本本身,只是一个关于如何走这条路的快速指针(如果可能的话)。我们还研究了这个很有帮助的问题:RVM-isthereawayforsimpleofflineinstall?但有点误导,因为答案只向我们展示了如何离线在RVM中安装ruby。我们需要能够离线安装RVM本身,并查看脚本https://raw.github.com/wayn

  4. ruby-on-rails - rails 目前在重启后没有安装 - 2

    我有一个奇怪的问题:我在rvm上安装了ruby​​onrails。一切正常,我可以创建项目。但是在我输入“railsnew”时重新启动后,我有“程序'rails'当前未安装。”。SystemUbuntu12.04ruby-v"1.9.3p194"gemlistactionmailer(3.2.5)actionpack(3.2.5)activemodel(3.2.5)activerecord(3.2.5)activeresource(3.2.5)activesupport(3.2.5)arel(3.0.2)builder(3.0.0)bundler(1.1.4)coffee-rails(

  5. ruby - 如何为 emacs 安装 ruby​​-mode - 2

    我刚刚为fedora安装了emacs。我想用emacs编写ruby。为ruby​​提供代码提示、代码完成类型功能所需的工具、扩展是什么? 最佳答案 ruby-mode已经包含在Emacs23之后的版本中。不过,它也可以通过ELPA获得。您可能感兴趣的其他一些事情是集成RVM、feature-mode(Cucumber)、rspec-mode、ruby-electric、inf-ruby、rinari(用于Rails)等。这是我当前用于Ruby开发的Emacs配置:https://github.com/citizen428/emacs

  6. ruby-on-rails - 无法在centos上安装therubyracer(V8和GCC出错) - 2

    我正在尝试在我的centos服务器上安装therubyracer,但遇到了麻烦。$geminstalltherubyracerBuildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingtherubyracer:ERROR:Failedtobuildgemnativeextension./usr/local/rvm/rubies/ruby-1.9.3-p125/bin/rubyextconf.rbcheckingformain()in-lpthread...yescheckingforv8.h...no***e

  7. ruby - 通过 RVM (OSX Mountain Lion) 安装 Ruby 2.0.0-p247 时遇到问题 - 2

    我的最终目标是安装当前版本的RubyonRails。我在OSXMountainLion上运行。到目前为止,这是我的过程:已安装的RVM$\curl-Lhttps://get.rvm.io|bash-sstable检查已知(我假设已批准)安装$rvmlistknown我看到当前的稳定版本可用[ruby-]2.0.0[-p247]输入命令安装$rvminstall2.0.0-p247注意:我也试过这些安装命令$rvminstallruby-2.0.0-p247$rvminstallruby=2.0.0-p247我很快就无处可去了。结果:$rvminstall2.0.0-p247Search

  8. ruby - 如何在 Lion 上安装 Xcode 4.6,需要用 RVM 升级 ruby - 2

    我实际上是在尝试使用RVM在我的OSX10.7.5上更新ruby,并在输入以下命令后:rvminstallruby我得到了以下回复:Searchingforbinaryrubies,thismighttakesometime.Checkingrequirementsforosx.Installingrequirementsforosx.Updatingsystem.......Errorrunning'requirements_osx_brew_update_systemruby-2.0.0-p247',pleaseread/Users/username/.rvm/log/138121

  9. ruby - Fast-stemmer 安装问题 - 2

    由于fast-stemmer的问题,我很难安装我想要的任何ruby​​gem。我把我得到的错误放在下面。Buildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingfast-stemmer:ERROR:Failedtobuildgemnativeextension./System/Library/Frameworks/Ruby.framework/Versions/2.0/usr/bin/rubyextconf.rbcreatingMakefilemake"DESTDIR="cleanmake"DESTDIR=

  10. ruby-on-rails - 每次我尝试部署时,我都会得到 - (gcloud.preview.app.deploy) 错误响应 : [4] DEADLINE_EXCEEDED - 2

    我是Google云的新手,我正在尝试对其进行首次部署。我的第一个部署是RubyonRails项目。我基本上是在关注thisguideinthegoogleclouddocumentation.唯一的区别是我使用的是我自己的项目,而不是他们提供的“helloworld”项目。这是我的app.yaml文件runtime:customvm:trueentrypoint:bundleexecrackup-p8080-Eproductionconfig.ruresources:cpu:0.5memory_gb:1.3disk_size_gb:10当我转到我的项目目录并运行gcloudprevie

随机推荐