读书本文须求先读书安装Zookeeper<准备>

1、下载Zookeeper安装包

【系统】CentOS 6.5

CentOS 陆.伍下ZooKeeper叁.四.陆集群环境布置及单机铺排详解

【系统】CentOS 6.5

集群安插

【软件】准备好jdk环境,此番大家的条件是open_jdk1.8.0_101
    zookeeper-3.4.6.tar.gz
【步骤】

  1. 安不忘危条件
    若果有内部dns可能外网有域名,则一贯动用域名
    假如未有索要修改/etc/hosts文件,可能直接运用IP

集群规划

主机项目 IP地址  域名
zookeeper1 192.168.1.1zookeeper1.chinasoft.com
zookeeper2 192.168.1.2zookeeper2.chinasoft.com
zookeeper3 192.168.1.3zookeeper3.chinasoft.com

留意:zookeeper因为有主节点和从节点的关系,所以安插的集群台数最佳为奇数个,不然或许出现脑裂导致服务十二分

  1. 安装
    下载地址:
    解压

tar -zxf zookeeper-3.4.6.tar.gz
cd zookeeper-3.4.6

拷贝配置文件,修改完结后分发给其它节点
cd /data/zookeeper-3.4.6/
cp zoo_sample.cfg zoo.cfg

cat zoo.cfg

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/data/zookeeper-3.4.6/data
dataLogDir=/data/zookeeper-3.4.6/logs
clientPort=2181
server.1=u04rtv01.yaya.corp:2888:3888
server.2=u04rtv02.yaya.corp:2888:3888
server.3=u04rtv03.yaya.corp:2888:3888

3.创建data和Log文件夹
mkdir /data/zookeeper-3.4.6/data
mkdir /data/zookeeper-3.4.6/logs

       
四、在zoo.cfg中的dataDir内定的目录下,新建myid文件。
例如:$ZK_INSTALL/data下,新建myid。在myid文件中输入一。表示为server.1。
如果为snapshot/d_2,则myid文件中的内容为 2,依此类推。

起步:在集群中的每台主机上推行如下命令
bin/zkServer.sh start

查阅意况,可以看到里面壹台为主节点,其余两台为从节点:
bin/zkServer.sh status

主节点:
./zkServer.sh status
JMX enabled by default
Using config: /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: leader
从属节点:
./zkServer.sh status
JMX enabled by default
Using config: /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: follower

停止:
bin/zkServer.sh stop

连接:
bin/zkCli.sh -server zookeeper1:2181
bin/zkCli.sh -server zookeeper2:2181
bin/zkCli.sh -server zookeeper3:2181

报错:
由来正是未有在dataDir目录下创立myid文件同时赋值(如一、贰、三各自代表集群中的server1,server二,server3)

选用Mac远程访问,陆集群环境安排及单机陈设详解。2016-08-22 17:55:16,145 [myid:] – INFO 
[main:[email protected]]

  • Reading configuration from:
    /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
    2016-08-22 17:55:16,150 [myid:] – INFO 
    [main:[email protected]]
  • Defaulting to majority quorums
    2016-08-22 17:55:16,150 [myid:] – ERROR
    [main:[email protected]]
  • Invalid config, exiting abnormally
    org.apache.zookeeper.server.quorum.QuorumPeerConfig$ConfigException:
    Error processing /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
            at
    org.apache.zookeeper.server.quorum.QuorumPeerConfig.parse(QuorumPeerConfig.java:123)
            at
    org.apache.zookeeper.server.quorum.QuorumPeerMain.initializeAndRun(QuorumPeerMain.java:101)
            at
    org.apache.zookeeper.server.quorum.QuorumPeerMain.main(QuorumPeerMain.java:78)
    Caused by: java.lang.IllegalArgumentException:
    /data/yunva/zookeeper-3.4.6/data/myid file is missing
            at
    org.apache.zookeeper.server.quorum.QuorumPeerConfig.parseProperties(QuorumPeerConfig.java:350)
            at
    org.apache.zookeeper.server.quorum.QuorumPeerConfig.parse(QuorumPeerConfig.java:119)
            … 2 more

Invalid config, exiting abnormally

单机铺排——适用于开发测试
tar -zxvf zookeeper-3.4.6.tar.gz
cd zookeeper-3.4.6/conf
cp zoo_sample.cfg zoo.cfg
开创日志目录
mkdir /data/yunva/zookeeper-3.4.6/data
mkdir /data/yunva/zookeeper-3.4.6/logs

配置:conf/zoo.cfg

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/data/yunva/zookeeper-3.4.6/logs
dataLogDir=/data/yunva/zookeeper-3.4.6/logs
clientPort=2181
#活动清除日志文件
autopurge.snapRetainCount=20
autopurge.purgeInterval=48

启动:

bin/zkServer.sh start

连接到Zookeeper:

bin/zkCli.sh -server 127.0.0.1:2181  适用于Java开发

翻看景况:
bin/zkServer.sh status
JMX enabled by default
Using config: /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: standalone

在 CentOS7 上安装 Zookeeper-3.4.9 服务

ZooKeeper官方文书档案翻译——ZooKeeper Overview 3.4.陆 

CentOS下ZooKeeper 3.4.八 集群环境搭建

CentOS 七下Zookeeper集群安装

分布式服务Dubbo+Zookeeper安全表明

Linux下安装Zookeeper集群

Linux下Zookeeper集群的安装 

本文永久更新链接地址:

六.伍下ZooKeeper3.4.六集群环境布置及单机安插详解 【系统】CentOS ⑥.5集群布署 【软件】准备好jdk环境,此番大家的条件是open_jdk1.8.0_101
zo…

壹 架构细节

https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.4.10/

集群安排

zookeeper集群依照投票大选的建制 选出leader和follower

澳门金沙国际 1

【软件】准备好jdk环境,此番大家的环境是open_jdk1.8.0_101
    zookeeper-3.4.6.tar.gz
【步骤】

zookeeper集群节点建议是奇数

2、zookeeper集群规划

  1. 准备条件
    若果有在那之中dns或许外网有域名,则直接使用域名
    要是未有索要修改/etc/hosts文件,也许直接行使IP

此间本人准备了三台服务器

澳门金沙国际 2

集群规划

39.108.121.137  120.77.148.101  39.108.162.184

共计配备3台机器,每台机器开动五个zookeeper进度

长机项目 IP地址  域名
zookeeper1 192.168.1.1zookeeper1.chinasoft.com
zookeeper2 192.168.1.2zookeeper2.chinasoft.com
zookeeper3 192.168.1.3zookeeper3.chinasoft.com

 

叁、使用root用户分别登录3台机机器

专注:zookeeper因为有主节点和从节点的涉嫌,所以布置的集群台数最佳为奇数个,不然恐怕出现脑裂导致服务分外

2在3台服务器上独家安装Zookeeper

切换到hadoop用户

  1. 安装
    下载地址:
    解压

新建目录

命令:su hadoop

tar -zxf zookeeper-3.4.6.tar.gz
cd zookeeper-3.4.6

  mkdir /usr/local/zookeeper

进去到hadoop用户的家目录下

拷贝配置文件,修改形成后分发给任何节点
cd /data/zookeeper-3.4.6/
cp zoo_sample.cfg zoo.cfg

解压

命令:cd /home/hadoop

cat zoo.cfg

  cd zookeeper压缩包所在目录

始建apps目录用于存放全数以后须求安装的软件

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/data/zookeeper-3.4.6/data
dataLogDir=/data/zookeeper-3.4.6/logs
clientPort=2181
server.1=u04rtv01.yaya.corp:2888:3888
server.2=u04rtv02.yaya.corp:2888:3888
server.3=u04rtv03.yaya.corp:2888:3888

  tar -xvf zookeeper-3.4.12.tar.gz -C /usr/local/zookeeper

命令:mkdir apps

3.创建data和Log文件夹
mkdir /data/zookeeper-3.4.6/data
mkdir /data/zookeeper-3.4.6/logs

新建目录

进入到apps目录

       
肆、在zoo.cfg中的dataDir内定的目录下,新建myid文件。
例如:$ZK_INSTALL/data下,新建myid。在myid文件中输入1。表示为server.一。
如果为snapshot/d_贰,则myid文件中的内容为 二,依此类推。

  mkdir /usr/local/zookeeper/zookeeper-3.4.12/data

命令:cd ./apps

起步:在集群中的每台主机上执行如下命令
bin/zkServer.sh start

新建文件

4、上传zookeeper安装包

翻开景况,能够看来在那之中1台为主节点,别的两台为从节点:
bin/zkServer.sh status

  touch /usr/local/zookeeper/zookeeper-3.4.12/data/myid

行使rz命令上传zookeeper安装包

主节点:
./zkServer.sh status
JMX enabled by default
Using config: /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: leader
从属节点:
./zkServer.sh status
JMX enabled by default
Using config: /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: follower

编写制定(3玖.108.1二1.一叁七服务器上内容是壹  120.77.14八.⑩一服务器上内容是二  3玖.十八.16二.1八四服务器上内容是3)

五、解压安装包

停止:
bin/zkServer.sh stop

  vim /usr/local/zookeeper/zookeeper-3.4.12/data/myid

命令:tar -zxvf zookeeper-3.4.10.tar.gz

连接:
bin/zkCli.sh -server zookeeper1:2181
bin/zkCli.sh -server zookeeper2:2181
bin/zkCli.sh -server zookeeper3:2181

布局文件准备

脱离hadoop用户切换成root用户,输入exit按回车

报错:
原因正是从未在dataDir目录下创办myid文件同时赋值(如一、贰、2个别表示集群中的server1,server2,server3)

  cp /usr/local/zookeeper/zookeeper-3.4.12/conf/zoo_sample.cfg
/usr/local/zookeeper/zookeeper-3.4.12/conf/zoo.cfg

备注:用户切换-即便想从root用户切换回壹般用户,则可应用su
-val(一般用户名)

2016-08-22 17:55:16,145 [myid:] – INFO  [main:QuorumPeerConfig@103]

澳门金沙国际 ,编辑(根据key修改value)

而当你再一次切回到root用户,则只须要键入exit,再度输入exit则赶回最初的用户下

  • Reading configuration from:
    /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
    2016-08-22 17:55:16,150 [myid:] – INFO  [main:QuorumPeerConfig@340]
  • Defaulting to majority quorums
    2016-08-22 17:55:16,150 [myid:] – ERROR [main:QuorumPeerMain@85] –
    Invalid config, exiting abnormally
    org.apache.zookeeper.server.quorum.QuorumPeerConfig$ConfigException:
    Error processing /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
            at
    org.apache.zookeeper.server.quorum.QuorumPeerConfig.parse(QuorumPeerConfig.java:123)
            at
    org.apache.zookeeper.server.quorum.QuorumPeerMain.initializeAndRun(QuorumPeerMain.java:101)
            at
    org.apache.zookeeper.server.quorum.QuorumPeerMain.main(QuorumPeerMain.java:78)
    Caused by: java.lang.IllegalArgumentException:
    /data/yunva/zookeeper-3.4.6/data/myid file is missing
            at
    org.apache.zookeeper.server.quorum.QuorumPeerConfig.parseProperties(QuorumPeerConfig.java:350)
            at
    org.apache.zookeeper.server.quorum.QuorumPeerConfig.parse(QuorumPeerConfig.java:119)
            … 2 more

  vim /usr/local/zookeeper/zookeeper-3.4.12/conf/zoo.cfg

陆、创立软连接

Invalid config, exiting abnormally

# 数据保存目录
dataDir=/usr/local/zookeeper/zookeeper-3.4.12/data
# 客户端连接zookeeper端口
clientPort=2181
# 云服务器需要额外添加
quorumListenOnAllIPs=true
# 2881:zookeeper节点之间通信端口 3881:zookeeper节点之间投票选举端口
server.1=39.108.121.137:2881:3881
server.2=120.77.148.101:2881:3881
server.3=39.108.162.184:2881:3881

选择root用户操作

单机安排——适用于开发测试
tar -zxvf zookeeper-3.4.6.tar.gz
cd zookeeper-3.4.6/conf
cp zoo_sample.cfg zoo.cfg
始建日志目录
mkdir /data/yunva/zookeeper-3.4.6/data
mkdir /data/yunva/zookeeper-3.4.6/logs

 

语法:ln -s源路径 软连接路径

配置:conf/zoo.cfg

三在3台服务器上独家运转Zookeeper

命令:ln -s /home/hadoop/apps/zookeeper-3.4.10 /usr/local/zookeeper

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/data/yunva/zookeeper-3.4.6/logs
dataLogDir=/data/yunva/zookeeper-3.4.6/logs
clientPort=2181
#机动清除日志文件
autopurge.snapRetainCount=20
autopurge.purgeInterval=48

进入bin目录

七、修改环境变量

启动:

  cd /usr/local/zookeeper/zookeeper-3.4.12/bin

使用root用户操作

bin/zkServer.sh start

  启动

命令:vim /etc/profile

连接到Zookeeper:

    ./zkServer.sh start

添加内容如下:

bin/zkCli.sh -server 127.0.0.1:2181  适用于Java开发

  查看景况(叁台zookeeper运行完结后过1会再查看)

export JAVA_HOME=/usr/local/jdk

翻看意况:
bin/zkServer.sh status
JMX enabled by default
Using config: /data/yunva/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: standalone

    ./zkServer.sh status

export ZOOKEEPER_HOME=/usr/local/zookeeper

在 CentOS7 上安装 Zookeeper-3.4.9 服务

ZooKeeper官方文书档案翻译——ZooKeeper Overview 三.四.六 

CentOS下ZooKeeper 三.肆.八 集群环境搭建

CentOS 7下Zookeeper集群安装

分布式服务Dubbo+Zookeeper安全认证

Linux下安装Zookeeper集群

Linux下Zookeeper集群的安装 

 

export PATH=$PATH:${ZOOKEEPER_HOME}/bin:${JAVA_HOME}/bin

正文永久更新链接地址:https://www.linuxidc.com/Linux/2018-03/151439.htm

八、重新编写翻译环境变量

澳门金沙国际 3

动用root用户操作

命令:source /etc/profile

9、修改zookeeper软链接属主为hadoop

利用root用户操作

命令:chown -R hadoop:hadoop /usr/local/zookeeper

10、切换到hadoop用户

命令:su hadoop

1一.改动zookeeper配置文件

切换到conf目录:cd /usr/local/zookeeper/conf

拷贝样例配置文件同等对待命名zoo.cfg命令:cp zoo_sample.cfg zoo.cfg

编排zoo.cfg文件命令:vim zoo.cfg

增进始末如下

dataDir=/usr/local/zookeeper/data    #快速照相文件存款和储蓄目录

dataLogDir=/usr/local/zookeeper/log   #政工日志文件目录

#只顾node0壹、node0二、node0叁是设置zookeeper的主机名,根据自身的虚拟机自行修改

server.1=node0壹:2888:3888 (主机名,心跳端口、数据端口)

server.2=node02:2888:3888

server.3=node03:2888:3888

1二、创设data、log目录,只有hadoop用户全部写权限

在/usr/local/zookeeper目录下创制

mkdir -m 755 data

mkdir -m 755 log

一三、在data文件夹下新建myid文件,myid的文件内容为该节点的号码

cd data

创建myid文件

touch myid

添加编号一

echo 1 > myid

1四、通过scp将安装包拷贝到其余八个节点node0二和node0三的/home/hadoop/apps目录下,提前在node0二和node03创设好/home/hadoop/apps目录

scp -r /home/hadoop/apps/zookeeper-3.4.10
hadoop@node02:/home/hadoop/apps

scp -r /home/hadoop/apps/zookeeper-3.4.10
hadoop@node03:/home/hadoop/apps

独家创造软链接参考步骤六和增加环境变量参考步骤7,步骤八,步骤玖
[第一操作,在node0贰和node0三上都得重复操作那多少个步骤。

15、修改其余节点的myid

node0二的myid文件内容是二

node0三的myid文件内容是三

16、启动、关闭、查看zk状态

起步命令:/usr/local/zookeeper/bin/zkServer.sh start

闭馆命令:/usr/local/zookeeper/bin/zkServer.sh stop

翻开zk状态命令 :zkServer.sh status

相关文章