文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

从事大数据,还不知道Zookeeper是啥?带你安装Zookeeper集群

2024-12-24 21:08

关注

什么是zookeeper?为什么zookeeper在大数据领域如此重要?下面我们从最基础的开始了解。

zookeeper是一个分布式协调服务的开源框架。其主要作用是用来解决分布式集群中的数据一致性问题。zookeeper本质上是一个小文件系统。其数据结构类似于文件系统的目录树,zookeeper可以对这些节点进行有效的管理。通过节点管理,来达到监控和维护节点数据的目标。通过监控数据的变化,来达到管理集群的目的。常见的应用如:配置管理、名称服务、分布式消息队列、分布式锁、分布式协调服务等。 

zookeeper特性

数据一致性:在zookeeper集群中,每个server都保存着一份相同的数据副本,client无论连接到哪一个server,展示的数据都是一致的,这是zookeeper一个非常重要的特性,也是其在大数据领域广泛应用的基础。

可靠性:如果客户端请求被任意一个server接受,那么该请求就会被整个集群接受。

顺序性:有全局有序和偏序两种。全局有序是指如果在一台server上,消息a在消息b先发布,那么在所有server上,消息a都在消息b先发布。而偏序是指消息a在消息b前被同一个server发布,那么消息a必定在消息b的前面。

数据更新的原子性:一次数据更新要么成功,要么失败,不存在中间状态。

实时性:zookeeper保证客户端在一定的时间间隔内获得服务器的响应,无论是成功还是失败。

zookeeper角色 

leader:是集群正常工作的核心。事务性(写操作)请求的唯一处理者和调度者。集群内部的管理者和调度者。

follower:处理非事务性请求,参与集群leader选举,转发事务性请求给leader.

observer:处理非事务性请求,不参与leader选举,转发事务性请求给leader。如果集群的读请求很多,可以添加observer角色,提高集群的非事务处理能力。

zookeeper安装

zookeeper的安装分为单机版和集群版,单机版主要用来调试。下面我们演示在虚拟机中安装集群版。zookeeper集群通常由奇数个节点组成,这是为了保证集群leader的选举(基于paxos算法,此篇文章不做介绍)。本次演示使用3台机器如何安装zookeeper集群。

1.安装jdk,三台机器都要安装

  1. 下载地址https://www.oracle.com/technetwork/java/javase/downloads 
  2. /index.htmljdk-8u211-linux-x64.rpm#安装rpm -ivh jdk-8u211-linux- 
  3. x64.rpm#切换javaalternatives --config java 

2.下载zookeeper安装包

  1. 下载地址:https://archive.apache.org/dist/zookeeper/安装包版本:zookeeper-3.4.5.tar.gz 

3.配置主机名映射

  1. vim /etc/hosts192.168.80.10 node1192.168.80.11 node2192.168.80.12 node3 

4.修改zookeeper配置文件

  1. tar -zxvf zookeeper-3.4.5.tar.gz -C /servers/cd /serversln -s  
  2. zookeeper-3.4.5/ zookeepercd /servers/zookeeper/confcp zoo_sample.cfg  
  3. zoo.cfgvim zoo.cfg#在zoo.cfg中添加如下配置信息 
  4. tickTime=2000dataDir=/servers/zookeeper 
  5. /dataclientPort=2181server.1=node1:2888:3888server.2=node2:2888:3888s 
  6. erver.3=node3:2888:3888 

5.设置myid文件

myid文件只包含一个数字,数值范围在1-255,myid文件的位置在数据目录下,由dataDir参数指定

  1. cd /servers/zookeeper/dataecho 1 > myid注意myid中的值必须是唯一的,在 
  2. 这里我们三台机器分别设置为1,2,3 

启动zookeeper

  1. ./zkServer.sh start 

7.查看角色状态

  1. /servers/zookeeper/bin/zkServer.sh status 

zookeeper集群环境已经搭建好了,下一篇文章我们看看如何使用zookeeper,zookeeper又有哪些有趣的特性。

 

来源:今日头条内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯