ICode9

精准搜索请尝试: 精确搜索
  • Zookeeper入门2022-02-25 16:31:41

    一、Zookeeper概述   Zookeeper是一个开源的为分布式应用提供协调服务的Apache项目。主要用来解决分布式集群中应用系统的一致性的问题,例如怎样避免同时操作同一数据造成脏读的问题。ZooKeeper 本质上是一个分布式的小文件存储系统。提供基于类似于文件系统的目录树方式的数据存

  • Kafka 集群搭建2022-02-25 14:58:17

    1、前提条件         1、部署Kafka集群搭建需要服务器至少3台,奇数台         2、Kafka的安装需要java环境,jdk1.8         3、Kafka安装包版本:kafka_2.11-0.10.0.1.tar.gz         4、假设3台服务器分别为:kafka1、kafka2、kafka3 2、Zookeeper集

  • docker安装zookeeper和dubbo-admin2022-02-25 14:03:54

    zookeepr安装 我这边用的都是apache官方的包: 搜索zookeepr docker search zookeeper 下载zookeepr docker pull docker.io/zookeeper:3.6.3 比如我根据官网版本,我选择了3.6.3 下载完后可通过docker images 查看已下载的镜像 创建容器(核心) : docker run -id -p 2181:2181 --

  • SpringBoot+Dubbo+Zookeeper实现简单的分布式架构2022-02-24 23:05:21

    目录 前言搭建框架启动测试 前言 什么是分布式系统? 分布式系统的出现是为了用更省钱的方式、更多的普通机器完成单个计算机无法完成的计算。 架构演变经历的4个阶段 单一应用架构 将所有功能都部署在一起,以减少部署节点和成本。但是不利于维护和升级。 垂直应用架构 将

  • 大数据概述2022-02-24 19:35:20

    一、MapReduce      主要由Google Reduce而来,它简化了大型数据的处理,是一个并行的,分布式处理的编程模型。hadoop2.0它是基于YARN框架构建的。YARN的全称是Yet-Another-Resource-Negotiator。Yarn可以运用在S3|Spark等上。 二、HDFS      它是由Google File System而来,全称

  • 关于在windows中zookeeper闪退2022-02-24 16:04:55

    本人用的版本是 apache-zookeeper-3.7.0-bin 网上说是在zkServer.cmd最后一行加入pause,就可以看到错误信息,然而我加了后,执行zkServer.cmd也还是闪退。然后百度发现pause是起到一个暂停的作用,如果在执行到之前bat就退出了,就没意义了,所以我穿插在所有行都写入一个pause,发现执行到

  • Dubbo和Zookeeper2022-02-24 11:32:19

    1. dubbo: 是管理中间层的工具,在业务层到数据仓库间有非常多服务的接入和服务提供者需要调度,dubbo提供一个框架解决这个问题。 注意这里的dubbo只是一个框架,至于你架子上放什么是完全取决于你的,就像一个汽车骨架,你需要配你的轮子引擎。这个框架中要完成调度必须要有一

  • springboot集成kafka记录2022-02-23 18:57:59

    1、编写docker-compose-kafka.yml version: '2' services: zookepper: image: wurstmeister/zookeeper # 原镜像`wurstmeister/zookeeper` container_name: zookeeper_server # 容器名为'zookeeper_server' resta

  • Windows:快速安装zookeeper教程2022-02-23 11:02:45

    步骤 1、下载zookeeper资源包 下载链接:zookeeper下载 以zookeeper3.6.3为例 选择zookeeper-3.6.3-bin.tar.gz。 2、在bin的同级目录下新建目录 3、复制conf目录下的zoo_sample.cfg文件,改名为zoo.cfg,并修改配置 4、找到bin目录下的zkServer.cmd,双击 配置完成!!! 附:报错参考

  • kraft 使用说明机翻版2022-02-23 09:33:19

    KRaft(又名 KIP-500)模式预览版 介绍 现在可以在没有 Apache ZooKeeper 的情况下运行 Apache Kafka!我们称之为Kafka Raft 元数据模式,通常缩写为KRaft mode. KRaft旨在发音为craft(如craftsmanship)。它目前是预览版,不应在生产中使用,但 可在 Kafka 3.1 版本中进行测试。 当 Kafka 集群

  • ZAB算法2022-02-22 21:30:13

    Zookeeper使用了一种称为Zab(Zookeeper Atomic Broadcast)的协议作为其一致性复制的核心,据其作者说这是一种新发算法,其特点是充分考虑了Yahoo的具体情况:高吞吐量、低延迟、健壮、简单,但不过分要求其扩展性。下面将展示一些该协议的核心内容:     另,本文仅讨论Zookeeper使用的一致

  • 初识kafka(kafka的使用)2022-02-22 20:01:01

    目录 kafka的使用:修改配置文件zookeeper.properties文件server.properties文件 启动zookeeper启动kafka启动类:配置kafka 启动消费者 kafka的使用: 修改配置文件 zookeeper.properties文件 server.properties文件 启动zookeeper 在kafka文件下启动命令窗口 输入: .\bin

  • kafka常用命令 topic创建 删除 设置保存时间 消费情况2022-02-22 16:03:30

    启动kafka sh kafka-server-start.sh -daemon ../config/server.properties 停止kafka sh kafka-server-stop.sh -daemon ../config/server.properties 启动zookeeper sh zookeeper-server-start.sh  ../config/zookeeper.properties 停止zookeeper sh zookeeper-server

  • etcd和Zookeeper孰优孰劣对比2022-02-22 15:34:53

    背景 最近在看到Pachyderm的介绍时,看到作者拿YARN和Kubernetes做类比,拿Zookeeper和etcd做对比。YARN和Kubernetes的类比还相对比较好理解,毕竟他们都有资源管理和调度的职能,只不过YARN上运行的对象是JVM,而Kubernetes上运行的是容器。但是拿Zookeeper和etcd来类比我就有些不懂了,在我

  • Zookeeper 常用命令(服务端&Cli)2022-02-22 14:31:41

    服务端 开启zk bin/zkServer.sh start 关闭zk bin/zkServer.sh stop 查看zk状态信息 bin/zkServer.sh status 重启zk bin/zkServer.sh restart Cli操作 没有加任何参数默认是持久化的 进入Cli窗口内 bin/zkCli.sh -server localhost:2181 # 连接本机的话,可以直接 bin/zkCli

  • Zookeeper 3.5.7(铲屎官)学习教程2022-02-21 23:02:32

    一、Zookeeper介绍 是一个观察者模式设计的分布式框架,负责协调客户端与服务端。 存储和管理服务端和客户端的注册信息。 当服务端注册信息发生变化,通知客户端(上线、下线)。 相当于文件系统 + 通知机制。 zookeeper官网下载:https://archive.apache.org/dist/zookeeper/ 二、Zooke

  • 四、Zookeeper分布式锁2022-02-21 22:32:15

    原文链接: Zookeeper 分布式锁 - 图解 - 秒懂_架构师尼恩-CSDN博客_zookeeper分布式锁 一、Zookeeper分布式锁的原理 根据前面介绍,ZooKeeper节点类型中,有一种临时顺序节点(EPHEMERAL_SEQUENTIAL),在创建这种节点时,Zookeeper会自动为新创建的节点加上一个次序编号,而这个生成的次序编

  • 【无标题】2022-02-20 21:00:05

    zookeeper的 get /zk_test 看不到版本的一些基本信息,可以用 stat /zk_test

  • jdk+zookeeper+kafka2022-02-19 22:01:35

    链接:https://pan.baidu.com/s/1fgHJ8Rwbg0MngwV-qDNJlw 提取码:8888 [root@localhost local]# pwd /usr/local [root@localhost local]# tar xvf jdk-8u301-linux-x64.tar.gzmv jdk8u jdk [root@localhost local]# cat /etc/profile export JAVA_HOME=/usr/local/jdk export JR

  • docker-compose kafka集群部署,kafka-manager可视化访问页面增加用户密码校验2022-02-18 19:03:17

    结合前文docker-compose kafka部署文章扩展集群部署方案 version: "3" services: zookeeper_sasl: image: wurstmeister/zookeeper hostname: zookeeper_sasl container_name: zookeeper_sasl restart: always ports: - 52181:2181 environment

  • 时间轮的应用并非Kafka独有, 其应用场景还有很多,在Netty、 Akka、Quartz、ZooKeeper等组件中都存在时间轮的踪影。2022-02-18 18:01:29

    6.2 8 时间轮 Kafka中存在大量的延时操作, 比如延时生产、延时拉取和延时删除等。 Kafka并没有使用 JDK自带的Timer 或DelayQueue来实现延时的功能,而是基于时间轮的概念自定义实现了一个 用千延时功能的定时器(SystemTimer)。 JDK中Timer和DelayQueue的插入和删除操作的平 均时间复

  • dubbo+zookeeper 记录2022-02-18 17:02:31

             

  • zookeeper的下载与安装2022-02-18 11:02:41

    1. 下载zookeeper http://archive.apache.org/dist/zookeeper/ 2. 将下载好的安装包解压至/usr/local/ tar -zxvf zookeeper-3.4.10.tar.gz -C /usr/local/ 3. 更名(方便配置及使用) mv zookeeper-3.4.10 zookeeper 4. 配置变量 4.1 打开环境变量配置文件 vim /etc/profile 4.2

  • kafka的高可用2022-02-16 22:04:51

    Replication(主从复制) 在Kafka引入Replication之后,同一个Partition可能会有多个Replica,而这时需要在这些Replication之间选出一个Leader,Producer和Consumer只与这个Leader交互,其它Replica作为Follower从Leader中复制数据。   因为需要保证同一个Partition的多个Replica之间的数据

  • Kafka在zookeeper中的存储2022-02-16 22:03:44

    ZooKeeper 是 Kafka 用来负责集群元数据的管理、控制器的选举等操作的。 Kafka在zookeeper中存储结构图

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有