首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏大数据学习笔记

    Elasticsearch 6.x集群搭建

    ------------------- # # Use a descriptive name for your cluster: # #cluster.name: my-application #ES集群名 - Network ----------------------------------- # # Set the bind address to a specific IP (IPv4 or IPv6) documentation. # # --------------------------------- Discovery ---------------------------------- # 集群的发现机制 is ["127.0.0.1", "[::1]"] # #discovery.zen.ping.unicast.hosts: ["host1", "host2"] #指定接收单播请求的主机,推荐包含组成集群的所有主机 number of master-eligible nodes / 2 + 1): #discovery.zen.minimum_master_nodes: #默认值是1,该属性定义的是为了组成一个集群

    80650发布于 2019-05-27
  • 来自专栏菩提树下的杨过

    redis 学习笔记(6)-cluster集群搭建

    上次写redis的学习笔记还是2014年,一转眼已经快2年过去了,在段时间里,redis最大的变化之一就是cluster功能的正式发布,以前要搞redis集群,得借助一致性hash来自己搞sharding 下面是参考官方教程cluster-tutorial 在mac机上搭建cluster的过程: 一、下载最新版redis 编译 目前最新版是3.0.7,下载地址:http://www.redis.io/download mkdir 7000 7001 7002 7003 7004 7005 注:与大多数分布式中间件一样,redis的cluster也是依赖选举算法来保证集群的高可用,所以类似ZK一样,一般是奇数个节点( 可以允许N/2以下的节点失效),再考虑到每个节点做Master-Slave互为备份,所以一个redis cluster集群最少也得6个节点。 如上图,redis-cluster把整个集群的存储空间划分为16384个slot(译为:插槽?)

    99550发布于 2018-01-18
  • 来自专栏后端架构师

    Redis 6.X Cluster 集群搭建

    Part1Redis 6.X Cluster 集群搭建 码哥带大家完成在 CentOS 7 中安装 Redis 6.x 教程。在学习 Redis Cluster 集群之前,我们需要先搭建一套集群环境。 机器有限,实现目标是一台机器上搭建 6 个节点,构成一个三主三从集群模式。 1下载解压 可直接到 Redis 官网下载最新稳定包,地址:https://redis.io/download。 分别修改 6 个 redis.conf ## 7000-7005端口 port 7000 ## 后台启动 daemonize yes ## 如果是在单机模拟集群必须指定bind的IP,如果不修改ip的话使用程序连接集群会报错 5查看集群状态 redis-6.0.9/src/redis-cli --cluster check 172.16.90.152:7000 6注意事项 当使用 redis-6.0.9/src/redis-cli prot 不带-c 参数进入的不是集群 搭建集群后,期待下一篇「Redis 高可用篇:Cluster 能支持的数据有多大?」

    2.5K40发布于 2021-04-08
  • 来自专栏菩提树下的杨过

    redis 学习笔记(6)-cluster集群搭建

    上次写redis的学习笔记还是2014年,一转眼已经快2年过去了,在段时间里,redis最大的变化之一就是cluster功能的正式发布,以前要搞redis集群,得借助一致性hash来自己搞sharding 下面是参考官方教程cluster-tutorial 在mac机上搭建cluster的过程: 一、下载最新版redis 编译 目前最新版是3.0.7,下载地址:http://www.redis.io/download mkdir 7000 7001 7002 7003 7004 7005 注:与大多数分布式中间件一样,redis的cluster也是依赖选举算法来保证集群的高可用,所以类似ZK一样,一般是奇数个节点( 可以允许N/2以下的节点失效),再考虑到每个节点做Master-Slave互为备份,所以一个redis cluster集群最少也得6个节点。 如上图,redis-cluster把整个集群的存储空间划分为16384个slot(译为:插槽?)

    1.1K50发布于 2018-01-18
  • 来自专栏后台及大数据开发

    kubernetes集群搭建6):kubernetes基本使用演示

    /jdk /usr/local/jdk 6 COPY . /jdk /usr/local/jdk 6 COPY . ReplicationController/serverrc Containers: server: Container ID: docker://00a7c4c588f2d7593bf0bbe6fd07350903f96e00f6e75278283e054580731a4f 将同一名字的rc作为后端node进行负载 spec: ports: - port: 9001      #service暴露在cluster ip上的端口,clusterIP:port 是提供给集群内部客户访问 nodePort上到来的数据最终经过kube-proxy流入到后端pod的targetPort上进入容器,和rc中的containerPort一致 nodePort: 30001   #提供给集群外部客户访问

    1.4K20发布于 2018-08-02
  • 来自专栏后端架构师

    Redis 6.X Sentinel 哨兵集群搭建

    码哥带大家完成在 CentOS 7 中安装 Redis 6.x 教程。在学习 Redis 之前,我们需要先搭建一套哨兵环境。 机器有限,实现目标是一台机器上搭建 6 个节点,构成一主两从三哨兵集群模式。 下载解压 可直接到 Redis 官网下载最新稳定包,地址:https://redis.io/download。 /redis-6.0.9/src/redis-server redis-6481/redis.conf 检查集群状态 . /redis-6.0.9/src/redis-cli -p 6479 info Replication 配置哨兵集群 将哨兵配置文件分别复制到 sentinel26380 sentinel26381 sentinel26382,需要注意的是每个文件的端口配置以及 sentinel monitor mymaster 172.16.90.152 6479 2 中最后的数字 2,哨兵集群汇总每个节点必须一致

    1.5K30发布于 2021-04-08
  • 来自专栏我的技术专刊

    Redis6.x.x 搭建RedisCluster集群

    2.1 拉取redis 镜像 docker pull redis 3 创建私有网络 3.1 创建私有网络 创建docker容器的私有网络,方便建立集群使用,网段为172.15.0.0网络名字命名为redis_net1 创建集群 任意进入一个容器,我这里进入redis-8000容器来执行命令创建集群 docker exec -it redis-8000 bash 使用redis-cli --cluster create :8002 172.15.0.5:8003 172.15.0.6:8004 172.15.0.7:8005 --cluster-replicas 1 常见问题: 基于自己搭建redis cluster踩过的坑 服集群没有搭建成功,我再次检查了一下,未搭建成功的原因是我的redis-8000容器的配置文件的cluster-config-file node_8000.conf与其他容器中的cluster-config-file node_8000.conf`相同 2、Redis无法使用其他库 Redis Cluster 集群方案只支持一个数据库(db 0) 3、SpringBoot 配置集群无法启动 2021-01-02 21

    1.2K20编辑于 2021-12-15
  • 来自专栏全栈程序员必看

    kafka集群搭建&zookeeper集群搭建

    2.11-2.0.0 .tgz 2.准备至少三台虚拟机 192.168.196.128 192.168.196.131 192.168.196.132 3.Java环境安装 (略…自行百度) 4.搭建 zookeeper集群 在每台主机下执行以下步骤: 移动至/usr/local下: mv zookeeper-3.4.12.tar.gz /usr/local 解压,重命名: tar -zxvf zookeeper zookeeper/bin/zkServer.sh start 全部启动后查看状态: /usr/local/zookeeper/bin/zkServer.sh status 显示如下则zookeeper集群搭建成功 : 5.搭建kafka集群 在每台主机下执行以下步骤: 移动至/usr/local下: mv kafka_2.11-2.0.0 .tgz /usr/local 解压,重命名: tar

    2.6K20编辑于 2022-06-26
  • 来自专栏全栈程序员必看

    rabbitmq集群搭建_集群搭建步骤

    MQ为什么要使用集群? 单机版无法满足真实应用的要求,如果RabbitMQ服务器遇到内存崩溃、机器掉电或者主板故障等情况况,该怎么办? 购买昂贵的服务器来增强单机RabbitMQ务的性能显得不足,此时搭建一个RabbitMQ集群才是解决实际生产中问题的关键。 虚拟机环境:VMware® Workstation 16 Pro 虚拟机版本:16.1.2 build-17966106 虚拟机镜像:CentOS Linux release 7.7.1908 (Core) 搭建步骤 rabbitmqctl stop_app rabbitmqctl reset rabbitmqctl join_cluster rabbit@node2 rabbitmqctl start_app 集群状态

    1.7K10编辑于 2022-09-30
  • 来自专栏全栈程序员必看

    rabbitmq集群搭建_mongodb集群搭建

    ❗️ 注意:环境变量 RABBITMQ_SERVER_ADDITIONAL_ERL_ARGS 和 .erlang.cookie 文件两处都需要修改,否则会使 rabbitmqctl 工具不可用,无法创建集群 使用 rabbitmqctl 手动创建集群 # 进入容器终端 $ docker exec -it rabbit02 bash # 简化写法 $ rabbitmqctl stop_app && rabbitmqctl rabbitmq 可以正确的读取 .eralng.cookie 文件 # uid,gid 分别是rabbitmq 用户id和用户组id,根据mode指定访问文件权限 通过 rabbitmqctl 手动创建集群集群中节点将会同步数据 —> 参考 破坏性测试,关闭其中一个 rabbitmq 节点 # on rabbit2 rabbitmqctl stop_app Exchanges 和 Queues 不会丢失 参考资料 RabbitMQ集群搭建 集群搭建-官方文档 docker部署rabbitmq集群 Docker Swarm 部署 RabbitMQ 集群—【通过配置文件】 版权声明:本文内容由互联网用户自发贡献

    1.9K40编辑于 2022-10-01
  • 来自专栏NetCore 从壹开始

    微系列:6、在Centos系统中,搭建RabbitMQ集群

    network NETWORKING=yes HOSTNAME=node01 重启network systemctl restart network 配置erlang cookie,RabbitMQ 集群是基于 所在文件/var/lib/rabbitmq/.erlang.cookie 四、启动节点 启动rabbitmq-server systemctl start rabbitmq-server 将其他节点加入集群 在02,03节点上执行以下命令 rabbitmqctl stop_app rabbitmqctl join_cluster rabbit@node01 rabbitmqctl start_app 查看集群状态

    63520编辑于 2023-01-09
  • 来自专栏技术杂记

    ZooKeeper 集群6

    可以使用 iptables -L -nv 进行检查,filter 表中包含以下几行的,为已经生效

    41040编辑于 2022-03-25
  • 来自专栏技术杂记

    Consul 集群6

    Consul 提供了一个简单的键值存储机制,可以使用这个特性来存储动态配置,服务协调,主节点选举和其它一些功能

    53010编辑于 2021-12-01
  • 来自专栏技术杂记

    etcd 集群6

    加减节点相关的操作 [root@h104 etcd-v2.2.4-linux-amd64]# ./etcdctl member --help NAME: etcdctl member - member add, remove and list subcommands USAGE: etcdctl member command [command options] [arguments...] COMMANDS: list enumerate existing cluster mem

    25510编辑于 2022-01-19
  • 来自专栏全栈程序员必看

    Linux搭建eureka集群,基于dns搭建eureka集群

    SpringCloud学习之搭建eureka集群,手把手教学,新手教程 一.为什么需要集群 上一篇文章讲解了如何搭建单个节点的eureka,这篇讲解如何搭建eureka集群,这里的集群还是本地不同的端口执行三个 eureka,因为条件不要允许,没有三台电脑,所以大家将就一下 … 基于docker搭建elasticsearch集群 es集群搭建 – 基于单机搭建elasticsearch集群见官网 https: ,使用过大内存redis服务器的性能急剧下降,且服务器发生故障将直接影响大面积业务.为了获取更好的缓存性能及扩展型,我们将需要搭建redis集群来满足需 … SpringCloud搭建Eureka集群 > kubeadm搭建K8s集群及Pod初体验 基于Kubeadm 搭建K8s集群: 通过上一篇博客,我们已经基本了解了 k8s 的基本概念,也许你现在还是有些模糊,说真的我也是很模糊的.只有不断地操作去熟练 我 … docker 搭建zookeeper集群和kafka集群 docker 搭建zookeeper集群 安装docker-compose容器编排工具 Compose介绍 Docker Compose

    4.7K10编辑于 2022-08-18
  • 来自专栏晓晨的专栏

    Jenkins 集群搭建

    一.前言 Jenkins是当下比较流行的一款功能强大的持续集成工具,它支持搭建集群,来提高多项目的构建速度,模式为主从模式,master会将任务分配到各个从节点进行并发构建,从而提高速度,下面介绍一下如何搭建 Jenkins集群

    2.5K50发布于 2018-07-12
  • 来自专栏从零开始的linux

    搭建Hadoop集群

    环境说明 redhat6.7 hadoop2.7 角色 主机名 IP master node01 192.168.6.71slave node02 192.168.6.72Slave node03 192.168.6.73 配置 vim /etc/hosts 192.168.6.71 node01

    2.5K60发布于 2018-04-25
  • 来自专栏python3

    kafka集群搭建

    数量越多,集群吞吐率越高), 若干Consumer Group,以及一个Zookeeper 集群。 看上面一张图,要想做kafka集群,有几个关键点 1. 三、正式搭建 环境介绍 操作系统 docker镜像 docker ip 部署软件以及版本 ubuntu-16.04.5-server-amd64 ubuntu:16.04 172.168.0.2 zookeeper 关于zookeeper集群搭建,请参考链接: https://www.cnblogs.com/xiao987334176/p/10103619.html 本文使用5个kafka节点,构造kafka集群 查看集群状态 先来查看一下docker进程 ?

    1.4K10发布于 2020-02-21
  • 来自专栏性能与架构

    Hadoop 集群搭建

    目标 在3台服务器上搭建 Hadoop2.7.3 集群,然后测试验证,要能够向 HDFS 上传文件,并成功运行 mapreduce 示例程序 搭建思路 (1)准备基础设施 准备3台服务器,分别命名为 配置完成后,把 master 上的 hadoop 目录复制到 slave1 slave2 (3)启动 hadoop 在 master 中进行 hdfs 初始化,执行启动命令,打开相应网页查看状态信息 搭建过程 可以正常访问的话,可以说明集群启动成功了,但不一定可以正常运行,还需要下面的实际验证 测试验证 (1)hdfs 操作 创建目录 $ hdfs dfs -mkdir -p /user/hadoop 注:在执行过程中,如果长时间处于 running 状态不动,虽然没有报错,但实际上是出错了,后台在不断重试,需要到 logs 目录下查看日志文件中的错误信息 环境搭建完成,内容较长,感谢阅读,希望对想要搭建

    5.5K91发布于 2018-04-04
  • 来自专栏三丰SanFeng

    zookeeper集群搭建

    最近公司用到了zookeeper做集群管理,这里按步骤记录一下其中的一些经验,也给后来的同学一些参考。由于这里只有一台服务器,因此搭建的其实是伪集群,多台服务器的搭建流程类似。 集群搭建环境: 发行版:CentOS-6.6 64bit 内核:2.6.32-504.el6.x86_64 CPU:intel-i7 3.6G 内存:2G 集群搭建步骤: 1.    └── logs ├── zookeeper-server2 │   ├── data │   └── logs └── zookeeper-server3 ├── data └── logs 6. 说明进程启动失败或集群未建立成功,这时需要查看对应目录中的zookeeper.out日志去找到相应的原因并去解决它。 8. 可以看到这里已经连接成功了,而且能查看节点情况,说明zookeeper集群已经开始工作了。 版权声明:本文为博主原创文章,未经博主允许不得转载。

    1.2K70发布于 2018-01-16
领券