首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏后台及大数据开发

    kubernetes集群搭建9):docker 镜像的导入与导出

    由于K8s搭建时官方提供的镜像不FQ是访问不了的,所以搭建过程中很多时间都耗费在去找镜像去了 下面是我搭建k8s集群用到的镜像  没有采用之前我用的二进制文件搭建(dns没成功),这里采用的Kubeadm

    3.4K10发布于 2018-08-02
  • 来自专栏技术杂记

    etcd 集群9

    使用环境变量运行新节点,将节点加入集群 [root@h102 etcd-v2.2.4-linux-amd64]# ETCD_NAME="new-h102" ETCD_INITIAL_CLUSTER=" =http://192.168.100.102:2379 [root@h102 etcd-v2.2.4-linux-amd64]# Note: 如果要添加多个节点,建议一次只添加一个,然后检查节点和集群运行状态正常后再依次逐个添加其它节点

    43210编辑于 2022-01-19
  • 来自专栏全栈程序员必看

    kafka集群搭建&zookeeper集群搭建

    2.11-2.0.0 .tgz 2.准备至少三台虚拟机 192.168.196.128 192.168.196.131 192.168.196.132 3.Java环境安装 (略…自行百度) 4.搭建 zookeeper集群 在每台主机下执行以下步骤: 移动至/usr/local下: mv zookeeper-3.4.12.tar.gz /usr/local 解压,重命名: tar -zxvf zookeeper zookeeper/bin/zkServer.sh start 全部启动后查看状态: /usr/local/zookeeper/bin/zkServer.sh status 显示如下则zookeeper集群搭建成功 : 5.搭建kafka集群 在每台主机下执行以下步骤: 移动至/usr/local下: mv kafka_2.11-2.0.0 .tgz /usr/local 解压,重命名: tar

    2.6K20编辑于 2022-06-26
  • 来自专栏全栈程序员必看

    rabbitmq集群搭建_集群搭建步骤

    MQ为什么要使用集群? 单机版无法满足真实应用的要求,如果RabbitMQ服务器遇到内存崩溃、机器掉电或者主板故障等情况况,该怎么办? 购买昂贵的服务器来增强单机RabbitMQ务的性能显得不足,此时搭建一个RabbitMQ集群才是解决实际生产中问题的关键。 虚拟机环境:VMware® Workstation 16 Pro 虚拟机版本:16.1.2 build-17966106 虚拟机镜像:CentOS Linux release 7.7.1908 (Core) 搭建步骤 rabbitmqctl stop_app rabbitmqctl reset rabbitmqctl join_cluster rabbit@node2 rabbitmqctl start_app 集群状态

    1.7K10编辑于 2022-09-30
  • 来自专栏全栈程序员必看

    rabbitmq集群搭建_mongodb集群搭建

    ❗️ 注意:环境变量 RABBITMQ_SERVER_ADDITIONAL_ERL_ARGS 和 .erlang.cookie 文件两处都需要修改,否则会使 rabbitmqctl 工具不可用,无法创建集群 使用 rabbitmqctl 手动创建集群 # 进入容器终端 $ docker exec -it rabbit02 bash # 简化写法 $ rabbitmqctl stop_app && rabbitmqctl rabbitmq 可以正确的读取 .eralng.cookie 文件 # uid,gid 分别是rabbitmq 用户id和用户组id,根据mode指定访问文件权限 通过 rabbitmqctl 手动创建集群集群中节点将会同步数据 —> 参考 破坏性测试,关闭其中一个 rabbitmq 节点 # on rabbit2 rabbitmqctl stop_app Exchanges 和 Queues 不会丢失 参考资料 RabbitMQ集群搭建 集群搭建-官方文档 docker部署rabbitmq集群 Docker Swarm 部署 RabbitMQ 集群—【通过配置文件】 版权声明:本文内容由互联网用户自发贡献

    1.9K40编辑于 2022-10-01
  • 来自专栏技术杂记

    ELK 搭建9

    效果还是很明显的,有了格式化的输出 Tip: A Logstash pipeline has two required elements, input and output , and one optional element, filter . The input plugins consume data from a source, the filter plugins modify the data as you specify, and the output plugins write the

    27710编辑于 2022-02-11
  • 来自专栏全栈程序员必看

    Linux搭建eureka集群,基于dns搭建eureka集群

    一、搭建DNS服务器(unbutun环境) 1.ubuntu需安装bind9软件包来配置dns-server apt-get install bind9 2.配置dns 2.1添加zone vim /etc SpringCloud学习之搭建eureka集群,手把手教学,新手教程 一.为什么需要集群 上一篇文章讲解了如何搭建单个节点的eureka,这篇讲解如何搭建eureka集群,这里的集群还是本地不同的端口执行三个 eureka,因为条件不要允许,没有三台电脑,所以大家将就一下 … 基于docker搭建elasticsearch集群 es集群搭建 – 基于单机搭建elasticsearch集群见官网 https: ,使用过大内存redis服务器的性能急剧下降,且服务器发生故障将直接影响大面积业务.为了获取更好的缓存性能及扩展型,我们将需要搭建redis集群来满足需 … SpringCloud搭建Eureka集群 我 … docker 搭建zookeeper集群和kafka集群 docker 搭建zookeeper集群 安装docker-compose容器编排工具 Compose介绍 Docker Compose

    4.7K10编辑于 2022-08-18
  • 来自专栏程序员同行者

    redis集群搭建

    2、redis版本 :最新稳定版3.0.6 3、安装配置 安装目录:/usr/local/src/redis-3.0.6/src/ 配置文件:/et/redis_630{0,1}.conf 二、搭建 root@wh-52 src]# cd redis-3.0.6 [root@wh-52redis-3.0.6]# make [root@wh-52redis-3.0.6]# make test 2、集群创建准备 3、创建集群 #选举规则 节点角色由启动顺序决定,先master之后是slave,本文中6300是master,6301是slave 初始化集群 [root@wh-53 etc]# /usr/local 192.168.1.59:6300 192.168.1.87:6300 192.168.1.55:6301 192.168.1.59:6301 192.168.1.87:6301 查看集群状态 后期继续集群理论的学习。 不要让懒惰占据你的大脑,不让要妥协拖跨你的人生。青春就是一张票,能不能赶上时代的快车,你的步伐掌握在你的脚下,good luck

    1.4K40发布于 2018-07-24
  • 来自专栏python3

    kafka集群搭建

    数量越多,集群吞吐率越高), 若干Consumer Group,以及一个Zookeeper 集群。 看上面一张图,要想做kafka集群,有几个关键点 1. 三、正式搭建 环境介绍 操作系统 docker镜像 docker ip 部署软件以及版本 ubuntu-16.04.5-server-amd64 ubuntu:16.04 172.168.0.2 zookeeper 关于zookeeper集群搭建,请参考链接: https://www.cnblogs.com/xiao987334176/p/10103619.html 本文使用5个kafka节点,构造kafka集群            21 hours ago        Up 21 hours         0.0.0.0:2183->2181/tcp   gallant_golick 3b4861d2fef9        

    1.4K10发布于 2020-02-21
  • 来自专栏Java工程师成长之路

    ElasticSearch集群搭建

    需求 用docker搭建一个ElasticSearch一主一从的集群,加一个elasticsearch-head查看集群状态 步骤 在参考了一堆博客后,我写了个固定容器ip的docker-compose.yml

    95720发布于 2019-09-10
  • 来自专栏Bigdata

    HBase集群搭建

    6、HBase的集群环境搭建 注意事项:HBase强依赖zookeeper和hadoop,安装HBase之前一定要保证zookeeper和hadoop启动成功,且服务正常运行 第一步:下载对应的HBase export HBASE_HOME=/export/servers/hbase-1.2.0-cdh5.14.0 export PATH=:$HBASE_HOME/bin:$PATH 第七步:HBase集群启动

    1.4K00发布于 2020-12-22
  • 来自专栏JAVA同学会

    kafka集群搭建

    一、zookeeper集群搭建   略,请参考其他文档,这里不再赘述。 二、下载kafka   从kafka官网下载kafka_2.11-0.11.0.0.tgz,并解压。 tar -zxvf kafka_2.11-0.11.0.0 三、kafka配置修改   这里我们仅以两台kafka实例做集群。    zookeeper.connect :将zookeeper集群的地址和端口写上。   num.partitions=1 :每个topic的partition默认数量。   将两台机器的kafka启动,集群搭建完毕。    集群搭建就是这么简单。

    93420发布于 2019-02-25
  • 来自专栏开源部署

    Minio 集群搭建

    https://docs.minio.io/docs/distributed-minio-quickstart-guide https://github.com/minio/minio-service

    1.5K20编辑于 2022-07-31
  • 来自专栏DevOps

    spark 集群搭建

    集群规划 node01为master节点,node02,node03为worker节点 192.168.24.102 node01 192.168.24.103 node02 集群配置 以下操作以node01为操作节点 1. 浏览 http://node01:8080/ 9. 搭建Spark HA 1. 修改配置文件 以node02 作为备用主节点,则修改node02的 vi spark-env.sh SPARK_MASTER_IP = node02 集群启动 HADOOP_HOME,那么在HADOOP_HOME/sbin目录下也有start-all.sh和stop-all.sh这两个文件,当你执行这两个文件,系统不知道是操作hadoop集群还是spark集群

    80510编辑于 2024-03-29
  • 来自专栏从零开始的linux

    搭建Hadoop集群

    环境说明 redhat6.7 hadoop2.7 角色 主机名 IP master node01 192.168.6.71slave node02 192.168.6.72Slave node03 192.168.6.73 配置 vim /etc/hosts 192.168.6.71 node01

    2.5K60发布于 2018-04-25
  • 来自专栏兮动人的博客

    Hadoop 集群搭建

    Hadoop 集群简介 Hadoop集群包括两个集群:HDFS集群、YARN集群 两个集群逻辑上分离、通常物理上在一起 两个集群都是标准的主从架构集群 ? ? 逻辑上分离 两个集群互相之间没有依赖、互不影响 物理上在一起 某些角色进程往往部署在同一台物理服务器上 MapReduce集群呢? MapReduce是计算框架、代码层面的组件没有集群之说 ? 2. Hadoop 部暑模式 ? 3. Hadoop 集群安装 step1:集群角色规划 角色规划的准则 根据软件工作特性和服务器硬件资源情况合理分配 比如依赖内存工作的NameNode是不是部署在大内存机器上? -- yarn集群主角色RM运行机器。

    2K20发布于 2021-06-11
  • 来自专栏算法之名

    elasticsearch集群搭建

    elasticsearch.yml,node.name与network.host需要每台机不同. cluster.name: aubin-cluster # 集群名称 # 当前节点的IP地址 http.port: 9200 # 对外提供服务的端口,9300为集群服务的端口

    74220发布于 2019-08-20
  • 来自专栏三丰SanFeng

    zookeeper集群搭建

    最近公司用到了zookeeper做集群管理,这里按步骤记录一下其中的一些经验,也给后来的同学一些参考。由于这里只有一台服务器,因此搭建的其实是伪集群,多台服务器的搭建流程类似。 集群搭建环境: 发行版:CentOS-6.6 64bit 内核:2.6.32-504.el6.x86_64 CPU:intel-i7 3.6G 内存:2G 集群搭建步骤: 1. 说明进程启动失败或集群未建立成功,这时需要查看对应目录中的zookeeper.out日志去找到相应的原因并去解决它。 8. 测试连接zookeeper集群 [root@rocket local]# cd zookeeper-server1;bin/zkCli.sh -server localhost:2181 ? 可以看到这里已经连接成功了,而且能查看节点情况,说明zookeeper集群已经开始工作了。 版权声明:本文为博主原创文章,未经博主允许不得转载。

    1.2K70发布于 2018-01-16
  • 来自专栏学习内容

    Hadoop集群搭建

    一、运行环境配置(所有节点) 所有集群服务,都需要配置 1、基础配置 关闭防火墙,关闭防火墙开机自启 systemctl stop firewalld systemctl disable firewalld 如果集群是第一次启动,需要在hadoop001节点格式化NameNode。 (注意:格式化NameNode,会产生新的集群id,导致NameNode和DataNode的集群id不一致,集群找不到已往数据。 如果集群在运行过程中报错,需要重新格式化NameNode的话,一定要先停止namenode和datanode进程,并且要删除所有机器的data和logs目录,然后再进行格式化。) /home/lydms/bin/myhadoop.sh stop /home/lydms/bin/myhadoop.sh start 9、其它 9.1 常用端口号 端口名称 Hadoop2.x Hadoop3

    1.7K20编辑于 2023-08-10
  • 来自专栏浅枫沐雪

    搭建zookeeper集群

    7 2019 build.xml drwxr-xr-x 2 2002 2002 77 3月 7 2019 conf drwxr-xr-x 2 root root 6 9月 7 2019 lib -rw-rw-r-- 1 2002 2002 11970 3月 7 2019 LICENSE.txt drwxr-xr-x 2 root root 6 9

    79371发布于 2020-03-10
领券