0℃
2023年08月18日
⁄ Docker
⁄ 被围观 2,951次+
什么是ELK:
ELK主要由ElasticSearch、Logstash和Kibana三个开源工具组成,还有其它轻量型数据采集器,如filebeat等组成的日志收集分析系统。
Elasticsearch :分布式搜索引擎,具有高可伸缩、高可靠、易管理等特点,可以用于全文检索、结构化检索和分析,并能将这三者结合起来,Elasticsearch 是用Java 基于 Lucene 开发,现在使用最广的开源搜索引擎之一。
Logstash :数据收集处理引擎,支持动态的从各种数据源搜集数据,并对数据进行过滤、分析、丰富、统一格式等操作,然后存储以供后续使用。
Kibana :可视...
docker, elk阅读全文
0℃
2023年07月24日
⁄ Docker
⁄ 被围观 2,068次+
准备工作
在安装Docker之前,确保已经关闭SELINUX、关闭或卸载firewall、创建了Docker用户组,并且安装了iptables防火墙,系统内核版本为Linux 3.10及其以上版本。
1、关闭selinux
#执行以下命令
setenforce 0
sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config
2、关闭firewall
systemctl stop firewalld.service #停止firewall
systemctl disable firewalld.service #禁止firewall开机启动
systemctl mask firewalld
systemctl stop firewalld
yum -y remove firewalld
3、添加docker用户组
group...
docker, linux阅读全文
0℃
2023年06月16日
⁄ Keepalived
⁄ 被围观 2,702次+
服务器:CentOS-7.x
ip:192.168.21.100、192.168.21.101、192.168.21.128
vip(虚拟ip):192.168.21.102
实现目的:
1、三台服务器运行正常的情况下,vip(虚拟ip):192.168.21.102绑定在192.168.21.100上
2、192.168.21.100宕机,vip(虚拟ip):192.168.21.102随机飘逸到192.168.21.101或者192.168.21.128其中的一台上面
3、192.168.21.100、192.168.21.101宕机,vip(虚拟ip):192.168.21.102会飘逸到192.168.21.128上面
4、192.168.21.100、192.168.21.128宕机,vip(虚拟ip):192.168.21.102会飘逸到19...
Keepalived阅读全文
0℃
2023年06月15日
⁄ cassandra
⁄ 被围观 2,470次+
Cassandra简介:Cassandra是一套开源分布式NoSQL数据库系统
Cassandra官方网站:http://cassandra.apache.org/
下载地址:
https://www.apache.org/dyn/closer.lua/cassandra/4.1.2/apache-cassandra-4.1.2-bin.tar.gz
https://dlcdn.apache.org/cassandra/4.1.2/apache-cassandra-4.1.2-bin.tar.gz
操作系统:3台服务器,CentOS-7.x系统
在所有节点服务器上操作
1、防火墙配置
7000:节点之间的通信端口,用于集群内部节点之间的数据传输和复制。
7001:节点之间的加密通信端口,如果启用了 SSL/TLS 加密通信,...
cassandra阅读全文
0℃
2023年06月13日
⁄ cassandra
⁄ 被围观 1,843次+
Cassandra简介:Cassandra是一套开源分布式NoSQL数据库系统。
Cassandra官方网站:http://cassandra.apache.org/
下载地址:
https://www.apache.org/dyn/closer.lua/cassandra/4.1.2/apache-cassandra-4.1.2-bin.tar.gz
https://dlcdn.apache.org/cassandra/4.1.2/apache-cassandra-4.1.2-bin.tar.gz
1、防火墙配置
开启tcp9042端口,Cassandra的默认端口
CentOS 7.x默认使用的是firewall作为防火墙,这里改为iptables防火墙。
1.1、关闭firewall:
systemctl stop firewalld.service #停止firewall
systemctl d...
cassandra阅读全文
0℃
2023年06月06日
⁄ MinIO
⁄ 被围观 3,262次+
MinIO简单说明:
1、MinIO是一个轻量的对象存储服务,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等。
2、MinIO使用简单,功能强大,支持各种平台,单个文件最大5TB,兼容 Amazon S3接口,提供了 Java、Python、GO等多版本SDK支持。
3、MinIO集群采用去中心化共享架构,每个结点是对等关系,通过Nginx可对MinIO进行负载均衡访问。
4、MinIO采用去中心化设计,在大数据领域,通常的设计理念都是无中心和分布式。
5、Minio分布式模式可以搭建一个高可用的对象存储服...
MinIO阅读全文
0℃
2023年06月01日
⁄ MinIO
⁄ 被围观 3,004次+
MinIO简单说明:
1、MinIO是一个轻量的对象存储服务,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等。
2、MinIO使用简单,功能强大,支持各种平台,单个文件最大5TB,兼容 Amazon S3接口,提供了 Java、Python、GO等多版本SDK支持。
3、MinIO集群采用去中心化共享架构,每个结点是对等关系,通过Nginx可对MinIO进行负载均衡访问。
4、MinIO采用去中心化设计,在大数据领域,通常的设计理念都是无中心和分布式。
5、Minio分布式模式可以搭建一个高可用的对象存储服...
阅读全文
0℃
2023年05月06日
⁄ clickhouse
⁄ 被围观 4,069次+
ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。
官方网站:https://clickhouse.com/
官方文档:https://clickhouse.com/docs/zh
下载地址:https://packages.clickhouse.com/rpm/stable/ #稳定版本
或者:https://packages.clickhouse.com/rpm/lts/ #长期支持版
准备篇
操作系统:CentOS-7.x
3台服务器:192.168.21.100,192.168.21.101,192.168.21.128
1、关闭selinux
sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config
setenforce 0
2、关闭防火墙
ClickHouse提供两个网络端口: ...
clickhouse阅读全文
0℃
2023年05月02日
⁄ clickhouse
⁄ 被围观 2,125次+
ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。
官方网站:https://clickhouse.com/
官方文档:https://clickhouse.com/docs/zh
下载地址:https://packages.clickhouse.com/rpm/stable/ #稳定版本
或者:https://packages.clickhouse.com/rpm/lts/ #长期支持版
1、关闭selinux
sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config
setenforce 0
2、关闭防火墙
ClickHouse提供两个网络端口: TCP 默认9000,HTTP 默认8123,建议在内网环境下部署ClickHouse,关闭服务器防火墙。
Cent...
clickhouse阅读全文
0℃
2023年05月01日
⁄ kafka
⁄ 被围观 2,275次+
Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。
操作系统:CentOS-7.x
kafka版本:kafka_2.12-3.4.0
三台服务器ip地址:
192.168.21.100,192.168.21.101,192.168.21.128
1、关闭selinux
sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config
setenforce 0
2、关闭防火墙
kafka默认使用tcp9092端口号,建议在内网环境下部署kafka集群,关闭服务器防火墙。
CentOS-7.x默认使用的是firewall作为防火墙,关闭
systemctl stop firewalld.service #停止firewall
systemctl disab...
kafka阅读全文
0℃
2023年04月30日
⁄ zookeeper
⁄ 被围观 2,147次+
1、ZooKeeper介绍
1.1、ZooKeeper 在 Java 版本 1.8 或更高版本中运行(JDK 8 LTS、JDK 11 LTS、JDK 12 - 不支持 Java 9 和 10),它作为 ZooKeeper 服务器的集合运行,三个 ZooKeeper 服务器是一个整体的最小推荐大小,我们还建议它们在不同的机器上运行。
1.2、ZooKeeper 集群强烈建议使用奇数台机器,例如,在四台机器上,ZooKeeper 只能处理一台机器的故障;如果两台机器发生故障,则其余两台机器不构成多数。但是,如果有五台机器,ZooKeeper 可以处理两台机器的故障。容错集群设置至少需要三台服务器。
1.3...
zookeeper阅读全文
0℃
2023年03月28日
⁄ kafka
⁄ 被围观 3,074次+
Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。
操作系统:CentOS-7.x
kafka版本:kafka_2.12-3.4.0
1、关闭selinux
sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config
setenforce 0
2、防火墙设置
CentOS-7.x默认使用的是firewall作为防火墙,这里改为iptables防火墙。
kafka默认使用tcp9092端口号
2.1、关闭firewall:
systemctl stop firewalld.service #停止firewall
systemctl disable firewalld.service #禁止firewall开机启动
systemctl mask firewalld
systemctl...
kafka, linux阅读全文
0℃
2023年02月24日
⁄ KVM
⁄ 被围观 3,910次+
KVM虚拟机简介:
Kernel-based Virtual Machine的简称,是一个开源的系统虚拟化模块,目前集成在Linux的各个主要发行版本中。
KVM的虚拟化需要硬件支持(如Intel VT技术或者AMD V技术),是基于硬件的完全虚拟化。
Xen是基于硬件支持的完全虚拟化,但Xen本身有自己的进程调度器,存储管理模块等,所以代码较为庞大。
广为流传的商业系统虚拟化软件VMware ESX系列是基于软件模拟的Full-Virtualization。
1、检查cpu是否支持虚拟化
1.1如果是在VMware虚拟机中安装,检查Intel VT设置
在VMware设置中将作为宿主机的Ce...
kvm, linux阅读全文
0℃
2022年06月30日
⁄ 主从架构
⁄ 被围观 2,280次+
说明:
操作系统:CentOS 7.x 64位
MySQL数据库版本:mysql-5.7.38-linux-glibc2.12-x86_64.tar.gz
MySQL主服务器:192.168.21.128
MySQL从服务器:192.168.21.129
准备篇:
说明:在两台MySQL服务器192.168.21.128和192.168.21.129上分别进行如下操作
一、防火墙配置
CentOS 7.x 默认使用的是firewall作为防火墙,这里改为iptables防火墙。
1、关闭firewall:
systemctl stop firewalld.service #停止firewall
systemctl disable firewalld.service #禁止firewall开机启动
systemctl mask firewalld
systemctl s...
mysql, 主从同步, 数据库阅读全文
0℃
2022年06月21日
⁄ Proxmox
⁄ 被围观 9,082次+
Proxmox全称Proxmox Virtual Environment,简称PVE,是基于Debian的开源虚拟机平台,比ESXi轻量、功能丰富、对硬件要求低,几乎可以在所有x86硬件上运行。
Proxmox官方网站:https://www.proxmox.com/
下载地址:https://www.proxmox.com/en/downloads/category/iso-images-pve
目前最新版本是:Proxmox VE 7.2
下载系统镜像,使用rufus制作U盘系统盘,注意镜像写入方式选择以DD镜像模式写入。
一、安装Proxmox
使用系统镜像引导系统,进入下面的界面。
Install Proxmox VE #安装
如果是Vm虚拟机安装需要打开...
Proxmox, 虚拟机阅读全文
0℃
2022年03月28日
⁄ Kubernetes
⁄ 被围观 7,834次+
Etcd是一个分布式键值存储系统,Kubernetes使用Etcd进行数据存储,所以要先准备一个Etcd数据库,为解决Etcd单点故障,应采用集群方式部署,这里使用3台组建集群,可容忍1台机器故障。由于Etcd集群需要选举产生 leader,所以集群节点数目需要为奇数来保证正常进行选举。
说明:
使用5台组建集群,可容忍2台机器故障
使用7台组建集群,可容忍3台机器故障,
使用9台组建集群,可容忍4台机器故障
etcd集群也可以与k8s节点机器复用,只要apiserver能连接到就行。
这里使用三台服务器单独部署etcd集群
先在一台k8s-etcd...
docker, k8s, kubernetes阅读全文
0℃
2022年02月03日
⁄ Kubernetes
⁄ 被围观 5,063次+
cfssl是一个开源的证书管理工具,使用json文件生成证书,相比openssl更方便使用。
在需要生成证书的服务器上安装即可,这里安装在k8s-etcd1和k8s-master1节点上。
cd /usr/local/src
wget https://github.com/cloudflare/cfssl/releases/download/v1.6.1/cfssl_1.6.1_linux_amd64
wget https://github.com/cloudflare/cfssl/releases/download/v1.6.1/cfssljson_1.6.1_linux_amd64
wget https://github.com/cloudflare/cfssl/releases/download/v1.6.1/cfssl-certinfo_1.6.1_linux_amd64
#拷贝文件到/usr/local/b...
docker, k8s, kubernetes阅读全文