ccpc
通信协议
计算机网络
ssh
CMake
flask
rviz
Tableau 技巧
QTextToSpeech
就业管理系统
斐波那契
离线仿真项目
微机原理
AI二次开发
自动批量下载图片的插件
pyqt
Java中的File类
wireshark
快捷键替换
PIC
高可用
2024/4/12 3:25:56
高可用篇_A Docker容器化技术_IV Dockerfile的基本概念和应用
原创作者：田超凡（程序员田宝宝）
版权所有，引用请注明原作者，严禁复制转载 DockerFile 解析
一个镜像文件到底是如何创建？
dockerfile 描述出镜像文件需要的一些依赖配置和环境变量 执行命令将我们docker…
高可用篇_A Docker容器化技术_V 基于DockerCompose实现容器编排
原创作者：田超凡（程序员田宝宝）
版权所有，引用请注明原作者，严禁复制转载 Docker Compose
Sit pre prd环境
为什么需要使用Docker Compose
Docker Compose 容器编排技术 容器编排技术
1.现在我们有一个springbo…
【23.12.30高可用篇】什么是SLA？
什么是SLA？ ✔️简述✔️拓展知识✔️4个9、5个9 ✔️简述 SLA是Service Level Agreement的缩写，意为服务等级协议。它是指供应商和客户之间达成的一份正式协议，规定了供应商应该向客户提供的服务水平、质量、可靠性和响应时间等指标。 SLA通…
IT老齐架构300讲笔记(028) 白话Redis Cluster集群模式
目录
Redis Cluster集群模式
Redis Cluster 集群 与 Redis Sentinel 有什么不同？
Redis Cluster 集群如何将数据分散存储 为什么是16384
Redis Cluster 集群构建流程
1.配置redis-cluster.conf
2.创建集群
3.查看集群
4.插入数据
5.Master故障情况
6.原M…
Keepalived + Nginx 实现-主备切换高可用
0.准备工作 Nginx反向代理 Centos7-安装keepalived
1.架构图 3.keepalived的作用
1) 生成一个VIP------虚拟IP地址2) 心跳检测
4.keepalived主节点的配置
[rootbase-linux system]# cd /etc/keepalived/
[rootbase-linux keepalived]# ls[rootbase-linux keepalived…
高并发系统设计学习笔记(八) 写入数据量增加如何实现分库分表
目录
一、可能遇到的问题
二、如何对数据库做垂直拆分
三、如何对数据库做水平拆分
1.按照某一个字段的哈希值做拆分
2.按照某一个字段的区间来拆分 四、课程小结 一、可能遇到的问题 1.系统正在持续不断地发展，注册的用户越来越多，产生的订单越来越…
代码干货 |【MHA】--命令系列介绍--[masterha_manager]
本文来源于阿里云-云栖社区，原文点击这里。 masterha_manager: 启动 mha master manager 控制的脚本开关
eg: masterha_manager --conf/home/server/mha/cnf/mysql_node_account_3306.cnf常用参数如下: --conf(config file path) 应用或本地范围的配置参数文件&…
【ElasticSearch系列-06】Es集群架构的搭建以及集群的核心概念
ElasticSearch系列整体栏目 内容链接地址【一】ElasticSearch下载和安装https://zhenghuisheng.blog.csdn.net/article/details/129260827【二】ElasticSearch概念和基本操作https://blog.csdn.net/zhenghuishengq/article/details/134121631【三】ElasticSearch的高级查询Quer…
架构设计系列5：如何设计高可用架构
#1024程序员节｜参与投稿，赢限定勋章和专属大奖#
当今的数字时代，高可用架构已经成为了现代应用和服务的基石。无论是企业级应用、云计算平台还是互联网服务，高可用性都是确保系统在面临各种挑战时保持稳定运行的关键要素。
本文…
典型的高可用设计（二）：MySQL
一、高可用模式 MySQL数据库提供了数据库建的复制能力，做到了多个数据库同时拥有同一个数据副本，保证了数据的安全性，一台数据库服务器出现问题，其他数据库可以做到数据不丢失。MySQL的服务高可用设计也是以数据库复制能力为基础&…
MHA manager与node命令交互
MHA manager与node命令交互
manager上执行masterha_manager
sudo masterha_manager --conf/u01/zjk/mha4mysql-manager-master/workdir/conf/app1.cnf --skip_check_ssh
打印日志
Wed Aug 22 20:20:36 2018 - [info] MHA::MasterMonitor version 0.57.
Wed Aug 22 20:20:36…
GoldenGate(OGG)高可用XAG介绍
XAG介绍:
Oracle Grid Infrastructure提供了高可用组件去管理实现集群上面服务的高可用，Oracle Grid Infrastructure agent（XAG）是Oracle Grid Infrastructure的一个管理组件，通过接口AGCTL在Oracle RAC集群上为应用程序(GoldenG…
Mysql Cluster 7.6.10 ： Mysql高可用搭建
Mysql Cluster 7.6.10集群准备工作Web Auto Install安装方式***要将所有可执行文件开放权限：***手工搭建集群mgm节点配置配置NDB节点配置SQL节点测试集群关闭准备工作
四台主机 MysqlCluster7.6.10安装包一份（如果是混合环境要准备多份） 解压…
redis实现HA（High Available）的两种实现方式-Sentinel与Keepalived
Sentinel
先来说说Sentinel，Sentinel是redis自带的一种实现HA的方式，如果在实际应用中这种方式用的比较少，比较流行的还是KeepAlived。 Redis 的 Sentinel 系统用于管理多个 Redis 服务器（instance）， 该系…
技术文章 | 如何避免数据库“勒索事件”和“从删库到跑路”的尴尬
本文来源于阿里云-云栖社区，原文点击这里。 近年来，数据库安全问题逐渐引起大家的关注和重视，本次分享的主题就是如何去应对数据库安全所面对的问题。本次的分享主要将围绕以下三个方面： 2017数据库安全事件及反思如何让你的数据库…
【运维知识进阶篇】集群架构-Nginx高可用Keepalived
高可用是指2台机器启动着完全相同的业务系统，一台机器宕机后，另一台可以快速启用，用户是无感知的。高可用硬件通常使用F5，软件通常使用keepalived。keepalived软件是基于VRRP协议实现的，VRRP虚拟路由冗余协议ÿ…
MHA（Master High Availability）高可用工具补数据功能
目录 背景MHA补数据功能关于补数据的补充说明参考 背景
在介绍 MHA 补数据功能之前先介绍一些关于MHA的基础知识。
MHA（Master High Availability）是一个用于实现MySQL数据库高可用（High Availability）的工具集。
它可以在主从…
【Redis】高可用之复制（replica）
本文是Redis系列第4篇，前3篇欢迎移步
【Redis】不卡壳的 Redis 学习之路：从十大数据类型开始入手_AQin1012的博客-CSDN博客关于Redis的数据类型，各个文章总有些小不同，我们这里讨论的是Redis 7.0，为确保准确ÿ…
服务器单机大规模数据存储方案
大规模数据存储都需要解决三个核心问题： 1.数据存储容量的问题，既然大数据要解决的是数据 PB 计的数据计算问题，而一般的服务器磁盘容量通常 1～2TB，那么如何存储这么大规模的数据呢？ 2.数据读写速度的问题&…
MySQL 高可用方案
MySQL 高可用方案
0.介绍
Keepalivedmysql双主来实现MySQL-HA，我们必须保证两台MySQL数据库的数据完全一样，基本思路是两台MySQL互为主从关系，通过Keepalived配置虚拟IP，实现当其中的一台MySQL数据库宕机后，应用能够…
微服务实战项目_天机学堂01_初识项目
文章目录 一.项目简述二.Jenkins三.模拟真实业务:紧急bug修复和代码阅读 一.项目简述
Q:天机学堂是什么?
A:天机学堂是一个基于微服务架构的生产级在线教育项目
主要有两个端(项目已上线,可以点击查看): 管理后台: https://tjxt-admin.itheima.net 其核心业务主体包括老师、…
Springcloud学习（三）euraka注册中心高可用
euraka注册中心高可用
注册中心作为整个程序的核心，万一注册中心挂掉的话，整个系统就会瘫痪，因此注册中心高可用必然是一种趋势。基于版本1 https://blog.csdn.net/cccfire/article/details/99453834 继续学习 源码地址https://github.com/…
【知识整理】一文理解系统服务高可用
一、如何理解高可用 1、什么是高可用
高可用性（英语： High Availability，缩写为 HA），指系统无中断地执行其功能的能力，代表系统的可用性程度，是进行系统设计时的准则之一。
2、决定可用性的两…
一步一步搭建 keepalive + nginx 实现高可用
一步一步搭建 keepalive + nginx 实现高可用。
一 keeplived简介
Keepalived是用纯ANSI/ISO C编写的。该软件围绕一个中央I/O多路复用器进行连接，以提供实时网络设计。 1.1 Keepalived进程被分为3个不同进程
A.一个极简的父进程，负责fork和监控子进程，父进程监控框架称为…
Redis哨兵部署（Windows）
本文介绍Redis在windows上的高可用配置——哨兵部署。
一、先简单介绍一下哨兵高可用原理
（了解的可以直接跳过） 1 主从redis服务器。为了预防主实例master挂掉，额外增加两个slave实例，时刻与master信息同步以备用。 2 哨兵智能…
分布式系统容灾部署方案
本文主要以OceanBase部署来说明分布式系统容灾部署方案 分布式系统提供持续可用的服务尤为重要。
好的分布式系统根据需求提供不同等级的的高可用与容灾级别。
而在分布式系统中，数据库系统又是最核心最关键的系统。
我们以数据库分布式系统为主，考虑…
「GitHub问题精选」TDengine 如何做到客户端高可用？
小 T 导读：经常有用户在 TDengine 的 GitHub 上递交标签为「help wanted」的 Issue。这些 Issue 大都不是 Bug，只是因为不熟悉或者不了解 TDengine 的机制而让用户感到困惑的使用问题。我们会定期分享一些具备共性的 Issue，希望大家能从中有所…
Elasticsearch-8.11.1 （2+1）HA（高可用）集群部署
目录 一、环境描述
二、安装 ES
2.1 下载Elasticsearch
2.2 解压Elasticsearch
2.3 创建es服务账号/密码
2.3 修改服务器配置
2.4 配置节点
2.4.1 配置说明
2.4.2 配置高可用集群
2.4.2.1 maser节点服务配置
2.4.2.2 node1 节点服务配置
2.4.2.3 node2 节点服务配置…
【中间件篇-Redis缓存数据库05】Redis集群高可用高并发
Redis集群
Redis Cluster是Redis的分布式解决方案，在3.0版本正式推出，有效地解决了Redis分布式方面的需求。当遇到单机内存、并发、流量等瓶颈时，可以采用Cluster架构方案达到负载均衡的目的。之前,Redis分布式方案一般有两种:
1、客户端分…
高并发系统设计学习笔记(十二) 缓存如何做到高可用
目录
一、重视缓存问题 二、客户端方案
1.缓存数据如何分片
(1)Hash分片的算法
(2)一致性Hash算法
(3)一致性Hash算法中引入虚拟节点
2.主从机制
3.多副本
三、中间代理层方案
四、服务端方案 一、重视缓存问题 你需要关注缓存命中率这个指标（缓存命中率命…
高并发系统设计学习笔记(五) 系统设计三大目标(三) 如何让系统易于扩展
目录
一、为什么提升扩展性会很复杂
二、高可扩展性的设计思路
1.拆分
2.存储层的扩展性
3.业务层的扩展性 一、为什么提升扩展性会很复杂 在架构设计之初，为什么不预先考虑好使用多少台机器，支持现有的并发呢？ 答案是峰值的流量不可控。…
MYSQL二主二从集群部署
目录 一、环境描述
二、安装mysql
2.1 卸载mysql(如果没安装过，可忽略)
2.1.1 列出安装的mysql
2.1.2 卸载mysql
2.1.3 删除mysql文件目录
2.1.3.1 查看mysql 目录
2.1.3.2 依次删除
2.2 在线安装
2.2.1 下载安装源
2.2.2 安装源rpm
2.2.3 加入rpm密钥
…
分布式系统设计系列 -- 基本原理及高可用策略 （转）
【分布式系统中的概念】
三元组
其实，分布式系统说白了，就是很多机器组成的集群，靠彼此之间的网络通信，担当的角色可能不同，共同完成同一个事情的系统。如果按”实体“来划分的话，就是如下这几种&…
从单服务设计看SLA保证
文章首发公众号：海天二路搬砖工
0. 引言
在微服务架构中，谈到SLA保证，我们更多是从宏观的角度来需求解决方案。比如，通过合理服务拆分来增加系统整体的可维护性；通过多实例部署来保证系统的灾备。但是单个服务是可靠…
Centos7 安装redis集群哨兵模式
一：整体哨兵模式规划 redis节点规划：6381 （master）， 6382 （slave），6383 （slave），6384 （slave）
sentinel模式节点规划&…
Quartz调度引擎基于MySQL的高可用架构调度延迟分析与解决方案
1、Quartz默认使用的高可用架构
在Quartz的官方文档中，介绍了一种默认的高可用架构，基于数据库实现。该方案中，多台Quartz服务器连接同一个数据库，单台服务器每次调度检索并锁定一批Trigger用于触发，锁定过程中将先从…
Mysql Innodb Cluster集群搭建 - docker
Mysql Innodb Cluster集群搭建 - docker 背景搭建环境3台机器如下：修改三台机器的ip域名映射如下，并重启网络使其生效部署mysql server实例通过docker启动三台mysql server实例，需要映射数据请自行更改配置加入-v启动第一台mysql-server启动第二台mysql-server启动第三台mys…
mysql双机热备的实现
Mysql数据库没有增量备份的机制，当数据量太大的时候备份是一个很大的问题。还好mysql数据库提供了一种主从备份的机制，其实就是把主数据库的所有的数据同时写到备份的数据库中。实现mysql数据库的热备份。 要想实现双机的热备，首先要了解主从…
Redis高可用解决方案之Redis集群，和Spring Cloud集成实战
专栏集锦，大佬们可以收藏以备不时之需
Spring Cloud实战专栏：https://blog.csdn.net/superdangbo/category_9270827.html
Python 实战专栏：https://blog.csdn.net/superdangbo/category_9271194.html
Logback 详解专栏：https:/…
【spring cloud】（二）保证Eureka高可用的集群搭建
1 Eureka集群的高可用
为了保证服务的高可用，所以需要对Eureka进行一个集群的搭建，用以保证Eureka的稳定，同时防止各种意外宕机事故的发生。 在没有使用集群之前Server端只有一个，Client端也只有一个，这时我们为了保证…
【多AZ】浅述云计算多az
多AZ（Availability Zone）是云计算中一种重要的容灾和冗余策略，它通过在不同的地理位置或不同的设备上存储数据副本以及网络切换策略，以保证在单个设备或地理位置发生故障时，云加计算集群仍然能够提供服务。
多AZ的特点…
SpringCloudEureka集群
一、Spring Cloud Netflix
该项目是Spring Cloud的核心子项目，是对Netflix公司一系列开源产品的封装。它为Spring Boot应用提供了自配置的整合，只需要通过一些简单的注解，就可以快速地在Spring Cloud的应用中使用起来。
它主要提供的模块包…
资讯精选 | 开发一套高可用的物联网设备分几步? zGlue：放着我来
本文来源于阿里云-云栖社区，原文点击这里。 “15年前，我们的目标是做显示领域的第一，坚信坚持才能成功；”京东方智慧系统事业群CEO姚项军话锋一转：“现在京东方要开拓新的领域，以‘芯屏器合’为Slogan&…
Linux高可用(HA)集群keepalived实验
本实验均在centos7.2操作 实验之前请先关闭 iptables 和 SELinux
实验1:keepalived 高可用 lvs-dr测试
拓扑图如下: 实验操作 1,先配置两台web 站点
由于是基于dr模型,因此配置和lvs-dr配置类似 a,先配置VIP echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
echo 1 &g…
MySQL高可用解决方案――从主从复制到InnoDB Cluster架构
2024送书福利正式起航 关注「哪吒编程」，提升Java技能 文末送5本《MySQL高可用解决方案――从主从复制到InnoDB Cluster架构》 大家好，我是哪吒。
爱奇艺每天都为数以亿计的用户提供7x24小时不间断的视频服务。通过爱奇艺的平台，用户可以…
【Java八股学习】Redis高可用 思维导图
说明
文章内容通过学习小林Coding内的优质文章后整理而来，整理成思维导图的方式是为了帮助自己理解、记忆和复习。如若侵权请联系删除，再次对小林Coding内的优质文章表示感谢。参考文章如下：
主从复制是怎么实现的？为什么要有哨…
Windows下使用PanguVip实现浮动IP
在某些高可用场景下，我们往往需要使用浮动IP来进行实际访问的切换，比如为了保证Web应用的高可用，当主节点宕机后，我们将浮动IP切换到备节点，那么备节点就继续可以提供服务，在linux下我们可以使用keepalived…
Zookeeper系统模型
一、前言 之前主要在使用zk上，但是使用过程中会遇到很多问题，很多时候无法解释，有必要对zk的内部做一定的具体学习。 二、系统模型 2.1 数据模型 Zookeeper的数据节点称为ZNode，ZNode是Zookeeper中数据的最小单元，每个…
KeepAlived使用介绍
目录
1、Introduce 2、基本使用
（1）安装
（2）配置文件
（3）使用教程 1、Introduce keepalived是一个用于实现高可用性和负载均衡的开源软件。它提供了一种轻量级的方式来管理多个服务器，并确保…
MHA安装遇到的问题解决
MHA依赖了很多的包，如果某个包未安装在运行时都会报错，比如我就遇到如下各种的报错，对perl也不熟，蛋疼的很，记下来帮助其他朋友少走弯路 需要安装的包
yum install -y perl-DBD-MySQL perl-Config-Tiny perl-Log-Disp…
MySQL 8.x 高可用集群之MGR（组复制）
MySQL 8.x 高可用集群之MGR（组复制） 前言一、集群部署1.1 修改主机名和关闭selinux1.2 MySQL安装1.2.1 **移除Linux自带安装的mariadb数据库**1.2.2 下载安装文件1.2.3 顺序执行安装1.2.4 启动mysql并修改密码1.2.5 开启防火墙端口允许访问 1.3 修改mysq…
keepalived+LVS高可用部署
目录
一.两台设备（2.130和2.133）作为调度器，前主后备
1.部署keepalived
2.修改配置文件准备启动
3.配置keepalived的系统日志并启动
二.模拟调度器掉点和web服务进程丢失
1.调度器掉点
2.当类似于httpd这种网站服务掉点
三.以三种健康…
Keepalived与HaProxy的协调合作原理分析
Keepalived与HaProxy的协调合作原理分析keepalived与haproxy合作场景更好的理解方式协调合作中考虑的问题一、Keepalived以TCP/IP模型角度来分析：二、HaProxy总结：协调合作中考虑的问题的答案虚拟ip：虚拟IP技术，就是一个未分配给客…
高可用篇_A Docker容器化技术_I Docker基本概念
原创作者：田超凡（程序员田宝宝）
版权所有，引用请注明原作者，严禁复制转载
简介与概述
1.Docker 是一个开源的应用容器引擎，基于 Go 语言 并遵从 Apache2.0 协议开源。
Docker 可以让开发者打包他们的应…
高并发系统设计学习笔记(九) 如何保证分库分表后ID的全局唯一性
目录
一、数据库的主键要如何选择
二、基于Snowflake算法搭建发号器 一、数据库的主键要如何选择
数据库中的每一条记录都需要有一个唯一的标识，依据数据库的第二范式，数据库中每一个表中都需要有一个唯一的主键。主键一般两种选择方式 1.使用业务字段…
【MySQL高可用集群】MySQL的MGR搭建
前情提要： MySQL官方在 5.7.17版本正式推出组复制（MySQL Group Replication，简称MGR），使用类似 zookeeper 的多于一半原则。在一个集群由 2N1 个节点共同组成一个复制组，一个事务的提交，必须经过…
11 MySQL-搭建MHA高可用
MHA高可用技术主从复制架构演变介绍高级应用架构演变高可用MHA *****作用架构介绍:MHA软件构成MHA环境搭建规划:准备环境（略。1主2从GTID）配置关键程序软连接配置各节点互信安装软件配置文件准备(db03)状态检查开启MHA(db03)：查看MHA状态故障…
keepalive + nginx 来实现 对于nginx的高可用, 以及如何搭建主备模式
keepalive nginx 来实现 对于nginx的高可用, 以及如何搭建主备模式。
keeplived简介
Keepalived是用纯ANSI/ISO C编写的。该软件围绕一个中央I/O多路复用器进行连接，以提供实时网络设计。
1.1 Keepalived进程被分为3个不同进程
A.一个极简的父进程，…
数据库高可用实战案例：架构优化
说到高可用，看官们会想到很多方案，也许是自亲身经历过系统从单机变成高可用的痛苦过程，也许有的看官只是在自己的虚机上搭建过测试的玩具。今天本篇用我自己的真实经历给大家讲述，不管怎么样实战和测试玩耍还是很大的区别的&#…
用简单的方法构建一个高可用服务端
一。什么是高可用性
服务端，顾名思义就是为用户提供服务的。停工时间，就是不能向用户提供服务的时间。高可用，就是系统具有高度可用性，尽量减少停工时间。
停工的原因一般有：
服务器故障。例如服务器宕机，服…
Keepalived+MySQL主主数据同步实现高可用（HA）
1、准备
操作系统版本：CentOS6.5 64位 MySQL版本：5.6.21 Keepalived版本：v1.2.23 1.2.24 节点A：192.168.43.134 节点B：192.168.43.135 VIP（虚拟IP）：192.168.43.130 下文中说到…
【系统架构】什么是集群？为什么要使用集群架构？
什么是集群？为什么要使用集群架构？ 1.什么是集群？2.为什么要使用集群？2.1 高性能2.2 价格有效性2.3 可伸缩性2.4 高可用性2.5 透明性2.6 可管理性2.7 可编程性 3.集群的常见分类3.1 负载均衡集群3.2 高可用性集群3.3 高性能计算集…
keepalived-高可用集群部署
keepalived-高可用集群部署 概念:高可用服务--keepalived完成高可用集群部署lb服务器部署流程：第一个历程：安装keepalived软件keepalived配置文件编写方法第二个历程： keepalived服务配置lb01-作为主服务器lb02-作为备服务器什么是vrrp协议(重…
滴滴、阿里云、语雀相继宕机，损失巨大，软件的高可用失效了么？
在北京寒冬的夜里，小程加班完成了当天最后一个任务，他拖着疲惫的身体离开了位于西二旗的工位，走到办公楼下，下意识地拿出手机打开滴滴，准备打车回家，但是他却发现滴滴的打车页面显示网络异常。起初小程以为…
常用的分布式ID解决方案原理解析
目录
前言
一：分布式ID的使用场景
二：分布式ID设计的技术指标
三：常见的分布式ID生成策略
3.1 UUID
3.2 数据库生成
3.3 数据库的多主模式
3.4 号段模式
3.5 雪花算法 前言 分布式ID的生成是分布式系统中非常核心的基础性模块&#…
Redis 高可用相关理论
Redis 高可用一、概论一、Redis持久化1.1 RDB 持久化触发条件执行流程启动时加载1.2 AOF持久化开启AOF执行流程启动时加载三、RDB和AOF的优缺点四、Redis 主从复制五、Redis 哨兵模式六、Redis群集模式在web服务器中，高可用是指服务器可以正常访问的时间，…
解读 RocketMQ 5.0 全新的高可用设计
作者：斜阳
高可用架构演进背景
在分布式系统中不可避免的会遇到网络故障，机器宕机，磁盘损坏等问题，为了向用户不中断且正确的提供服务，要求系统有一定的冗余与容错能力。RocketMQ 在日志，统计分析&#x…
服务器集群配置LDAP统一认证高可用集群（配置tsl安全链接）-centos9stream-openldap2.6.2
写在前面
因之前集群为centos6，已经很久没升级了，所以这次配置统一用户认证也是伴随系统升级到centos9时一起做的配套升级。新版的openldap配置大致与老版本比较相似，但有些地方配置还是有变化，另外，铺天盖地的帮助文…
5.1 keepalived高可用
VRRP协议 VRRP概念
随着Internet的发展，人们对网络的可靠性的要求越来越高。对于局域网用户来说，能够时刻与外部网络保持联系是非常重要的。通常情况下，内部网络中的所有主机都设置一条相同的缺省路由，指向出口网关，实…
双机热备系统的方案与软件浅析
一、概述
双机热备指基于高可用系统中的两台服务器的热备（或高可用），因两机高可用在国内使用较多，故得名双机热备。双机高可用按工作中的切换方式分为：主-备方式（Active-Standby方式）和双主机方…
保密+完整+可用+安全，规避代码安全「马奇诺防线」，构建软件供应链整体安全
近日，在「江狐会」广州站上，极狐(GitLab) 高级解决方案架构师武让分享了如何通过三大阶段 四大要点，规避代码安全「马奇诺防线」，真正确保软件供应链安全。以下内容整理自本次演讲。Enjoy～ 先跟大家分享一个故事
一战…
Hadoop教程：Hadoop HA配置以及自动主从切换（使用QJM的方法）异常处理方法
HA简介
在hadoop 2.0之前，hadoop 的集群都是单个namenode 节点，这样，一旦任意一个namenode 挂掉。都会导致该集群废掉。
硬件前提
JournalNode machines - 由于JournalNode 是很轻量级的, 所以这个程序一般和其他的程序一起运行, 例如Name…
使用Docker-Compose部署MySQL一主二从同步高可用MHA集群
文章目录 🔊博主介绍🥤本文内容准备mysql一主二从同步集群一主二从同步集群规划需要安装docker和docker-compose命令形式安装安装docker安装docker-compose 宝塔面板形式安装 部署Master节点的docker-compose.yaml文件部署MySQL从节点1的docker-compose.…
高可用性和双机热备浅析
在用户眼里，业务需要永远正常对外提供服务，这就要求应用系统的高可用（High availability，即 HA）。高可用主要是针对架构而言，第一步一般会采用分层的思想将一个庞大的应用系统拆分成应用层、中间件、数据存…
架构漫谈 - 如何设计高性能、高可用、高扩展架构
文章目录 一、如何设计高扩展架构架构设计复杂度模型可扩展复杂度模型"拆分"复杂度分析和设计"封装"复杂度分析和设计（1）规则引擎：美团MazeGO规则引擎（2）微内核：OSGI微内核（3）抽象层：Linux VFS抽象层（4）设计模式二、设计高性能架构单机高性能集…
MHA（MySQL High Availability）高可用性工具补数据功能
目录 背景MHA补数据功能关于补数据的补充说明参考 背景
在介绍 MHA 补数据功能之前先介绍一些关于MHA的基础知识。
MHA（MySQL High Availability）是一个用于实现MySQL数据库高可用性（High Availability）的工具集。
它可以在主从…
Chubby与Paxos
一、前言 在上一篇理解了Paxos算法的理论基础后，接下来看看Paxos算法在工程中的应用。 二、Chubby Chubby是一个面向松耦合分布式系统的锁服务，GFS（Google File System）和Big Table等大型系统都是用它来解决分布式协作、元数据存储…
Zookeeper与Paxos
一、前言 在学习了Paxos在Chubby中的应用后，接下来学习Paxos在开源软件Zookeeper中的应用。 二、Zookeeper Zookeeper是一个开源的分布式协调服务，其设计目标是将那些复杂的且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集&a…
一次奇怪的事故：机器网络连接打满，导致服务不可用
业务背景
发生事故的业务系统是一个toB业务，业务是服务很多中小企业进行某项公共信息指标查询。系统特点:业务处理相对简单，但是流量大，且对请求响应要求较高：
业务请求峰值qps达50w，平时流量达20w左右。 请求响应时…
MySQL主从复制原理剖析与应用实践
vivo 互联网服务器团队- Shang Yongxing MySQL Replication（主从复制）是指数据变化可以从一个MySQL Server被复制到另一个或多个MySQL Server上，通过复制的功能，可以在单点服务的基础上扩充数据库的高可用性、可扩展性等。
一、背…
SpringCloud--构建一个高可用的服务注册中心
xl_echo编辑整理，欢迎转载，转载请声明文章来源。更多IT编程案例、资料请联系QQ：1280023003 ，群：298140694 百战不败，依不自称常胜，百败不颓，依能奋力前行。——这才是真正的堪称强大…
【高可用架构】Haproxy 和 Keepalived 的区别
Haproxy 和 Keepalived 的区别 1.负载均衡器介绍2.Haproxy 和 Keepalived 的基本概念和特点2.1 Haproxy2.2 Keepalived 3.Haproxy 和 Keepalived 的区别3.1 功能上的区别3.2 架构上的区别3.3 配置上的区别 4.总结 1.负载均衡器介绍
负载均衡器是一种解决高并发和高可用的常用的…
MySQL高可用之快速搭建MHA
MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中，MHA能做到在0~30秒之内自动完成数据库的故障切换操作…
最新最全的~教你如何搭建高可用Lustre双机集群
1.搭建双机lustre高可用集群：
1.环境说明： 主机名系统挂载情况IP地址Lustre集群名内存mds001Centos7.9（共享磁盘）1个mgs，1个MDT，2个OST192.168.10.21/209.21global1Gmds002Centos7.9（共享磁盘）1个mgs，1个MDT，2个OST192.168.10.22/209.22global1GclientCentos7.9无19…
Dubbo负载均衡、容错、高可用
Random LoadBalance(默认) 随机，按权重设置随机概率。 在一个截面上碰撞的概率高，但调用量越大分布越均匀，而且按概率使用权重后也比较均匀，有利于动态调整 提供者权重。 RoundRobin LoadBalance 轮询，按公约后的权重…
Hadoop：完全分布式搭建
此集群三个节点基于三台虚拟机（hadoop01、hadoop02、hadoop03）进行搭建，虚拟机安装的操作系统为Centos6.5，Hadoop版本选取为2.9.1。
实验过程
1、基础集群的搭建 下载并安装VMware WorkStation Pro，链接：…
Mysql之高可用方案浅析
在工程项目中，系统应用的高可用性越来越重要，业主越来越重视。其实高可用可以分为应用层高可用和数据层高可用，数据层高可用中常见的有关系型数据库mysql的高可用、非关系型NoSQl数据库redis的高可用等，下面聊聊典型的关系型数据库…
红包雨功能高并发、高可用、高性能落地
红包雨功能是一项很有趣的活动，但是在技术实现上需要经过多方面的考虑和优化，才能保证系统的稳定性和用户体验。本文将从多个方面来介绍红包雨功能的设计和实现。
技术架构设计
在开始设计红包雨功能之前，首先需要确定系统的技术架构。一般而言，一个完整的红包雨系统主要…
MySQL主备延迟的原因
MySQL主备延迟的原因
在上篇文章中记录了一次由主备延迟导致的relay log打满磁盘的问题，结合林奇大佬的《MySQL是怎么保证高可用的？》，分析一下主备延迟的原因。
主备同步
主库和备库之间的同步流程如图所示：
在备库B 上通过c…
搭建高并发高可用系统需要怎样设计
一、高并发原则
无状态：应用无状态，配置文件有状态拆分：系统维度、功能维度、读写维度、AOP维度、模块维度服务化：进程内服务->单机远程服务->集群手动注册服务->自动注册和发现服务->服务分组/隔离/路由->服务治…
【高可用】SQL Server 2019 无域+WSFC搭建Always On环境图文步骤
SQL Server 2019 无域搭建Always On环境 简介环境介绍服务器配置安装故障转移修改主机名并加入域修改hosts文件关闭防火墙修改DNS新建故障转移集群（任一台服务器）验证故障转移是否成功（任意一台电脑关机）设置共享文件数据库安装数据库配置数据库开启Always On在数据库里面安…
《隔离十四天》系列 -第七天 -谈谈高并发高可用系统的优化思路
前言
隔离第七天了，已经过去一般的时间了，甚是欣慰，想想还有七天要过，真的好激动，激动也不能断了学习，还是要好好学习的，毕竟好好学习才能天天向上。 当然了今天也是身体健康的一天，…
互联网高可用架构探讨 | 京东云技术团队
高可用指标与问题
高可用，英文单词High Availability，缩写HA，它是分布式系统架构设计中一个重要的度量。业界通常用多个9来衡量系统的可用性，如下表： 既然有可用率，有一定会存在不可用的情况。系统宕机一般…