LVS+Nginx高可用集群--基础篇

1.集群概述

单体部署:
在这里插入图片描述
可以将上面内容分别部署在不同的服务器上。
单体架构的优点:
小团队成型就可完成开发,测试,上线
迭代周期短,速度快
打包方便,运维简单

单体架构的挑战:单节点宕机造成所有服务的不可用(多节点);耦合度太高(迭代,测试,部署)(分布式部署);单节点并发能力有限(负载均衡)

集群:计算机”整体”构成整个系统;这个“群体”构成一个整体,不能独立存在;群体提升并发与可用性
在这里插入图片描述

集群的优势:提高系统性能;提高系统可用性;可扩展性高;

使用集群的注意点:
用户会话:会话要使用分布式会话,通过Redis缓存实现分布式会话。
定时任务:所有的计算机节点,上面所有的任务,在某个时刻,都会跑一遍;任务都是一模一样,会浪费计算机的资源。可以统一做定时任务的服务;或者使用mq的延时任务。
内网互通:必须保障。

2.什么是Nginx?常用的web服务器有哪些?

Nginx:高性能的http和反向代理web服务器,同时也提供IMAP/POP3/SMTP服务;主要功能是反向代理;通过配置文件实现负载均衡或者集群;静态资源的虚拟化

常见的服务器:
在这里插入图片描述

3.什么是反向代理?

正向代理:客户端请求目标服务器之间的一个代理服务器;
请求会先经过代理服务器,然后再转发请求到目标服务器,获得内容后最后响应给客户端。
在这里插入图片描述
反向代理:
用户请求目标服务器,由代理服务器决定访问哪个ip
教务处相当于方向代理。
在这里插入图片描述
正向代理和反向代理的区别:
位置不同
正向代理,架设在客户机和目标主机之间;
反向代理,架设在服务器端;

代理对象不同
正向代理,代理客户端,服务端不知道实际发起请求的客户端;
反向代理,代理服务端,客户端不知道实际提供服务的服务端;

用途不同
正向代理,为在防火墙内的局域网客户端提供访问Internet的途径;
反向代理,将防火墙后面的服务器提供给Internet访问;

安全性不同
正向代理允许客户端通过它访问任意网站并且隐藏客户端自身,因此必须采取安全措施以确保仅为授权的客户端提供服务;
反向代理都对外都是透明的,访问者并不知道自己访问的是哪一个代理。

备注:正向代理–HTTP代理为多个人提供翻墙服务;反向代理–百度外卖为多个商户提供平台给某个用户提供外卖服务。

4.Nginx安装与运行

(1)去官网http://nginx.org/下载对应的nginx包,推荐使用稳定版本
(2)上传nginx到linux系统
(3)安装依赖环境
安装gcc环境;

 yum install gcc-c++

安装PCRE库,用于解析正则表达式;

 yum install -y pcre pcre-devel

zlib压缩和解压缩依赖;

 yum install -y zlib zlib-devel

SSL 安全的加密的套接字协议层,用于HTTP安全传输,也就是https

yum install -y openssl openssl-devel

(4)解压,需要注意,解压后得到的是源码,源码需要编译后才能安装

tar -zxvf nginx-1.16.1.tar.gz

(5)编译之前,先创建nginx临时目录,如果不创建,在启动nginx的过程中会报错

mkdir /var/temp/nginx -p

(6)在nginx目录,输入如下命令进行配置,目的是为了创建makefile文件

./configure \n    --prefix=/usr/local/nginx \n    --pid-path=/var/run/nginx/nginx.pid \n    --lock-path=/var/lock/nginx.lock \n    --error-log-path=/var/log/nginx/error.log \n    --http-log-path=/var/log/nginx/access.log \n    --with-http_gzip_static_module \n    --http-client-body-temp-path=/var/temp/nginx/client \n    --http-proxy-temp-path=/var/temp/nginx/proxy \n    --http-fastcgi-temp-path=/var/temp/nginx/fastcgi \n    --http-uwsgi-temp-path=/var/temp/nginx/uwsgi \n    --http-scgi-temp-path=/var/temp/nginx/scgi

配置命令:
在这里插入图片描述
(7)make编译

make

(8)安装

make install

(9)进入sbin目录启动nginx

./nginx

停止:./nginx -s stop
重新加载:./nginx -s reload

(10)打开浏览器,访问虚拟机所处内网ip即可打开nginx默认页面,显示如下便表示安装成功:

注意事项:
如果在云服务器安装,需要开启默认的nginx端口:80
如果在虚拟机安装,需要关闭防火墙
本地win或mac需要关闭防火墙

5.Nginx显示默认首页过程解析

内网环境:使用内网ip
云服务器:使用外网ip

请求nginx默认页面:
在这里插入图片描述
Nginx主要配置:

 server {
        listen       80;
        server_name  localhost;

               location / {
            root   html;
            index  index.html index.htm;     }
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;}
}

6.Nginx进程模型解析

ps -ef|grep nginx 查询nginx相关进程。

root      2856 32390  0 10:12 pts/1    00:00:00 grep --color=auto nginx
root     21121     1  0 08:29 ?        00:00:00 nginx: master process ./nginx
nobody   21122 21121  0 08:29 ?        00:00:00 nginx: worker process

Master进程:主进程。Master接收外界的一些信号,传递给对应的worker进程;监控worker
worker进程:工作进程,为master服务

在这里插入图片描述
master接收一些信号,然后传递给相应的worker进程;master还可以对发送的指令可以读取并验证核心配置文件的有效性:
具体实例:
[root@VM-0-9-centos conf]# …/sbin/nginx -t
nginx: the configuration file /usr/local/nginx/conf/nginx.conf syntax is ok
nginx: configuration file /usr/local/nginx/conf/nginx.conf test is successful
Worker进程数量是可以配置的。
配置worker进程的过程:
在这里插入图片描述
nginx进程模型:
在这里插入图片描述
每个进程相互独立,多线程的话,虽然多线程的开销要小于进程,但是它们会公用一个内存,
线程之间是相互会有影响的,需要开发人员自己去维护内存管理。并且会增加一定的风险,导致我们出错。
多进程,相互之间是独立的,安全的。如果说一个worker异常退出了,其他的worker会正常运行。

7.Nginx处理web请求机制解析

Nginx本身是性能非常高,非常好的服务器。可以处理的并发数可以达到几十万或者几百万。
Worker抢占机制:use epoll.Linux epoll机制。
Master fork出多个worker进程(fork是底层机制。)
Accept_mutex:互斥锁,多个worker竞争,抢到了才能去处理cilent.
在这里插入图片描述
传统服务器事件处理:类似于BIO:
在这里插入图片描述
以上是同步阻塞。
在这里插入图片描述
Nginx事件处理:本身是异步非阻塞模型,一般有默认的并发数(1024).可以进行配置,根据你的硬件来配置
events {
#默认使用epoll
use epoll;
#每个worker允许连接的客户端最大连接数
worker_connections 1024;
}
使用epoll可以处理6-8万个请求,当worker获得cilent的请求后,对请求处理到阻塞的部分,worker就不会继续等待阻塞的请求,而是处理一些其他客户端的请求。这样worker就可以同时处理多个cilent请求,从而实现了高并发。

在这里插入图片描述
Nginx的性能为什么这么高?
1.worker的抢占机制。
2.异步非阻塞的通信模式,多路复用器。

8.nginx.conf配置结构与语法指令

在这里插入图片描述
配置里有指令和指令块。
指令:
#user nobody;
worker_processes 2;
指令块:
events {
#默认使用epoll
use epoll;
#每个worker允许连接的客户端最大连接数
worker_connections 1024;
}

9.同步与异步,阻塞与非阻塞

同步:关键字:轮询;异步:通知;
阻塞:关键字:一直等待;非阻塞:关键字:不用等
还可以根据客户端和服务器端分开处理。
同步时客户端就会阻塞。阻塞时,服务器端就会阻塞。
从客户端和服务器端的角度来理解,异步:服务器端会通知你后台正在处理,客户端可以处理其他请求。
对于阻塞以及非阻塞的理解,关键点在于,非阻塞时,服务器端可以继续处理请求,极大的节省系统资源。经济效益高

10.Nginx.conf核心配置文件

设置worker进程的用户,指的linux中的用户,会涉及到nginx操作目录或文件的一些权限,默认为nobody
user root;//涉及到操作系统用户的权限问题,nobody跟root用户操作文件的权限完全不同。

user root;

worker进程工作数设置,一般来说CPU有几个,就设置几个,或者设置为N-1也行

worker_processes 1;

nginx 日志级别debug | info | notice | warn | error | crit | alert | emerg,错误级别从左到右越来越大
#error_log logs/error.log;
#error_log logs/error.log notice;
#error_log logs/error.log info;
通过不同的日志级别,输出不同的日志内容

此处配置的日志文件在:
–error-log-path=/var/log/nginx/error.log

设置nginx进程 pid
配置内容:
–pid-path=/var/run/nginx/nginx.pid

pid        logs/nginx.pid;

设置工作模式

events {
    # 默认使用epoll
    use epoll;
    # 每个worker允许连接的客户端最大连接数
    worker_connections  10240;
}

http 是指令块,针对http网络传输的一些指令配置

http {
}

include 引入外部配置,提高可读性,避免单个配置文件过大

include       mime.types;

设定日志格式,main为定义的格式名称,如此 access_log 就可以直接使用这个变量了
–http-log-path=/var/log/nginx/access.log
在这里插入图片描述
在这里插入图片描述
sendfile使用高效文件传输,提升传输性能。启用后才能使用tcp_nopush,是指当数据表累积一定大小后才发送,提高了效率。

sendfile        on;
tcp_nopush      on;

keepalive_timeout设置客户端与服务端请求的超时时间,保证客户端多次请求的时候不会重复建立新的连接,节约资源损耗。

#keepalive_timeout  0;
keepalive_timeout  65;

gzip启用压缩,html/js/css压缩后传输会更快

gzip on;

server可以在http指令块中设置多个虚拟主机

listen 监听端口
server_name localhost、ip、域名
location 请求路由映射,匹配拦截
root 请求位置
index 首页设置

 server {
            listen       88;
            server_name  localhost;
    
            location / {
                root   html;
                index  index.html index.htm;
            }
    }

11.nginx常用命令解析

Nginx常用命令:
./nginx -t:查看配置文件是否正确
./nginx -s reload:重启nginx
./nginx 启动
./nginx -s stop 关闭
./nginx -s reload 重启
可以将配置的多台server 保存在xxx.conf文件中,然后通过include引入。

暴力关闭nginx:./nginx -s stop 强制关闭。
友好关闭:./nginx -s quit:会维持当前用户连接直到用户不再发送请求关闭连接。针对一些http请求。
检验:./nginx -t :配置文件发生更改,检查配置文件是否有问题
查看相关版本号 ./nginx -v 展示具体的信息:./nginx -V 提供命令的帮助: ./nginx -h或者./nginx -? 指定特定的配置文件 ./nginx -c

12.nginx日志切割-手动

去特定目录下查看日志文件:
命令: cd /var/log/nginx
然后根据以前的配置查询所有相关的文件
命令:/usr/local/nginx/sbin/nginx -V
查询的是之前安装nginx所有相关的配置。
首先创建对应的文件:cut_my_log.sh
代码:

#!/bin/bash
LOG_PATH="/var/log/nginx/"
RECORD_TIME=$(date -d "yesterday" +%Y-%m-%d+%H:%M)
PID=/var/run/nginx/nginx.pid
mv ${LOG_PATH}/access.log ${LOG_PATH}/access.${RECORD_TIME}.log
mv ${LOG_PATH}/error.log ${LOG_PATH}/error.${RECORD_TIME}.log
#向Nginx主进程发送信号,用于重新打开日志文件
kill -USR1 `cat $PID`

新建文件添加权限。
chmod +x cut_my_log.sh
成功后,文件变成绿色。
测试日志切割后的结果:
./cut_my_log.sh

测试:
根据时间戳生成的log文件,每执行一次进行一次切割。

在这里插入图片描述
nginx日志切割-定时任务
安装定时任务:

yum install crontabs

crontab -e 编辑并且添加一行新的任务:

*/1 * * * * /usr/local/nginx/sbin/cut_my_log.sh

重启定时任务:

service crond restart

crontab -l:查询定时任务内容
在这里插入图片描述
常用定时任务命令:
service crond start //启动服务
service crond stop //关闭服务
service crond restart //重启服务
service crond reload //重新载入配置
crontab -e // 编辑任务
crontab -l // 查看任务列表

Systemctl stop crond.service:关闭定时任务
Systemctl status crond.service :查看定时任务的状态

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mfbz.cn/a/772060.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

day03-numpy数据类型

numpy数据类型 名称描述名称描述bool_布尔型数据类型(True 或者 False)float_float64 类型的简写int_默认的整数类型(类似于 C 语言中的 long,int32 或 int64)float16/32/64半精度浮点数:1 个符号位,5 个指…

《ClipCap》论文笔记(上)

原文出处 [2111.09734] ClipCap: CLIP Prefix for Image Captioning (arxiv.org) 原文笔记 What ClipCap: CLIP Prefix for Image Captioning 一言以蔽之:使用 CLIP 编码作为标题的前缀,使用简单的映射网络,然后微调语言模型…

datawhale大模型应用开发夏令营学习笔记一

参考自 基于LangChainLLM的本地知识库问答:从企业单文档问答到批量文档问答datawhale的llm-universe 作者现在在datawhale夏令营的大模型应用开发这个班中,作为一个小白,为了能为团队做出一点贡献,现在就要开始学习怎么使用langch…

第二十条:与抽象类相比,优先选择接口

要定义多种实现的类型:JAVA有两种机制:接口和抽象类。这两种机制都支持为某些实例方法提供实现,但二者有个重要的区别:要实现由抽象类定义的类型,这个类必须是抽象类的子类。因为Java只允许单继承,对抽象类…

UE4_材质_材质节点_Fresnel

学习笔记,不喜勿喷,侵权立删,祝愿生活越来越好! 一、问题导入 在创建电影或过场动画时,你常常需要想办法更好地突显角色或场景的轮廓。这时你需要用到一种光照技术,称为边沿光照或边缘光照,它的…

从硬件角度看Linux的内存管理

1. 分页机制 分段机制的地址映射颗粒度太大,以整个进程地址空间为单位的分配方式导致内存利用率不高。 分页机制把这个分配机制的单位继续细化为固定大小的页(Page),进程的虚拟地址空间也按照页来分割,这样常用的数据和代码就可以以页为单位…

Angluar 实现pdf页面预览以及编辑

之前用过一个pdf预览的lib,并且还支持在线编辑,和直接下载编辑之后的pdf和直接打印,还不错,记录下 PdfShowcase 首先安装依赖 npm install ngx-extended-pdf-viewer 然后引入 import { NgxExtendedPdfViewerModule } from &q…

论文解读StyleGAN系列——StyleGANv1

论文:A Style-Based Generator Architecture for Generative Adversarial Networks(2018.12) 作者:Tero Karras, Samuli Laine, Timo Aila 链接:https://arxiv.org/abs/1812.04948 代码:https://github.com…

四、(3)补充beautifulsoup、re正则表达式、标签解析

四、(3)补充beautifulsoup、re正则表达式、标签解析 beautifulsoupre正则表达式正则提取标签解析 beautifulsoup 补充关于解析的知识 还需要看爬虫课件 如何定位文本或者标签,是整个爬虫中非常重要的能力 无论find_all(&#xff…

AI一键音频转文字工具 速度超快,支持实时转换,无需联网,本地整合包下载

这是 CapsWriter-Offline ,一个 PC 端的语音输入、字幕转录工具。可用实现简单一键将音频文件转换成文字的懒人工具。 两个功能: 1、实时转换,按下键盘上的 大写锁定键,录音开始,当松开 大写锁定键 时,就会…

企商在线出席2024全球数字经济大会城市副中心论坛

2024年7月3日,2024全球数字经济大会城市副中心论坛“数字基础设施绿色创新发展分论坛”在北京市通州区成功举办。企商在线产品及解决方案总监孙杰受邀出席本次会议,并参与圆桌对话环节,分享“绿色”发展思路与经验。 2024全球数字经济大会城市…

一篇文章说清楚Filter(过滤器)、Interceptor(拦截器)和AOP(切面儿)

文章目录 前言一、Filter(过滤器)1.说明2.实现filterChain.doFilter() 3.order优先级4.解决跨域5.拦截返回错误信息JSON 二、Interceptor(拦截器)1.说明2.实现preHandlepostHandleafterCompletion 3.执行顺序图4.排除特定路径拦截…

@react-google-maps/api实现谷歌地图中添加多边围栏,并可编辑,编辑后可获得围栏各个点的经纬度

先上一张效果图 看看是不是大家想要的效果~ ❤️ 由于该功能微微复杂一点,为了让大家精准了解 我精简了一下地图代码 大家根据自己的需求将center值和paths,用setState做活就可以了 1.第一步要加入项目package.json中或者直接yarn install它…

在Linux上查找文件的2个好用的命令

1. locate xx (查找带xx字符的所有文件或目录) 在终端输入命令 locate lua,可以看到,所有带lua字符的文件或目录都会被搜索出来。 2. find / -name xx (查找名为xx的文件或目录) 在终端输入命令 find …

揭开北斗系统和物联网的神秘面纱:探索未来技术的无限可能性

北斗系统和物联网是现代科技领域的两个重要概念。随着科学技术的快速发展和应用的深化,这两个术语逐渐进入人们的视野。本文将深入探讨北斗系统和物联网的原理、应用和未来发展前景,带您充分了解科技革命的幕后故事。北斗系统:引领全球导航新…

从零开始学习SLAM(三)

旋转向量 #include <Eigen/Geometry> #include <Eigen/Core>AngleAxisd 类有几种构造函数&#xff0c;其中最常用的是&#xff1a; Eigen::AngleAxisd(const Scalar& angle, const Axis& axis);angle 是旋转的角度&#xff0c;通常以弧度表示。axis 是旋…

数据库表导出到excel

数据库表导出到excel:前置知识1 ALL_TAB_COLS 数据库表导出到excel:前置知识2 Quartz基本使用 数据库表导出到excel:前置知识3 项目封装的Quartz实现动态定时任务 数据库表导出到excel:前置知识4 业务和效果 发起清单下载control层InventoryDownloadLogController /* * */ pa…

#### golang中【堆】的使用及底层 ####

声明&#xff0c;本文部分内容摘自&#xff1a; Go: 深入理解堆实现及应用-腾讯云开发者社区-腾讯云 数组实现堆 | WXue 堆&#xff08;Heap&#xff09;是实现优先队列的数据结构&#xff0c;Go提供了接口和方法来操作堆。 应用 package mainimport ("container/heap&q…

LVS-DR群集

LVS-DR集群 LVS-DR(Linux Virtual Server DIrector Server)工作模式&#xff0c;是生产环境中最常用的一种工作模式。 LVS-DR工作原理 LVS-DR模式&#xff0c;Director Server作为群集的访问入口&#xff0c;不作为网关使用&#xff0c;节点DirectorServer与Real Server需要…

光速入门 Tailwind CSS

文章目录 入门安装IDE 设置使用预编译器生产环境优化 基础概念分层指令tailwindlayerapplyconfig 函数theme()screen() 基础案例怎么设置属性任意值&#xff1f;hover 父元素时&#xff0c;怎么选中子元素添加样式&#xff1f;添加 animation 动画 配置主题 Tailwind CSS 中文网…