集群

什么是集群

  • 一组通过高速网络互联的计算组,并以单一系统的模式加以管理
  • 将很多服务器集中起来一起,提供同一种服务,在客户端看来就像是只有一个服务器
  • 可以在付出较低成本的情况下获得在性能.可靠性.灵活性方面的相对较高的收益
  • 任务调度是集群系统中的核心技术

集群目的

  • 提高性能:如计算密集型应用,
  • 降低成本:相对百万美元级的超级计算机,价格便宜
  • 提高可扩展性:只要增加集群节点即可
  • 增强可靠性:多个节点完成相同功能,避免单点失败

集群分类

  • 高性能计算集群HPC

 ----通过以集群开发的并行应用程序,解决复杂的科学问题

  • 负载均衡(LB)集群

 ----客户端负载在计算机集群中尽可能平均分摊

  • 高可用(HA)集群

 ----避免单点故障,当一个系统发生故障时,可用快速迁移

LVS概述

LVS项目介绍

  • Linux虚拟服务器(LVS)是章文嵩在国防科技大学就读博士期间创建的
  • LVS可用实现高可用的.可伸缩的Web.Mail.Cache和Media等网络服务
  • 最终目标是利用Linux操作系统和LVS集群软件实现一个高可用.高性能.低成本的服务器应用集群

LVS集群组成

  • 前端:负载均衡层

----由一台或多台负载调度器构成

  • 中间:服务器群组层

----由一组实际运行应用服务的服务器组成

  • 底端:数据共享存储层

----提供共享存储空间的存储区域

LVS术语

  • Director  Server:调度服务器

----将负载分发到Real  Server的服务器

  • Real  Server:真实服务器

----真正提供应用服务的服务器

  • VIP:虚拟IP地址

----公布给用户访问的虚拟IP地址

  • RIP:真实IP地址

----集群节点上使用的IP地址

  • DIP:调度器连接节点服务器的IP地址
  • CIP:客户端的IP地址

LVS工作模式

VS/NAT

  • 通过网络地址转换实现的虚拟服务器
  • 大并发访问时,调度器的性能成为瓶颈
  • 处理客户端数据请求流量不大,返回数据的流量大
  • 导致调度器处理数据流量的压力更大

NAT模式工作流程
NAT即网络地址转换,其作用是将源(客户端)的IP地址转发给后端服务器
后端服务器处理完数据后通过NAT地址回传给客户端

VS/TUN

  • 通过隧道方式实现虚拟服务器

TUN模式工作流程
这个模式是基于调度器与后端服务器是跨地区的情况
客户端访问LVS调度器,LVS通过vpn技术把用户的请求转发到后端服务器
再由服务器把处理数据的结果通过vpn回传给客户端
这样做的最大缺点就是: 跨地区会导致网络延迟很大访问效率速度更低

VS/DR

  • 直接使用路由技术实现虚拟服务器
  • 节点服务器需要配置VIP,注意MAC地址广播
  • 可以满足更大规模的集群

DR模式工作流程
由LVS调度转发客户端数据请求给后端服务器,由后端服务器处理
后端服务器处理完成后伪装成LVS调度器回传给客户端

LVS的负载均衡调度算法

  • LVS目前实现了10中调度算法
  • 常用的调度算法有四种
  1. 轮询(Round  Robin)简称RR
  2. 加权轮询(Weighted  Round  Robin)简称WRR
  3. 最少连接(Least  Connections)简称LC
  4. 加权最少连接(Weighted  Least  Connections)简称WLC

轮询:将客户端的请求平均分发到Real  Server,

加权轮询:根据Real Server权重值进行轮询

最少连接:选择连接最少数的服务器

加权最少连接:根据Real Server权重值,选择连接数最少的服务器

最小延迟:找网速更快的服务器

网卡的延迟与网卡的带宽,数据的流量有关

最少队列调度:当已经达到最大的并发量时,客户端访问则自动进行排队,哪个服务器的排队最少则自动将客户端放到该队列

源地址散列(Source Hashing):根据请求的目标地址IP,作为散列键(Hash  Key)从静态分配的散列表找出对应的服务器

其他调度算法:

基于局部性的最少连接

带复制的基于局部性最少连接

目标地址散列(Destination  Hashing)

最短的期望的延迟

最少队列调度

LVS-NAT集群

LVS的IP负载均衡技术是通过IPVS模块实现的

IPVS模块已成为Linux的组成部分

[root@proxy ~]# grep -i  'ipvs'  /boot/config-3.10.0-862.el7.x86_64 
CONFIG_NETFILTER_XT_MATCH_IPVS=m
# IPVS transport protocol load balancing support
# IPVS scheduler
# IPVS SH scheduler
# IPVS application helper

ipvsadm命令用法

准备一台Linux服务器,安装ipvsadm软件包,练习使用ipvsadm命令,实现如下功能:

使用命令添加基于TCP一些的集群服务
在集群中添加若干台后端真实服务器
实现同一客户端访问,调度器分配固定服务器
会使用ipvsadm实现规则的增、删、改
保存ipvsadm规则

方案安装ipvsadm软件包,关于ipvsadm的用法可以参考man ipvsadm资料。
常用ipvsadm命令语法格式如表-1及表-2所示。

使用命令增(add)、删(delete)、改(edit)、清除所有(clear)LVS集群规则

1)创建LVS虚拟集群服务器(算法为轮询:rr)

[root@proxy ~]# yum  -y  install  ipvsadm        #下载ipvsadm
[root@proxy ~]# ipvsadm  -A  -t   192.168.4.5:80  -s  rr    #新建虚拟集群
新建一个虚拟服务器,协议是tcp服务,算法为轮询算法
[root@proxy ~]# ipvsadm  -Ln                    #查看,此时没有真实的服务器
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 rr

2)为集群添加若干real server

[root@proxy ~]# ipvsadm  -a  -t  192.168.4.5:80  -r  192.168.2.100:80      #添加真实服务器,添加到192.168.4.5的虚拟机群,添加realserver
[root@proxy ~]# ipvsadm  -a  -t  192.168.4.5:80  -r  192.168.2.200:80  
[root@proxy ~]# ipvsadm  -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 rr-> 192.168.2.100:80             Route   1      0          0         -> 192.168.2.200:80             Route   1      0          0       [root@proxy ~]# ipvsadm  -a  -t  192.168.4.5:80  -r  192.168.2.201:80  -w  2  #再添加一台权重为2的服务器
[root@proxy ~]# ipvsadm  -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 rr-> 192.168.2.100:80             Route   1      0          0         -> 192.168.2.200:80             Route   1      0          0         -> 192.168.2.201:80             Route   2      0          0       [root@proxy ~]# ipvsadm  -e  -t  192.168.4.5:80  -r  192.168.2.200:80  -w  3#修改realserver192.168.2.200的权重为3
[root@proxy ~]# ipvsadm  -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 rr-> 192.168.2.100:80             Route   1      0          0         -> 192.168.2.200:80             Route   3      0          0         -> 192.168.2.201:80             Route   2      0          0   当算法为轮询时,不论权重多少都依然自动执行轮询算法

3)修改集群服务器设置(修改调度器算法,将轮询修改为加权轮询)

[root@proxy ~]# ipvsadm  -E  -t   192.168.4.5:80  -s  wrr
[root@proxy ~]# ipvsadm  -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 wrr-> 192.168.2.100:80             Route   1      0          0         -> 192.168.2.200:80             Route   3      0          0         -> 192.168.2.201:80             Route   2      0          0        

 4)修改read server(使用-g,-m,-i选项,默认即为DR模式,-m为NAT模式,-i为Tunnel模式)

[root@proxy ~]# ipvsadm -e -t 192.168.4.5:80 -r 192.168.2.202 -g
[root@proxy ~]# ipvsadm -a  -t  192.168.4.5:80  -r  192.168.2.202:80  -m
[root@proxy ~]# ipvsadm  -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 wrr-> 192.168.2.100:80             Route   1      0          0         -> 192.168.2.200:80             Route   3      0          0         -> 192.168.2.201:80             Route   2      0          0         -> 192.168.2.202:80             Masq    1      0          0      [root@proxy ~]# ipvsadm -a  -t  192.168.4.5:80  -r  192.168.2.203:80  -i
[root@proxy ~]# ipvsadm  -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 wrr-> 192.168.2.100:80             Route   1      0          0         -> 192.168.2.200:80             Route   3      0          0         -> 192.168.2.201:80             Route   2      0          0         -> 192.168.2.202:80             Masq    1      0          0         -> 192.168.2.203:80             Tunnel  1      0          0         

下面仅实验NAT模式与DR模式,TUN模式不常用

LVS-NAT集群

  • LVS的IP负载均衡技术是用过IPVS模块实现的
  • IPVS模块已成为Linux组成部分

LVS-NAT集群拓扑图

操作流程

  • Real Server:
  • 配置WEB服务器
  • Director server:
  • 在上安装并启用ipvsadm
  • 创建虚拟服务器
  • 向虚拟服务器中加入节点
  • Client:
  • 连接虚拟服务器测试

部署LVS-NAT集群

 问题

使用LVS实现NAT模式的集群调度服务器,为用户提供Web服务:

  • 集群对外公网IP地址为192.168.4.5
  • 调度器内网IP地址为192.168.2.5
  • 真实Web服务器地址分别为192.168.2.100、192.168.2.200
  • 使用加权轮询调度算法,真实服务器权重分别为1和2

方案

实验拓扑结构主机配置细节如表所示。


使用4台虚拟机,1台作为Director调度器、2台作为Real Server、1台客户端,拓扑结构如图所示,注意:web1和web2必须配置网关地址。

步骤一:配置基础环境

1 ) 为web1和web2配置服务器网关

[root@web1 ~]# nmcli connection modify eth1 ipv4.method  manual  ipv4.gateway  192.168.2.5  
[root@web1 ~]# nmcli connection up  eth1
连接已成功激活(D-Bus 活动路径:/org/freedesktop/NetworkManager/ActiveConnection/5)
####################################################################
也可以更改/etc/sysconfig/network配置文件
[root@web1 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.2.5     0.0.0.0         UG    104    0        0 eth1
192.168.2.0     0.0.0.0         255.255.255.0   U     104    0        0 eth1
[root@web2 ~]# nmcli connection modify eth1 ipv4.method  manual  ipv4.gateway  192.168.2.5
[root@web2 ~]# nmcli connection up  eth1
连接已成功激活(D-Bus 活动路径:/org/freedesktop/NetworkManager/ActiveConnection/5)
[root@web2 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.2.5     0.0.0.0         UG    104    0        0 eth1
192.168.2.0     0.0.0.0         255.255.255.0   U     104    0        0 eth1

 2)设置Web服务器(下载可忽略)

[root@web1 ~]# yum -y install httpd
[root@web1 ~]# vim /etc/httpd/conf/httpd.conf 
95 ServerName www.example.com:80
[root@web1 ~]# echo  123123   >  /var/www/html/index.html
[root@web1 ~]# systemctl  restart  httpd
[root@web1 ~]# curl  http://192.168.2.100
123123
[root@web2 ~]# vim /etc/httpd/conf/httpd.conf 
95 ServerName www.example.com:80
[root@web2 ~]# echo  456456  >  /var/www/html/index.html 
[root@web2 ~]# systemctl  restart  httpd
[root@web2 ~]# curl  192.168.2.200
456456

常见问题:如果httpd服务启动启动的比较慢?
解决方法:可以修改/etc/httpd/conf/httpd.conf文件,
将ServerName www.example.com:80这行的#注释符删除即可。

3 ) 客户端访问测试

[root@proxy ~]# curl  192.168.2.100
123123
[root@proxy ~]# curl  192.168.2.200
456456

步骤二:部署LVS-NAT模式调度器

1 ) 确认调度器的路由转发功能(如果已经开启,可以忽略)

[root@web1 ~]# cat  /proc/sys/net/ipv4/ip_forward            #确认路由是否开启,0是没开启,1是已经开启
1
[root@proxy ~]# echo 1 > /proc/sys/net/ipv4/ip_forward        #临时修改
[root@proxy ~]# cat /proc/sys/net/ipv4/ip_forward
1
[root@proxy ~]# echo "net.ipv4.ip_forward = 1" >> /etc/sysctl.conf
#修改配置文件,设置永久规则


2)创建集群服务器

[root@proxy ~]# yum -y install ipvsadm
[root@proxy ~]# ipvsadm  -C  
[root@proxy ~]# ipvsadm -A -t 192.168.4.5:80 -s wrr

3)添加真实服务器

[root@proxy ~]# ipvsadm -a  -t 192.168.4.5:80  -r  192.168.2.100:80  -m
[root@proxy ~]# ipvsadm -a  -t 192.168.4.5:80  -r  192.168.2.200:80  -m

4)查看规则列表,并保存规则 

[root@proxy ~]# ipvsadm  -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.5:80 wrr-> 192.168.2.100:80             Masq    1      0          0         -> 192.168.2.200:80             Masq    1      0          0         
[root@proxy ~]# ipvsadm-save -n > /etc/sysconfig/ipvsadm

步骤三:客户端测试

客户端使用curl命令反复连接http://192.168.4.5,查看访问的页面是否会轮询到不同的后端真实服务器。

lvs集成在内核,只要Linux启动,lvs就自动集成[root@client ~]# curl  192.168.4.5
456456
[root@client ~]# curl  192.168.4.5
123123
[root@client ~]# curl  192.168.4.5
456456
[root@client ~]# curl  192.168.4.5
123123

LVS-DR集群

LVS-DR集群拓扑图

操作流程

  • Real Server :
  • 配置WEB服务器
  • 配置辅助IP地址,调整内核参数
  • Director Server :
  • 在上安装并启用ipvsadm
  • 配置辅助IP地址
  • 创建虚拟服务器,向虚拟服务器中加入节点
  • Client :
  • 连接虚拟服务器测试

ARP广播问题

  • 当客户端发起访问VIP时,对应的域名的请求时,根据网络通讯原理会产生ARR广播
  • 因为负载均衡器和真实的服务器在同一网络并且VIP设置在集群中的每个节点上
  • 此时集群内的真实服务器会尝试回答来自客户端的ARR广播,这就会产生问题,大家都说我是"VIP"

ARP防火墙

使用ARP防火墙也可以禁止对VIP的ARP请求

[root@client ~]# yum -y install arptables_if
[root@client ~]# arptables -A IN -d <virtual_ip> -j DROP
[root@client ~]# arptables -A IN -d OUT -s <virtual_ip> -j mangle \
>--mangle-ip-s <real_ip>

内核参数说明

  • arp_ignore(定义回复ARR广播方式)
  • 0(默认值)
  • 回应所有的本地地址ARR广播,本地地址可以配置在任意网络接口
  • 1
  • 只回应配置在入站网卡接口上的任意IP地址的ARR广播
  • arp_announce
  • 0(默认)
  • 使用配置在任意网卡接口上的本地IP地址
  • 2
  • 对查询目标使用最适当的本地地址.在此模式下将忽略这个IP数据包的源地址并尝试选择与能与该地址通信的本地地址.首要是选择所有的网络接口的子网中外出访问子网中包含该目标IP地址的本地地址.如果没有合适的地址被发现,将选择当前的发送网络接口或其他有可能接收到该ARR回应的网络接口来进行发送

部署LVS-DR集群

问题

使用LVS实现DR模式的集群调度服务器,为用户提供Web服务:

  • 客户端IP地址为192.168.4.10
  • LVS调度器VIP地址为192.168.4.15
  • LVS调度器DIP地址设置为192.168.4.5
  • 真实Web服务器地址分别为192.168.4.100、192.168.4.200
  • 使用加权轮询调度算法,web1的权重为1,web2的权重为2

说明:

  • CIP是客户端的IP地址;
  • VIP是对客户端提供服务的IP地址;
  • RIP是后端服务器的真实IP地址;
  • DIP是调度器与后端服务器通信的IP地址(VIP必须配置在虚拟接口)。

方案

使用4台虚拟机,1台作为客户端、1台作为Director调度器、2台作为Real Server,拓扑结构如图所示。实验拓扑结构主机配置细节如表所示。

步骤一:配置实验网络环境

1)设置Proxy服务器的VIP和DIP

注意:为了防止冲突,VIP必须要配置在网卡的虚拟接口!!!

[root@proxy ~]# cd /etc/sysconfig/network-scripts/
[root@proxy network-scripts]# ls 
ifcfg-eth0   ifdown-eth     ifdown-sit       ifup-eth    ifup-ppp       init.ipv6-global
ifcfg-eth1   ifdown-ippp    ifdown-Team      ifup-ippp   ifup-routes    network-functions
ifcfg-eth2   ifdown-ipv6    ifdown-TeamPort  ifup-ipv6   ifup-sit       network-functions-ipv6
ifcfg-eth3   ifdown-isdn    ifdown-tunnel    ifup-isdn   ifup-Team
ifcfg-lo     ifdown-post    ifup             ifup-plip   ifup-TeamPort
ifdown       ifdown-ppp     ifup-aliases     ifup-plusb  ifup-tunnel
ifdown-bnep  ifdown-routes  ifup-bnep        ifup-post   ifup-wireless
[root@proxy network-scripts]# cp  ifcfg-eth0{,:0}
[root@proxy network-scripts]# vim  ifcfg-eth0:0
1 TYPE=Ethernet                #网卡类型为:以太网卡
4 BOOTPROTO=none               #none手动配置IP,或者dhcp自动配置IP                 
6 NAME=eth0:0                  #网卡名称
7 DEVICE=eth0:0                  #设备名称
8 ONBOOT=yes                   #开机时是否自动激活该网卡
9 IPADDR=192.168.4.15          #IP地址
10 PREFIX=24                    #子网掩码
[root@proxy network-scripts]# systemctl  restart network            #重启
[root@proxy network-scripts]# ifconfig                              #此时多了一个eth0:0的网卡,其他主机也可以ping通该IP
eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500inet 192.168.4.5  netmask 255.255.255.0  broadcast 192.168.4.255ether 52:54:00:2f:40:71  txqueuelen 1000  (Ethernet)RX packets 11438  bytes 698521 (682.1 KiB)RX errors 0  dropped 8612  overruns 0  frame 0TX packets 1826  bytes 222235 (217.0 KiB)TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0eth0:0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500inet 192.168.4.15  netmask 255.255.255.0  broadcast 192.168.4.255ether 52:54:00:2f:40:71  txqueuelen 1000  (Ethernet).......[root@proxy ~]# ip a s  eth0          #查看ip的另一种方法
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000link/ether 52:54:00:2f:40:71 brd ff:ff:ff:ff:ff:ffinet 192.168.4.5/24 brd 192.168.4.255 scope global noprefixroute eth0valid_lft forever preferred_lft foreverinet 192.168.4.15/24 brd 192.168.4.255 scope global secondary noprefixroute eth0:0valid_lft forever preferred_lft forever[root@proxy ~]# cd /etc/sysconfig/network-scripts/
[root@proxy network-scripts]# ls 
ifcfg-eth0   ifdown-eth     ifdown-sit       ifup-eth    ifup-ppp       init.ipv6-global
ifcfg-eth1   ifdown-ippp    ifdown-Team      ifup-ippp   ifup-routes    network-functions
ifcfg-eth2   ifdown-ipv6    ifdown-TeamPort  ifup-ipv6   ifup-sit       network-functions-ipv6
ifcfg-eth3   ifdown-isdn    ifdown-tunnel    ifup-isdn   ifup-Team
ifcfg-lo     ifdown-post    ifup             ifup-plip   ifup-TeamPort
ifdown       ifdown-ppp     ifup-aliases     ifup-plusb  ifup-tunnel
ifdown-bnep  ifdown-routes  ifup-bnep        ifup-post   ifup-wireless
[root@proxy network-scripts]# cp  ifcfg-eth0{,:0}
[root@proxy network-scripts]# vim  ifcfg-eth0:0
1 TYPE=Ethernet                #网卡类型为:以太网卡
4 BOOTPROTO=none               #none手动配置IP,或者dhcp自动配置IP                 
6 NAME=eth0:0                  #网卡名称
7 DEVICE=eth0:0                  #设备名称
8 ONBOOT=yes                   #开机时是否自动激活该网卡
9 IPADDR=192.168.4.15          #IP地址
10 PREFIX=24                    #子网掩码
[root@proxy network-scripts]# systemctl  restart network            #重启
[root@proxy network-scripts]# ifconfig                              #此时多了一个eth0:0的网卡,其他主机也可以ping通该IP
eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500inet 192.168.4.5  netmask 255.255.255.0  broadcast 192.168.4.255ether 52:54:00:2f:40:71  txqueuelen 1000  (Ethernet)RX packets 11438  bytes 698521 (682.1 KiB)RX errors 0  dropped 8612  overruns 0  frame 0TX packets 1826  bytes 222235 (217.0 KiB)TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0eth0:0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500inet 192.168.4.15  netmask 255.255.255.0  broadcast 192.168.4.255ether 52:54:00:2f:40:71  txqueuelen 1000  (Ethernet).......[root@proxy ~]# ip a s  eth0          #查看ip的另一种方法
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000link/ether 52:54:00:2f:40:71 brd ff:ff:ff:ff:ff:ffinet 192.168.4.5/24 brd 192.168.4.255 scope global noprefixroute eth0valid_lft forever preferred_lft foreverinet 192.168.4.15/24 brd 192.168.4.255 scope global secondary noprefixroute eth0:0valid_lft forever preferred_lft forever

常见问题:RHEL7和Centos7系统中有两个管理网络的服务,有可能冲突?
解决方法:关闭NetworkManager服务后重启network即可。

[root@proxy network-scripts]# systemctl  stop NetworkManager 

2)设置Web1服务器网络参数

[root@web1 ~]# nmcli connection modify eth0 ipv4.method manual \
ipv4.addresses 192.168.4.100/24 connection.autoconnect yes
[root@web1 ~]# nmcli connection up eth0

接下来给web1配置VIP地址。
注意:这里的子网掩码必须是32(也就是全255),网络地址与IP地址一样,广播地址与IP地址也一样。

[root@web1 network-scripts]# cp  ifcfg-lo{,:0}1 DEVICE=lo:0                  #设备名称2 IPADDR=192.168.4.15          #IP地址3 NETMASK=255.255.255.255      #子网掩码4 NETWORK=192.168.4.15         #网络地址5 BROADCAST=192.168.4.15       #广播地址6 ONBOOT=yes                   #开机时是否自动激活该网卡7 NAME=lo:0                    #网卡名称

防止地址冲突的问题:
这里因为web1也配置与调度器一样的VIP地址,默认肯定会出现地址冲突;
sysctl.conf文件写入这下面四行的主要目的就是访问192.168.4.15的数据包,只有调度器会响应,其他主机都不做任何响应,这样防止地址冲突的问题。

[root@web1 network-scripts]# vim  /etc/sysctl.conf
#手动写入如下4行内容
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_announce = 2
#arp_ignore 当有arp广播问谁是192.168.4.15时,本机忽略该ARP广播,不做任何回应
#arp_announce 本机不要向外宣告自己的lo回环地址是192.168.4.15[root@web1 network-scripts]# sysctl  -p
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_announce = 2

重启网络服务,设置防火墙与SELinux

[root@web1 network-scripts]# systemctl  restart  network [root@web1 network-scripts]# ifconfig 
......
lo:0: flags=73<UP,LOOPBACK,RUNNING>  mtu 65536inet 192.168.4.15  netmask 255.255.255.255loop  txqueuelen 1000  (Local Loopback)

3)设置Web2服务器网络参数

[root@web2 ~]# nmcli connection modify eth0  ipv4.method manual ipv4.addresses 192.168.4.200/24  connection.autoconnect yes
[root@web2 ~]# nmcli connection up eth0 
连接已成功激活(D-Bus 活动路径:/org/freedesktop/NetworkManager/ActiveConnection/6)
[root@web2 ~]# ifconfig  eth0 
eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500inet 192.168.4.200  netmask 255.255.255.0  broadcast 192.168.4.255ether 52:54:00:3e:8d:bf  txqueuelen 1000  (Ethernet)RX packets 10245  bytes 533756 (521.2 KiB)RX errors 0  dropped 10193  overruns 0  frame 0TX packets 1  bytes 42 (42.0 B)TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

接下来给web2配置VIP地址
注意:这里的子网掩码必须是32(也就是全255),网络地址与IP地址一样,广播地址与IP地址也一样。

[root@web2 ~]# cd  /etc/sysconfig/network-scripts/
[root@web2 network-scripts]# vim  ifcfg-lo:01 DEVICE=lo:0                  #设备名称2 IPADDR=192.168.4.15          #IP地址3 NETMASK=255.255.255.255      #子网掩码4 NETWORK=192.168.4.15         #网络地址5 BROADCAST=192.168.4.15       #广播地址6 ONBOOT=yes                   #开机时是否自动激活该网卡7 NAME=lo:0                    #网卡名称

防止地址冲突的问题:
这里因为web1也配置与调度器一样的VIP地址,默认肯定会出现地址冲突;
sysctl.conf文件写入这下面四行的主要目的就是访问192.168.4.15的数据包,只有调度器会响应,其他主机都不做任何响应,这样防止地址冲突的问题。

[root@web2 ~]# vim /etc/sysctl.conf
[root@web2 network-scripts]# vim  /etc/sysctl.conf 
#手动写入如下4行内容
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_announce = 2
#arp_ignore 当有arp广播问谁是192.168.4.15时,本机忽略该ARP广播,不做任何回应
#arp_announce 本机不要向外宣告自己的lo回环地址是192.168.4.15
[root@web2 network-scripts]# sysctl -p
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_announce = 2

重启网络服务,设置防火墙与SELinux

[root@web2 network-scripts]# systemctl restart  network 
[root@web2 network-scripts]# ifconfig 
....
lo:0: flags=73<UP,LOOPBACK,RUNNING>  mtu 65536inet 192.168.4.15  netmask 255.255.255.255loop  txqueuelen 1000  (Local Loopback)

步骤二:proxy调度器安装软件并部署LVS-DR模式调度器

1)安装软件(如果已经安装,此步骤可以忽略)

[root@proxy ~]# yum -y install ipvsadm

2)清理之前实验的规则,创建新的集群服务器规则

[root@proxy ~]# ipvsadm -C                                #清空所有规则
[root@proxy ~]# ipvsadm -A -t 192.168.4.15:80 -s wrr

3)添加真实服务器(-g参数设置LVS工作模式为DR模式,-w设置权重)

[root@proxy network-scripts]# ipvsadm  -a  -t  192.168.4.15:80   -r  192.168.4.100:80   
[root@proxy network-scripts]# ipvsadm  -a  -t  192.168.4.15:80   -r  192.168.4.200:80   

4)查看规则列表,并保存规则

[root@proxy network-scripts]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags-> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.4.15:80 wrr-> 192.168.4.100:80             Route   1      0          0         -> 192.168.4.200:80             Route   1      0          0         

步骤三:客户端测试

客户端使用curl命令反复连接http://192.168.4.15,查看访问的页面是否会轮询到不同的后端真实服务器。
扩展知识:默认LVS不带健康检查功能,需要自己手动编写动态检测脚本,实现该功能:(参考脚本如下,仅供参考)

[root@client ~]# curl 192.168.4.15                     
456456
[root@client ~]# curl 192.168.4.15
123123
[root@client ~]# curl 192.168.4.15
456456
[root@client ~]# curl 192.168.4.15
123123
[root@client ~]# curl 192.168.4.15
456456

脚本如下:

[root@proxy ~]# vim  jiancha.sh 
#!/bin/bash 
vip=192.168.4.15:80
rip1=192.168.4.100
rip2=192.168.4.200
while :
dofor  IP  in $rip1  $rip2docurl  -s  http://$IP &>  /dev/null
if [ $?  -eq 0  ];thenipvsadm  -Ln  |  grep -q  $IP  || ipvsadm  -a  -t  $vip  -r  $vipelseipvsadm  -Ln  |  grep -q  $IP  &&  ipvsadm  -d  -t  $vip -r $vipfi
donesleep 1
done
[root@proxy ~]# chmod +x check.sh
##usleep 沉睡(毫秒)

 

查看全文
如若内容造成侵权/违法违规/事实不符,请联系编程学习网邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!

相关文章

  1. Cobaltstrike系列教程(九)内置Socks与神器EW

    0x000-前文 有技术交流或渗透测试培训需求的朋友欢迎联系QQ547006660 2000人网络安全交流群,欢迎大佬们来玩 群号820783253 0x001-Socks概念 目前利用网络防火墙将组织内部的网络结构与外部网络如 INTERNET 中有效地隔离开来,这种方法正变得逐渐流行起来。这些防火墙系统通常…...

    2024/4/28 9:51:42
  2. Linux DHCP服务的配置(DHCP服务器+客户端+中继器 中继器被分配保留地址)

    准备四个虚拟机和一个物理机 连成一个拓扑结构服务器的IP配置网关机的网卡配置中继器的IP配置基本配置完毕 开始配置DHCP服务网关上开启Linux的IP路由转发功能重载内核控制文件注释掉报错的代码后重载测试内外网的连通性 测试网关是否起到了路由器的作用 网关的防火墙需要关闭中…...

    2024/4/27 22:35:01
  3. 2019年文章精选,分类整理,顺带聊几句时间观念

    写在前面首先,祝大家新年快乐,在国人的情结里,现在才是真正的年底,估计现在好多朋友已经陆续回家过节去了,祝回家的路顺风。过年回去就好好陪伴家人,不要看一些毒瘤号写的,过年时间弯道超越别人,趁着假期学习什么各种新知识,这完全瞎扯,这一年的时间该努力,努力了,…...

    2024/3/29 14:01:23
  4. MySQL——索引基础知识梳理Ⅰ

    定义:MySQL官方对索引(Index)的定义为:是帮助MySQL高效获取数据的数据结构。索引可以简单理解为排好序的快速查找数据结构,目的在于提高查找效率,可以类比字典。索引会形象到where后面的查找和order by后面的排序。一般索引本身也很大,不可能全部存储在内存中,因此索引常…...

    2024/4/28 11:03:12
  5. JAVA24种模式-------builder模式

    JAVA24种模式-------builder模式``刚学java一个学期就被导师要求了解java24种设计模式,明明练习都没有两年半啊。希望我能在写博客的时候能慢慢学会builder模式。第一次用markdown,排版不好的地方以及对我写的内容有不同理解的欢迎指出、留言、私信。:)废话不多说,下面就来…...

    2024/4/5 11:15:06
  6. 专科生该选择学习云计算还是web前端

    首先,云计算目前是IT行业的一个热点领域,随着云计算在更多的行业开始落地应用,云计算领域也会释放出大量的工作机会,但是从近些年云计算领域的人才需求情况来看,依然以研发型人才居多,所以大专生选择云计算专业应该慎重一些。从课程体系结构来看,专科教育的云计算专业更…...

    2024/4/25 2:10:54
  7. h5滚动导致setTimeout设置的动画错乱

    前端技术交流分享本人在前端技术道路上面的经验vieber9.90去订阅解决思路,在滚动的时候停止播放动画,在滚动停止的时候恢复动画显示 addEventScorll() {let t1 = 0;let t2 = 0;document.onscroll = function() {clearTimeout(this.time);t1 = document.documentElement.scrol…...

    2024/4/26 2:08:16
  8. 找不到ftd2xx.dll和pycharm无法导入ftd2xx模块

    FTD2XX.dll找不到,需要把FTD2XX.dll放进 C:\Windows\SysWOW64 目录下(64位系统), 东西在文章附件里有。 pycharm中如果 想要导入ftd2xx模块,需要先升级 pip install --upgrade pippip install --upgrade setuptoolspip install --upgrade distribute然后在使用pycharm自带的升级…...

    2024/3/29 14:01:18
  9. 可行性研究、需求分析

    可行性研究五个方面讨论:1.经济可行性2.技术可行性3.操作可行性4.法律可行性5.时间可行性问题的识别:了解已解决的问题,这些问题是如何提出的;如何解决才能满足要求;了解问题结构。市场调查:了解市场相同软件;需求情况分析准备:确定分析计划(开发计划,人员);培训人…...

    2024/4/24 8:37:17
  10. ps快捷键

    画笔 B 橡皮 E 拾色器 Alt 合并图层 ctrl+选2图层+E 取消选区 ctrl+D 全选 右键载入选区 只选单色 右键 色彩范围 附加图层 新建+alt+点击两个图层中间位置 移动区域 套索+右键拷贝图层 移动 V 变换 ctrl+T 等比例 shift 应用 按第一个键 +A 钢笔 按住不放拉曲线 隐藏调…...

    2024/3/29 14:01:16
  11. 未来Web前端工程师生命周期延长,这些技术成为你的救命稻草!

    Web前端工程师是当前IT行业内从业人群相对比较大的岗位,在移动互联网的推动下,Web前端工程师的岗位任务边界也在不断得到拓展,逐渐在向移动端进行覆盖,同时在云计算的推动下,一部分Web前端工程师还需要从事一定的后端开发任务,所以当前的前端开发也被称为“大前端”。早期…...

    2024/4/10 5:09:53
  12. 想拿到BAT的前端开发岗offer,并没有想象中的那么难!

    没过多久就要到年底啦,也意味着春招不远了,我们知道,这两年整体经济情况并不是很好,名企的扩招名额较少,只有做了万全的准备,才有最大的把握能够拿下心仪的岗位,那么要拿到BAT大厂的前端岗offer,究竟有多难呢?你需要掌握以下的技术!1. 要有比较好的计算机基础 这里的…...

    2024/4/10 5:28:45
  13. PTA L1-037 A除以B (10分)

    题目描述:真的是简单题哈 —— 给定两个绝对值不超过100的整数A和B,要求你按照“A/B=商”的格式输出结果。输入格式:输入在第一行给出两个整数A和B(−100≤A,B≤100),数字间以空格分隔。输出格式:在一行中输出结果:如果分母是正数,则输出“A/B=商”;如果分母是负数,…...

    2024/4/8 11:27:33
  14. 8.池化内存分配

    netty内存管理思想 PooledByteBufAllocate PoolChunkChunk初始化 PoolChunk分配内存netty内存管理思想 java作为一门拥有GC机制的语言,长久以来它的使用者都不必手动管理内存,这比起c/c 是一个巨大的进步。但现在netty却反其道而行之,实现了一套不依赖GC而自行管理内存的机…...

    2024/4/19 9:04:45
  15. 二流公司前端,月入账工资3万元「web前端薪资如何?」

    一个好的 Web 前端年薪会有多少? 作为一名普通员工来说的话,比较好的公司会给什么待遇呢? 匿名用户昨天发的工资,匿了,二流互联网公司前端。2013年底的行情 拿了一年了。 update2017年拿了半年了… 这次不算奖金了 每月到手的。 罗龙浩支付宝口碑前端负责人2012年行情: 做…...

    2024/3/29 6:52:27
  16. 寒假训练E

    题目 In mathematics, the greatest common divisor (gcd), also known as the greatest common factor (gcf), highest common factor (hcf), or greatest common measure (gcm), of two or more integers (when at least one of them is not zero), is the largest positive …...

    2024/3/29 6:52:26
  17. 联想电脑Alt+Tab应用切换慢

    原因 联想电脑的服务System Interface Foundation Service运行,引起Alt+Tab组合键应用切换速度慢 解决步骤电脑桌面在我的电脑图标上右键管理 选择服务与应用程序 选择服务,并双击 找到System Interface Foundation Service,并双击 停止该服务,并设置启动类型为禁止...

    2024/4/25 19:56:59
  18. 01两数之和

    文章目录leetcode01:[两数之和](https://leetcode-cn.com/problems/two-sum/)题目描述:solution idea简单暴力穷举c++ 语法STL-vector 基本操作初始化和定义对象vector 的对象也可以是vector向vector 对象中添加元素其它操作参考文献 leetcode01:两数之和 题目描述: 给定一个…...

    2024/4/17 20:00:35
  19. 动画状态机 Blend Trees

    文章目录Blend Tree1D BlendingParameter RangeThreshold 阈值Automate Thresholds 自动分配阈值Compute Thresholds 计算阈值(根据Root Motion数据)2D Blending2D 混合图PositionsDirect Bending Blend Tree 游戏中,可能需要混合多个动画来实现一些效果。比如,通过角色的移动…...

    2024/4/25 3:07:25
  20. 轻工业大学OJ 1067*

    首先这道题是想了30min+才解决的,还有一点问题就是i和j的初值问题还没理解,确实太绕了,能AC出来已经不容易了,有时间再细想,理理思绪。问题如下:代码如下: #include<stdio.h> int main() {int num,flag,j=-1;scanf("%d",&num);for(int i=0;i<=nu…...

    2024/4/19 13:38:21

最新文章

  1. idea启动之java.net.BindException: Address already in use: bind

    背景&#xff1a; 在win10上安装docker desktop 后&#xff0c;重启电脑&#xff0c;打开idea&#xff0c;提示端口被占用。 一、遇到的问题 打开idea2022.3.3提示以下提示&#xff1a; Internal error. Please refer to https://jb.gg/ide/critical-startup-errorsjava.ne…...

    2024/4/28 12:36:29
  2. 梯度消失和梯度爆炸的一些处理方法

    在这里是记录一下梯度消失或梯度爆炸的一些处理技巧。全当学习总结了如有错误还请留言&#xff0c;在此感激不尽。 权重和梯度的更新公式如下&#xff1a; w w − η ⋅ ∇ w w w - \eta \cdot \nabla w ww−η⋅∇w 个人通俗的理解梯度消失就是网络模型在反向求导的时候出…...

    2024/3/20 10:50:27
  3. PCF8591(ADDA转换芯片)

    工具 1.Proteus 8 仿真器 2.keil 5 编辑器 原理图 讲解 PCF8591是一个单片集成、单独供电、低功耗、8-bit CMOS数据获取器件。PCF8591具有4个模拟输入、1个模拟输出和1个串行IC总线接口。PCF8591的3个地址引脚A0, A1和A2可用于硬件地址编程&#xff0c;允许在同个I2C总线上接…...

    2024/4/21 20:37:03
  4. 【Easy云盘 | 第十三篇】分享模块(获取目录信息、获取文件信息、创建下载链接)

    文章目录 4.4.7获取目录信息4.4.8获取文件信息4.4.9创建下载链接 4.4.7获取目录信息 明天做 4.4.8获取文件信息 明天做 4.4.9创建下载链接 明天做...

    2024/4/26 15:10:14
  5. 鸿蒙OS开发实例:【应用事件打点】

    简介 传统的日志系统里汇聚了整个设备上所有程序运行的过程流水日志&#xff0c;难以识别其中的关键信息。因此&#xff0c;应用开发者需要一种数据打点机制&#xff0c;用来评估如访问数、日活、用户操作习惯以及影响用户使用的关键因素等关键信息。 HiAppEvent是在系统层面…...

    2024/4/27 19:15:54
  6. 【外汇早评】美通胀数据走低,美元调整

    原标题:【外汇早评】美通胀数据走低,美元调整昨日美国方面公布了新一期的核心PCE物价指数数据,同比增长1.6%,低于前值和预期值的1.7%,距离美联储的通胀目标2%继续走低,通胀压力较低,且此前美国一季度GDP初值中的消费部分下滑明显,因此市场对美联储后续更可能降息的政策…...

    2024/4/26 18:09:39
  7. 【原油贵金属周评】原油多头拥挤,价格调整

    原标题:【原油贵金属周评】原油多头拥挤,价格调整本周国际劳动节,我们喜迎四天假期,但是整个金融市场确实流动性充沛,大事频发,各个商品波动剧烈。美国方面,在本周四凌晨公布5月份的利率决议和新闻发布会,维持联邦基金利率在2.25%-2.50%不变,符合市场预期。同时美联储…...

    2024/4/28 3:28:32
  8. 【外汇周评】靓丽非农不及疲软通胀影响

    原标题:【外汇周评】靓丽非农不及疲软通胀影响在刚结束的周五,美国方面公布了新一期的非农就业数据,大幅好于前值和预期,新增就业重新回到20万以上。具体数据: 美国4月非农就业人口变动 26.3万人,预期 19万人,前值 19.6万人。 美国4月失业率 3.6%,预期 3.8%,前值 3…...

    2024/4/26 23:05:52
  9. 【原油贵金属早评】库存继续增加,油价收跌

    原标题:【原油贵金属早评】库存继续增加,油价收跌周三清晨公布美国当周API原油库存数据,上周原油库存增加281万桶至4.692亿桶,增幅超过预期的74.4万桶。且有消息人士称,沙特阿美据悉将于6月向亚洲炼油厂额外出售更多原油,印度炼油商预计将每日获得至多20万桶的额外原油供…...

    2024/4/27 4:00:35
  10. 【外汇早评】日本央行会议纪要不改日元强势

    原标题:【外汇早评】日本央行会议纪要不改日元强势近两日日元大幅走强与近期市场风险情绪上升,避险资金回流日元有关,也与前一段时间的美日贸易谈判给日本缓冲期,日本方面对汇率问题也避免继续贬值有关。虽然今日早间日本央行公布的利率会议纪要仍然是支持宽松政策,但这符…...

    2024/4/27 17:58:04
  11. 【原油贵金属早评】欧佩克稳定市场,填补伊朗问题的影响

    原标题:【原油贵金属早评】欧佩克稳定市场,填补伊朗问题的影响近日伊朗局势升温,导致市场担忧影响原油供给,油价试图反弹。此时OPEC表态稳定市场。据消息人士透露,沙特6月石油出口料将低于700万桶/日,沙特已经收到石油消费国提出的6月份扩大出口的“适度要求”,沙特将满…...

    2024/4/27 14:22:49
  12. 【外汇早评】美欲与伊朗重谈协议

    原标题:【外汇早评】美欲与伊朗重谈协议美国对伊朗的制裁遭到伊朗的抗议,昨日伊朗方面提出将部分退出伊核协议。而此行为又遭到欧洲方面对伊朗的谴责和警告,伊朗外长昨日回应称,欧洲国家履行它们的义务,伊核协议就能保证存续。据传闻伊朗的导弹已经对准了以色列和美国的航…...

    2024/4/28 1:28:33
  13. 【原油贵金属早评】波动率飙升,市场情绪动荡

    原标题:【原油贵金属早评】波动率飙升,市场情绪动荡因中美贸易谈判不安情绪影响,金融市场各资产品种出现明显的波动。随着美国与中方开启第十一轮谈判之际,美国按照既定计划向中国2000亿商品征收25%的关税,市场情绪有所平复,已经开始接受这一事实。虽然波动率-恐慌指数VI…...

    2024/4/27 9:01:45
  14. 【原油贵金属周评】伊朗局势升温,黄金多头跃跃欲试

    原标题:【原油贵金属周评】伊朗局势升温,黄金多头跃跃欲试美国和伊朗的局势继续升温,市场风险情绪上升,避险黄金有向上突破阻力的迹象。原油方面稍显平稳,近期美国和OPEC加大供给及市场需求回落的影响,伊朗局势并未推升油价走强。近期中美贸易谈判摩擦再度升级,美国对中…...

    2024/4/27 17:59:30
  15. 【原油贵金属早评】市场情绪继续恶化,黄金上破

    原标题:【原油贵金属早评】市场情绪继续恶化,黄金上破周初中国针对于美国加征关税的进行的反制措施引发市场情绪的大幅波动,人民币汇率出现大幅的贬值动能,金融市场受到非常明显的冲击。尤其是波动率起来之后,对于股市的表现尤其不安。隔夜美国股市出现明显的下行走势,这…...

    2024/4/25 18:39:16
  16. 【外汇早评】美伊僵持,风险情绪继续升温

    原标题:【外汇早评】美伊僵持,风险情绪继续升温昨日沙特两艘油轮再次发生爆炸事件,导致波斯湾局势进一步恶化,市场担忧美伊可能会出现摩擦生火,避险品种获得支撑,黄金和日元大幅走强。美指受中美贸易问题影响而在低位震荡。继5月12日,四艘商船在阿联酋领海附近的阿曼湾、…...

    2024/4/28 1:34:08
  17. 【原油贵金属早评】贸易冲突导致需求低迷,油价弱势

    原标题:【原油贵金属早评】贸易冲突导致需求低迷,油价弱势近日虽然伊朗局势升温,中东地区几起油船被袭击事件影响,但油价并未走高,而是出于调整结构中。由于市场预期局势失控的可能性较低,而中美贸易问题导致的全球经济衰退风险更大,需求会持续低迷,因此油价调整压力较…...

    2024/4/26 19:03:37
  18. 氧生福地 玩美北湖(上)——为时光守候两千年

    原标题:氧生福地 玩美北湖(上)——为时光守候两千年一次说走就走的旅行,只有一张高铁票的距离~ 所以,湖南郴州,我来了~ 从广州南站出发,一个半小时就到达郴州西站了。在动车上,同时改票的南风兄和我居然被分到了一个车厢,所以一路非常愉快地聊了过来。 挺好,最起…...

    2024/4/28 1:22:35
  19. 氧生福地 玩美北湖(中)——永春梯田里的美与鲜

    原标题:氧生福地 玩美北湖(中)——永春梯田里的美与鲜一觉醒来,因为大家太爱“美”照,在柳毅山庄去寻找龙女而错过了早餐时间。近十点,向导坏坏还是带着饥肠辘辘的我们去吃郴州最富有盛名的“鱼头粉”。说这是“十二分推荐”,到郴州必吃的美食之一。 哇塞!那个味美香甜…...

    2024/4/25 18:39:14
  20. 氧生福地 玩美北湖(下)——奔跑吧骚年!

    原标题:氧生福地 玩美北湖(下)——奔跑吧骚年!让我们红尘做伴 活得潇潇洒洒 策马奔腾共享人世繁华 对酒当歌唱出心中喜悦 轰轰烈烈把握青春年华 让我们红尘做伴 活得潇潇洒洒 策马奔腾共享人世繁华 对酒当歌唱出心中喜悦 轰轰烈烈把握青春年华 啊……啊……啊 两…...

    2024/4/26 23:04:58
  21. 扒开伪装医用面膜,翻六倍价格宰客,小姐姐注意了!

    原标题:扒开伪装医用面膜,翻六倍价格宰客,小姐姐注意了!扒开伪装医用面膜,翻六倍价格宰客!当行业里的某一品项火爆了,就会有很多商家蹭热度,装逼忽悠,最近火爆朋友圈的医用面膜,被沾上了污点,到底怎么回事呢? “比普通面膜安全、效果好!痘痘、痘印、敏感肌都能用…...

    2024/4/27 23:24:42
  22. 「发现」铁皮石斛仙草之神奇功效用于医用面膜

    原标题:「发现」铁皮石斛仙草之神奇功效用于医用面膜丽彦妆铁皮石斛医用面膜|石斛多糖无菌修护补水贴19大优势: 1、铁皮石斛:自唐宋以来,一直被列为皇室贡品,铁皮石斛生于海拔1600米的悬崖峭壁之上,繁殖力差,产量极低,所以古代仅供皇室、贵族享用 2、铁皮石斛自古民间…...

    2024/4/28 5:48:52
  23. 丽彦妆\医用面膜\冷敷贴轻奢医学护肤引导者

    原标题:丽彦妆\医用面膜\冷敷贴轻奢医学护肤引导者【公司简介】 广州华彬企业隶属香港华彬集团有限公司,专注美业21年,其旗下品牌: 「圣茵美」私密荷尔蒙抗衰,产后修复 「圣仪轩」私密荷尔蒙抗衰,产后修复 「花茵莳」私密荷尔蒙抗衰,产后修复 「丽彦妆」专注医学护…...

    2024/4/26 19:46:12
  24. 广州械字号面膜生产厂家OEM/ODM4项须知!

    原标题:广州械字号面膜生产厂家OEM/ODM4项须知!广州械字号面膜生产厂家OEM/ODM流程及注意事项解读: 械字号医用面膜,其实在我国并没有严格的定义,通常我们说的医美面膜指的应该是一种「医用敷料」,也就是说,医用面膜其实算作「医疗器械」的一种,又称「医用冷敷贴」。 …...

    2024/4/27 11:43:08
  25. 械字号医用眼膜缓解用眼过度到底有无作用?

    原标题:械字号医用眼膜缓解用眼过度到底有无作用?医用眼膜/械字号眼膜/医用冷敷眼贴 凝胶层为亲水高分子材料,含70%以上的水分。体表皮肤温度传导到本产品的凝胶层,热量被凝胶内水分子吸收,通过水分的蒸发带走大量的热量,可迅速地降低体表皮肤局部温度,减轻局部皮肤的灼…...

    2024/4/27 8:32:30
  26. 配置失败还原请勿关闭计算机,电脑开机屏幕上面显示,配置失败还原更改 请勿关闭计算机 开不了机 这个问题怎么办...

    解析如下&#xff1a;1、长按电脑电源键直至关机&#xff0c;然后再按一次电源健重启电脑&#xff0c;按F8健进入安全模式2、安全模式下进入Windows系统桌面后&#xff0c;按住“winR”打开运行窗口&#xff0c;输入“services.msc”打开服务设置3、在服务界面&#xff0c;选中…...

    2022/11/19 21:17:18
  27. 错误使用 reshape要执行 RESHAPE,请勿更改元素数目。

    %读入6幅图像&#xff08;每一幅图像的大小是564*564&#xff09; f1 imread(WashingtonDC_Band1_564.tif); subplot(3,2,1),imshow(f1); f2 imread(WashingtonDC_Band2_564.tif); subplot(3,2,2),imshow(f2); f3 imread(WashingtonDC_Band3_564.tif); subplot(3,2,3),imsho…...

    2022/11/19 21:17:16
  28. 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机...

    win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”问题的解决方法在win7系统关机时如果有升级系统的或者其他需要会直接进入一个 等待界面&#xff0c;在等待界面中我们需要等待操作结束才能关机&#xff0c;虽然这比较麻烦&#xff0c;但是对系统进行配置和升级…...

    2022/11/19 21:17:15
  29. 台式电脑显示配置100%请勿关闭计算机,“准备配置windows 请勿关闭计算机”的解决方法...

    有不少用户在重装Win7系统或更新系统后会遇到“准备配置windows&#xff0c;请勿关闭计算机”的提示&#xff0c;要过很久才能进入系统&#xff0c;有的用户甚至几个小时也无法进入&#xff0c;下面就教大家这个问题的解决方法。第一种方法&#xff1a;我们首先在左下角的“开始…...

    2022/11/19 21:17:14
  30. win7 正在配置 请勿关闭计算机,怎么办Win7开机显示正在配置Windows Update请勿关机...

    置信有很多用户都跟小编一样遇到过这样的问题&#xff0c;电脑时发现开机屏幕显现“正在配置Windows Update&#xff0c;请勿关机”(如下图所示)&#xff0c;而且还需求等大约5分钟才干进入系统。这是怎样回事呢&#xff1f;一切都是正常操作的&#xff0c;为什么开时机呈现“正…...

    2022/11/19 21:17:13
  31. 准备配置windows 请勿关闭计算机 蓝屏,Win7开机总是出现提示“配置Windows请勿关机”...

    Win7系统开机启动时总是出现“配置Windows请勿关机”的提示&#xff0c;没过几秒后电脑自动重启&#xff0c;每次开机都这样无法进入系统&#xff0c;此时碰到这种现象的用户就可以使用以下5种方法解决问题。方法一&#xff1a;开机按下F8&#xff0c;在出现的Windows高级启动选…...

    2022/11/19 21:17:12
  32. 准备windows请勿关闭计算机要多久,windows10系统提示正在准备windows请勿关闭计算机怎么办...

    有不少windows10系统用户反映说碰到这样一个情况&#xff0c;就是电脑提示正在准备windows请勿关闭计算机&#xff0c;碰到这样的问题该怎么解决呢&#xff0c;现在小编就给大家分享一下windows10系统提示正在准备windows请勿关闭计算机的具体第一种方法&#xff1a;1、2、依次…...

    2022/11/19 21:17:11
  33. 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”的解决方法...

    今天和大家分享一下win7系统重装了Win7旗舰版系统后&#xff0c;每次关机的时候桌面上都会显示一个“配置Windows Update的界面&#xff0c;提示请勿关闭计算机”&#xff0c;每次停留好几分钟才能正常关机&#xff0c;导致什么情况引起的呢&#xff1f;出现配置Windows Update…...

    2022/11/19 21:17:10
  34. 电脑桌面一直是清理请关闭计算机,windows7一直卡在清理 请勿关闭计算机-win7清理请勿关机,win7配置更新35%不动...

    只能是等着&#xff0c;别无他法。说是卡着如果你看硬盘灯应该在读写。如果从 Win 10 无法正常回滚&#xff0c;只能是考虑备份数据后重装系统了。解决来方案一&#xff1a;管理员运行cmd&#xff1a;net stop WuAuServcd %windir%ren SoftwareDistribution SDoldnet start WuA…...

    2022/11/19 21:17:09
  35. 计算机配置更新不起,电脑提示“配置Windows Update请勿关闭计算机”怎么办?

    原标题&#xff1a;电脑提示“配置Windows Update请勿关闭计算机”怎么办&#xff1f;win7系统中在开机与关闭的时候总是显示“配置windows update请勿关闭计算机”相信有不少朋友都曾遇到过一次两次还能忍但经常遇到就叫人感到心烦了遇到这种问题怎么办呢&#xff1f;一般的方…...

    2022/11/19 21:17:08
  36. 计算机正在配置无法关机,关机提示 windows7 正在配置windows 请勿关闭计算机 ,然后等了一晚上也没有关掉。现在电脑无法正常关机...

    关机提示 windows7 正在配置windows 请勿关闭计算机 &#xff0c;然后等了一晚上也没有关掉。现在电脑无法正常关机以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容&#xff0c;让我们赶快一起来看一下吧&#xff01;关机提示 windows7 正在配…...

    2022/11/19 21:17:05
  37. 钉钉提示请勿通过开发者调试模式_钉钉请勿通过开发者调试模式是真的吗好不好用...

    钉钉请勿通过开发者调试模式是真的吗好不好用 更新时间:2020-04-20 22:24:19 浏览次数:729次 区域: 南阳 > 卧龙 列举网提醒您:为保障您的权益,请不要提前支付任何费用! 虚拟位置外设器!!轨迹模拟&虚拟位置外设神器 专业用于:钉钉,外勤365,红圈通,企业微信和…...

    2022/11/19 21:17:05
  38. 配置失败还原请勿关闭计算机怎么办,win7系统出现“配置windows update失败 还原更改 请勿关闭计算机”,长时间没反应,无法进入系统的解决方案...

    前几天班里有位学生电脑(windows 7系统)出问题了&#xff0c;具体表现是开机时一直停留在“配置windows update失败 还原更改 请勿关闭计算机”这个界面&#xff0c;长时间没反应&#xff0c;无法进入系统。这个问题原来帮其他同学也解决过&#xff0c;网上搜了不少资料&#x…...

    2022/11/19 21:17:04
  39. 一个电脑无法关闭计算机你应该怎么办,电脑显示“清理请勿关闭计算机”怎么办?...

    本文为你提供了3个有效解决电脑显示“清理请勿关闭计算机”问题的方法&#xff0c;并在最后教给你1种保护系统安全的好方法&#xff0c;一起来看看&#xff01;电脑出现“清理请勿关闭计算机”在Windows 7(SP1)和Windows Server 2008 R2 SP1中&#xff0c;添加了1个新功能在“磁…...

    2022/11/19 21:17:03
  40. 请勿关闭计算机还原更改要多久,电脑显示:配置windows更新失败,正在还原更改,请勿关闭计算机怎么办...

    许多用户在长期不使用电脑的时候&#xff0c;开启电脑发现电脑显示&#xff1a;配置windows更新失败&#xff0c;正在还原更改&#xff0c;请勿关闭计算机。。.这要怎么办呢&#xff1f;下面小编就带着大家一起看看吧&#xff01;如果能够正常进入系统&#xff0c;建议您暂时移…...

    2022/11/19 21:17:02
  41. 还原更改请勿关闭计算机 要多久,配置windows update失败 还原更改 请勿关闭计算机,电脑开机后一直显示以...

    配置windows update失败 还原更改 请勿关闭计算机&#xff0c;电脑开机后一直显示以以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容&#xff0c;让我们赶快一起来看一下吧&#xff01;配置windows update失败 还原更改 请勿关闭计算机&#x…...

    2022/11/19 21:17:01
  42. 电脑配置中请勿关闭计算机怎么办,准备配置windows请勿关闭计算机一直显示怎么办【图解】...

    不知道大家有没有遇到过这样的一个问题&#xff0c;就是我们的win7系统在关机的时候&#xff0c;总是喜欢显示“准备配置windows&#xff0c;请勿关机”这样的一个页面&#xff0c;没有什么大碍&#xff0c;但是如果一直等着的话就要两个小时甚至更久都关不了机&#xff0c;非常…...

    2022/11/19 21:17:00
  43. 正在准备配置请勿关闭计算机,正在准备配置windows请勿关闭计算机时间长了解决教程...

    当电脑出现正在准备配置windows请勿关闭计算机时&#xff0c;一般是您正对windows进行升级&#xff0c;但是这个要是长时间没有反应&#xff0c;我们不能再傻等下去了。可能是电脑出了别的问题了&#xff0c;来看看教程的说法。正在准备配置windows请勿关闭计算机时间长了方法一…...

    2022/11/19 21:16:59
  44. 配置失败还原请勿关闭计算机,配置Windows Update失败,还原更改请勿关闭计算机...

    我们使用电脑的过程中有时会遇到这种情况&#xff0c;当我们打开电脑之后&#xff0c;发现一直停留在一个界面&#xff1a;“配置Windows Update失败&#xff0c;还原更改请勿关闭计算机”&#xff0c;等了许久还是无法进入系统。如果我们遇到此类问题应该如何解决呢&#xff0…...

    2022/11/19 21:16:58
  45. 如何在iPhone上关闭“请勿打扰”

    Apple’s “Do Not Disturb While Driving” is a potentially lifesaving iPhone feature, but it doesn’t always turn on automatically at the appropriate time. For example, you might be a passenger in a moving car, but your iPhone may think you’re the one dri…...

    2022/11/19 21:16:57