【Cache】Squid代理服务器应用

朱雀 2024-04-06 14:48 206阅读 0赞

文章目录

  • 一、Squid 服务器的概念
      1. 代理服务器概述
      • CDN 服务器
      1. 代理的工作机制
      1. Squid 服务器的作用
      1. Squid 代理的类型
  • 二、部署 Squid 服务器
      1. 安装 Squid 服务
      • 1.1 编译安装 Squid
      • 1.2 修改 Squid 的配置文件
      • 1.3 Squid 的运行控制
      • 1.4 创建 Squid 服务脚本
      • 1.5 supervisor 管理服务
      1. 构建传统代理服务器
      • 2.1 squid服务器配置
      • 2.2 nginx 服务器配置
      • 2.3 windows 客户端配置
      1. 构建透明代理服务器
      • 3.1 Squid 服务器配置
      • 3.2 Web服务器配置
      • 3.3 客户端配置
  • 三、Squid 中 ACL 的使用
      1. 定义访问控制列表
      • 1.1 方法1：直接定义访问控制
      • 1.2 方法2：启动对象列表管理
      1. 验证
  • 四、Squid 日志分析工具 Sarg
      1. 安装软件包
      1. 修改配置文件
      1. 网页验证
      1. 加入计划性任务
  • 五、Squid 反向代理
      1. 工作机制
      1. 服务器部署
      • 2.1 suqid服务器配置
      • 2.2 节点服务器配置
  • 总结
    • CDN 服务器
        1. CDN 的概念
        1. CDN 的工作原理

一、Squid 服务器的概念

1. 代理服务器概述

  代理服务器是一个位于客户端和原始（资源）服务器之间的服务器，为了从原始服务器取得内容，客户端向代理服务器发送一个请求并指定目标原始服务器，然后代理服务器向原始服务器转交请求并将获得的内容返回给客户端。

  缓存代理对于web至关重要，尤其对于大型高负载web站点。缓存可作为性能优化的一个重要手段，可以极大诚轻后瑞服务器的负载。通常对于蓓态谈源。即较少经常更新社资源，如图片，css或js等进行缓存，从而在每次刷新浏览器的时候，不用重新请求，而是从缓存里面读取，这样就可以减轻服务器的压力。

   Web应用型服务器有四种，分别是Squid、Nginx、Varnish、CDN，其中Squid主要提供缓存加速、应用层过滤控制功能。

CDN 服务器

概念

  CDN的全称是(Content Delivery Network)，即内容分发网络。

  目的是通过在现有的Internet中增加一层新的CACHE(缓存)层，将网站的内容发布到最接近用户的网络”边缘“的节点，使用户可以就近取得所需的内容，提高用户访问网站的响应速度。从技术上全面解决由于网络带宽小、用户访问量大、网点分布不均等原因，提高用户访问网站的响应速度。

工作原理

  CDN的工作原理就是将您源站的资源缓存到位于全球各地的CDN节点上，用户请求资源时，就近返回节点上缓存的资源，而不需要每个用户的请求都回您的源站获取，避免网络拥塞、缓解源站压力，保证用户访问资源的速度和体验。

工作过程

  1. 当用户输入网址回车后，经过本地DNS系统解析，DNS会将最终的域名解析权交给CNAME 指向的CDN 专用DNS服务器。
  2. CDN的DNS服务器将 CDN的全局负载均衡 设备ip 地址返回给浏览器
  3. 用户向 CDN的全局负载均衡服务器 发起内容url 请求
  4. CDN全局负载均衡服务器根据 用户请求的IP地址，url等信息，选择一台用户所属区域的负载均衡设备，告诉用户向这台设备发起请求。
  5. CDN区域负载均衡服务器会为用户 选择一台合适的缓存服务器提供服务，选择的依据主要是：离用户距离要近，缓存服务器上是否用户所需内容，以及各个缓存当前的一个负载均衡情况。选择出一个最优的 缓存服务器ip地址。
  6. 全局负载均衡服务器将 缓存服务器的ip地址给到用户。
  7. 用户向缓存服务器发起请求。缓存服务器响应用户请求，将用户所需内容传送到用户终端。如果缓存服务器上没有用户想要的内容，那么这台服务器就会向它的上一级缓存服务器请求内容，直至追溯到网站的源服务器，并将内容拉取到本地。

2. 代理的工作机制

  代替客户机向网站请求数据，从而可以隐藏用户的真实IP地址。

  将获得的网页数据（静态web元素）保存到缓存中并发送给客户机，以便下次请求相同的数据时快速响应。

在这里插入图片描述

3. Squid 服务器的作用

  资源获取：代替客户端实现从原始服务器的资源获取；

  加速访问：代理服务器可能离原始服务器更近，从而起到一定的加速作用；

  缓存作用：代理服务器保存从原始服务器所获取的资源，从而实现客户端快速的获取；

  隐藏真实地址：代理服务器代替客户端去获取原始服务器资源，从而隐藏客户端真实信息。

4. Squid 代理的类型






















类型 概念
传统代理 适用于Internet 正向代理，需在客户机指定代理服务器的地址和端口。
透明代理 客户机不需指定代理服务器的地址和端口，而是通过默认路由、防火墙策略将Web访问重定向给代理服务器处理。
反向代理 如果 Squid 反向代理服务器中缓存了该请求的资源，则将该请求的资源直接返回给客户端；
否则反向代理服务器将向后台的 WEB 服务器请求资源，然后将请求的应答返回给客户端，同时也将该应答缓存在本地，供下一个请求者使用。

二、部署 Squid 服务器

1. 安装 Squid 服务

  1. systemctl stop firewalld                            #关闭防火墙
  2. systemctl disable firewalld
  3. setenforce 0
  5. 服务器：192.168.145.15

在这里插入图片描述

1.1 编译安装 Squid

  1. yum -y install gcc gcc-c++ make                        #yum安装
  2. cd /opt/
  3. tar xf squid-3.5.28.tar.gz
  4. cd /opt/squid-3.5.28
  6. ./configure --prefix=/usr/local/squid \                #指定安装目录路径
  7. --sysconfdir=/etc \                                    #指定配置文件路径
  8. --enable-arp-acl \                                    #MAC地址管控，防止客户端使用IP欺骗
  9. --enable-linux-netfilter \                            #使用内核过滤
  10. --enable-linux-tproxy \                                #支持透明模式
  11. --enable-async-io=100 \                                #异步IO，提升存储性能
  12. --enable-err-language="Simplify_Chinese" \            #错误信息的显示语言
  13. --enable-underscore \                                #允许URL中有下划线
  14. --disable-poll \                                    #关闭默认使用 poll 模式
  15. --enable-epoll \                                    #开启epoll模式提升性能
  16. --enable-gnuregex                                    #使用GNU正则表达式
  18. ./configure --prefix=/usr/local/squid \
  19. --sysconfdir=/etc \
  20. --enable-arp-acl \
  21. --enable-linux-netfilter \
  22. --enable-linux-tproxy \
  23. --enable-async-io=100 \
  24. --enable-err-language="Simplify_Chinese" \
  25. --enable-underscore \
  26. --disable-poll \
  27. --enable-epoll \
  28. --enable-gnuregex

在这里插入图片描述

  1. make -j2 && make install                        #编译安装
  3. ln -s /usr/local/squid/sbin/* /usr/local/sbin/    #创建软链接，让系统识别squid命令
  5. useradd -M -s /sbin/nologin squid                #添加squid用户
  7. chown -R squid:squid /usr/local/squid/var/        #修改目录和子目录的用户以及用户组，此目录用于存放缓存文件

在这里插入图片描述

1.2 修改 Squid 的配置文件

  1. vim /etc/squid.conf
  2. ......
  3. --56行--插入
  4. http_access allow all                #放在 http_access deny all 之前，允许任意客户机使用代理服务，控制规则自上而下匹配
  5. http_access deny all
  6. http_port 3128                        #用来指定代理服务监听的地址和端口(默认的端口号为 3128)
  7. --61行--插入
  8. cache_effective_user squid            #添加，指定程序用户，用来设置初始化、运行时缓存的账号,否则启动不成功
  9. cache_effective_group squid            #添加，指定账号基本组
  11. coredump_dir /usr/local/squid/var/cache/squid        #指定缓存文件目录

在这里插入图片描述

1.3 Squid 的运行控制

  1. squid -k parse                #查看squid配置文件是否生效
  3. #启动 Squid，第一次启动 Squid 服务时，会自动初始化缓存目录
  4. squid -z                     #初始化 squid服务。-z 选项用来初始化缓存目录
  5. squid                        #启动 squid 服务
  7. netstat -lntp | grep "squid"

在这里插入图片描述

1.4 创建 Squid 服务脚本

  1. vim /etc/init.d/squid
  2. #!/bin/bash
  3. #chkconfig: 2345 90 25
  4. PID="/usr/local/squid/var/run/squid.pid"        #pid文件路径
  5. CONF="/etc/squid.conf"                            #配置文件路径
  6. CMD="/usr/local/squid/sbin/squid"                #运行程序的路径
  8. case "$1" in
  9.    start)
  10.      netstat -natp | grep squid &> /dev/null
  11.      if [ $? -eq 0 ]
  12.      then
  13.        echo "squid is running"
  14.      else
  15.        echo "正在启动 squid..."
  16.        $CMD
  17.      fi
  18.    ;;
  19.    stop)
  20.      $CMD -k kill &> /dev/null
  21.      rm -rf $PID &> /dev/null
  22.    ;;
  23.    status)
  24.      [ -f $PID ] &> /dev/null
  25.         if [ $? -eq 0 ]
  26.           then
  27.             netstat -natp | grep squid
  28.           else
  29.             echo "squid is not running"
  30.         fi
  31.    ;;
  32.    restart)
  33.       $0 stop &> /dev/null
  34.       echo "正在关闭 squid..."
  35.       $0 start &> /dev/null
  36.       echo "正在启动 squid..."
  37.    ;;
  38.    reload)
  39.       $CMD -k reconfigure
  40.    ;;
  41.    check)
  42.       $CMD -k parse
  43.    ;;
  44.    *)
  45.       echo "用法：$0{start|stop|status|reload|check|restart}"
  46.    ;;
  47. esac
  49. #2345是默认自启动级别，如是-代表任何级别都不自启动；90是启动优先级，25是停止优先级，优先级范围是0－100，数字越大，优先级越低。
  51. chmod +x /etc/init.d/squid      #添加权限
  52. chkconfig --add squid            #添加squid
  53. chkconfig squid on
  55. squid -z                           #初始化缓存目录
  56. squid                            #启动squid服务
  57. netstat -antp | grep squid         #确认squid服务处于正常监听状态
  59. service squid restart           #测试

在这里插入图片描述

1.5 supervisor 管理服务

 &emsp使用文档：http://supervisord.org/

 &emspsupervisor是Python开发的c/s服务，是Linux系统下的进程管理工具。可以监听、启动、停止、重启一个或多个进程。

 &emsp用supervisor管理的进程，当一个进程意外被杀死，supervisor监听到进程死后，会自动将它重启，很方便的做到进程的自动恢复的功能，不在需要自己写脚本来控制

  1. yum install -y epel-release
  2. yum install -y supervisor
  4. #使用yum安装的supervisor会在/etc/会生成一个supervisor.conf文件及一个supervisor.d文件目录

在这里插入图片描述

  1. #设置服务并启动
  2. supervisord --version                    #查看supervisor是否安装成功
  4. supervisord -c /etc/supervisord.conf    #启动
  6. ps -ef|grep supervisord                    #查看进程
  8. systemctl enable supervisord            #设置开机自启
  9. systemctl is-enabled supervisord        #查看是否开机自启

在这里插入图片描述

  1. find / -name supervisor.sock
  2. unlink /run/supervisor/supervisor.sock 
  3. systemctl start supervisord
  4. systemctl status supervisord.service

在这里插入图片描述

  1. vim /etc/supervisord.conf
  2. [unix_http_server]
  3. file=/var/run/supervisor.sock   ; (the path to the socket file)
  5. [supervisord]
  6. logfile=/var/log/supervisor/supervisord.log  ; (main log file;default $CWD/supervisord.log)
  7. logfile_maxbytes=50MB       ; (max main logfile bytes b4 rotation;default 50MB)
  8. logfile_backups=10          ; (num of main logfile rotation backups;default 10)
  9. loglevel=info               ; (log level;default info; others: debug,warn,trace)
  10. pidfile=/var/run/supervisord.pid ; (supervisord pidfile;default supervisord.pid)
  11. nodaemon=false              ; (start in foreground if true;default false)
  12. minfds=1024                 ; (min. avail startup file descriptors;default 1024)
  13. minprocs=200                ; (min. avail process descriptors;default 200)
  15. [include]
  16. files = /etc/supervisord.d/*.conf

在这里插入图片描述

  1. #进程管理配置参数，应该每个进程写一个配置文件放在include指定的目录下包含进supervisord.conf文件中。
  2. #supervisor.d目录用来存放用户自定义的进程配置：
  3. vim /etc/supervisord.d/squid.conf
  4. [program:squid]
  5. command=/usr/local/squid/sbin/squid -g 'daemon off;'
  6. stdout_logfile=/var/log/supervisor/logs/run.log
  7. stderr_logfile=/var/log/supervisor/logs/error.log
  8. autostart=true
  9. startsecs=10
  10. autorestart=true
  11. startretries=1
  12. user=squid
  13. priority=998
  14. stdout_logfile_maxbytes=200MB
  15. stdout_logfile_backups=20
  16. stopasgroup=true
  17. killasgroup=true
  18. redirect_stderr=true
  20. #注：supervisor不能监控后台进程，command不能为后台运行命令

在这里插入图片描述

  1. #supervisor服务启动
  2. mkdir -p /var/log/supervisor/logs
  4. systemctl start supervisord
  5. systemctl enable supervisord
  7. supervisord -c /etc/supervisord.conf

在这里插入图片描述

  1. #supervisor常用命令
  2. supervisorctl是supervisord的命令行工具
  3. - supervisorctl status           查看所有进程的状态
  4. - supervisorctl stop <name>      停止进程
  5. - supervisorctl start <name>     启动进程
  6. - supervisorctl restart <name>   重启进程
  7. - supervisorctl update           配置文件修改后可以使用该命令加载新的配置
  8. - supervisorctl reload           重新启动配置中的所有程序
  10. supervisorctl status squid               #squid状态
  11. supervisorctl stop squid                 #停止squid
  12. supervisorctl start squid                #启动squid
  13. supervisorctl restart nginx              #重启squid
  14. supervisorctl reload squid               #重载squid

2. 构建传统代理服务器

  1. nginx服务器      192.168.145.30
  2. 代理  服务器     192.168.145.15
  3. win  客户端       192.168.145.10

2.1 squid服务器配置

  1. #修改配置文件
  2. vim /etc/squid.conf
  3. ......
  4. http_access allow all
  5. http_access deny all
  6. http_port 3128
  7. cache_effective_user squid
  8. cache_effective_group squid
  9. --63行--插入
  10. cache_mem 1024 MB                        #指定缓存功能所使用的内存空间大小;
  11.                                         #便于保持访问较频繁的WEB对象，容量最好为4的倍数，单位为MB，一般设为物理内存的1/3。
  12. cache_swap_high 95                        #cache目录使用量大于95%时，开始清理旧的cache。
  13. cache_swap_low 90                        #cache目录清理到90%时停止。
  15. reply_body_max_size 100 MB                #允许用户下载的最大文件大小，以字节为单位，
  16.                                         #当下载超过指定大小的Web对象时，浏览器的报错页面中会出现“请求或访问太大”的提示默认设置0表示不进行限制。
  17. maximum_object_size 512000 KB            #设置squid磁盘缓存最大文件，以KB为单位，超过的文件不保存到硬盘，而是直接转发给用户。
  18. maximum_object_size_in_memory 512 KB    #设置squid内存缓存最大文件，超过的文件不保存到内存。
  19. minimum_object_size 0 KB                #设置squid磁盘缓存最小文件。

在这里插入图片描述

  1. squid -k parse                    #查看squid配置文件是否生效
  2. systemctl restart squid            #重启服务
  3. netstat -lntp | grep "squid"    #查看服务以及端口

在这里插入图片描述

  1. #生产环境中还需要修改防火墙规则
  2. iptables -F
  3. iptables -t filter -A INPUT -p tcp --dport 3128 -j ACCEPT
  4. iptables -nL

在这里插入图片描述

2.2 nginx 服务器配置

  1. #关闭防火墙
  2. systemctl stop firewalld.service
  3. setenforce 0

在这里插入图片描述

  1. #安装nginx
  2. yum -y install pcre-devel zlib-devel openssl-devel gcc gcc-c++ make
  3. useradd -M -s /sbin/nologin nginx
  4. cd /opt/
  5. tar xf nginx-1.24.0.tar.gz
  6. cd nginx-1.24.0/
  8. ./configure \
  9. --prefix=/usr/local/nginx \
  10. --user=nginx \                                
  11. --group=nginx \
  12. --with-http_stub_status_module
  13. make -j2 && make install

在这里插入图片描述

  1. ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/
  2. /usr/local/nginx/sbin/nginx
  3. ps -aux | grep nginx

在这里插入图片描述

  1. #准备网页服务器
  2. echo '<h1>this is nginx</h1>' > /usr/local/nginx/html/test.html

在这里插入图片描述

2.3 windows 客户端配置

  1. ip地址 192.168.145.10

在这里插入图片描述

  1. #客户机的代理配置
  2. 打开浏览器，工具-->Internet选项-->连接-->局域网设置-->开启代理服务器（地址：Squid服务器IP地址，端口：3128）
  3. http://192.168.145.30/test.html

在这里插入图片描述

  1. #查看 Squid 访问日志的新增记录中的缓存命中情况
  2. tail -f /usr/local/squid/var/logs/access.log

在这里插入图片描述

  1. #跟踪 Web 访问日志的新增记录
  2. tail -f /usr/local/nginx/logs/access_log
  3. #在浏览器输入Web服务器IP地址访问，查看Web服务器访问日志，显示的是由代理服务器替客户机在访问。

在这里插入图片描述

3. 构建透明代理服务器

  1. Squid服务器    内网ens32：192.168.145.15  外网ens33：12.0.0.1
  2. Web 服务器        12.0.0.100
  3. 客户端1        192.168.145.30

3.1 Squid 服务器配置

  1. #添加一张网卡
  2. #网络设置
  3. cp /etc/sysconfig/network-scripts/ifcfg-ens33 /etc/sysconfig/network-scripts/ifcfg-ens33

在这里插入图片描述

  1. vim /etc/sysconfig/network-scripts/ifcfg-ens33    #配置外网ens33
  2. NAME=ens33
  3. DEVICE=ens33
  4. ONBOOT=yes
  5. IPADDR=12.0.0.1
  6. NETMASK=255.255.255.0

在这里插入图片描述

  1. vim /etc/sysconfig/network-scripts/ifcfg-ens32    #配置内网ens32
  2. NAME=ens32
  3. DEVICE=ens32
  4. ONBOOT=yes
  5. IPADDR=192.168.145.15
  6. NETMASK=255.255.255.0

在这里插入图片描述

  1. systemctl restart network                #重启网卡
  2. ifconfig

在这里插入图片描述

  1. #开启路由转发，实现本机中不同网段的地址转发
  2. echo 'net.ipv4.ip_forward = 1' >> /etc/sysctl.conf
  3. sysctl -p

在这里插入图片描述

  1. #设置防火墙规则
  2. iptables -F && iptables -t nat -F
  3. iptables -nL
  4. iptables -t filter -A INPUT -p tcp --dport 3128 -j ACCEPT
  5. iptables -nL
  6. iptables -t nat -A PREROUTING -t nat -i ens32 -s 192.168.145.0/24 -p tcp --dport 80 -j REDIRECT --to-ports 3128
  7. iptables -t nat -A PREROUTING -t nat -i ens32 -s 192.168.145.0/24 -p tcp --dport 443 -j REDIRECT --to 3128

在这里插入图片描述

  1. vim /etc/squid.conf
  2. ......
  3. http_access allow all
  4. http_access deny all
  5. #--60行--修改添加提供内网服务的IP地址，和支持透明代理选项 transparent
  6. http_port 192.168.145.15:3128 transparent

在这里插入图片描述

  1. systemctl restart squid
  2. netstat -lntp | grep "squid"    #查看服务以及端口

在这里插入图片描述

3.2 Web服务器配置

  1. #修改网络ip地址
  2. vim /etc/sysconfig/network-scripts/ifcfg-ens33
  3. IPADDR=12.0.0.100
  4. NETMASK=255.255.255.0
  5. GATEWAY=12.0.0.1

fc8089a75c4e4e1f9711ab1abae43a98.png_pic_center

  1. #重启并查看ip地址
  2. systemctl restart network
  3. ifconfig

在这里插入图片描述

3.3 客户端配置

  1. #网关配置
  2. vim /etc/sysconfig/network-scripts/ifcfg-ens32
  3. IPADDR=192.168.145.45
  4. NETMASK=255.255.255.0
  5. GATEWAY=192.168.145.15

在这里插入图片描述

  1. #关闭客户机的浏览器之前设置的代理服务器的功能后访问 http://12.0.0.100/test.html

在这里插入图片描述

  1. #查看 Squid 访问日志的新增记录
  2. echo > /usr/local/squid/var/logs/access.log                #清空日志文件
  3. tail -f /usr/local/squid/var/logs/access.log

在这里插入图片描述

三、Squid 中 ACL 的使用

在配置文件 squid.conf 中，ACL 访问控制通过以下两个步骤来实现：

  • 使用 acl 配置项定义需要控制的条件；
  • 通过 http_access 配置项对已定义的列表做“允许”或“拒绝”访问的控制。

1. 定义访问控制列表

  1. acl 列表名称  列表类型  列表内容
  3. #列表名称：名称自定义，相当于给ACL命名
  4. #列表类型：必须使用squid预定义的值，对应不同类别的控制条件
  5. #列表内容：是要控制的具体对象，不同类型的列表所对应的内容也不一样，可以有多个值（以空格为分隔，为“或的关系”）

1.1 方法1：直接定义访问控制

  1. #修改配置文件
  2. vim /etc/squid.conf
  3. ...
  4. acl allow_host src 192.168.145.60
  5. http_access allow allow_host
  6. http_access deny all
  8. systemctl restart squid
  9. netstat -lntp | grep "squid"

在这里插入图片描述

1.2 方法2：启动对象列表管理

  1. mkdir /etc/squid
  2. vim /etc/squid/dest.list
  3. 192.168.145.60
  4. 192.168.145.10
  6. vim /etc/squid.conf
  7. ......
  8. acl deny_host dst "/etc/squid/hostlist"                #调用指定文件中的列表内容
  9. ......
  10. http_access deny deny_host                            #注意，如果是拒绝列表，需要放在http_access allow all前面
  13. systemctl restart squid
  14. netstat -lntp | grep "squid"

\[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-wmLbSrVi-1688457133690)(C:\\Users\\86138\\AppData\\Roaming\\Typora\\typora-user-images\\image-20230703213713308.png)\]

2. 验证

  1. #浏览器访问Web服务器 http://192.168.145.30/test.html ，显示被访问被拒绝。

在这里插入图片描述

四、Squid 日志分析工具 Sarg

1. 安装软件包

  1. #安装图像处理软件包
  2. yum install -y pcre-devel gd gd-devel
  4. mkdir /usr/local/sarg
  5. cd /opt/
  6. tar xf sarg-2.3.7.tar.gz
  8. cd /opt/sarg-2.3.7
  9. ./configure --prefix=/usr/local/sarg \
  10. --sysconfdir=/etc/sarg \                            #配置文件目录，默认是/usr/local/etc
  11. --enable-extraprotection                            #额外安全防护
  13. make && make install                                #编译安装
  15. ./configure --prefix=/usr/local/sarg --sysconfdir=/etc/sarg --enable-extraprotection

在这里插入图片描述

2. 修改配置文件

  1. vim /etc/sarg/sarg.conf
  2. --7行--取消注释
  3. access_log /usr/local/squid/var/logs/access.log        #指定访问日志文件
  4. --25行--取消注释
  5. title "Squid User Access Reports"                    #网页标题
  6. --120行--取消注释，修改
  7. output_dir /var/www/html/sarg                        #报告输出目录
  8. --178行--取消注释
  9. user_ip no                                            #使用用户名显示
  10. --184行--取消注释，修改
  11. topuser_sort_field connect reverse                    #top排序中，指定连接次数采用降序排列，升序是normal
  12. --190行--取消注释，修改
  13. user_sort_field connect reverse                        #对于用户访问记录，连接次数按降序排序
  14. --206行--取消注释，修改
  15. exclude_hosts /usr/local/sarg/noreport                #指定不计入排序的站点列表的文件
  16. --257行--取消注释
  17. overwrite_report no                                    #同名同日期的日志是否覆盖
  18. --289行--取消注释，修改
  19. mail_utility mailq.postfix                            #发送邮件报告命令
  20. --434行--取消注释，修改
  21. charset UTF-8                                        #指定字符集UTF-8
  22. --518行--取消注释
  23. weekdays 0-6                                        #top排行的星期周期
  24. --525行--取消注释
  25. hours 0-23                                            #top排行的时间周期
  26. --633行--取消注释
  27. www_document_root /var/www/html                        #指定网页根目录

在这里插入图片描述

  1. #添加不计入站点文件，添加的域名将不被显示在排序中
  2. touch /usr/local/sarg/noreport
  4. ln -s /usr/local/sarg/bin/sarg /usr/local/bin/
  5. sarg --help

在这里插入图片描述

3. 网页验证

  1. #安装httpd验证
  2. yum -y install httpd
  3. systemctl start httpd

在这里插入图片描述

  1. #运行
  2. sarg                #启动一次记录

在这里插入图片描述

  1. 浏览器访问 http://192.168.145.15/sarg ，查看sarg报告网页。

在这里插入图片描述

4. 加入计划性任务

  1. #添加计划任务，执行每天生成报告
  2. vim /usr/local/sarg/report.sh
  3. #/bin/bash
  4. #Get current date
  5. TODAY=$(date +%d/%m/%Y)
  6. #Get one week ago today
  7. YESTERDAY=$(date -d "1 day ago" +%d/%m/%Y)
  8. /usr/local/sarg/bin/sarg -l /usr/local/squid/var/logs/access.log -o /var/www/html/sarg -z -d $YESTERDAY-$TODAY &> /dev/null
  9. find ./ -type d -a -name "$(env LANG=en_US.UTF-8 date -d "30 day ago" +%Y%b%d)-$(env LANG=en_US.UTF-8 date -d "29 day ago" +%Y%b%d)" | xargs rm -rf
  10. exit 0
  12. chmod +x /usr/local/sarg/report.sh
  14. crontab -e
  15. 0 0 * * * /usr/local/sarg/report.sh                    #每天凌晨0点执行任务

五、Squid 反向代理

  如果 Squid 反向代理服务器中缓存了该请求的资源，则将该请求的资源直接返回给客户端；否则反向代理服务器将向后台的 Web 服务器请求资源，然后将请求的应答返回给客户端，同时也将该应答缓存在本地，供下一个请求者使用。

1. 工作机制

  • 缓存网页对象，减少重复请求。
  • 将互联网请求轮训或按权重分配到内网Web服务器。
  • 代理用户请求，避免用户直接访问Web服务器，提高安全。

2. 服务器部署

  1. squid服务器        192.168.145.15
  2. web节点服务器1    192.168.145.45
  3. web节点服务器2     192.168.145.60

2.1 suqid服务器配置

  1. vim /etc/squid.conf
  2. ......
  3. --60行--修改，插入
  4. http_port 192.168.145.15:80 accel vhost vport
  5. cache_peer 192.168.145.45 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web1
  6. cache_peer 192.168.145.60 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web2
  7. cache_peer_domain web1 web2 www.abc.com
  8. #表示对www.kgc.com的请求，squid向192.168.145.45和192.168.80.12的80端口发出请求
  10. http_port 80 accel vhost vport #squid从一个缓存变成了一个Web服务器反向代理加速模式，这个时候squid在80端口监听请求，同时和web server的请求端口(vhost vport)绑定，这个时候请求到了squid，squid是不用转发请求的，而是直接要么从缓存中拿数据要么向绑定的端口直接请求数据。
  11. accel ：反向代理加速模式
  12. vhost ：支持域名或主机名来表示代理节点
  13. vport ：支持IP和端口来表示代理节点
  15. parent ：代表为父节点，上下关系，非平级关系
  16. 80 ：代理内部web服务器的80端口
  17. 0 ：没有使用icp（电信运营商），表示就一台squid服务器
  18. no-query ：不做查询操作，直接获取数据
  19. originserver ：指定是源服务器
  20. round-robin ：指定 squid 通过轮询方式将请求分发到其中一台父节点
  21. max_conn ：指定最大连接数
  22. weight ： 指定权重
  23. name ：设置别名

在这里插入图片描述

  1. #清空之前透明模式配置的 iptables 规则
  2. iptables -F
  3. iptables -t nat -F
  5. systemctl stop httpd       #防止 httpd 服务使用的 80 端口号和 squid 反向代理配置的监听端口冲突
  6. systemctl restart squid

在这里插入图片描述

2.2 节点服务器配置

  1. #后端节点服务器设置
  2. yum install -y httpd
  3. systemctl start httpd

在这里插入图片描述

  1. #节点1：
  2. echo "this is test01" >> /var/www/html/index.html
  3. #节点2：
  4. echo "this is test02" >> /var/www/html/index.html

在这里插入图片描述

  1. #客户机的域名映射配置
  2. 修改 C:\Windows\System32\drivers\etc\hosts 文件
  3. 192.168.145.15 www.abc.com

在这里插入图片描述

  1. 浏览器不开启代理访问 http://www.abc.com
  3. 查看缓存命中情况 
  4. tail -f /usr/local/squid/var/logs/access.log

在这里插入图片描述

总结

CDN 服务器

1. CDN 的概念

  做正向代理缓存加速，将网站的内容发布到最接近用户的网络”边缘“的节点，使用户可以就近取得所需的内容，提高用户访问网站的响应速度。

2. CDN 的工作原理

  通过触发的方式或者定时触发的方式来做资源的提前预热，保证缓存服务器能够获取最新的数据或者资源数据。

发表评论

表情：
评论列表 （有 0 条评论，206人围观）

还没有评论，来说两句吧...

相关阅读

    相关 python代理服务器

    Python代理服务器是指使用Python语言编写的代理服务器。它可以作为一个中间人，在客户端和服务器之间转发网络请求，以隐藏客户端的真实地址，提高网络安全性，或访问限制的网站

    拼搏现实的明天。拼搏现实的明天。/ 0 赞/ 180 阅读

    相关 squid 代理服务器

    squid代理服务器（包括正向代理服务器、反向代理服务器（cdn加速） squid调度器：负载均衡（缓解企业服务器的压力）） 1.什么是squid代理服务器？ >

    灰太狼灰太狼/ 0 赞/ 147 阅读

    相关 ExtJS-服务器代理

    在上一节我们介绍了客户端的几种代理，本节的主要内容是介绍如何使用服务器端代理，将重点介绍AjaxProxy，这是我们最常用的代理方式。 Ajax web应用程序开发过程

    超、凢脫俗超、凢脫俗/ 0 赞/ 337 阅读

    相关 nginx 代理服务器

    之一的nginx的频繁使用的是设置它作为代理服务器，这意味着，接收请求，将它们传递到代理服务器，从它们中检索响应，并且将其发送到客户端的服务器。我们将配置一个基本的代理服务器，

    谁践踏了优雅谁践踏了优雅/ 0 赞/ 353 阅读

    相关 190508 | 代理服务器

    题目描述 使用代理服务器能够在一定程度上隐藏客户端信息，从而保护用户在互联网上的隐私。我们知道n个代理服务器的IP地址，现在要用它们去访问m个服务器。这 m 个服务器的 IP

    喜欢ヅ旅行喜欢ヅ旅行/ 0 赞/ 417 阅读