使用HAProxy实现Azure DevOps Server负载均衡(反向代理)

HTTPS证书自动化不是配个证书,而是系统性工程 SSL/TLS证书是现代Web服务信任链的基石,其自动化续期远不止执行certbot命令——本质是围绕ACME协议、证书生命周期管理与基础设施协同的系统工程。核心原理在于:证书需与TLS终止点(应用进程、负载均衡器、CDN或云平台)深度耦合,通过状态感知、零中断加载和失败可追溯机制保障HTTPS连续性。技术价值体现在消除‘证书幽灵症’、规避Let’s Encrypt速率限制、解决iOS/Java客户端握手失败等真实故障;典型应用场景覆盖Caddy/Traefik内嵌续签、Terraform驱动AWS ALB 阅读详情

Contents

1. 概述

最近在一个Azure DevOps Server的项目实施过程中,由于客户企业内网执行严格的安全管理规范,不允许直接将Azure DevOps Server的服务器暴露给用户端(路由映射也被禁止),需要在用户与服务器之间架设代理服务器转发通信数据包,以便通过企业的信息安全等级保护测评。

在客户的网络拓扑结构中,目前使用非常流行的Nginx作为反向代理软件,为业务系统和管理软件提供代理服务;但是Azure DevOps Server使用Windows域作为认证服务器,采用了NTLM的方式实现用户认证,而开源版本的Nginx恰恰不支持NTLM,只有收费版本Nginx Plus支持NTLM,因此基本就放弃了Nginx的方案。在之前的项目实践中,有许多客户使用硬件设备来实现负载均衡和反向代理,例如F5或Citrix NetScaler,但是这样的硬件设备采购已经远远超出了项目预算成本,因此也被排除出可行方案。

最后通过调研,我们转向技术比较成熟的HAProxy。HAProxy是一个使用C语言编写的自由及开放源代码软件,原理或功能与Nginx都比较类似,它提供高可用性、负载均衡,以及基于TCP和HTTP的应用程序代理。并且,HAProxy原生支持NTLM认证,这是我们选择它的最关键原因。本文后续的内容,主要介绍在Windows环境中,如何使用HAProxy,搭建一套支持网络负载均衡与反向代理的Azure DevOps Server环境。

在下面的示例中,为了简化系统部署,我们在测试环境中使用了下面几台服务器:

  • 用户认证服务器:Active Directory
  • Azure DevOps Server 2020,同时部署了数据库服务器
  • HAProxy 2.0.27:反向代理服务器

网络拓扑结构与下图基本类似,但是在实验过程中由于资源限制,我们减少了节点个数以及每个节点服务器的硬件配置。

image

2. 环境部署

由于本文的主要内容是介绍如何部署负载君和反向代理环境,在本文在部署过程中,我们省略了Azure DevOps Server的部署过程;如果需要了解Azure DevOps Server的部署,可以参考博客《Azure DevOps Server 2020.1 升级指南 (TFS) 》https://www.cnblogs.com/danzhang/p/14458178.html。

2.1 HAProxy环境部署

在Linux服务器上安装HAProxy,是一件比较容易的事情,搭建过程可以参考文档《Install HAProxy on Ubuntu》https://www.haproxy.com/blog/how-to-install-haproxy-on-ubuntu/;由于Azure DevOps Server基本都使用Windows的操作系统,本文重点介绍如何在Windows服务器上安装HAProxy,并配置负载均衡和反向代理。

在Windows上运行HAProxy,没有可以直接下载的软件包,需要用户首先下载源代码,并使用cygwin环境编译出Windows版本的运行文件exe。下面来看一下整个编译的过程:

  • 安装cygwin
    从cygwin官网(https://www.cygwin.com/install.html)下载安装文件

    image

    下载完成后,直接运行安装软件,选择默认设置:
    image

    选择本地安装目录,默认设置
    选择互联网的类型,默认设置
    选择依赖包的存储路径,默认设置
    选择依赖包的来源http://mirros.163.com
    选择安装哪些依赖包,本文中我们选择一个最大的默认类型Devel,安装类型为Install:
    image

    由于需要下载大量的依赖包文件,整个安装过程需要大约60分钟左右,甚至更长时间:
    如果安装过程中出现类似下面的错误提示,可以点击确定忽略,这个错误不影响后面的正常编译(比较安装过程中出现了2次这个现象):
    经过近2小时的等待,终于安装完成了:
    image

  • 编译Windows版本的程序包

    • 从HAProxy官方网站下载编译所需的软件包,由于担心最新的版本有兼容性问题,笔者选择了2.0.27版本
    • 运行cygwin环境
    • 将下载的程序包放置到home/danzhang目录下
    • 解压缩文件
tar -zxvf haproxy-2.0.27.tar.gz
  • 进入解压缩的目录,编译Windows程序包
cd haproxy-2.0.27
make TARGET=cygwin
make install

编译过程大约10分钟左右,期间程序消耗大量的CPU资源:

image

  • 编译和安装完成后,我们可以在当前目录中发现新增的Windows执行程序haproxy.exe
2.2 配置和运行HAProxy
  • 当完成上面的编译程序包后,我们将对应的文件复制到运行代理服务器的计算机中,需要复制的文件包含:
    • haproxy.exe:10MB
    • cygwin1.dll:3.5MB
    • cyggcc_s-1.dll:110KB
  • 创建一个配置文件,文件名为haproxy.cfg,内容如下,并注意文件的编码格式为ANSI:
#haproxy 配置示例

global
  maxconn 15000
  nbproc  1
  daemon

defaults
        mode tcp
        retries 3
        option  abortonclose
        maxconn 32000
        timeout connect 300000ms
        timeout client  300000ms
        timeout server  300000ms
        log 127.0.0.1   local0 err

listen tfs 
        bind *:80
        mode  http
        server  s1 192.168.20.101:80 weight 1 rise 2 fall 3
        server  s1 192.168.20.102:80 weight 1 rise 2 fall 3

listen status 
        bind *:900
        mode http
        stats refresh 30s
        stats uri /
        stats auth admin:admin
        stats admin if TRUE
  • 还可以自己创建个批处理文件run.bat,以便快速启动haproxy,文件的内容为:
haproxy.exe -f haproxy.cfg -d
2.3 验证效果

一切就绪后,我们在命令行窗口中,使用run.bat运维haproxy.exe,系统提示haproxy已经开始侦听http请求:

image

当我们使用haproxy的IP地址去访问Azure DevOps Server,可以看到浏览器从其中一个应用节点(192.168.20.101)获取到了数据:
image

3. 已知问题

如果HAProxy的侦听端口与Azure DevOps Server的发布端口不一致,会出现页面跳转到Azure DevOps Server服务器的现象;如果用户不能直接访问服务器,就会出现异常。

例如,如果haproxy的端口为8080,而DevOps Server的端口为80,当用户访问这个地址(http://192.168.20.100:8080 ),系统会自动跳转到了http://192.168.20.101/defaultcollection;如果用户的Url中携带了团队项目集合名称,例如http://192.168.20.100:8080/defaultcollection,系统则是正常的。

这个问题应该与DevOps Server的根路径自动跳转到最近的团队项目集合(默认集合)有关系,但是目前还没有找到解决方案。

如果需要,你还可以从微软Azure DevOps Server 的在线文档,查询更多的权威资料,也欢迎通过下面的联系方式与我沟通,相互学习,相互提高!


https://www.cnblogs.com/danzhang
Azure DevOps MVP 张洪君在这里插入图片描述

EMQX集群部署:haproxy负载均衡+tls认证 1.emqx 下载安装 程序安装 (Installation) | EMQ X 文档 2.haproxy配置 3.证书安装 申请阿里云免费证书,根据文档绑定域名,域名生效后下载证书文件,阿里云提供有几种常用web服务器的格式 4.连接测试 ... 阅读详情

相关推荐

Haproxy-2.5.5 官方版及编译Windows版和配置办法

Haproxy除了很棒的代理,更好的是端口转发能力。对于做服务和网络安全都是比较优秀的工具。但是因为做代理太牛,所以被墙了。因为下载时候发现没有windows版,所以编译了一份给大家节省时间。

时光 2351

Haproxy的配置详解与使用

HAProxy是一个使用C语言编写的自由及开放源代码软件,其提供高可用性负载均衡,以及基于TCP和HTTP的应用程序代理。HAProxy特别适用于那些负载特大的web站点,这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上,完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全地整合进用户当前的架构中, 同时可以保护用户的web服务器不被暴露到网络上。

mlh521love的博客 2514

HAProxy在Windows上的编译及其在CORS中的应用

然而,有时候我们可能需要在Windows系统上使用HAProxy,并将其用于处理跨域资源共享(CORS)的问题。本文将介绍在Windows上编译HAProxy,并展示如何在CORS中应用它。这就是在Windows上编译HAProxy并在CORS中应用它的基本过程。在开始编译之前,我们需要安装一些必要的软件和工具。现在,当浏览器通过HAProxy访问您的应用程序时,它将自动添加CORS标头,允许来自。现在我们已经成功编译了HAProxy,在Windows上使用它来处理CORS问题。3.1 创建配置文件。

YjKubernetes的博客 557

HAProxy终结TLS双向认证代理EMQX集群

MQTT协议已经成为当前物联网领域的关键技术之一,当前市面上主流的实现MQTT协议的产品主要有 EMQX、Mosquito、NanoMQ等。本文以EMQX开源版为基础,构建 MQTT Broker 集群,并使用 HAProxy代理 MQTT Broker 集群,由 HAProxy 开启双向认证,并终结TLS,HAProxy 到 MQTT Broker 集群的流量采用非加密模式。

架构师实战感悟 1602

Ubuntu零基础入门到精通【1.7讲】:Ubuntu 适合哪些人群:学生、开发者、运维、云计算工程师?

🏆 本文收录于 《滚雪球学 Ubuntu》 专栏。 本专栏面向有一定计算机基础,但尚未系统学习 Linux / Ubuntu 的读者,采用“滚雪球式学习法”:先装好、再会用、再理解、再优化、再实战,带你从第一次进入 Ubuntu 桌面 / 终端开始,逐步掌握 Ubuntu 的日常使用、命令操作、软件安装、系统配置、开发环境搭建与服务器部署能力。

**My Coding Family** 1736

【信息科学与工程学】【数据中心】第三十五篇 云计算数据中心的学科知识04

编号学科(课程)核心知识点在云计算/云存储/云网络/云安全/云MaaS中的作用代表教材/资料/论文 + 数学方程式列表工业界应用D1421​云原生数据库:TiDB​HTAP(混合事务/分析处理)、分布式SQL、水平扩展、强一致(Raft)、自动故障恢复、与MySQL兼容、TiFlash列式引擎提供弹性扩展的分布式数据库;支撑高并发在线交易与实时分析教材:《TiDB in Action》PingCAP(2020) 论文:《TiDB: A Raft-based HTAP Database》(2017)

weixin_49199313的博客 419

Windows运行haproxy

看到这篇文章的同学,Haproxy应该都有所了解,在此对这款软件做一个简单的介绍。 一、HAProxy简介   HAProxy提供高可用性 、负载均衡以及基于TCP和HTTP应用的代理,它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点,这些站点通常又需要会话保持或七层处理。需要支持数以万计的并发连接。   HAProxy实现了一种事件驱动, 单一进程模型...

Jian Sun_的博客 1万+

在 Windows 使用 Nginx/HAProxy 实现负载均衡

工具协议支持负载均衡算法Windows 支持优点NginxTCP(需 stream 模块)有限(推荐使用 WSL)易于配置,适合 HTTP/TCP 混合场景HAProxyTCPleast_conn, round-robin, uri 等支持(需下载 Windows 版本)专业 TCP 负载均衡器,功能丰富有兴趣的还可以继续实现 HTTPS、限流、健康检查等功能!

h a 6 6 6 c k 为 你解决复杂难题! 1687

kubernetes笔记-1(云计算、组件架构&集群搭建、Namespace/Pod/Deployment/Service/Ingress/Nfs&Pv&Pvc/Configmap/Secret等)

k8s的核心组件学习

の博客 321

HAProxy 1.6.3 Windows 64位配置与部署指南

负载均衡作为现代网络架构中的核心组件,起着至关重要的作用。HAProxy是一个高性能、开源的负载均衡解决方案,广泛应用于需要高可用性和扩展性的环境中。本章将详细介绍HAProxy的诞生背景、功能特性,并深入解析其负载均衡功能的基本原理。在互联网的高速发展下,服务器单点压力过大,HAProxy提供了一种有效的解决方案,通过在服务器之间合理分配请求,确保系统的稳定性和高效性。接下来的章节将对HAProxy的详细配置进行逐步讲解,并探讨其在Windows 64位环境下的特性与安装配置步骤。

weixin_42348783的博客 1528

负载均衡器和反向代理服务器haproxy 2.0.4安装与配置指南

负载均衡器是一种网络设备或软件解决方案,用于分配进入的网络或应用流量到多个服务器。这样可以提高应用和网站的可靠性和可用性,防止单个服务器因请求过多而过载。负载均衡器通过设置策略来决定如何将流量分配到服务器,比如轮询、最小连接数或根据服务器的响应时间等。使用负载均衡器可以更好地利用服务器资源,提高用户体验,并可作为灾难恢复策略的一部分。反向代理服务器是指位于用户和实际提供内容的服务器(后端服务器)之间的服务器。它接收用户的所有请求,然后将这些请求转发到后端服务器上,并将后端服务器返回的内容返回给用户。

weixin_42598278的博客 614

HAProxy部署Web集群(Nginx)实验

HAProxy部署Web集群(Nginx)实验

qq_53772682的博客 1309

haproxy-1.7.10 windows 最新稳定版本

haproxy-1.7.10 windows版本 带运行库,可以直接运行。自己用Cygwin64 Terminal编译的,这个是64位版本

HAproxy部署配置

HAproxy部署配置 拓扑图 说明: haproxy服务器IP:172.16.253.200/16 (外网)、192.168.29.140/24(内网) 博客服务器组IP:192.168.29.130/24、192.168.29.131/24 网站服务器组IP:192.168.29.120/24、192.168.29.121/24 默认服务器组IP:192.168.29.110/24、192....

weixin_30896825的博客 153

IC617多线程仿真卡死?手把手教你用TigerVNC替换解决ADE XL Explorer问题(附Manjaro/Centos8实测)

本文针对IC617在Manjaro、CentOS 8等高版本Linux系统中运行ADE XL Explorer进行多线程仿真时出现的卡死问题,提供了详细的诊断与解决方案。文章指出问题根源在于软件内置的旧版VNC组件不兼容,并手把手指导用户通过使用TigerVNC替换原组件来彻底解决,附有在Manjaro和CentOS 8系统上的实测步骤与验证方法。

hill8的博客 776

如何用abaqus软件做GUI插件

在Abaqus GUI程序开发中,可以使用两种方法来创建GUI图形界面。第一种方法是使用RSG对话框构造器创建。RSG对话框构造器是Abaqus/CAE内嵌的GUI插件开发辅助工具,可以在Abaqus/CAE主视图的"Plug-ins"菜单下的"Abaqus"子菜单中找到"RSG dialog Builder"。点击后,进入一个界面,用户可以在该界面中创建新的对话框,选择和编辑控件,查看对话框的效果,以及关联插件执行的内核文件等。

qq_25486359的博客 2763

【开发日记】换掉Nginx,使用HAProxy作为反向代理服务器

HAProxy,全称为 "High Availability Proxy",是一款开源的、高性能的负载均衡器和代理服务器。主要用于改善应用程序的可用性、可靠性和性能。与大众熟知的Nginx相比各有优缺点,如果你需要的是一个Web服务器,还是首选Nginx,虽然HAProxy也能实现相同效果,但却需要通过十分繁琐的配置才能达到与Nginx相同的水平。HAProxy最擅长的还是负载均衡、限流、反向代理,在这些方向HAProxy的性能是明显高于Nginx的。

二饭的博客 1833

3D Slicer隐藏技巧:这样玩转医学影像分割与3D建模(含DICOM处理)

本文深入探讨3D Slicer在医学影像分割与3D建模中的高级应用技巧,包括多模态分割策略、三维可视化优化及DICOM数据处理。通过专业配置和Python脚本示例,帮助医疗AI开发者和影像科医师提升工作效率,实现精准的医学图像分析与建模。

weixin_28559803的博客 436

haproxy-高性能负载均衡反向代理服务

本文主要介绍haproxy的概述、以及haproxy服务的相关配置,详细阐释如何部署haproxy负载均衡集群,希望对你有帮助

十七拾的博客 5186

抽象代数学习笔记(抽象代数的历史、运算)

1. 抽象代数历史 对于五次及以上的代数方程是否存在根式解这个问题,欧拉、拉格朗日、高斯等数学家都没得到答案,但是他们得出五次及以上的代数方程组不存在根式解的结论。19世纪初,阿贝尔提出五次及以上的代数方程不存在根式解,并找出一类特殊的五次及以上的代数方程可以用根式解表示出来。另外一个年轻的数学家伽罗华...

huangzhpei的博客 3668

基于CNN的表情识别(FER)pytorch实现

Report for FER Jian Tang Abstract 我们使用卷积神经网络(CNN)实现了baby的面部表情识别(FER)。 数据上,我们获取了开源FER数据集FER2013[1],besides我们使用爬虫获取了baby相关的人脸图片,进行了手工分类标注以形成一个全新的baby FER数据集。 模型上,我们首先复现了Luan[2]的工作,即参考Kuo[3]在CVPR 2018上的工作并实现一个轻量的CNN网络,在FER2013上进行训练并得到了XXXX%的平均分类准确率(avg a

qq_20241587的博客 3686

将Azure Web应用配置成的反向代理应用

Azure Web应用(window版)采用IIS作为核心的处理平台, 具有强大灵活的请求处理功能。但是有些非常有用的功能大家并不熟悉,本文主要是探讨如何将Azure的Web应用服务配置成反向代理,可以实现类似Nginx的功能。 Azure Web应用中有两类重要配置文件:applicationHost.config和web.config .其中applicationHost.config是全局

wesley1001的博客 1696

XGBoost算法案例 - 红酒品质分类

数据集共包含 11 个特征,共计 3269 条数据. 我们通过训练模型来预测红酒的品质, 品质共有 6 个各类别,分别使用数字: 0、1、2、3、4、5 来表示。

YIAN爱学习的博客 450

haproxy的安装及运行

本文主要介绍了haproxy的下载及两种架构的运行模式

weixin_41860426的博客 2051

GD32F103程序烧录全攻略:从SWD到串口的实战指南

本文提供了GD32F103微控制器程序烧录的全面实战指南,详细介绍了SWD、JTAG和串口(ISP)三种主流下载方式。文章重点解析了在Keil MDK中使用ST-Link进行SWD下载的完整步骤,包括硬件连接、软件配置和Flash算法设置,并针对烧录过程中的常见问题提供了实用的排坑解决方案,帮助开发者高效完成程序部署。

weixin_29191669的博客 439

【原理图与PCB专题】使用Cadence如何在Layout时直接互换相同功能的PIN

Cadence允许我们在PCB中互换管脚,最后再反标给原理图。集成TVS管、排阻、DDR、FPGA有一些PIN是完全相同功能,可进行管脚互换的,建议使用这个功能。可降低硬件工程师与Layout工程师之间沟通成本,加快设计进度。

一点硬件 801
上一篇: 更改Azure DevOps Server的原生界面(六、更改网站名称)
下一篇: 更改Azure DevOps Server的原生界面(七、禁用浏览器下载和以zip格式下载文件)
Azure DevOps
博客等级 码龄6年 219粉丝 296原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值