3

4

@pingdog 我刚才看了下，可以把不同租户的 nginx 进程放到 netns 中，网络一端在 ns 中，一端在物理机，物理机器这段要通过 vrf 隔离，按理说可以实现多租户的隔离。

5

AWS ALB/NLB 实際上是方案二的变体，共享池配路，内部用 VPC Lattice 和 Hyperplane 做网络虚拟化而不是传统 NAT ，避免了连接跟踪表爆峸的问题。跟你方案二思路相近，但关键在网络中面痄呼而不是 instance 层就能打通租户隔离。

7

其实大多数云都是有个特殊的网络优化过的物理机，然后上面跑 lxc/vm ，运行 nginx+lua or haproxy

8

@my3157 这种方案我已经梳理通了，直接在 linux netns 中跑 nginx 进程，物理一层的网卡直接放到 vrf 中，netns 中的 nginx 进程应该可以用 cgroup 来做隔离，对于高可用可以在多个可用区部署多个进程，然后归属同一个 vxlan 就行。

9

原始的 clb 应该是 f5 ，现在的 alb 应该是 nginx 或者 haproxy 或者 traefik 或者 caddy

10

多租户的实现，别的不清楚就我接触到的是物理设备和 NFV 设备。普通型是使用负载均衡的虚拟机优享型和专用是直接使用物理设备。厂商专用的 NFV 和物理设备都是内部就支持多租户隔离不需要额外做什么。F5 的 Bigve 和高性能物理硬件 华三硬件 LB 还有虚拟机型 LB 以及其它厂家的硬件和软件等等。至于引流底层都是 vxlan 封装至于数据卸载可以是在 tor 交换机也可以在设备内部。

12

@jonathan001 vpc 部署虚拟机一般是云上客户自己做，省钱买几台虚拟机自己做成 LB 用 nginx 也好 LVS 别的也好来实现。真正云厂家底层都是用专门的 NFV 或者高性能物理硬件这个才能承载众多用户量。毕竟这些厂家都是专门做这个的性能方面基本不用担心，ASIC FPGA 的硬件转发可以把性能和承载的租户拉到非常高。NFV 也是底层是用 VPP 或者 DPDK 实现高性能的。在要不就是云厂家购买白盒设备自己做自研。

13

公有云负载均衡也分不同层次，常用的是 TCP 层和 http/https 层的，我认为肯定要上网络虚拟化的设备，LZ 你说的应该更靠近操作系统层面

18

维护过华为 HCS 私有云，说说 HCS 的方案。
首先 LB 是一个集群，包含四层的 lvs 和七层的 nginx ，如果申请的四层 LB ，那就只在 lvs 上创建配置，如果申请的七层，会在 lvs 和 nginx 都创建配置(流量先过 lvs ，再过 nginx)，所以解答第一个问题，大家共用。
第二，网络资源和计算资源是分开的，计算资源内部是 vxlan ，但是不和网络资源建立 tunnel ，网络资源到计算资源走的路由。具体就是 lb 访问后端时是访问的 ecs 的 floating ip(华为叫内大网地址)。
第三，lb 访问时要区分有无公网 IP ，有公网 IP 时，流量进到核心后，引流到网络节点，然后走内大网平面路由到后端 ecs 。如果无公网 IP ，好像是通过流表把流量引流到网络节点，然后再走上面的流程(记得不是很清楚了)
大致就是这些了，有疑问可以再交流

19

20

21

iqiyi/dpvs 也是基于 dpdk 开源的

24

@realpg 我说的是云厂商不是你，你这个思路是正确的，我也思考了下，所有租户共享一个 LB 共享池 192.168.1.0/24 ，A 租户的 LB 地址是 192.168.1.1 ，然后平台拿到这个地址去所有 LB 的机器上配置 192.168.1.1 到 lo 接口，然后宣告，形成 ECMP ，全部转发流量，流量到达 LB 后如果址是 192.168.1.1 目标地址是 vpc 内网地址，自己查 flow 流表通过 vxlan 转发到相应隧道到达租户 vpc 中的机器，至于 vni 就是在创建 lb 后平台控制器自动下发到 OVS 的。