• 请不要在回答技术问题时复制粘贴 AI 生成的内容
newshbb
V2EX  ›  程序员

UDP 流量一大,整个服务器的网络就崩溃

  •  
  •   newshbb · Feb 23, 2024 · 3239 views
    This topic created in 834 days ago, the information mentioned may be changed or developed.

    一台 Linux 服务器上的 UDP 服务(类似 STUN ),大概服务几十万个客户,每秒大概 50Mb 输入流量,在 aws/vultr/aliyun 上都没问题,但是在 azure/digitocean/hetzner 跑不起来,后三者都是同样的问题,服务器上 ping 也 ping 不出去,我这边 ssh 也连不上,不过没有关的连接没问题,我的 udp 服务也基本瘫痪,流入很大,但是有效流出很少。azure 的 support 倒是很热情,电话邮件来回好几天,可就是解决不了问题,instance 也重建好几遍,数据中心也换了好几个。

    不知道大家有没有遇到过,有啥 linux 参数可以调节一下?

    谢谢

    11 replies    2024-02-23 22:00:05 +08:00
    laminux29
        1
    laminux29  
       Feb 23, 2024   ❤️ 2
    1.对比一下两边的硬件情况。

    2.aws/vultr/aliyun ,这 3 个能跑起来的 Linux ,直接 tar + zstd 整机备份到 azure 上,看看情况。
    patrickyoung
        2
    patrickyoung  
       Feb 23, 2024 via iPhone
    pps 有多大,像是触发了防 ddos
    FabricPath
        3
    FabricPath  
       Feb 23, 2024
    试试 sysctl -w net.netfilter.nf_conntrack_max=5000000
    opengps
        4
    opengps  
       Feb 23, 2024
    公网大流量走 udp 很容易受到限制,这个限制往往在网络层面,不再你机器内部,所以你先查查流量不到你服务器的原因是哪个环节
    tf2
        5
    tf2  
       Feb 23, 2024
    @FabricPath 感觉 conntrack 都是 tcp 的吧。。udp 也用 conntrack ?
    ttvast
        6
    ttvast  
       Feb 23, 2024
    服务器先搞一个带外管理,看看数据包到底有没有到达服务器。
    newshbb
        7
    newshbb  
    OP
       Feb 23, 2024
    @opengps
    @patrickyoung
    不像,因为 azure 的 support 自己也没查出来
    4kingRAS
        8
    4kingRAS  
       Feb 23, 2024
    你的出流量是哪个地方的监控,如果是宿主机的监控,那说明是宿主机里的限制,看 netstat -s 有无信息,dmesg -T 如果有限制会报错。如果是出口网关的监控,那就看链路上有没有限制
    FabricPath
        9
    FabricPath  
       Feb 23, 2024
    @lambdaq conntrack -L
    al772
        10
    al772  
       Feb 23, 2024
    我们的产品在 Azure 上有个已知问题,UDP 连接会被砍掉,Azure 的设计缺陷,关键词 flow control
    newshbb
        11
    newshbb  
    OP
       Feb 23, 2024
    @4kingRAS vnstat
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   831 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 44ms · UTC 21:22 · PVG 05:22 · LAX 14:22 · JFK 17:22
    ♥ Do have faith in what you're doing.