Linux TC流量控制实战:用HTB和RED解决家庭NAS带宽争用问题
家里的网络设备越来越多,智能电视、手机、平板、笔记本电脑,还有那台存储了全家照片和电影的NAS。不知道你有没有遇到过这样的场景:晚上一家人想用电视看个4K电影,结果手机同步照片到NAS,或者电脑在备份数据,电视画面就开始转圈圈,体验瞬间跌到谷底。这背后,其实就是典型的带宽争用问题——所有设备都在一条“马路”上抢道,没有交通规则,自然就堵死了。
Linux内核内置的流量控制(Traffic Control, TC)工具,就是解决这个问题的“交通警察”。它不像那些昂贵的商用路由器固件,需要复杂的界面和预设规则。TC直接运行在Linux系统上,通过命令行就能实现极其精细的带宽管理。今天,我们不谈深奥的理论树形结构,就从家庭网络这个最实际的痛点出发,手把手带你用HTB(分层令牌桶)和RED(随机早期探测),搭建一套属于你自己的、智能的、能区分“救护车”和“私家车”的家庭网络QoS(服务质量)系统。无论你的NAS是跑在树莓派、旧电脑还是专业的服务器上,这套方法都能让你家的网络告别卡顿,各取所需。
1. 理解家庭网络流量控制的必要性
在深入技术细节之前,我们得先搞清楚,为什么家庭网络也需要如此精细的流量控制。过去,家庭网络流量相对简单,无非是网页浏览和邮件。但现在,家庭网络已经演变成一个复杂的多媒体和数据中心。
- 流量类型多样化:实时视频流(如Netflix、Disney+)、视频会议(Zoom、Teams)、在线游戏对延迟和抖动极其敏感;而文件备份、云同步、软件下载等后台任务则可以容忍较高的延迟,但对总吞吐量有要求。
- 设备爆炸性增长:除了传统的PC和手机,智能电视、游戏主机、智能家居中枢、监控摄像头等IoT设备都在持续产生网络流量。
- NAS成为数据枢纽:家庭NAS不仅提供文件存储,更承担了媒体服务器(Plex, Jellyfin)、照片备份(Synology Photos)、下载机等多重角色,其上传/下载流量常常是带宽争用的“罪魁祸首”。
当这些流量不加区分地涌入你那条可能只有100Mbps或1000Mbps的上行/下行链路时,问题就来了。一个全速运行的BT下载,足以让4K视频流缓冲;手机自动备份照片,可能让正在进行的视频会议变得卡顿不堪。TC的作用,就是为这些不同类型的流量划分车道、设置优先级、管理突发,确保关键应用体验流畅,同时充分利用闲置带宽。
提示:本文的所有操作均假设你有一台运行Linux系统(如Ubuntu Server, CentOS, OpenWrt等)的设备作为家庭网络的网关或核心节点(例如你的NAS本身或旁路网关)。你需要具备基本的Linux命令行操作能力。
2. 构建家庭网络流量控制模型
在动手敲命令之前,我们需要一个清晰的模型。想象一下我们的家庭网络出口(通常是连接互联网的WAN口)是一条总带宽为100Mbps的公路。我们的目标是:
- 保障高优先级流量:视频流、游戏、视频会议的“快车道”,确保它们永远畅通。
- 限制但允许突发:文件备份、下载等“慢车道”,平时限制速度,但在快车道空闲时,可以临时加速(借用带宽)。
- 避免缓冲膨胀:防止大量TCP连接因排队过长而同时超时重传,导致网络“雪崩”。
基于此,我们设计一个简单的HTB分层模型:
根队列 (1:0) - HTB, 总带宽 100Mbps
|
├── 类 1:1 - 实时流量类 (30Mbps保证,可借用至80Mbps)
│ ├── 叶类 1:11 - 视频流 (20Mbps保证,优先级最高)
│ └── 叶类 1:12 - 游戏/语音 (10Mbps保证,优先级高)
|
├── 类 1:2 - 标准流量类 (40Mbps保证,可借用至60Mbps)
│ └── 叶类 1:21 - 网页浏览、普通应用
|
└── 类 1:3 - 尽力而为流量类 (20Mbps保证,可借用至总剩余带宽)
├── 叶类 1:31 - 文件下载 (应用RED)
└── 叶类 1:32 - 备份同步 (应用RED)
这个模型中,rate是保证带宽,ceil是最大可借用到的带宽。prio值越小优先级越高。我们在最低优先级的“尽力而为”类上应用RED,来管理可能出现的队列拥塞。
3. 实战配置:HTB分层与带宽分配
现在,我们进入实战环节。假设我们要管理的网络接口是 eth0(请根据你的实际情况替换,如 wan, pppoe-wan 等)。
3.1 清理与初始化
首先,清除接口上可能已有的所有TC规则,从一个干净的状态开始。
sudo tc qdisc del dev eth0 root 2>/dev/null
3.2 创建根HTB队列规则
我们在 eth0 的出口(egress)方向创建一个HTB队列规则,并将其设为根(root)。handle 1: 是它的句柄,default 20 表示未分类的流量默认进入句柄为 1:20 的类(我们稍后会创建它作为“标准流量”的默认类)。
sudo tc qdisc add dev eth0 root handle 1: htb default 20
3.3 创建主干分类(Class)
在根队列下,我们创建第一个主干分类,它定义了总带宽。这里我们假设总带宽是100Mbps(注意单位,TC常用 mbit 表示Mbps,kbit 表示Kbps)。
sudo tc class add dev eth0 parent 1: classid 1:1 htb rate 100mbit ceil 100mbit
parent 1::父队列是句柄为1:的根队列。classid 1:1:这个类的唯一标识符。rate 100mbit:保证带宽100Mbps。ceil 100mbit:最大带宽也是100Mbps,即这个类不能从更上级借带宽(因为它是顶级类)。
3.4 创建子分类并分配带宽
接下来,我们在主干分类 1:1 下创建我们模型中的三个子类:实时、标准和尽力而为。
# 实时流量类:保证30M,最高可到80M
sudo tc class add dev eth0 parent 1:1 classid 1:10 htb rate 30mbit ceil 80mbit prio 0
# 标准流量类:保证40M,最高可到60M
sudo tc class add dev eth0 parent 1:1 classid 1:20 htb rate 40mbit ceil 60mbit prio 1
# 尽力而为流量类:保证20M,最高可到100M(可借用父类剩余带宽)
sudo tc class add dev eth0 parent 1:1 classid 1:30 htb rate 20mbit ceil 100mbit prio 2
关键参数解析:
prio:优先级。0最高,2最低。在带宽紧张时,调度器会优先发送高优先级队列中的数据包。ceil:巧妙之处所在。1:30类的ceil设置为100mbit,意味着当1:10和1:20类没有用完它们的保证带宽(rate)时,1:30类可以“借用”这些空闲带宽,直到总接口带宽上限。这就是HTB“分层令牌桶”中“借用模型”的核心。
3.5 为子分类创建叶队列并应用规则
分类本身不排队,数据包需要在叶队列(leaf qdisc)中排队。我们为每个子类附加一个实际的排队规则。对于高优先级的实时类,我们使用简单的 pfifo_fast(Linux默认,内含三个优先级波段)。对于低优先级的尽力而为类,我们应用 red 队列来避免缓冲膨胀。
# 为实时类附加队列 - 使用默认的pfifo_fast即可
sudo tc qdisc add dev eth0 parent 1:10 handle 10: pfifo_fast
# 为标准类附加队列
sudo tc qdisc add dev eth0 parent 1:20 handle 20: pfifo_fast
# 为尽力而为类附加RED队列
sudo tc qdisc add dev eth0 parent 1:30 handle 30: red limit 600KB min 150KB max 450KB avpkt 1000 burst 50 probability 0.05 bandwidth 100mbit ecn
RED参数详解(针对家庭网络优化):
limit 600KB:物理队列的最大长度。超过此值的数据包将被直接丢弃。min 150KB:平均队列长度的最小阈值。当平均队列长度低于此值,不丢包。max 450KB:平均队列长度的最大阈值。当平均队列长度达到此值,丢包概率达到最大(probability)。avpkt 1000:平均数据包大小,单位字节。用于内部计算,1500字节MTU下设为1000是经验值。burst 50:决定平均队列长度计算平滑度的突发容量。值越大,对瞬时突发越宽容。probability 0.05:最大丢包概率(当队列长度=max时)。设为5%是一个相对积极的拥塞信号。bandwidth 100mbit:接口的物理带宽,用于空闲后重新计算平均队列。ecn:强烈建议启用。对于支持ECN(显式拥塞通知)的TCP连接(现代操作系统和浏览器默认支持),RED会通过标记IP头部的ECN位来通知对方减速,而不是直接丢包,避免了重传,提升了效率。
3.6 使用过滤器(Filter)对流量进行分类
创建好了车道(类)和收费站规则(队列),现在需要把车(数据包)引导到正确的车道上。这需要用到过滤器和分类器。最常用的是 u32 分类器,它可以根据IP、端口、协议等几乎任何数据包头部的字段进行匹配。
假设我们的家庭网络IP段是 192.168.1.0/24,NAS的IP是 192.168.1.100。
目标1:将所有发往NAS特定服务端口(如视频流端口32400/Plex)的流量标记为高优先级,并送入实时类。
首先,我们需要使用 iptables(或 nftables)给匹配的数据包打上一个标记(mark)。TC过滤器可以识别这个标记。
# 假设视频流服务(如Plex)运行在32400端口
sudo iptables -t mangle -A OUTPUT -o eth0 -d 192.168.1.100 -p tcp --dport 32400 -j MARK --set-mark 10
sudo iptables -t mangle -A OUTPUT -o eth0 -d 192.168.1.100 -p udp --dport 32400 -j MARK --set-mark 10
# 将标记为10的流量导向实时类 (1:10)
sudo tc filter add dev eth0 parent 1: protocol ip prio 1 handle 10 fw flowid 1:10
目标2:将来自特定设备(如手机备份IP 192.168.1.50)发往NAS的流量送入尽力而为类。
# 为来自手机备份的流量打上标记20
sudo iptables -t mangle -A OUTPUT -o eth0 -s 192.168.1.50 -d 192.168.1.100 -j MARK --set-mark 30
# 将标记为30的流量导向尽力而为类 (1:30)
sudo tc filter add dev eth0 parent 1: protocol ip prio 3 handle 30 fw flowid 1:30
目标3:将常见的游戏和语音通信流量(如Steam、Discord常用端口)送入实时类。
这需要更精细的端口匹配,但原理相同。你可以创建一个端口列表。
# 示例:标记游戏流量(端口范围不精确,需根据实际情况调整)
sudo iptables -t mangle -A OUTPUT -o eth0 -p udp -m multiport --dports 27015,27036,27037 -j MARK --set-mark 11
sudo tc filter add dev eth0 parent 1: protocol ip prio 2 handle 11 fw flowid 1:10
目标4:将所有未匹配的流量默认送入标准类 (1:20)。
因为我们创建根队列时指定了 default 20,所以未分类流量会自动进入 1:20 类。你也可以显式地添加一个“兜底”过滤器。
sudo tc filter add dev eth0 parent 1: protocol ip prio 999 u32 match ip dst 0.0.0.0/0 flowid 1:20
4. 监控、调试与规则持久化
配置完成后,如何验证它是否在工作?
4.1 监控TC状态
使用 tc 命令查看队列、类和过滤器的状态。
# 查看qdisc简况
tc -s qdisc show dev eth0
# 查看class详情,特别是发送字节数、速率和借用状态
tc -s class show dev eth0
# 查看filter规则
tc filter show dev eth0
一个健康的HTB class输出中,你可以看到 rate(保证速率)、ceil(上限)、prio(优先级),以及最重要的 lended(借出的字节数)和 borrowed(借入的字节数)。当网络空闲时,低优先级的类会显示借入了带宽。
4.2 使用工具进行压力测试
你可以使用 iperf3 或 netperf 在家庭内网的两台机器间制造流量,观察TC规则是否生效。例如,在手机(192.168.1.50)上向NAS发起一个iperf3 TCP流,同时用电视播放NAS上的4K视频。观察视频是否流畅,同时用 tc -s class show dev eth0 查看 1:30(尽力而为)和 1:10(实时)类的流量统计,应该能看到实时类优先获得带宽。
4.3 规则持久化
通过命令行配置的TC和iptables规则在重启后会丢失。为了让配置永久生效,你需要将命令添加到系统的启动脚本中。具体方法因发行版而异:
- Debian/Ubuntu:可以将命令写入
/etc/rc.local文件(确保该文件有执行权限)。 - CentOS/RHEL:可以创建自定义的systemd service单元。
- OpenWrt:TC和防火墙规则通常直接集成在
/etc/config/network和/etc/config/firewall中,有专门的配置语法。
一个更通用的方法是创建一个脚本(如 /usr/local/sbin/setup_tc.sh),包含所有配置命令,然后通过cron的 @reboot 或systemd服务来执行它。
#!/bin/bash
# /usr/local/sbin/setup_tc.sh
# 清理旧规则
tc qdisc del dev eth0 root 2>/dev/null
iptables -t mangle -F
# ... (此处填入之前所有的tc和iptables命令)
然后创建systemd服务文件 /etc/systemd/system/tc-setup.service:
[Unit]
Description=Traffic Control Setup
After=network-online.target
Wants=network-online.target
[Service]
Type=oneshot
ExecStart=/usr/local/sbin/setup_tc.sh
RemainAfterExit=yes
[Install]
WantedBy=multi-user.target
最后启用它:sudo systemctl enable tc-setup.service
5. 高级技巧与排错指南
5.1 处理上传与下载方向
本文示例主要针对出口(egress)流量,即从你的Linux网关/NAS发出到互联网或其他内网设备的流量。这对于保障从NAS流出的视频流质量至关重要。但带宽争用也发生在**入口(ingress)**方向,例如从互联网下载大文件会占满下行带宽,影响其他设备浏览网页。
Linux对入口流量的控制较弱(ingress qdisc功能有限)。一个更有效的方法是在入口方向进行“策略限速”(policing)或使用中间队列设备(IMQ)。更简单的方案是,如果你的路由器支持,在路由器上做下行QoS。或者,利用TC的 ifb(Intermediate Functional Block)虚拟接口,将入口流量重定向到虚拟接口的出口方向进行处理。
# 加载ifb模块
sudo modprobe ifb
sudo ip link set dev ifb0 up
# 将eth0的入口流量重定向到ifb0的出口
sudo tc qdisc add dev eth0 handle ffff: ingress
sudo tc filter add dev eth0 parent ffff: protocol ip u32 match u32 0 0 action mirred egress redirect dev ifb0
# 现在,你可以像配置出口流量一样,在ifb0上配置HTB等规则来控制入口流量
sudo tc qdisc add dev ifb0 root handle 1: htb
# ... 后续配置类似
5.2 调整Quantum值优化借用公平性
HTB的 quantum 参数决定了在借用带宽时,每个类每次轮询能发送多少字节。默认值通常由 rate/r2q 计算得出。如果发现低优先级类在借用带宽时仍然不公平(例如一个下载任务完全饿死了另一个),可以手动调整叶类的 quantum 值。quantum 应该至少等于一个MTU(1500字节),并且所有竞争同一父类带宽的子类的 quantum 比值,应大致等于它们期望的带宽分配比例。
# 在创建类时指定quantum
sudo tc class add dev eth0 parent 1:30 classid 1:31 htb rate 10mbit ceil 50mbit prio 2 quantum 15000
sudo tc class add dev eth0 parent 1:30 classid 1:32 htb rate 10mbit ceil 50mbit prio 2 quantum 15000
5.3 常见问题排错
- 规则不生效:首先检查命令是否有语法错误。用
tc -s qdisc show dev eth0和tc -s class show dev eth0确认队列和类已创建。用tc filter show dev eth0检查过滤器是否正确关联。用iptables -t mangle -L -v查看数据包是否被打上了预期的标记。 - 性能开销:复杂的TC规则和大量的iptables匹配会对CPU造成一定负担,特别是在低功耗设备(如树莓派)上。如果遇到性能瓶颈,考虑简化分类规则,减少过滤器数量,或者使用更高效的匹配方式(如
iptables的set模块匹配IP集合)。 - RED没有明显效果:RED主要在队列持续拥塞时起作用。对于家庭网络间歇性的突发,其效果可能不如HTB的优先级和借用机制明显。确保
min和max阈值设置合理(约为limit的 1/4 和 3/4),并启用了ecn。
配置家庭网络的流量控制就像一次精细的调音,初期可能需要多次调整 rate、ceil、prio 以及过滤器的匹配条件,才能找到最适合你家网络流量特征的参数组合。一旦调校得当,那种所有设备各司其职、网络体验平滑如丝的感觉,会让你觉得这一切的折腾都是值得的。我的经验是,先从保障视频流和游戏这两个对延迟最敏感的应用开始,给它们分配较高的优先级和足够的保证带宽,观察几天,再根据实际情况调整其他类别的参数。记住,没有一劳永逸的配置,随着家庭设备和应用的变化,这套规则也需要不断地演进。
736



被折叠的 条评论
为什么被折叠?



