我需要阻止长时间运行的多TB上传占用我所有的网络带宽,但我只能限制其在进程级别上的带宽使用(这意味着减慢整个机器的网络接口或减慢此用户的网络流量不会工作).幸运的是,上传是用Docker容器化的.我该怎么做才能减慢docker容器的出站流量?
我有一个golang程序,它通过https将大量数据上传到OpenStack Object Storage.它依赖于golang标准库"net/http"
来完成工作.我想用来trickle
限制数据的上传速度,但是使用trickle运行我的代码似乎没有任何影响(好像我根本没有使用涓流).
为什么会这样?涓流或golang有一些限制,阻止他们一起工作吗?是否有一些我没有考虑过的问题?
这是我的设置:
我知道trickle
这只适用于动态链接的可执行文件(参见涓流文档的第一段),所以我编译了我的代码,go build -compiler gccgo mycode.go
输出ldd myexecutable
是:
linux-vdso.so.1 => (0x00007ffee27b8000)
libgo.so.9 => /usr/lib/x86_64-linux-gnu/libgo.so.9 (0x00007f46062bf000)
libgcc_s.so.1 => /lib/x86_64-linux-gnu/libgcc_s.so.1 (0x00007f46060a9000)
libc.so.6 => /lib/x86_64-linux-gnu/libc.so.6 (0x00007f4605cdf000)
/lib64/ld-linux-x86-64.so.2 (0x000055aa4d0a4000)
libpthread.so.0 => /lib/x86_64-linux-gnu/libpthread.so.0 (0x00007f4605ac2000)
libm.so.6 => /lib/x86_64-linux-gnu/libm.so.6 (0x00007f46057b9000)
Run Code Online (Sandbox Code Playgroud)
我在Ubuntu Linux 16.04上运行它.我用slurm
我的命令运行时查看网络流量.该机器没有运行任何其他网络密集型作业,因此我确信我看到了我的代码生成的流量.
我跑的时候
trickle -s -v -u2500 myexecutable ...args
Run Code Online (Sandbox Code Playgroud)
我看到我的TX网络流量峰值大约为12000KB/s(网络可以处理的最大值),而不是遵守我的2500KB/s的限制.
任何人都可以想到为什么会发生这种情况或者我可以尝试解决这个问题?