-
使用cgroups管理Linux磁盘io的方法
- 时间:2024-11-22 22:02:22
大家好,今天Win10系统之家小编给大家分享「使用cgroups管理Linux磁盘io的方法」的知识,如果能碰巧解决你现在面临的问题,记得收藏本站或分享给你的好友们哟~,现在开始吧!
我们都知道Linux系统中的cgroups可用于管理cpu资源,今天小编要给大家介绍的是如何使用cgroups管理进程磁盘io,如果你对此感兴趣的话,不妨来了解下吧。
这个功能通过 blkio 子系统实现。
blkio 子系统里东西很多。不过大部分都是只读的状态报告,可写的参数就只有下面这几个:
代码如下:
blkio.throttle.read_bps_device
blkio.throttle.read_iops_device
blkio.throttle.write_bps_device
blkio.throttle.write_iops_device
blkio.weight
blkio.weight_device
这些都是用来控制进程的磁盘 io 的。很明显地分成两类,其中带“throttle”的,顾名思义就是节流阀,将流量限制在某个值下。而“weight”就是分配 io 的权重。
“throttle”的那四个参数看名字就知道是做什么用的。拿 blkio.throttle.read_bps_device 来限制每秒能读取的字节数。先跑点 io 出来
代码如下:
dd if=/dev/sda of=/dev/null &
[1] 2750
用 iotop 看看目前的 io
代码如下:
TID PRIO USER DISK READ DISK WRITE SWAPIN IO》 COMMAND
2750 be/4 root 66.76 M/s 0.00 B/s 0.00 % 68.53 % dd if=/dev/sda of=/dev/null
。。。
然后修改一下资源限制,把进程加入控制组
代码如下:
echo ‘8:0 1048576’ 》/sys/fs/cgroup/blkio/foo/blkio.throttle.read_bps_device
echo 2750 》/sys/fs/cgroup/blkio/foo/tasks
这里的 8:0 就是对应块设备的主设备号和副设备号。可以通过 ls -l 设备文件名查看。如
代码如下:
# ls -l /dev/sda
brw-rw----。 1 root disk 8, 0 Oct 24 11:27 /dev/sda
这里的 8, 0 就是对应的设备号。所以,cgroups 可以对不同的设备做不同的限制。然后来看看效果
代码如下:
TID PRIO USER DISK READ DISK WRITE SWAPIN IO》 COMMAND
2750 be/4 root 989.17 K/s 0.00 B/s 0.00 % 96.22 % dd if=/dev/sda of=/dev/null
。。。
可见,进程的每秒读取立马就降到了 1MB 左右。要解除限制,写入如 “8:0 0” 到文件中即可
不过需要注意的是,这种方式对小于采样间隔里产生的大量 io 是没用的。比如,就算在 1s 内产生一个每秒写入 100M 的峰值,也不会因此被限制掉。
再看看 blkio.weight 。blkio 的 throttle 和 weight 方式和 cpu 子系统的 quota 和 shares 有点像,都是一种是绝对限制,另一种是相对限制,并且在不繁忙的时候可以充分利用资源,权重值的范围在 10 – 1000 之间。
测试权重方式要麻烦一点。因为不是绝对限制,所以会受到文件系统缓存的影响。如在虚拟机中测试,要关闭虚机如我用的 VirtualBox 在宿主机上的缓存。如要测试读 io 的效果,先生成两个几个 G 的大文件 /tmp/file_1,/tmp/file_2 ,可以用 dd 搞。然后设置两个权重
代码如下:
# echo 500 》/sys/fs/cgroup/blkio/foo/blkio.weight
# echo 100 》/sys/fs/cgroup/blkio/bar/blkio.weight
测试前清空文件系统缓存,以免干扰测试结果
代码如下:
sync
echo 3 》/proc/sys/vm/drop_caches
在这两个控制组中用 dd 产生 io 测试效果。
代码如下:
# cgexec -g “blkio:foo” dd if=/tmp/file_1 of=/dev/null &
[1] 1838
# cgexec -g “blkio:bar” dd if=/tmp/file_2 of=/dev/null &
[2] 1839
还是用 iotop 看看效果
代码如下:
TID PRIO USER DISK READ DISK WRITE SWAPIN IO》 COMMAND
1839 be/4 root 48.14 M/s 0.00 B/s 0.00 % 99.21 % dd if=/tmp/file_2 of=/dev/null
1838 be/4 root 223.59 M/s 0.00 B/s 0.00 % 16.44 % dd if=/tmp/file_1 of=/dev/null
两个进程每秒读的字节数虽然会不断变动,但是大致趋势还是维持在 1:5 左右,和设定的 weight 比例一致。blkio.weight_device 是分设备的。写入时,前面再加上设备号即可。
blkio 子系统里还有很多统计项
blkio.time
各设备的 io 访问时间,单位毫秒
blkio.sectors
换入者或出各设备的扇区数
blkio.io_serviced
各设备中执行的各类型 io 操作数,分read、write、sync、async 和 total
blkio.io_service_bytes
各类型 io 换入者或出各设备的字节数
blkio.io_service_time
各设备中执行的各类型 io 时间,单位微秒
blkio.io_wait_time
各设备中各类型 io 在队列中的 等待时间
blkio.io_merged
各设备中各类型 io 请求合并的次数
blkio.io_queued
各设备中各类型 io 请求当前在队列中的数量
通过这些统计项更好地统计、监控进程的 io 情况
用
代码如下:
echo 1 》blkio.reset_stats
可以将所有统计项清零。
上面就是Linux中使用cgroups管理进程磁盘io的方法介绍了,在管理进程磁盘io的时候会用到blkio 子系统,通过上面的方法你可以限制和监控进程磁盘io,你学会了吗?
以上就是关于「使用cgroups管理Linux磁盘io的方法」的全部内容,本文讲解到这里啦,希望对大家有所帮助。如果你还想了解更多这方面的信息,记得收藏关注本站~
『Win10系统之家文♀章,转载请联系!』
相关文章
-
我们都知道Linux系统中的cgroups可用于管理cpu资源,今天小编要给大家介绍的是如何使用cgroups管理进程磁盘io,如果你对此感兴趣的话,不妨来了解下吧。
这个功能通过blkio子系统实现。
blkio子系统里东西很多。不过大部分都是只读的状态报告,可写的参数就只有下面这几个:
代码如下:
blkio.throttle.re... -
在Linux系统操作中,使用的密码多了反而记不过来,而且也容易记错,如果使用密码管理工具来管理的话会轻松很多,下面小编就给大家介绍一款实用的密码管理工具pass,一起来学习下pass的使用吧。
对于那些不想要依赖图形化进行密码管理的用户,笔者将会讲述如何在命令行下使用pass来管理密码,这是一个简单的用于命令行管理密码的工具。
该密码工具实际上是一个shell... -
给计算机配置交换空间可以充分利用系统,在物理内存被充满时使用,那么Linux下要如何使用Linux交换空间呢?Linux交换空间又要如何管理呢?下面小编就给大家介绍下Linux下使用交换空间的方法,一起来学习下吧。
一、UNIX如何使用交换空间
所有UNIX操作系统都支持某种虚拟内存(VM)系统。使用VM系统,您有两个主要区域来存储有关活动应用程序及其使用的数... -
在进行Linux系统操作的时候,使用xfs文件系统时会出现没有磁盘空间提示,可空间明明还有剩,那么遇到这种情况该如何解决呢?下面小编就给大家介绍下Linux中使用xfs文件系统是出现没有磁盘空间错误提示的解决方法。
日前,同事反馈一个问题:在一个大分区(24T)中使用xfs文件系统,用来做历史文件备份,突然提示没有磁盘空间错误,先检查下:
代码如下:
...