目录

文件系统优化

** 动态调整请求队列数来升高效能,暗中同意请求队列数为:128, 可配置512
**
[root@c37 queue]# cat /sys/block/sda/queue/nr_requests
128
** read_ahead,
通过数量预读并且记载到自由走访内部存款和储蓄器格局增强磁盘读操作,暗许值
128,ceph配置:8192 **
[root@c37 queue]# cat /sys/block/sda/queue/read_ahead_kb
128
** 关闭最终三遍访问文件(目录)的年华戳 **
例如:
mount -t xfs -o defaults,noatime,nodiratime /dev/sda5 /data
** 大文件,大体量,大量文件数建议利用xfs文件系统 **

浅谈linux品质调优之六:IO调度算法的精选

读书原作请点击:
摘要: 转载自
IO调度器的总体指标是愿意让磁头能够延续往二个倾向移动,移动到底了再往反方向走,那恰恰正是现实生活中的电梯模型,所以IO调度器也被叫做电梯.

  • I/O调度的4种算法
  • I/O调度程序的测试
  • ionice

调动I/O调度算法

[root@c37 queue]# cat /sys/block/sda/queue/scheduler
noop anticipatory deadline [IO调度算经济学习,IO调度措施。cfq]
centos6.x默认为cfq
调整为deadline
[root@c37 queue]# echo deadline > /sys/block/sda/queue/scheduler
[root@c37 queue]# cat /sys/block/sda/queue/scheduler
noop anticipatory [deadline] cfq
** I/O调度算法介绍 **

  1. CFQ(完全公平排队I/O调度程序) 暗许
    特点:
    CFQ试图均匀地分布对I/O带宽的拜会,防止进度被饿死并达成较低的延迟,是deadline和as调度器的折中.
    CFQ赋予I/O请求2个优先级,而I/O优先级请求独立于经过优先级,高优先级的历程的读写无法自行地持续高的I/O优先级.
    行事原理:
    CFQ为各种进度/线程,单独成立多个行列来保管该进度所产生的央浼,也正是说每一个进程3个队列,各队列之间的调度使用时间片来调度,
    其一来保障每种过程都能被很好的分红到I/O带宽.I/O调度器每一次执行3个经过的七遍请求.
  2. NOOP(电梯式调度程序)
    特点:
    在Linux2.4或更早的版本的调度程序,那时唯有这一种I/O调度算法.
    NOOP完毕了2个粗略的FIFO队列,它像电梯的办事主法一样对I/O请求举办团队,当有三个新的乞求到来时,它将呼吁合并到近来的呼吁之后,以此来保管请求同一介质.
    NOOP倾向饿死读而便宜写.
    NOOP对于闪存设备,RAM,嵌入式系统是最好的选择.
    电梯算法饿死读请求的分解:
    因为写请求比读请求更简单.
    写请求通过文件系统cache,不需求等一次写完结,就足以开头下一回写操作,写请求通过合并,堆积到I/O队列中.
    读请求必要等到它前边全数的读操作实现,才能展开下3遍读操作.在读操作之间有几纳秒时间,而写请求在那时期就来到,饿死了前面包车型地铁读请求.
  3. Deadline(结束时间调度程序)
    特点:
    由此时间以及硬盘区域举行分类,那几个分类和集合要求近乎于noop的调度程序.
    Deadline确定保障了在二个甘休时间内服务请求,这些结束时间是可调动的,而私下认可读期限短于写期限.那样就防止了写操作因为不可能被读取而饿死的现象.
    Deadline对数据库环境(ORACLE RAC,MYSQL等)是最好的选取.
  4. AS(预料I/O调度程序)
    特点:
    真相上与Deadline一样,但在最终一遍读操作后,要等待6ms,才能三番五次拓展对其他I/O请求进行调度.
    能够从应用程序中预约多个新的读请求,革新读操作的施行,但以部分写操作为代价.
    它会在每个6ms中插入新的I/O操作,而会将一些小写入流合并成2个大写入流,用写入延时换取最大的写入吞吐量.
    AS适合于写入较多的条件,比如文件服务器
    AS对数据库环境表现很差.
    ** I/O调度算法总括 **
    Anticipatory I/O scheduler 适用于多数环境,但不太方便数据库应用
    Deadline I/O scheduler
    经常与Anticipatory非凡,但更不难秀气,更契合于数据库应用, DATA/SAS盘
    CFQ I/O scheduler
    为具有进度分配等量的带宽,适合于桌面多职分及多媒体应用,默许IO调度器
    NOOP I/O scheduler 适用于SSD盘,有RAID卡,做了READ的盘

** sysctl.conf针对磁盘优化 **
vm.swappiness = [0 – 10] 暗中认可是60,太高了,要是是缓存服务器提出配置为0

浅谈linux品质调优之五:调优软raid

转载自
IO调度器的总体目标是期待让磁头能够一连往三个方向移动,移动到底了再往反方向走,那恰好正是现实生活中的电梯模型,所以IO调度器也被称作电梯.
(elevator)而相应的算法也就被号称电梯算法.而Linux中IO调度的升降机算法有有个别种,2个誉为as(Anticipatory),七个誉为
cfq(Complete Fairness Queueing),二个名叫deadline,还有三个名叫noop(No
Operation).具体应用哪个种类算法我们能够在开发银行的时候经过基础参数elevator来钦命.


本着机械硬盘优化

  1. 关门日志功用
    fstab里加挂载参数data=writeback
  2. 启用 TRIM 功能
    Linux内核从2.6.33开端提供TOdysseyIM帮忙,所以先运转“uname
    -a”命令,查看自个儿的基础版本,假如基本版本低于2.6.33的,请先晋级内核。
    下一场运转“hdparm -I
    /dev/sda”查看自身的硬盘支不补助T昂科拉IM技术,假若支持,你会师到
    Data Set Management TRIM supported
    万一上边七个规格都满意了,就足以在fstab中添加discard来拉开T宝马X5IM成效,如:
    原始的UUID=2f6be0cf-2f54-4646-b8c6-5fb0aa01ef23 / ext4
    defaults,errors=remount-ro 0 1
    改后的UUID=2f6be0cf-2f54-4646-b8c6-5fb0aa01ef23 / ext4
    discard,defaults,errors=remount-ro 0 1

一)I/O调度的4种算法

IO调度器的总体目的是梦想让磁头能够接连往1个倾向移动,移动到底了再往反方向走,那正好正是现实生活中的电梯模型,所以IO调度器也被喻为电梯
(elevator)而相应的算法也就被叫做电梯算法,而Linux中IO调度的电梯算法有几许种,贰个称为as(Anticipatory),三个称为cfq(Complete
Fairness Queueing),3个称作deadline,还有三个号称noop(No
Operation),具体选取哪个种类算法我们得以在运营的时候经过基础参数elevator来钦命。

一) I/O调度程序的下结论

1)CFQ(完全公平排队I/O调度程序)

I/O调度的4种算法

1.CFQ(完全公平排队I/O调度程序)

  • 特点:
    在风行的基业版本和批发版中,都选用CFQ做为暗许的I/O调度器,对于通用的服务器也是最好的取舍。
    CFQ试图均匀地分布对I/O带宽的造访,制止进度被饿死并促成较低的推移,是deadline和as调度器的折中。
    CFQ对于多媒体应用(video,audio)和桌面系统是最好的抉择。
    CFQ赋予I/O请求3个优先级,而I/O优先级请求独立于经过优先级,高优先级的长河的读写无法自行地三番五次高的I/O优先级。
  • 工作规律:
    CFQ为各样进程/线程,单独创制一个行列来保管该进度所暴发的乞请,也正是说每种进度三个连串,各队列之间的调度使用时间片来调度,以此来保管每一个进程都能被很好的分配到I/O带宽.I/O调度器每回执行三个经过的7遍呼吁。

2.NOOP(电梯式调度程序)

  • 特点:
    在Linux2.4或更早的版本的调度程序,那时唯有这一种I/O调度算法。
    NOOP完成了1个简约的FIFO队列,它像电梯的行事主法一样对I/O请求举办公司,当有一个新的呼吁到来时,它将请求合并到近来的请求之后,以此来保障请求同一介质。
    NOOP倾向饿死读而方便写。
    NOOP对于闪存设备,RAM,嵌入式系统是最好的精选。

电梯算法饿死读请求的解释:
因为写请求比读请求更便于。
写请求通过文件系统cache,不需求等一回写实现,就可以发轫下2次写操作,写请求通过统一,堆积到I/O队列中。
读请求须求等到它前边全体的读操作实现,才能进行下叁次读操作.在读操作之间有几飞秒时间,而写请求在那之间就来到,饿死了背后的读请求。

3.Deadline(停止时间调度程序)

  • 特点:
    经过时间以及硬盘区域开始展览分拣,那些分类和合并要求近似于noop的调度程序。
    Deadline确定保障了在三个扫尾时间内服务请求,那个甘休时间是可调动的,而默许读期限短于写期限.那样就幸免了写操作因为不可能被读取而饿死的现象。
    Deadline对数据库环境(ORACLE RAC,MYSQL等)是最好的取舍。

4.AS(预料I/O调度程序)

  • 特点:
    本质上与Deadline一样,但在结尾贰遍读操作后,要等待6ms,才能持续开展对别的I/O请求举行调度。
    能够从应用程序中预定1个新的读请求,创新读操作的实行,但以局部写操作为代价。
    它会在种种6ms中插入新的I/O操作,而会将部分小写入流合并成1个大写入流,用写入延时换取最大的写入吞吐量。
    AS适合于写入较多的环境,比如文件服务器。
    AS对数据库环境表现很差。

翻开当前系统支持的IO调度算法

[root@localhost ~]# dmesg | grep -i scheduler
io scheduler noop registered
io scheduler anticipatory registered
io scheduler deadline registered
io scheduler cfq registered (default)

查看当前系统的I/O调度措施

cat /sys/block/sda/queue/scheduler
noop anticipatory deadline [cfq]

临地更改I/O调度方式

#例如:想更改到noop电梯调度算法:
echo noop > /sys/block/sda/queue/scheduler

想永远的更改I/O调度措施

#修改内核引导参数,加入elevator=调度程序名
vi /boot/grub/menu.lst
#更改到如下内容:
kernel /boot/vmlinuz-2.6.18-8.el5 ro root=LABEL=/ elevator=deadline rhgb quiet

重启之后,查看调度措施

cat /sys/block/sda/queue/scheduler
noop anticipatory [deadline] cfq
#已经是deadline了

 

特点:
在风行的基业版本和发行版中,都采用CFQ做为私下认可的I/O调度器,对于通用的服务器也是最好的选取.
CFQ试图均匀地分布对I/O带宽的走访,避免进度被饿死并贯彻较低的延期,是deadline和as调度器的折中.
CFQ对于多媒体应用(video,audio)和桌面系统是最好的选取.
CFQ赋予I/O请求三个优先级,而I/O优先级请求独立于经过优先级,高优先级的长河的读写不能够自行地继续高的I/O优先级.

I/O调度程序的测试

本次测试分为只读,只写,读写同时展开。
独家对单个文件600MB,每趟读写2M,共读写300次。
1.测试磁盘读

[root@test1 tmp]# echo deadline > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/sda1 of=/dev/null bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 6.81189 seconds, 92.4 MB/s
real 0m6.833s
user 0m0.001s
sys 0m4.556s
[root@test1 tmp]# echo noop > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/sda1 of=/dev/null bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 6.61902 seconds, 95.1 MB/s
real 0m6.645s
user 0m0.002s
sys 0m4.540s
[root@test1 tmp]# echo anticipatory > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/sda1 of=/dev/null bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 8.00389 seconds, 78.6 MB/s
real 0m8.021s
user 0m0.002s
sys 0m4.586s
[root@test1 tmp]# echo cfq > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/sda1 of=/dev/null bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 29.8 seconds, 21.1 MB/s
real 0m29.826s
user 0m0.002s
sys 0m28.606s

测试结果
第一 noop用了6.61902秒,速度为95.1MB/s
第二 deadline用了6.81189秒,速度为92.4MB/s
第三 anticipatory用了8.00389秒,速度为78.6MB/s
第四 cfq用了29.8秒,速度为21.1MB/s

2.测试写磁盘

[root@test1 tmp]# echo cfq > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/zero of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 6.93058 seconds, 90.8 MB/s
real 0m7.002s
user 0m0.001s
sys 0m3.525s
[root@test1 tmp]# echo anticipatory > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/zero of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 6.79441 seconds, 92.6 MB/s
real 0m6.964s
user 0m0.003s
sys 0m3.489s
[root@test1 tmp]# echo noop > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/zero of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 9.49418 seconds, 66.3 MB/s
real 0m9.855s
user 0m0.002s
sys 0m4.075s
[root@test1 tmp]# echo deadline > /sys/block/sda/queue/scheduler
[root@test1 tmp]# time dd if=/dev/zero of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 6.84128 seconds, 92.0 MB/s
real 0m6.937s
user 0m0.002s
sys 0m3.447s

测试结果
第一 anticipatory用了6.79441秒,速度为92.6MB/s
第二 deadline用了6.84128秒,速度为92.0MB/s
第三 cfq用了6.93058秒,速度为90.8MB/s
第四 noop用了9.49418秒,速度为66.3MB/s

3.测试同时读/写

[root@test1 tmp]# echo deadline > /sys/block/sda/queue/scheduler
[root@test1 tmp]# dd if=/dev/sda1 of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 15.1331 seconds, 41.6 MB/s
[root@test1 tmp]# echo cfq > /sys/block/sda/queue/scheduler
[root@test1 tmp]# dd if=/dev/sda1 of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 36.9544 seconds, 17.0 MB/s
[root@test1 tmp]# echo anticipatory > /sys/block/sda/queue/scheduler
[root@test1 tmp]# dd if=/dev/sda1 of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 23.3617 seconds, 26.9 MB/s
[root@test1 tmp]# echo noop > /sys/block/sda/queue/scheduler
[root@test1 tmp]# dd if=/dev/sda1 of=/tmp/test bs=2M count=300
300+0 records in
300+0 records out
629145600 bytes (629 MB) copied, 17.508 seconds, 35.9 MB/s

测试结果
第一 deadline用了15.1331秒,速度为41.6MB/s
第二 noop用了17.508秒,速度为35.9MB/s
第三 anticipatory用了23.3617秒,速度为26.9MS/s
第四 cfq用了36.9544秒,速度为17.0MB/s

澳门金沙国际 1

做事原理:
CFQ为各种过程/线程,单独创造1个队列来管理该进程所发出的恳求,也等于说种种进程七个行列,各队列之间的调度使用时间片来调度,
那个来保管每种进度都能被很好的分配到I/O带宽.I/O调度器每一遍执行3个经过的5回请求.

ionice

ionice能够变动任务的品类和优先级,可是只有cfq调度程序能够用ionice。

有四个例子表明ionice的功用:

  1. 使用cfq的实时调度,优先级为7
    ionice -c1 -n7 -ptime dd if=/dev/sda1 of=/tmp/test bs=2M count=300&
  2. 选取缺省的磁盘I/O调度,优先级为3
    ionice -c2 -n3 -ptime dd if=/dev/sda1 of=/tmp/test bs=2M count=300&
  3. 行使空闲的磁盘调度,优先级为0
    ionice -c3 -n0 -ptime dd if=/dev/sda1 of=/tmp/test bs=2M count=300&

ionice的几种调度方式,实时调度最高,其次是缺省的I/O调度,最终是悠闲的磁盘调度
ionice的磁盘调度优先级有8种,最高是0,最低是7
注意,磁盘调度的优先级与经过nice的优先级没有关系
3个是指向进度I/O的优先级,一个是针对进程CPU的预先级


  • Anticipatory I/O scheduler
    适用于多数环境,但不太对劲数据库应用。

  • Deadline I/O scheduler
    普普通通与Anticipatory11分,但更简洁精致,更切合于数据库应用。

  • CFQ I/O scheduler
    暗许IO调度器Default I/O
    scheduler,为拥有进度分配等量的带宽,适合于桌面多任务及多媒体应用。

澳门金沙国际, 

2)NOOP(电梯式调度程序)

    1)
当向设施写入数据块或是从设备读出多少块时,请求都被铺排在一个队列中等候完毕.

特点:
在Linux2.4或更早的版本的调度程序,那时唯有这一种I/O调度算法.
NOOP达成了一个简便的FIFO队列,它像电梯的劳作主法一样对I/O请求实行公司,当有二个新的央求到来时,它将请求合并到如今的央浼之后,以此来保险请求同一介质.
NOOP倾向饿死读而便利写.
NOOP对于闪存设备,RAM,嵌入式系统是最好的选择.

    2) 每一个块设备都有它本人的队列.

电梯算法饿死读请求的诠释:
因为写请求比读请求更简单.
写请求通过文件系统cache,不须要等一回写完毕,就足以初阶下一遍写操作,写请求通过统一,堆积到I/O队列中.
读请求须求等到它眼前全部的读操作完毕,才能展开下三回读操作.在读操作之间有几阿秒时间,而写请求在那时期就赶到,饿死了前面包车型大巴读请求.

    3)
I/O调度程序负担珍贵那个队列的次第,以更实用地选用介质.I/O调度程序将无序的I/O操作变为有序的I/O操作.

3)Deadline(截至时间调度程序)
翻阅原来的作品请点击:

    4) 内核必须首先明确队列中累计有几个请求,然后才起来举办调度.

 

二) I/O调度的4种算法

 

    1) CFQ(Completely Fair Queuing, 完全公平排队)

 

    特点:

       
在风行的水源版本和发行版中,都采纳CFQ做为暗中认可的I/O调度器,对于通用的服务器也是最好的采用.

       
CFQ试图均匀地分布对I/O带宽的走访,制止进度被饿死并贯彻较低的延期,是deadline和as调度器的折中.

        CFQ对于多媒体应用(video,audio)和桌面系统是最好的选取.

       
CFQ赋予I/O请求3个优先级,而I/O优先级请求独立于经过优先级,高优先级过程的读写不可能自动地继续高的I/O优先级.

 

    工作原理:

       
CFQ为各类进度/线程单独成立1个行列来管理该进度所爆发的伸手,也便是说每种进度贰个类别,各队列之间的调度使用时间片来调度,以此来保管每种进度都能被很好的分配到I/O带宽.I/O调度器每趟执行三个经过的7遍请求.

 

 

    2) NOOP(电梯式调度程序)

 

    特点:

        在Linux2.4或更早的本子的调度程序,那时只有这一种I/O调度算法.

       
NOOP完结了2个FIFO队列,它像电梯的做事主法一样对I/O请求进行组织,当有2个新的伸手到来时,它将呼吁合并到近年来的请求之后,以此来担保请求同一介质.

        NOOP倾向饿死读而便宜写.

        NOOP对于闪存设备,RAM,嵌入式系统是最好的选取.

 

    电梯算法饿死读请求的演讲:

        因为写请求比读请求更不难.

       
写请求通过文件系统cache,不供给等贰遍写达成,就足以开首下一回写操作,写请求通过集合,堆积到I/O队列中.

       
读请求要求等到它前边全体的读操作落成,才能进行下2次读操作.在读操作之间有几阿秒时间,而写请求在那之间就过来,饿死了背后的读请求.

 

 

 

    3) Deadline(截至时间调度程序)

 

    特点:

       
通过时间以及硬盘区域展开分拣,那么些分类和统一要求近乎于noop的调度程序.

       
Deadline确认保证了在1个甘休时间内服务请求,这几个停止时间是可调动的,而暗许读期限短于写期限.那样就幸免了写操作因为不可能被读取而饿死的现象.

        Deadline对数据库环境(ORACLE RAC,MYSQL等)是最好的选取.

 

 

    4) AS(预料I/O调度程序)

 

    特点:

       
本质上与Deadline一样,但在终极3回读操作后,要等待6ms,才能继承开始展览对任何I/O请求举办调度.

       
能够从应用程序中预约多个新的读请求,革新读操作的履行,但以局部写操作为代价.

       
它会在每一个6ms中插入新的I/O操作,而会将部分小写入流合并成2个大写入流,用写入延时换取最大的写入吞吐量.

        AS适合于写入较多的环境,比如文件服务器

        AS对数据库环境表现很差.

 

 

 

三) I/O调度方式的查看与安装

 

    1) 查看当前系统的I/O调度

 

       
[[email protected]
tmp]# cat /sys/block/sda/queue/scheduler 

        noop anticipatory deadline [cfq]

 

    2) 一时半刻更改I/O调度

        例如:想改变到noop电梯调度算法:

        echo noop > /sys/block/sda/queue/scheduler

 

    3) 永久更改I/O调度

        修改内核指导参数,参预elevator=调度程序名

       
[[email protected]
tmp]# vi /boot/grub/menu.lst

        更改到如下内容:

        kernel /boot/vmlinuz-2.6.18-8.el5 ro root=LABEL=/
elevator=deadline rhgb quiet

 

        重启之后,查看调度情势:

       
[[email protected]
~]# cat /sys/block/sda/queue/scheduler 

        noop anticipatory [deadline] cfq 

        已经是deadline了

 

四) ionice

 

    ionice能够变动职务的体系和优先级,可是唯有cfq调度程序能够用ionice.

    有多个例证表明ionice的成效:

    选择cfq的实时调度,优先级为7

        ionice -c1 -n7  -ptime dd if=/dev/sda1 f=/tmp/test bs=2M
count=300&

    采纳缺省的磁盘I/O调度,优先级为3

        ionice -c2 -n3  -ptime dd if=/dev/sda1 f=/tmp/test bs=2M
count=300&

    选用空闲的磁盘调度,优先级为0

        ionice -c3 -n0  -ptime dd if=/dev/sda1 f=/tmp/test bs=2M
count=300&

 

   
ionice的三种调度措施,实时调度最高,其次是缺省的I/O调度,最后是悠闲的磁盘调度.

    ionice的磁盘调度优先级有8种,最高是0,最低是7.

    注意,磁盘调度的优先级与经过nice的优先级没有关系.

    1个是本着进度I/O的优先级,一个是针对性进度CPU的事先级.

 

浅谈linux品质调优之五:调优软raid
一) I/O调度程序的下结论 1)
当向设…

相关文章