Показано с 1 по 6 из 6

Тема: jbd2/dm-2-8 - IO 99.9%

  1. #1
    Member
    Регистрация
    19.10.2011
    Сообщений
    76

    По умолчанию jbd2/dm-2-8 - IO 99.9%

    Здравствуйте!

    [root@ ~]# cat /etc/redhat-release
    CentOS release 6.3 (Final)
    VDSmanager-Linux 4.3.52.8

    С недавних пор периодически мучает проблема на дисках. iotop показывает
    99.9% на ноде. Причем нагрузка может длиться сутки. Начинается так же внезапно, как и прекращается. Перечитал кучу всего, пробовал останавливать самые нагруженные контейнера - она не меняется.


    atop показывает следующее:



    Синхронизация массива в данный момент не идет:
    [root@ ~]# cat /proc/mdstat
    Personalities : [raid1]
    md127 : active raid1 sda[1] sdb[0]
    976746496 blocks super external:/md0/0 [2/2] [UU]

    md0 : inactive sda[1](S) sdb[0](S)
    6306 blocks super external:imsm

    unused devices: <none>
    mount:
    [root@ ~]# mount
    /dev/mapper/vg_vds0-lv_root on / type ext4 (rw)
    proc on /proc type proc (rw)
    sysfs on /sys type sysfs (rw)
    devpts on /dev/pts type devpts (rw,gid=5,mode=620)
    tmpfs on /dev/shm type tmpfs (rw)
    /dev/md127p1 on /boot type ext4 (rw)
    /dev/mapper/vg_vds0-lv_home on /home type ext4 (rw,noatime)
    none on /proc/sys/fs/binfmt_misc type binfmt_misc (rw)
    sunrpc on /var/lib/nfs/rpc_pipefs type rpc_pipefs (rw)
    nfsd on /proc/fs/nfsd type nfsd (rw)
    beancounter on /proc/vz/beancounter type cgroup (rw,name=beancounter)
    container on /proc/vz/container type cgroup (rw,name=container)
    fairsched on /proc/vz/fairsched type cgroup (rw,name=fairsched)
    fstab:
    [root@ ~]# cat /etc/fstab
    /dev/mapper/vg_vds0-lv_root / ext4 defaults 1 1
    /dev/md127p1 /boot ext4 defaults 1 2
    tmpfs /dev/shm tmpfs defaults 0 0
    devpts /dev/pts devpts gid=5,mode=620 0 0
    sysfs /sys sysfs defaults 0 0
    proc /proc proc defaults 0 0
    /dev/mapper/vg_vds0-lv_swap swap swap defaults 0 0
    /dev/mapper/vg_vds0-lv_home /home ext4 defaults,noatime 1 2
    10.0.0.99:/home3 /home/backup nfs defaults 0 0
    mtab:
    [root@ ~]# cat /etc/mtab
    /dev/mapper/vg_vds0-lv_root / ext4 rw 0 0
    proc /proc proc rw 0 0
    sysfs /sys sysfs rw 0 0
    devpts /dev/pts devpts rw,gid=5,mode=620 0 0
    tmpfs /dev/shm tmpfs rw 0 0
    /dev/md127p1 /boot ext4 rw 0 0
    /dev/mapper/vg_vds0-lv_home /home ext4 rw,noatime 0 0
    none /proc/sys/fs/binfmt_misc binfmt_misc rw 0 0
    sunrpc /var/lib/nfs/rpc_pipefs rpc_pipefs rw 0 0
    nfsd /proc/fs/nfsd nfsd rw 0 0
    beancounter /proc/vz/beancounter cgroup rw,name=beancounter 0 0
    container /proc/vz/container cgroup rw,name=container 0 0
    fairsched /proc/vz/fairsched cgroup rw,name=fairsched 0 0
    Подскажите, пожалуйста, куда смотреть?

    Спасибо!

  2. #2
    Support team Аватар для usaafko
    Регистрация
    06.10.2013
    Сообщений
    2,384

    По умолчанию

    Попробуйте измерить скорость ввода-вывода на проблемный диск (md)
    Если у вас скорость 1 мб\с - то ее не будет хватать

  3. #3
    Member
    Регистрация
    19.10.2011
    Сообщений
    76

    По умолчанию

    Цитата Сообщение от usaafko Посмотреть сообщение
    Попробуйте измерить скорость ввода-вывода на проблемный диск (md)
    Если у вас скорость 1 мб\с - то ее не будет хватать
    Код:
    [root@ ~]# hdparm -t /dev/sdb
    
    /dev/sdb:
     Timing buffered disk reads:  354 MB in  3.18 seconds = 111.16 MB/sec
    [root@ ~]# hdparm -t /dev/mapper/vg_vds0-lv_home
    
    /dev/mapper/vg_vds0-lv_home:
     Timing buffered disk reads:  400 MB in  3.01 seconds = 132.79 MB/sec
    [root@ ~]# hdparm -t /dev/sda
    
    /dev/sda:
     Timing buffered disk reads:  150 MB in  3.00 seconds =  49.92 MB/sec
    P.S. нагрузка на диск в данный момент продолжается.

  4. #4
    Support team Аватар для usaafko
    Регистрация
    06.10.2013
    Сообщений
    2,384

    По умолчанию

    А на зеркало?

  5. #5
    Senior Member Аватар для rootden
    Регистрация
    30.10.2011
    Сообщений
    439

    По умолчанию

    сперва нужно убедится то что с дисками все впорядке, а потом отключать софт по очереди, такое может быть из за активной записи - логи, письма, сессии, и т.д и т.п.

  6. #6
    Member
    Регистрация
    19.10.2011
    Сообщений
    76

    По умолчанию

    Цитата Сообщение от usaafko Посмотреть сообщение
    А на зеркало?
    Не понял, уточните, пожалуйста?

Ваши права

  • Вы не можете создавать новые темы
  • Вы не можете отвечать в темах
  • Вы не можете прикреплять вложения
  • Вы не можете редактировать свои сообщения
  •