Re: сервер HP DL 165 G7 говно...
Роман
idiot8 на rambler.ru
Пн Мар 25 21:20:17 UTC 2013
Тип рейда ? пятый
С кабельной структурой все нормально ?
вот он приехал и ничего не трогали сборка от HP
Питание достаточно?
ФИрменный сервер. а не самосбор и голова у них пусть болит достаточно
ли... из 8 корзин для дисков заполнены только 3.
Винты отдельно протестированы ?
не тестировал.
Как я понимаю сервак новый и пока не боевой. Искать проблему в логике
откидывая напрочь физику по крайней мере неразумно.
--------
уже почти боевой, сегодня отнесли... надо поднять.
Начальство сказало фиг с тормозами... но как выйдет в реале непонятно.
аппаратный writeback в контроллере включен уже.
и тесты ниже проведены под ним.
VY> Режим рейда на запись пряммая, хотите скорости поставьте writeback,
VY> если есть батарейка конечно
VY> 2013/3/25 Роман <idiot8 на rambler.ru>:
>> может, но пока обнаружить кривоту не удалось...
>> такое вот нормально ? дисковая система перегружена простым копированием с
>> диска на диск.
>> В этот момент даже простое открытие текстового файла (2.5К) на
>> редактирование вимом висит 10 сек или лист папки домашней 15 сек.
>>
>> Кеш всё таки влияет. Его надо отключать. например вот так:
>>
>> dd iflag=direct if=/dev/nbd0 of=/dev/null bs=1M
>> скопировано 42949017600 байт (43 GB), 75,9118 c, 566 MB/c
>>
>> dd if=/dev/nbd0 of=/dev/null bs=1M
>> скопировано 42949017600 байт (43 GB), 112,035 c, 383 MB/c
>> -----------
>> итого без кеширования линейная скорость чтения больше !
>>
>> ЗАПИСЬ!
>>
>> dd oflag=direct if=/dev/nbd0 of=/vm/mail/test.img bs=1M
>> скопировано 42949017600 байт (43 GB), 271,266 c, 158 MB/c
>>
>> dd if=/dev/nbd0 of=/vm/mail/test.img bs=1M
>> скопировано 42949017600 байт (43 GB), 502,14 c, 85,5 MB/c
>> ------
>> и снова... запись с кешем хуже чем напрямую. странно ?
>> при этом в атопе
>>
>> LVM | data-mail | busy 101% | read 0 | write 1888 | KiB/w
>> 508 | MBr/s 0.00 | MBw/s 93.74 | avio 5.30 ms |
>> DSK | sda | busy 101% | read 8 | write 1886 | KiB/w
>> 508 | MBr/s 0.00 | MBw/s 93.59 | avio 5.28 ms |
>>
>>
>>
>>
>>
>> hur> мб руки кривые ? Вон все хаят длинки 300е, а у меня стоит один дома
>> hur> уже лет 5 как, аптайм 437 дней.
>>
>>
>>>> Re: сервер HP DL 165 G7
>>>>говно... хорошая ассоциация...
>>>>смотрим.
>>>> sudo dd if=/dev/nbd0 of=/vm/mail/test.img bs=8192M
>>>> скопировано 42949017600 байт (43 GB), 534,901 c, 80,3 MB/c
>>
>>>> $free -m
>>>> total used free shared buffers
>>>> cached
>>>> Mem: 16045 15841 203 0 4458
>>>> 7298
>>>> -/+ buffers/cache: 4083 11961
>>
>>>> лучше конечно, но все равно маловато для 10К дисков.
>>>> Изначально вопрос возник из-за того что в kvm машина распаковывала и
>>>>ставила почтовик целый час с хвостиком...
>>>> но когда на реальном железе вышло тоже самое как то стало думаться
>>>>не железо.
>>
>>
>>>> Странно, bs: количество байт, которые будут записаны за раз. Так ?
>>>> то есть никто не мешает считать вообще весь файл, а эти разы могут
>>>>быть со скоростью 100 или 200 раз в единицу времени.
>>
>>>> да и ОС разве не кеширует ? кеширует
>>>> --------------------------
>>>> а что с ним не так ?
>>
>>>> Вагон спичек _по одной_ перенесите. Быстро получится?
>>>> А вы же ящик за раз можете - это в тысячи раз быстрее выйдет.
>>
>>>> Попробуйте указать аргумент bs=XXX, где bs - размер физического
>>>>блока устройства.
>>>>
>>
>>>>
>>>>
>>>> > dd if=/dev/nbd0 of=/dev/sda
>>
>>>> А про размер io блока вы не забыли? :)
>>
>>
>>
>>
>>
>>>> сервер HP DL 165 G7 говно ???!!!!
>>>> ОС Ubuntu 12.04 x64 server
>>
>>>> dd if=/dev/nbd0 of=/dev/sda
>>>> 83884800+0 records in
>>>> 83884800+0 records out
>>>> 42949017600 bytes (43 GB) copied, 1977.78 s, 21.7 MB/s
>>
>>>> 21 Мб в сек с SAS диска на SAS диск !
>>
>>
>>>> RAID HP P410 256 мб ОЗУ ... но дело не в этом. любая дисковая
>>>>операция длительная косит кладет дисковую подсистему с загрузкой
>>>>почти 100%
>>
>>>> $atop
>>>> ....
>>>> DSK | sda | busy 98% | read 133895 | write 0 | MBw/s 0.00 | avio
>>>>0.04 ms |
>>
>>>> ....
>>
>>>> Убило вот что
>>
>>>> ~$sudo hdparm -I /dev/sda
>>
>>>> Capabilities:
>>>> IORDY not likely
>>>> Cannot perform double-word IO
>>>> R/W multiple sector transfer: not supported
>>>> DMA: not supported
>>>> PIO: pio0
>>
>>>> Может я чего в жизни не понимаю... кто знает может надо драйвер
>>>>особый для Ubuntu 12.04 x64 ??? HP конечно "not supported"
>>
>>>> --
>>>> ubuntu-ru mailing list
>>>> ubuntu-ru на lists.ubuntu.com
>>>> https://lists.ubuntu.com/mailman/listinfo/ubuntu-ru
>>
>>
>>
>>
>>>> --
>>>> Dmitry Agafonov ~ http://agafonov.pp.ru/
>>>>
>>
>>
>>
>>>> --
>>>> С уважением,
>>>> Роман mailto:idiot8 на rambler.ru
>>
>>>> --
>>>> ubuntu-ru mailing list
>>>> ubuntu-ru на lists.ubuntu.com
>>>> https://lists.ubuntu.com/mailman/listinfo/ubuntu-ru
>>
>>
>>
>>
>>>> --
>>>> Dmitry Agafonov ~ http://agafonov.pp.ru/
>>
>>
>>
>>>> --
>>>> С уважением,
>>>> Роман mailto:idiot8 на rambler.ru
>>
>>
>>
>>
>>
>> --
>> С уважением,
>> Роман mailto:idiot8 на rambler.ru
>>
>> --
>> ubuntu-ru mailing list
>> ubuntu-ru на lists.ubuntu.com
>> https://lists.ubuntu.com/mailman/listinfo/ubuntu-ru
>>
--
С уважением,
Роман mailto:idiot8 на rambler.ru
More information about the ubuntu-ru
mailing list