сумашедший DS4700 :-)

Главная Форумы Storage SAN, Disk & Tape сумашедший DS4700 :-)

В этой теме 25 ответов, 8 участников, последнее обновление  Вадим 8 года/лет, 10 мес. назад.

  • Автор
    Сообщения
  • #8955

    Вадим
    Участник

    Добрый день, Уважаемые ГУРУ
    происходит достаточно странная вещь с хранилищем
    создал на 2х разных хранилищах по 1 луну одного размера, замапировал их в VIOS под именем /dev/hdisk4 источник, /dev/hdisk21 получатель
    С помощью команды dd if=/dev/hdisk4 of=/dev/hdisk21 копирую данные с одного хранилища на другое, параллельно мониторю нагрузку на хранилище
    И вижу примерно следующее
    скорость чтения с hdisk4 около 1 мегабита/с
    скорость чтения с hdisk21 около 1 мегабита/с скорость записи на hdisk21 около 8 мегабит в секунду
    Тк к дискам hdisk4,hdisk21 никто в данный момент не подключен то достаточно странное поведение
    Чтение с hdisk4 примерно равно скорости чтения с hdisk21 (предположим что это логично, проверка записанных данных), но откуда берется поток данных почти в 8 раз больший на запись????
    Ведь есть только почти мегабит прочитанных данных? откуда берутся эти данные
    показания nmon на разделе сопадают с показаниями мониторилки из DS Storage Manager

  • #8956

    yota
    Участник

    А такая крайне низкая скорость копирования в 1 МБ в сек вас не удивляет разве?

  • #8957

    Вадим
    Участник

    вернее сказать, крайне низкая скорость чтения 🙂 пишется со скоростью в 8 раз большей!
    данная скорость от части может быть обЪяснена что копируется
    1. без кешей операционной системы
    2. напрямую с девайса на девайс
    но согласен! очень сильно озадачивает
    и + hdisk21 занят на 100% 1 потоком чтения и в 8 раз большим потоком данных
    число IO/ps(ов) на хранилищах различается примерно в 9 раз (как раз 1 айопс на чтение, 8 айопсов на запись)
    тоесть низкую скорость чтения можно обЪяснить непонятно чем занятым диском приемником 😀

  • #8960

    uxTuaHgp
    Участник

    А попробуй BS= мегабайт 10 поставить, а то блок по умолчанию чуть ли не 512 байт.

  • #8969

    Василий
    Участник

    Попробуйте в несколько потоков копировать.

    IOPS’ы могут идти из-за размазывания по шпинделям Ваших данных.

  • #8970

    Вадим
    Участник

    Александр писал(а):

    А попробуй BS= мегабайт 10 поставить, а то блок по умолчанию чуть ли не 512 байт.

    проблема то в бешенном числе IO/ps на запись ов в 8 раз превышающих число IO/ps на чтение
    попробовал увеличить размер блока, но все равно не получается чтобы число операций чтения совпадало с числом операций записи
    Ne0 писал(а):

    Попробуйте в несколько потоков копировать.

    IOPS’ы могут идти из-за размазывания по шпинделям Ваших данных.

    можно конечно, попробовать в несколько потоков, можно увеличить BS, но проблема, не в том что конкретно в данном случае работает медленно, работает мелденно в принципе. и что есть причина столь медленной работы не понятно…
    операции ввода вывода при размазывании данных по шпинделям, по идее для меня должны быть прозрачны тоесть я отдал команду записать блок данных на хранилище, и это 1 операция ввода/вывода (ну бог м ним 2 операции ввода вывода! 1 запись, 1 чтение после записи) но никак не 8 операций

    + еще одна странность обнаружилась
    в эвент логах на обоих контроллерах пишется Controller Cache not enabled or was internally disabled
    (последняя прошивка)
    на аналогичном хранилище но еще не прошитом такой строчки нету
    как сие интересно понимать?

  • #8983

    Вадим
    Участник

    случайно у кого нибудь ссылки по настройке зонинга на брокадах не завалялось?

  • #8993

    Василий
    Участник

    admin1 писал(а):

    случайно у кого нибудь ссылки по настройке зонинга на брокадах не завалялось?

    Вас матчасть интересует или best practice?
    Первое в ‘FOS XXX admin guide’, второе в redbook’ах.

  • #8995

    Вадим
    Участник

    и то и то, но если есть то лутьша сразу со ссылками

  • #9000

    Василий
    Участник

    Ок.

    Для начала рекомендую Best Practice по DS storage ->
    !!!файл около 11 Мб !!!
    http://www.redbooks.ibm.com/redbooks/pdfs/sg246363.pdf

    По настройке зонинга на Brocade –
    http://ibm.brocadeassist.com/assist/portal-login.jsp?pageid=5&login=ibm.brocadeassist.com&usertype=Ibm

    Выбираете вкладку Documentation -> нужный Вам FOS и док-т.

  • #9001

    Вадим
    Участник

    спасибо 🙂 а размер доки, это не принципиально! бум читать и не донимать мир глупыми вопросами

  • #9069

    Вадим
    Участник

    Ура похоже проблема решена!
    будем менять хранилище! вместе с вендором 🙂
    ставим хитачи, вроде бы они менее ватные в плане поддержки

  • #9072

    andrewk
    Участник

    у них свои проблемы с поддержкой есть (были), но имхо (тссс!) это самое правильное решение 🙂 на AMS2300? 🙂

  • #9078

    Serg
    Участник

    И как же проблема решена?
    Победили raid 5 write penalty?)
    в чем прелесть то этих хитачи?

  • #9079

    Вадим
    Участник

    прелесть хитачи в более внятном сапорте

  • #9080

    critic critic
    Участник

    А у нас с хитачевским сапортом не срослось…
    С IBM проблем пока не наблюдаем.

  • #9081

    Василий
    Участник

    admin1 писал(а):

    прелесть хитачи в более внятном сапорте

    1. Видимо, речь идет об удаленной поддержке.
    Т.к. руками гайки (даже на хай-енде) крутят партнеры…

    2. Итог – имеете гетерогенную SAN среду. Проблемы на стыке разных вендоров будут решаться долго и грустно в поддержке любого из них.

  • #9082

    Василий
    Участник

    critic писал(а):

    А у нас с хитачевским сапортом не срослось…
    С IBM проблем пока не наблюдаем.

    Все зависит от области, в которой возникают проблемы.
    ….и конечно от Вашего SLA 🙂

  • #9102

    Сергей
    Участник

    Ne0 писал(а):

    [b]admin1 писал(а):[/b]
    [quote]прелесть хитачи в более внятном сапорте

    2. Итог – имеете гетерогенную SAN среду. Проблемы на стыке разных вендоров будут решаться долго и грустно в поддержке любого из них.[/quote]

    простите если глупость спрошу, но хитачи разве не оеэмит тот же LSI что и ибм?

  • #9111

    Вадим
    Участник

    гетерогенная не получится 🙂 ибм продаем 🙂 и на вырученные деньги берем хитач

  • #9113

    Василий
    Участник

    smk писал(а):

    простите если глупость спрошу, но хитачи разве не оеэмит тот же LSI что и ибм?

    Чур меня… LSI оеэмят SUN и IBM…
    Хитачи свое делает.

  • #9114

    Василий
    Участник

    admin1 писал(а):

    гетерогенная не получится 🙂 ибм продаем 🙂 и на вырученные деньги берем хитач

    Так я не о СХД, а о SAN’e.
    Hitachi еще до серверов не добралась 🙂

  • #9116

    Вадим
    Участник

    ну так то да 🙂

  • #9117

    andrewk
    Участник

    сервера – это придаток к стореджу 🙂

  • #9131

    Василий
    Участник

    andrewk писал(а):

    сервера – это придаток к стореджу 🙂

    Да, до первой проблемы с SAN 🙂

  • #9148

    Вадим
    Участник

    нашел тут старую беседу
    https://www.aixportal.ru/cgi/yabb2/YaBB.pl?action=print;num=1208887327
    так может ктото мне сможет подсказать эти 2 параметра когда из 90мб/с мы получим 200мб/с и я буду иметь скорость чтения больше чем скорость записи??????
    а не наоборот??????

Для ответа в этой теме необходимо авторизоваться.