Dual VIOS Power 730

Просмотр 42 веток ответов
  • Автор
    Сообщения
    • #15192
      Yurich
      Участник

      Уважаемые, здравствуйте.
      Не откажите в помощи новичку.
      Имеется IBM Power 730 (8231-E2B) с подключенным к нему напрямую Hitachi AMS2100.
      Требуется организовать схему Dual VIOS.
      Single VIOS уже организовал, все ок, а вот как организовать дуал, если
      контролер на сервере один. Установить VIOS на выданный диск с массива получается,
      но вот только диск в меню не виден как загрузочный.
      Покупать еще один контролер? Может есть еще варианты?
      Спасибо!

    • #15193
      andrewk
      Участник

      на 710/730х серверах нет поддержки split backplane. И drawer’ы они тоже не поддерживают. Можете лишь пытаться загрузиться с массива.

    • #15194
      Yurich
      Участник

      С массива не удается загрузится, диск не видится как бутабельный.
      А установка на диск с массива происходит следующим образом.
      В SMS меню выданный диск с массива вообще не виден. Говорим бутиться будем с CD. И далее выбираем не нормал бут моде а сервис бут моде, и только тогда, в этом режиме становится доступным диск, выданный с массива. На него и ставим VIOS. Но, ничего не изменится, через SMS меню все равно диск не видится ни как загрузочный, ни как просто диск. Опять же бутимся с установочного диска VIOS в сервис режиме, и из этого режима видим, что все ок, rootvg на месте и диск бутабельный. Вот только как бы с него из этого режима загрузится, ведь нам доступна только установка.
      Да, SAN нет и массив подключен к IBM напрямую.

    • #15195
      Maia Maiskiy
      Участник

      сколько оптических карточек в системе? если >1, то карточка отдается VIOS-у, и через нее вкатывается LUN0 на который и ставится система. у меня на 750 vio1 с локального sas, vio2 через AMS – все работает.

    • #15198
      Aleksandr
      Участник

      Добрый день.
      Рекомендую посмотреть документ по совместимости оборудования и boot from san. Я сталкивался, что оборудование на данную опцию просто не протестировано. И загрузиться не удалось. Ставитсься ставится, без ошибок, а вот при загрузке выбрать это устройство не представляется возможным.

    • #15202
      Yurich
      Участник

      Да, оптических карт 2 штуки. Одна отдана одному VIO серверу, другая как предполагалось отдается другому. первый VIO установлен на локальный SAS диск. Второй пытался запустить, устанавливая на диск (LUN) отдаваемый с массива, но увы…
      Пытался даже поставить на flash накопитель. 🙂 Из SMS меню он виден, но вот для установки не доступен.

    • #15206
      Aleksandr
      Участник

      Вот ссылка на документ

      Нажмите для доступа к hitachi-ams-san-boot-support-matrix-rev-2.1-xls.pdf


      Да и еще, на сколько я помню, в 730 по умолчанию включен (или включили) NPIV. Его необходимо отключать. Повторю, при установке мне удалось поставить VIO на SAN диск, а вот загрузиться нет.

    • #15207
      Maia Maiskiy
      Участник

      то-есть при установке у вас hdisk был виден в SMS, а после не виден? или виден, но не дает его выбрать? или выбираете, но загрузка не происходит?

    • #15217
      Aleksandr
      Участник

      При установке он виден в смс, а вот как загрузочное устройство его выбрать нельзя (после установки). Время мало было, дотошно не разобрался.

    • #15218
      Maia Maiskiy
      Участник

      если мне не изменяет память – он позволяет попробовать грузиться с любого устройства которое видит. а то что он не может, это он потом уже ругается. сейчас попробую добавить еще один LUN и посмотреть будет ли видно его в SMS при загрузке

    • #15221
      Aleksandr
      Участник

      Нет, он показывает не все устройства, как загрузочные, а только те, с которых он может загрузиться. Если с диска нет возможности загрузиться, то в смс меню этот дик не будет виден при выборе устройства для загрузки.

    • #15222
      Yurich
      Участник

      Опишу еще раз, как происходит у меня “установка” на диск выданный с массива.
      В меню SMS этот диск не виден.
      Говорим, что бутится будем с CD (VIOS). Далее выбираем Сервис моде (не Нормал, а сервис),
      и на этапе выбора различных опций мы видим нужный нам диск, и говорим, что ставить VIOS будем
      на него. Все ОК. Установка проходит, ребут, и диск в SMS меню не появляется…

    • #15228
      Andrey
      Участник

      еще немного информации:

      какая версия HMC?

    • #15229
      MIkhail
      Участник

      У меня ряд вопросов:
      1 Какую версию VIOS ставите ( к теме о совместимости)
      2 Зачем когда грузитесь с CD выбирает сервисный режим.
      3 Какие карточки FC стоят ( производитель)
      Ну и пару рекомендаций:
      1 На массиве проверить какой OS презентован LUN. в некоторых массивах указывается тип особенно в хитачи.
      2 LUN презентовать только по одному пути.( чтобы исключить влияние множества путей)
      3 Когда загрузка с CD выбирайте режим Normal

    • #15233
      Yurich
      Участник

      Версия HMC 7.4.0 SP1
      Устанавливаю VIOS 2.2.1
      Когда загружаюсь с CD выбираю сервисный режим и толко в нем становится виден выданный с массива диск. В нормал режиме диск не виден, и там по моему сразу установка начинается, без выбора опций как в сервисном режиме.
      Какие карты FC стоят – как бы посмотреть..?
      На массиве LUN презентуется OS – AIX. Более ничего не открыживалось и прочее. LUN презентуется только по одному пути.
      Из таблицы совместимости оборудования Hitachi (приводилась по ссылке) ничего не ясно.

    • #15235
      Michael
      Участник

      Версия HMC 7.4.0 SP1

      Какие карты FC стоят – как бы посмотреть..?

      Что мешает сделать SystemPlan сервера с помощью НМС и на нём посмотреть всю внутреннюю начинку сервера?

    • #15236
      Yurich
      Участник

      System plan делал, но вот насколько помню производитель FC карт там не указывается, хотя, сейчас еще разок взгляну.
      8 Gigabit PCI-E Dual Port Fibre Channel Adapter…
      т.е. фактически никакой информации…

      Конечно, прежде чем здесь я задал вопрос этот же вопрос я задавал в тех. поддержку IBM.
      Вообще в обзоре систем Power 7xx, DUAL VIOS указывается как опция. Однако, насколько я понимаю
      реализовать ее можно по разному например на Power 750 и Power 730.
      Ответ из тех. поддержки пришел недели через 2-3. И естественно вариантов было 2 – либо купить
      дополнительный контролер с дисками – что на мой взгляд – наиболее правильный путь в нашей ситуации, либо же пытаться каким то образом загружаться с диска, выданного с массива.

      Теперь еще один вопрос. Можно ли установочный диск VIOS использовать как загрузочный,
      и на каком то этапе указать, что грузиться будем вон с того hdisk0 например. Ну вот
      нельзя же такую ситуацию исключать – слетел бут, резервной копии нет, и что делать?
      Ситуация схожая, но вот как бы реализовать нужные действия…

    • #15237
      Aleksandr
      Участник

      CCIN какой. А что непонтяно с файлом, смотрите верси VIO, смотрите свой адаптер и ищете, тестировали или нет.

    • #15238
      andrewk
      Участник

      в 730х вроде только один 8 Gbps FC HBA возможен 😉 FC 5273.

      Yourich, формально производитель всегда один – IBM. На самом деле конкретно этот адаптер – Emulex.

    • #15239
      Michael
      Участник

      System plan делал, но вот насколько помню производитель FC карт там не указывается, хотя, сейчас еще разок взгляну.
      8 Gigabit PCI-E Dual Port Fibre Channel Adapter…
      т.е. фактически никакой информации…

      Для серверов Power нет других FC-адаптеров, кроме как от IBM 😛
      Для собственного успокоения проверьте, что прошивка у адаптера – самая распоследняя из существующих.

    • #15241
      Aleksandr
      Участник

      Могу сказать сразу, что в документе нет такого адаптера. Однако это не значит, что работать не будет или не должно.

    • #15245
      Yurich
      Участник

      А как посмотреть CCIN?, прошивку?
      вот только нашел описание адаптера
      http://publib.boulder.ibm.com/infocenter/powersys/v3r1m5/index.jsp?topic=/iphcd/fc5735.htm
      хоть бы слово о прошивке. Да и вряд ли прошивка – железо выпускается уже достаточно давно.
      А ну да… надо искать прошивку у производителя а не у IBM. 🙂

    • #15247
      Yurich
      Участник

      IBM 5735
      для IBM VIOS 2.x есть в таблице, только строка почему то подсвеченая бирюзовым цветом.
      Но и все равно из таблицы ничего не понял, сорри, посмотрите плиз не сочтите…
      А, ясно – бирюзовым отмечены новые записи.
      И видимо требуется запрос поддержки…

    • #15249
      andrewk
      Участник

      lscfg -vl fcs0
      lsmcode -d fcs0

    • #15250
      Michael
      Участник

      А как посмотреть CCIN?, прошивку?
      вот только нашел описание адаптера
      http://publib.boulder.ibm.com/infocenter/powersys/v3r1m5/index.jsp?topic=/iphcd/fc5735.htm
      хоть бы слово о прошивке. Да и вряд ли прошивка – железо выпускается уже достаточно давно.
      А ну да… надо искать прошивку у производителя а не у IBM. 🙂

      Посмотреть CCIN и прошивку:
      $ lscfg|grep fcs
      + fcs0 U0.1-P2-I5/Q1 FC Adapter
      + fcs1 U0.1-P2-I6/Q1 FC Adapter
      $ lscfg -vl fcs0
      fcs0 U0.1-P2-I5/Q1 FC Adapter

      Part Number……………..00P4494
      EC Level………………..A
      Serial Number……………1D3060C0D7
      Manufacturer…………….001D
      Customer Card ID Number…..2765 <- CCIN
      FRU Number……………… 00P4495
      Network Address………….10000000C9318AE6
      ROS Level and ID…………02C039D0
      Device Specific.(Z0)……..2002606D
      Device Specific.(Z1)……..00000000
      Device Specific.(Z2)……..00000000
      Device Specific.(Z3)……..03000909
      Device Specific.(Z4)……..FF401411
      Device Specific.(Z5)……..02C039D0
      Device Specific.(Z6)……..064339D0
      Device Specific.(Z7)……..074339D0
      Device Specific.(Z8)……..20000000C9318AE6
      Device Specific.(Z9)……..CS3.93A0
      Device Specific.(ZA)……..C1D3.93A0
      Device Specific.(ZB)……..C2D3.93A0
      Device Specific.(ZC)……..00000000
      Hardware Location Code……U0.1-P2-I5/Q1
      $ lsmcode -d fcs0
      DISPLAY MICROCODE LEVEL 802111
      fcs0 FC Adapter

      The current microcode level for fcs0 is 393100.

      Это я на своём сервере пробовал, у меня другой адаптер.

    • #15251
      Michael
      Участник

      А ну да… надо искать прошивку у производителя а не у IBM. 🙂

      Прошивка ищется и находится через FixCentral.

      Конкретно для Вашего 5735 Microcode Level = 200307 (200×7) with FCode Level 3.10a3, выпущена в ноябре прошлого года, все остальные прошивки не поддерживаются.

    • #15252
      Yurich
      Участник

      lscfg|grep fcs
      + fcs0 U78AB.001.WZSGW47-P1-C3-T1 8Gb PCI Express Dual Port FC Adapter (df1000f114108a03)
      + fcs1 U78AB.001.WZSGW47-P1-C3-T2 8Gb PCI Express Dual Port FC Adapter (df1000f114108a03)

      lscfg -vl fcs0
      fcs0 U78AB.001.WZSGW47-P1-C3-T1 8Gb PCI Express Dual Port FC Adapter (df1000f114108a03)

      Part Number……………..10N9824
      Serial Number……………1A141000EB
      Manufacturer…………….001A
      EC Level………………..D77040
      Customer Card ID Number…..577D
      FRU Number………………10N9824
      Device Specific.(ZM)……..3
      Network Address………….10000000C9E7D24A
      ROS Level and ID…………02782037
      Device Specific.(Z0)……..31004549
      Device Specific.(Z1)……..00000000
      Device Specific.(Z2)……..00000000
      Device Specific.(Z3)……..09030909
      Device Specific.(Z4)……..FF781150
      Device Specific.(Z5)……..02782037
      Device Specific.(Z6)……..07732037
      Device Specific.(Z7)……..0B7C2037
      Device Specific.(Z8)……..20000000C9E7D24A
      Device Specific.(Z9)……..US2.00X7
      Device Specific.(ZA)……..U2D2.00X7
      Device Specific.(ZB)……..U3K2.00X7
      Device Specific.(ZC)……..00000000
      Hardware Location Code……U78AB.001.WZSGW47-P1-C3-T1

      DISPLAY MICROCODE LEVEL 802111
      fcs0 8Gb PCI Express Dual Port FC Adapter (df1000f114108a03)

      The current microcode level for fcs0 is 200307.

      Use Enter to continue.

    • #15253
      Michael
      Участник

      fcs0
      U78AB.001.WZSGW47-P1-C3-T1 8Gb PCI Express Dual Port FC Adapter (df1000f114108a03)
      Customer Card ID Number…..577D

      Осталось только заглянуть в System Plan сервера и убедиться, что в графе CCIN напротив этого адаптера стоит значение 577D :woohoo:

    • #15257
      Yurich
      Участник

      Да CCIN 577D увидел, так же как и прошивку…она последняя, сходил на fixcentral посмотрел.
      В system plan CCIN не указывается почему-то, но ведь и так уже видно – 577D, я просто вывод команд привел, так на всякий случай, CCIN увидел естественно.
      Но что же делать, что же делать, вариантов пока нет, а 1 VIOS не есть хорошо, это я уже в процессе начальной эксплуатации понимаю.
      Попытаться поставить на внешний USB HDD? Как один из вариантов, почему бы и нет, до покупки нужного
      железа – т.е. контролера и дисков.

    • #15258
      MIkhail
      Участник

      Вот еще карточек в сервере 2 ?
      Зоны надеюсь правильно нарисованы на коммутаторах.
      Как вариант совместимости, прошу знатоков не теранить.
      1 Презентовать данный LUN уже установленой VIOS. Увидит ли она его…
      2 Если да, можно сделать alt_disk_copy, за тем загрузиться с него.

    • #15259
      Michael
      Участник

      Вот еще карточек в сервере 2 ?

      lscfg|grep fcs
      + fcs0 U78AB.001.WZSGW47-P1-C3-T1 8Gb PCI Express [b]Dual Port[/b] FC Adapter (df1000f114108a03)
      + fcs1 U78AB.001.WZSGW47-P1-C3-T2 8Gb PCI Express [b]Dual Port[/b] FC Adapter (df1000f114108a03)

    • #15260
      Yurich
      Участник

      Карточек 2, а вот зоны – увы, коммутаторов нет, о чем
      я говорил в начале топика, возможно все решилось бы если была SAN сеть.
      Хитачи напрямую подключены к IBM.
      lscfg|grep fcs – по этой команде я вижу у себя 2 порта на одной карте, 2-я карта не принадлежит этому VIOS, система о ней ничего не знает.

    • #15261
      MIkhail
      Участник

      Просмотрел простите
      Уточнил у ребят стороджистов, AMS прямое подключение поддерживают(ну так на всякий случай).

    • #15272
      Maia Maiskiy
      Участник

      слушайте, а может быть vio2 установился не на SAN диск? у меня AMS500, только что проверил – все нормально грузится. причем в fcs прилетает куча LUN-ов, и все они в SMS видны.

      ——————————————————————————-
      Select Device
      Device Current Device
      Number Position Name
      1. – PORT – 17 IBM Host Ethernet Adapter
      ( loc=U78A0.001.XXX-P1-C6-T4 )
      2. 1 SCSI 49 GB FC Harddisk, part=2 (AIX 6.1.0)
      ( loc=U78A0.001.XXX-P1-C3-T1-YYY-L0 )
      3. – SCSI 49 GB FC Harddisk, part=2 (AIX 6.1.0)
      ( loc=U78A0.001.XXX-P1-C3-T1-YYY-L1000000000000 )
      4. – SCSI 19 GB FC Harddisk, part=2 (AIX 5.3.0)
      ( loc=U78A0.001.XXX-P1-C3-T1-YYY-L6000000000000 )
      5. – SCSI 19 GB FC Harddisk, part=2 (AIX 5.3.0)
      ( loc=U78A0.001.XXX-P1-C3-T1-YYY-L7000000000000 )
      6. – SCSI 89 GB FC Harddisk, part=2 (VIOS 2.1.3.)
      ( loc=U78A0.001.XXX-P1-C3-T1-YYY-Lc000000000000 )

    • #15275
      MIkhail
      Участник

      Ну кто же может знать куда ваша VIOS встала.
      Не просто так же говорили презентовать lun по одному пути.
      То то меня удивило что вы пытаетесь поставить VIOS в режими обслуживания, ну очень странно.
      Ван надо посмотреть WWN луна на который вы собираетесь поставить vios, через консоль массива.
      А когда будите грузится с диска, укажите опцию показать все доступные устройства для установки и найдите то которое вам нужно.

    • #15277
      Yurich
      Участник

      LUN презентуется по одному пути.
      Естественно, что пытаюсь этот диск найти выбрав опцию показать все доступные устройства…
      Ну нет его там, хотя когда идет опрос – на FC адаптерах быстро так проскакивают диски.
      Мой вывод по теме – возможно програмная несовместимость FC карты и массива, возможно
      в будущем этот вопрос разрешится апдейтом (прошивкой) карты и пр.

    • #15278
      andrewk
      Участник

      LUN’ы лучше смотреть не в SMS, а в OpenFirmware -> ioinfo.

    • #15279
      MIkhail
      Участник

      Немного не по теме
      andrewk, а не найдется ссылка на документы по OpenFirmware.
      Много в нем полезного, а то я все урывками нахожу.
      Зарание спасибо.

    • #15280
      andrewk
      Участник

      единственный документ по OpenFirmware, который мне известен, написал я 🙂 и искать его в моем жж. IBM официально не дает никаких инструкций по ее использованию. В приниципе, OpenFirmware стандарт IEEE 1275 – можно купить за деньги текст стандарта у IEEE, а можно поискать в инете информацию о нем. Большинство команд подходит. Проблема только с IBM’овскими FCode-пакетами, на которые документации нет вообще никакой и информацию о них можно найти только случайно.

      UPD. Ссылка – http://sysadminslife.livejournal.com/63436.html

    • #15281
      MIkhail
      Участник

      В лаборатории презентовал диск с amc2100 отлично увиделся, без всяких проблем.
      1 Нарисовал зоны на коммутаторе
      2 Соответствующие настройки на массиве.
      3 Загрузка с диска VIOS 2.1.3 (не самая последняя)
      4 Режим загрузки Normal.
      Сервер p750, карточка Emulex,
      lscfg -l fcs0 -vps
      fcs0 U78A0.001.DNWHS68-P1-C2-T1
      8Gb PCI Express Dual Port FC Adapter (df1000f114108a03)

      Part Number……………..10N9824
      Serial Number……………1B0080448E
      Manufacturer…………….001B
      EC Level………………..D76482B
      Customer Card ID Number…..577D
      FRU Number………………10N9824
      Device Specific.(ZM)……..3
      Network Address………….10000000C99B1B42
      ROS Level and ID…………02781174
      Device Specific.(Z0)……..31004549
      Device Specific.(Z1)……..00000000
      Device Specific.(Z2)……..00000000
      Device Specific.(Z3)……..09030909
      Device Specific.(Z4)……..FF781116
      Device Specific.(Z5)……..02781174
      Device Specific.(Z6)……..07731174
      Device Specific.(Z7)……..0B7C1174
      Device Specific.(Z8)……..20000000C99B1B42
      Device Specific.(Z9)……..US1.11X4
      Device Specific.(ZA)……..U2D1.11X4
      Device Specific.(ZB)……..U3K1.11X4
      Device Specific.(ZC)……..00000000
      Hardware Location Code……U78A0.001.DNWHS68-P1-C2-T1

      PLATFORM SPECIFIC

      Name: fibre-channel
      Model: 10N9824
      Node: fibre-channel@0
      Device Type: fcp
      Physical Location: U78A0.001.DNWHS68-P1-C2-T1

      Ну вот и диск:
      hdisk4 U78A0.001.DNWHS68-P1-C2-T1-W50060E8010201970-L0

      Все тоже самое, что и у вас с точки зрения взаимдействия массива и сервера.
      Настройки на массиве для лун в студию.

    • #15282
      MIkhail
      Участник

      Спасибо.

    • #15292
      Yurich
      Участник

      2 dmp.
      Да, действительно, все тоже самое. Тем более становится интересней.
      Хотел бы уточнить, какие настройки с массива привести.
      Одно уточнение. Как и говорил в начале, у нас отсутствует коммутатор SAN,
      и массив подключен к IBM напрямую.
      Добавил настройки.

      Attachments:
    • #15315
      MIkhail
      Участник

      В карточка есть режим работы определяющий тип подключения, как впрочем и в массивае.
      Возможно надо в эту сторону порыть.
      Посмотрел конфигурацию массива у меня аналогично.

Просмотр 42 веток ответов
  • Для ответа в этой теме необходимо авторизоваться.