Озадачили на днях установкой FreeBSD на компьютер Imango Escaler 710, с таким вот анамнезом:
Copyright (c) 1992-2007 The FreeBSD Project.
Copyright (c) 1979, 1980, 1983, 1986, 1988, 1989, 1991, 1992, 1993, 1994
The Regents of the University of California. All rights reserved.
FreeBSD is a registered trademark of The FreeBSD Foundation.
FreeBSD 6.2-RELEASE #0: Fri Jan 12 10:40:27 UTC 2007
root@dessler.cse.buffalo.edu:/usr/obj/usr/src/sys/GENERIC
Timecounter "i8254" frequency 1193182 Hz quality 0
CPU: Intel(R) Xeon(R) CPU 5140 @ 2.33GHz (2332.16-MHz 686-class CPU)
Origin = "GenuineIntel" Id = 0x6f6 Stepping = 6
Features=0xbfebfbff<FPU,VME,DE,PSE,TSC,MSR,PAE,MCE,CX8,APIC,SEP,MTRR,PGE,MCA,CMOV,PAT,PSE36,CLFLUSH,DTS,ACPI,MMX,FXSR,SSE,SSE2,SS,HTT,TM,PBE>
Features2=0x4e3bd<SSE3,RSVD2,MON,DS_CPL,VMX,EST,TM2,<b9>,CX16,<b14>,<b15>,<b18>>
AMD Features=0x20100000<NX,LM>
AMD Features2=0x1<LAHF>
Cores per package: 2
real memory = 2143289344 (2044 MB)
avail memory = 2090926080 (1994 MB)
ACPI APIC Table: <INTEL S5000PAL>
ioapic0 <Version 2.0> irqs 0-23 on motherboard
ioapic1 <Version 2.0> irqs 24-47 on motherboard
lapic0: Forcing LINT1 to edge trigger
kbd1 at kbdmux0
ath_hal: 0.9.17.2 (AR5210, AR5211, AR5212, RF5111, RF5112, RF2413, RF5413)
acpi0: <INTEL S5000PAL> on motherboard
acpi_bus_number: can't get _ADR
acpi_bus_number: can't get _ADR
acpi_bus_number: can't get _ADR
acpi_bus_number: can't get _ADR
acpi_bus_number: can't get _ADR
acpi_bus_number: can't get _ADR
acpi0: Power Button (fixed)
acpi_bus_number: can't get _ADR
acpi_bus_number: can't get _ADR
Timecounter "ACPI-fast" frequency 3579545 Hz quality 1000
acpi_timer0: <24-bit timer at 3.579545MHz> port 0x408-0x40b on acpi0
cpu0: <ACPI CPU> on acpi0
acpi_throttle0: <ACPI CPU Throttling> on cpu0
acpi_button0: <Power Button> on acpi0
pcib0: <ACPI Host-PCI bridge> port 0xcf8-0xcff on acpi0
pci0: <ACPI PCI bus> on pcib0
pcib1: <ACPI PCI-PCI bridge> at device 2.0 on pci0
pci1: <ACPI PCI bus> on pcib1
pcib2: <ACPI PCI-PCI bridge> irq 16 at device 0.0 on pci1
pci2: <ACPI PCI bus> on pcib2
pcib3: <ACPI PCI-PCI bridge> irq 16 at device 0.0 on pci2
pci3: <ACPI PCI bus> on pcib3
pcib4: <ACPI PCI-PCI bridge> at device 0.0 on pci3
pci4: <ACPI PCI bus> on pcib4
mpt0: <LSILogic SAS/SATA Adapter> port 0x3000-0x30ff mem 0xf8910000-0xf8913fff,0xf8900000-0xf890ffff irq 16 at device 8.0 on pci4
mpt0: [GIANT-LOCKED]
mpt0: MPI Version=1.5.13.0
mpt0: mpt_cam_event: 0x16
mpt0: Unhandled Event Notify Frame. Event 0x16 (ACK not required).
mpt0: mpt_cam_event: 0x12
mpt0: Unhandled Event Notify Frame. Event 0x12 (ACK not required).
mpt0: mpt_cam_event: 0x12
mpt0: Unhandled Event Notify Frame. Event 0x12 (ACK not required).
pcib5: <PCI-PCI bridge> at device 0.2 on pci3
pci5: <PCI bus> on pcib5
pcib6: <ACPI PCI-PCI bridge> irq 16 at device 1.0 on pci2
pci6: <ACPI PCI bus> on pcib6
pcib7: <ACPI PCI-PCI bridge> irq 16 at device 2.0 on pci2
pci7: <ACPI PCI bus> on pcib7
em0: <Intel(R) PRO/1000 Network Connection Version - 6.2.9> port 0x2020-0x203f mem 0xf8820000-0xf883ffff,0xf8400000-0xf87fffff irq 18 at device 0.0 on pci7
em0: Ethernet address: 00:04:23:d3:d2:76
em1: <Intel(R) PRO/1000 Network Connection Version - 6.2.9> port 0x2000-0x201f mem 0xf8800000-0xf881ffff,0xf8000000-0xf83fffff irq 19 at device 0.1 on pci7
em1: Ethernet address: 00:04:23:d3:d2:77
pcib8: <ACPI PCI-PCI bridge> at device 0.3 on pci1
pci8: <ACPI PCI bus> on pcib8
pcib9: <PCI-PCI bridge> at device 3.0 on pci0
pci9: <PCI bus> on pcib9
pcib10: <ACPI PCI-PCI bridge> at device 4.0 on pci0
pci10: <ACPI PCI bus> on pcib10
pcib11: <ACPI PCI-PCI bridge> at device 5.0 on pci0
pci11: <ACPI PCI bus> on pcib11
pcib12: <ACPI PCI-PCI bridge> at device 6.0 on pci0
pci12: <ACPI PCI bus> on pcib12
pcib13: <ACPI PCI-PCI bridge> at device 7.0 on pci0
pci13: <ACPI PCI bus> on pcib13
pci0: <base peripheral> at device 8.0 (no driver attached)
uhci0: <UHCI (generic) USB controller> port 0x4080-0x409f irq 23 at device 29.0 on pci0
uhci0: [GIANT-LOCKED]
usb0: <UHCI (generic) USB controller> on uhci0
usb0: USB revision 1.0
uhub0: Intel UHCI root hub, class 9/0, rev 1.00/1.00, addr 1
uhub0: 2 ports with 2 removable, self powered
uhci1: <UHCI (generic) USB controller> port 0x4060-0x407f irq 22 at device 29.1 on pci0
uhci1: [GIANT-LOCKED]
usb1: <UHCI (generic) USB controller> on uhci1
usb1: USB revision 1.0
uhub1: Intel UHCI root hub, class 9/0, rev 1.00/1.00, addr 1
uhub1: 2 ports with 2 removable, self powered
uhci2: <UHCI (generic) USB controller> port 0x4040-0x405f irq 23 at device 29.2 on pci0
uhci2: [GIANT-LOCKED]
usb2: <UHCI (generic) USB controller> on uhci2
usb2: USB revision 1.0
uhub2: Intel UHCI root hub, class 9/0, rev 1.00/1.00, addr 1
uhub2: 2 ports with 2 removable, self powered
uhci3: <UHCI (generic) USB controller> port 0x4020-0x403f irq 22 at device 29.3 on pci0
uhci3: [GIANT-LOCKED]
usb3: <UHCI (generic) USB controller> on uhci3
usb3: USB revision 1.0
uhub3: Intel UHCI root hub, class 9/0, rev 1.00/1.00, addr 1
uhub3: 2 ports with 2 removable, self powered
ehci0: <EHCI (generic) USB 2.0 controller> mem 0xf8c00000-0xf8c003ff irq 23 at device 29.7 on pci0
ehci0: [GIANT-LOCKED]
usb4: waiting for BIOS to give up control
usb4: timed out waiting for BIOS
usb4: EHCI version 1.0
usb4: companion controllers, 2 ports each: usb0 usb1 usb2 usb3
usb4: <EHCI (generic) USB 2.0 controller> on ehci0
usb4: USB revision 2.0
uhub4: Intel EHCI root hub, class 9/0, rev 2.00/1.00, addr 1
uhub4: 8 ports with 8 removable, self powered
umass0: USB Flash Disk, rev 2.00/2.00, addr 2
pcib14: <ACPI PCI-PCI bridge> at device 30.0 on pci0
pci14: <ACPI PCI bus> on pcib14
pci14: <display, VGA> at device 12.0 (no driver attached)
isab0: <PCI-ISA bridge> at device 31.0 on pci0
isa0: <ISA bus> on isab0
pci0: <serial bus, SMBus> at device 31.3 (no driver attached)
sio0: <16550A-compatible COM port> port 0x3f8-0x3ff irq 4 flags 0x10 on acpi0
sio0: type 16550A
sio1: <16550A-compatible COM port> port 0x2f8-0x2ff irq 3 on acpi0
sio1: type 16550A
atkbdc0: <Keyboard controller (i8042)> port 0x60,0x64 irq 1 on acpi0
atkbd0: <AT Keyboard> irq 1 on atkbdc0
kbd0 at atkbd0
atkbd0: [GIANT-LOCKED]
pmtimer0 on isa0
orm0: <ISA Option ROMs> at iomem 0xc0000-0xc8fff,0xcf000-0xcffff,0xd0000-0xd0fff on isa0
ata0 at port 0x1f0-0x1f7,0x3f6 irq 14 on isa0
ata1 at port 0x170-0x177,0x376 irq 15 on isa0
ppc0: parallel port not found.
sc0: <System console> at flags 0x100 on isa0
sc0: VGA <16 virtual consoles, flags=0x300>
vga0: <Generic ISA VGA> at port 0x3c0-0x3df iomem 0xa0000-0xbffff on isa0
Timecounter "TSC" frequency 2332162210 Hz quality 800
Timecounters tick every 1.000 msec
mpt0: mpt_cam_event: 0x16
mpt0: Unhandled Event Notify Frame. Event 0x16 (ACK not required).
ses0 at mpt0 bus 0 target 9 lun 0
ses0: <ESG-SHV. SCA HSBP M11.... 2.05> Fixed Enclosure Services SCSI-3 device
ses0: 300.000MB/s transfers
ses0: SCSI-3 SES Device
da0 at mpt0 bus 0 target 1 lun 0
da0: <ATA WDC WD3200JS-60P 0M21> Fixed Direct Access SCSI-5 device
da0: 300.000MB/s transfers, Tagged Queueing Enabled
da0: 305245MB (625142448 512 byte sectors: 255H 63S/T 38913C)
da1 at mpt0 bus 0 target 2 lun 0
da1: <ATA WDC WD3200JS-60P 0M21> Fixed Direct Access SCSI-5 device
da1: 300.000MB/s transfers, Tagged Queueing Enabled
da1: 305245MB (625142448 512 byte sectors: 255H 63S/T 38913C)
da2 at umass-sim0 bus 0 target 0 lun 0
da2: <Generic USB Flash Disk 2.00> Removable Direct Access SCSI-2 device
da2: 40.000MB/s transfers
da2: 499MB (1023488 512 byte sectors: 64H 32S/T 499C)
GEOM_MIRROR: Device gm0 created (id=3956001177).
GEOM_MIRROR: Device gm0: provider da0 detected.
GEOM_MIRROR: Device gm0: provider da1 detected.
GEOM_MIRROR: Device gm0: provider da1 activated.
GEOM_MIRROR: Device gm0: provider da0 activated.
GEOM_MIRROR: Device gm0: provider mirror/gm0 launched.
GEOM_LABEL: Label for provider da2s1a is ufs/FreeBSDonUSB.
Trying to mount root from ufs:/dev/mirror/gm0s1a
Хозяин машинки не то, чтобы совсем далёк от компов, но в компьютерную фирму обратился имеено с желанием купить сервер с RAID. И вот ему купили это чудо.
Сразу оказалось, что это железо, а именно мамка Intel S5000PAL правильно опознаётся только последним релизом FreeBSD, 6.2. В принципе ничего интересного, дела обычные.
То, что на машинке очень трудно подцепить CD-ROM -- тоже не удивительно, по большей части на сервере он нужен как зайцу стоп-кран, для установки системы, да на всякий случай потом. В результате пришлось грузиться с USB Flash, если кому пригодится такой финт, то инфу смотреть тут: typo.submonkey.net. Если взять флэшку в 1 Гиг и выше, то помимо FreeBSD для загрузки, можно на неё же положить и образ первого диска дистрибудива FreeBSD и использовать его для инсталяции.
А вот дальше начинается самое интересное: на этой интеловской мамке два RAID-контроллера (LSILogic SAS/SATA Adapter и Intel 63XXESB2 SATA300 controller), первый работает с SATA винтами через SAS midplane карту, второй -- через SATA midplane карту, изюминка первого котроллера -- для активации его в качестве RAID-контроллера необходимо покупать отдельно ключ активации (как оказалось без этого ключа он никак не работает сам, но и Фре не даёт работать тоже). Чудо поставки этого сервера заключается в том, что клиенту поставили вариант с SAS midplane картой, но без ключа активации RAIDа, зато с набором SATA-шлейфов, которые нужны только для варианта с SATA midplane картой.
Такой вот парадокс: на машине два RAID-контроллера, и ни один не работает ! Для одного нет ключа активации, а для второго установлена не та midplane карта. Ну и каково название компьютерной фирме, поставившей клиенту такой комп ?
Решение (надеюсь временное) хоть как-то оживить машинку -- выключить совсем RAID в LSILogic SAS/SATA Adapter и поднять софтверный RAID используя штатный gmirror во FreeBSD. Отключать RAID в контроллере в биосе обязательно (несмотря на то, что он по отдельности диски даёт видеть), т.к. оказалось, что этот контроллер и gmirror пишут свои метаданные в одно и тоже место на диске, т.е. после конфигурации зеркала через gmirror, контроллер начинал считать диски неинициализированными и машина с них уже не грузилась, а если убедить повторно контролер, gmirror переставала опознавать диски как члены массива.
> Ну и каково название компьютерной фирме, поставившей
> клиенту такой комп ?
Всё очень просто. На intel-е SRCxxxx рейды указаны в качестве рекомендованных для SR1500ALSAS (т.е. с активным бэкплейном). Это касаетельно фирмы.
И рейд действительно общается с ASR1500SASBP по PCI-E, но встроенный в HSBP SAS контроллер не дает ему увидеть диски, даже в отключенном состоянии.
C другой стороны, если поиметь SR1500PASBP, то неясно как будет рейд общаться с ним. PCI-E там нет, а существующие шланги явно не предназначены для этого.
Вот и скажите - SR1500 проектировалась как платформа без нормальных SAS рейдов (HostRaid-ы мы не рассматриваем) ? Или подразумевается, что 4(8) портовый шланг (с сосками для SAS) будет тыкаться в HSBP с риском сломать его гнёзда при закрытии/открытии корпуса? Вряд ли. SRCZCRx (например), прекрасно интегрировался с любым SR1400 оборудованием, и если не шибаюсь еще и 1300.
У SRCSAS144E так же написано, что он прекрасно интегрируется с SR1500AL[SAS], чего не происходит ни там, ни там. К слову, SR1550ALSAS так же посасывает.