HP-C avagy nagyteljesítményű számítástechnikai megoldások A Hewlett-Packardtól a hazai informatikában Bihary Sándor Varsányi András HP Magyarország 2013.március 22. 1 Copyright Copyright 2012 2012 Hewlett-Packard Development Development Company, Company, L.P. The L.P. information The information contained contained herein herein is subject is subject to change to change without without notice. notice.
Köszönetnyilvánítás NIIFI dr. Gál Zoltán Máray Tamás dr. Haraszti Attila 2
A legfontosabb, a HP-t is érintő trendek a HPC világában A gyártóspecifikus RISC/EPIC/UNIX rendszerek hanyatlása, az iparági szabványokra épülő (tipikusan x86/linux) megoldások előretörése A GPU computing és a co-processor computing nagykorúvá válása A teljesítmény maximalizálása mellett egyre inkább szempont az energiahatékonyság is 3
23 évnyi innováció az iparági szabvány szerverek területén ProLiant Szerverek 1989 1990s 2000s 2009-11 1 st x86 server (SystemPro) 1 st multi-processor x86 server Virtual Connect 2007 1 st remote mgmt 1 st rack mount 1 st AMD servers 1 st Integrated x86 server management 1 st Blade server 1 st Sea of Sensors 1 st Dynamic Power Capping 1 st Embedded Management (ilo) 1 st Energy Star server 1 st Terabyte Blade 1 st 10 Gb FlexFabric Embedded 2008 2009 2010 2012 1 st Active Health 1 st Sea of Sensors 3D 1 st Smart Memory 1 st Location Discovery Services 2012 HP BladeSystem 4 1 st Virtual Connect Module HP Storage 1989 1990s 2004 2005 2007-8 2009-2011 1 st RAID 1 st Fiber Channel 1 st RAID cache 1 st Large scale direct connect 1 st Scalable VC Management 1 st Dual parity RAID with RAID 6/ADG 1 st Flex-10 Module 1 st SAS storage 1 st Storage blade 1 st Tape blade 1 st Blade DAS solution 1 st FlexFabric Module 1 st Flash Back Write Cache 1 st Integrated blade SAN Solution 1 st flat SAN architecture 2012 1 st Smart Storage 1 st Advanced data mirroring
A Hewlett-Packard HPC stratégiája Skálázható teljesítmény a Konvergens Infrastruktúra előnyeinek maximális kihasználása mellett Maximális hatékonyság adott lábnyomra vetítve Könnyedén üzembe helyezhető és üzemeltethető, a változásokra/változtatásokra valós időben reagáló, az szolgáltatás minőségét jelentősen javító rendszerek 5
A KONVERGENCIA EREJE TÁROLÓK SZERVEREK ENERGIA ÉS HŰTÉS HÁLÓZAT FELÜGYELETI SZOFTVER INFRASTRUKTÚRA OPERÁCIÓS KÖRNYEZET HP KONVERGENS INFRASTRUKTÚRA 6
A HP küldetése: a szerverpiac átalakítása Project Moonshot A jövő extrém alacsony fogyasztású szerverei Project Odyssey Az üzletkritikus számítástechnika újradefiniálása Project Voyager Teljes körű automatizálás az IT-ban és a szerver teljes életciklusában 2011. nov. 1 2011. nov. 22 2012. márc. 13. 7
HP Proliant Gen8 a legfontosabb innovációk ProLiant rendszerarchitektúra ilo Management Engine HP Smart Storage Insight Online Sea of Sensors 3D HP FlexNet Adapterek Virtual Connect Service Pack for ProLiant Datacenter Smart Grid 8
HP Data Center Smart Grid Thermal Discovery Sea of Sensors Everywhere Power Discovery 9 Location Discovery ipdu ICpower 1-wire 3D datacenter vizualizáció Teljes körű power capping Hőleadás- és energia érzékeny alkalmazás elhelyezés Automatizált problémamegoldás
HP ProLiant Portfolio ML DL SL BL Nonkonformistáknak US Steel Sűrűség újraértelmezve Dobozolt infrastruktúra 10
HP ProLiant SL230s Gen8 1U half width tray Chassis Interface Port Air Flow Exhaust Rear Kit Options 2 3.5 HDDS 4 2.5 HDDs 4 SSD s 1- GPU 8 Nodes per 4U chassis 16 CPUs per 4U chassis 8 GPUs per 4U chassis PCIe G3 x16 LP Slot Or Hot-Plug HDD Or Fusion-i/o Accelerator Management Port ilo4 FlexLom Slot Or Hot-Plug HDD 1- Serial Port 2 Socket-R CPUs 16 DIMM Slots 2-1GbE Ports System ID Tab SUV Port Serial/USB/Video 11
HP ProLiant SL250s Gen8 2U Half Width Tray Chassis Interface Port Air Flow Exhaust Rear GPU 4 Nodes per 4U chassis 8 CPUs per 4U chassis 12 GPUs per 4U chassis Optional 4-SFF Kit 2 GPU Tray Or 4 SFF HDD Tray 2 Socket-R CPUs (Below GPU Tray) 4-Hot-Plug HDD PCIe G3 x8 LP Slot Management Port ilo4 2-1GbE Ports System ID Tab 1- Serial Port FlexLom Slot SUV Port Serial/USB/Video 16 DIMM Slots (Below GPU Tray) 12
Gorgon - Multi-GPU Carrier Board All product views are illustrations and might not represent actual product screens. HP Multi GPU Carrier (codename Gorgon2 / GG2) 13
Gorgon - Multi-GPU Carrier Board All product views are illustrations and might not represent actual product screens. HP Multi GPU Carrier (codename Gorgon 2 / GG2) 14
HP HPC Szeged, Budapest áttekintés HPC Szeged HP Blade rendszer Magszám: 48*48= 2304 darab Memória: 128*48= 6144 GB HP Ibrix X9000 Storage 360 TB Bruttó kapacitás 192 GB cache memória HPC Budapest HP SL rendszer Magszám: 32x24= 768 darab Memória: 64*32= 2048 GB HP Ibrix X9000 Storage 96 TB bruttó kapacitás 96 GB cache memória HP MCS folyadékhűtéses rendszer 15
HP HPC Szeged hardver jellemzői 8 Rack, 6 darab C7000 blade, 2 darab Ibrix Blade technológia: Közös HW management az Onboard Administrator segítségével, Energiahatékonyság, Közös elemek: Tápegység, hűtés. 16
HP HPC Szeged hardver jellemzői 8 Rack, 6 darab C7000 blade, 2 darab Ibrix Blade technológia előnyei: Közös HW management az Onboard Administrator segítségével, Energiahatékonyság, Közös elemek: Tápegység, hűtés. 17
HP HPC Szeged hardver jellemzői A blade szerver felépítése: 4*Opteron 6174 12-core 2.2 GHz CPU 16*8 GB memória Integrált dual Gbe port QDR dual-port IB Mezzanine 18
HP HPC Szeged hardver jellemzői Mesh Topológia redundáns mesh egyik hálózata 2*DL385 Head/Login node 36-port QDR IB switch panel C7000 sasszéban 8* BL685c 36-port QDR IB switch panel C7000 sasszéban 8* BL685c 2*DL380 Ibrix Storage Couplet node 2*DL380 Ibrix Storage Couplet node 19
HP HPC Szeged hardver jellemzői Storage X9000 Ibrix 4 azonos node alkotja az Ibrix Clustert, Ibrix node felépítése: CPU: Intel(R) Xeon(R) CPU E5520 Memória: 48 GB Fiberchannel 8Gb/s interface Diszk alrendszer: EVA P6500, 400 darab 900GB 10k diszk, FC 8Gb/s portok. 20
Tradicionális tárolók Dedikált tartalék (spare) és snap lemezek kellenek Minden RAID tömbnek dedikált lemezek szükségesek Különböző méretű lemezek is szeparált csoportokban Egy LUN teljesítménye erősen korlátozott HP HPC Szeged hardver jellemzői HP EVA P6500 tárolók Elosztott tartalék- és egyéb terület képzés Különféle RAID fajták lehetnek egyazon lemezen Vegyes méretű lemezek is lehetnek egy csoportban Egy LUN 12 12 7 8 8 4 7 7 maximális teljesítmény 40 40 40 40 40 40 40 40 potenciálja 0 1 2 3 4 5 6 7 R1 R1 R5 R6 R6 R1 R5 R5 Tradicionális kontrollerek 0 1 2 3 4 5 6 7 R1 R1 R5 R6 R6 R1 R5 R5 HP EVA P6500 kontrollerek RAID5 Set RAID1 RAID6 Set LUN 6 LUN 7 RAID1 Set LUN 0 LUN 1 LUN 5 LUN 4 LUN 3 RAID5 Set LUN 2 Spare Spare Fizikai lemezek 21
HP HPC Budapest hardver jellemzői 2 Rack, 16 darab SL6500 keret, 32 darab SL165, 1 darab Ibrix SL technológia előnyei: Extrém magas teljesítmény sűrűség, Energiahatékonyság, Közös elemek: Tápegység, hűtés. 22
HP HPC Budapest hardver jellemzői Keretenként 2 darab SL típusú szerver 2*Opteron 6174 12-core 2.2 GHz CPU 8*8 GB memória Integrált dual Gbe port QDR dual-port IB PCI card 23
Infiniband Hálózat HP HPC Budapest hardver jellemzői 1 16 darab SL6500 keret 2* QDR IB 2*QDR IB switch -36 port 2*QDR IB Headnode, Loginnode 16 Ibrix Storage Couplet 24
HP HPC Budapest hardver jellemzői Storage X9000 Ibrix 2 azonos node alkotja az Ibrix Clustert, Ibrix node felépítése: CPU: Intel(R) Xeon(R) CPU E5520 Memória: 48 GB SAS 6Gb/s interface Diszk alrendszer: MSA 2312sa 48 darab 2TB MDL diszk SAS 6Gb/s portok 25
HP HPC Budapest hardver jellemzői HP MCS Modular Cooling System SL szerver magas teljesítmény sűrűsége miatt speciális hűtésre van szükség 1 Rackben Több, mint 11kW felvett teljesítmény Több, mint 40.000 BTU HR 26
A rendszer felépítése I. 27
HP HPC szoftver jellemzői X9000 Ibrix Fájlrendszer : IBRIX distributed filesystem Fájlrendszer mérete: Szeged: 230 TB Budapest: 60 TB Maximum méret: 1,6 PB A fájlrendszer szegmensekből épül fel A szegmensek az ibrix node között egyenletesen oszlanak el 28
HP HPC szoftver jellemzői Operációs rendszer: Red Hat Enterprise Linux HP CMU (Cluster Management Utility) Management Boot folyamat Indítás, leállítás Monitoring 29
Köszönjük a figyelmet! sandor.bihary@hp.com andras.varsanyi@hp.com 30