Marconi Intel Xeon (Lenovo NeXtScale nx360M5) - це система рівня Tier-0, розроблена CINECA і заснована на платформі Lenovo NeXtScale, яка замінила колишню систему IBM BG / Q (FERMI) в червні 2016 року. MARCONI заснована на наступному поколінні сімейства продуктів Intel® Xeon Phi разом з сімейством продуктів Intel® Xeon® E5-2600 v4, пропонує науковому співтовариству технологічно передову і енергоефективну високопродуктивну обчислювальну систему. В даний момент займає 72 місце за рейтингом Top500 [ 2 лютого 2018 у Wayback Machine.].
Угода про створення системи була підписана 30 березня після узгодженої процедури відбору, яка почалася декілька років тому за європейським тендером, опублікованим в квітні 2015 року. Процедура була закрита в грудні 2015 року, що забезпечило реалізацію обчислювальної системи від Lenovo (один з трьох найбільших світових виробників серверів на ринку).
Створення системи Macroni - це перший крок італійського плану розвитку комп'ютерної інфраструктури, обраний керівниками Cineca, що спрямований на підтримку наукових досліджень в країні. Глобальний план розвитку системи передбачає інвестиції в розмірі 50 млн.
Технічні характеристики
Основні характеристики
Цей суперкомпьютер використовує нову архітектуру Intel® Omni-Path Architecture, яка забезпечує високопродуктивний взаємозв'язок, необхідний для ефективного масштабування тисячі серверів системи. Високопродуктивна підсистема зберігання даних Lenovo GSS, об'єднуюча файлову систему IBM Spectrum Scale (GPFS), підключається до технології Intel Omni-Path Fabric та забезпечує можливість зберігання даних.
Згідно інформації Top500 [ 2 лютого 2018 у Wayback Machine.] та Cineca [ 15 травня 2018 у Wayback Machine.] Marconi Intel Xeon - Lenovo NeXtScale nx360M5, Xeon E5-2697v4 18C 2.3GHz, Omni-Path володіє такими характеристиками:
Ядра (к-сть.) | 54432 |
---|---|
Вузли (к-сть.) | 720 |
Процесор | 2х18-ядер Intel Xeon E5-2697v4 2,30 ГГц |
Оперативна пам'ять | 128 Гб / вузол, 3,5 ГБ / ядро |
Вбудована мережа | OmniPath Cluster Intel |
Архітектура | Intel OmniPath Architecture 2:1 |
Місце на диску | 17PB |
Потужність | 1,360.80 kW (Derived) |
Операційна система | Linux |
Продуктивність системи
Продуктивність суперкомп'ютера Marconi Intel Xeon згідно Top500 [ 12 грудня 1998 у Wayback Machine.].
Linpack Performance (Rmax) | 1,723.89 TFlop/s |
---|---|
Theoretical Peak (Rpeak | 2,003.1 TFlop/s |
Nmax | 4,320,000 |
Marconi Network
Особливості мережі Marconi за допомогою якої працює суперкомп'ютер:
Тип мережі: новий Intel Omnipath, 100 Гбіт / с. MARCONI - найбільший у світі Omnipath кластер.
Мережева топологія: Fat-tree 2:1 супроводжується лише на рівні основних вимикачів.
Основні комутатори: 5 х основного комутатора OPA "Sawtooth Forest", 768 портів на кожен.
Edge Switch: 216 OPA Edge Switch «Eldorado Forest», 48 портів кожен.
Максимальна конфігурація системи: 5 (ОРА) x 768 (портів) x 2 (звуження) → 7680 серверів.
Доступ
Всі вузли входу мають ідентичне середовище і можуть бути досягнуті за допомогою протоколу SSH (Secure Shell) з використанням «колективного» імені хоста:
> login.marconi.cineca.it
який встановлює з'єднання з одним з доступних вузлів входу.
Для отримання інформації про передачу даних з інших комп'ютерів потрібно дотримуватись інструкцій і застережень в виділеному розділі Сховище даних [ 15 травня 2018 у Wayback Machine.] або в документі Data Management [ 15 травня 2018 у Wayback Machine.].
Керування обліковими записами
Для отримання інформації по обліковим записам, потрібно звернутися до спеціалізованого розділу.
Account_no (або проект) важливий для пакетного виконання. Вам потрібно вказати account_no, це слід враховувати в планувальнику, використовуючи прапорець "-A"
#SBATCH -A <account_no>
Потрібно пам'ятати, що різні проекти, як правило, активні на різних хостах. За допомогою команди "saldo-b" можливо вказати всі облікові записи, пов'язані з вашим ім'ям користувача. У таких системах, як MARCONI, де різні розділи доступні в одному середовищі, слід вказати ім'я хоста в команді "saldo":
> Saldo-b (звіти про проекти, визначеними в Marconi-BDW - за замовчуванням);
> Saldo-b -knl (звіти про проекти, визначеними в Marconi-KNL);
> Saldo-b --skl (звіти про проекти, визначеними в Marconi-SKL);
Керування бюджетом облікових записів
В MARCONI була визначена і впроваджена політика керування використанням одиниць бюджету (запасу) проекту. Для кожного облікового запису щомісячна квота визначається як:
monthTotal = (total_budget / total_no_of_months)
Починаючи з першого дня кожного місяця, співавтори всіх облікових записів можуть використовувати квоту з повним пріоритетом. Поки бюджет споживається, завдання, що надходять з рахунку, поступово втрачають пріоритет, до тих пір, поки щомісячний бюджет (сума виділена на місяць) повністю не використається. На даний момент їх робота все ще буде розглянутися для виконанувана, але з меншим пріоритетом, ніж робота з облікових записів, які ще мають місячний запас.
Ця політика подібна до тих, що вже застосовуються іншими важливими центрами HPC в Європі та в цілому світі. Мета полягає в тому, щоб поліпшити час відгуку, надаючи користувачам можливість використовувати час процесора, призначений для проекту, в співвідношенні до їх фактичного розміру (загальна кількість основного часу).
Диски та файлові системи
Організація зберігання відповідає інфраструктурі CINECA (Розділ Зберігання даних і файлових систем [ 15 травня 2018 у Wayback Machine.]).
На додаток до домашньої директорії $ HOME для кожного користувача визначена зона $ CINECA_SCRATCH, на диску зберігання даних і тимчасових файлів виконання.
$ WORK area визначає кожен активний проєкт в системі, який зарезервований для всіх співавторів проекту. Це безпечна область зберігання, що дозволяє зберігати дані під час виконання проекту на весь термін використання.
NeXtScale nx360 M5
NeXtScale System - це відкрите, гнучке і просте рішення для користувачів центрів обробки даних, технічних обчислень, розгортання мереж, аналітичних навантажень і віртуалізаційних інфраструктур. Корпус NeXtScale n1200 і сервер NeXtScale nx360 M5 призначені для оптимізації продуктивності в межах інфраструктур центрів обробки даних. Корпус 6U NeXtScale n1200 підходить для стандартної 19-дюймової стійки, і в корпус можна встановити до 12 nx360 серверів M5. Завдяки більшій обчислювальної потужності на ват і новим процесорам Intel Xeon v4, можна скоротити витрати, зберігаючи при цьому швидкість і доступність. Корпуси nx360 M5 та n1200 мають можливості для підключення водяного охолоджується, для досягнення максимальної ефективності в охолодженні під час обробки даних.
Використання: HPC, технічні обчислення, розгортання сітки, аналітичні навантаження, керування послугами провайдерів та візуалізація інфраструктур різних середовищ.
Див. також
Примітки
- . www.hpc.cineca.it (англ.). Архів оригіналу за 15 травня 2018. Процитовано 14 травня 2018.
- . wiki.u-gov.it. Архів оригіналу за 15 травня 2018. Процитовано 14 травня 2018.
- . www.top500.org (англ.). Архів оригіналу за 15 травня 2018. Процитовано 14 травня 2018.
- . www3.lenovo.com (укр.). Архів оригіналу за 15 травня 2018. Процитовано 14 травня 2018.
Література
- HPC Cineca Infrastructure: State of the art and towards the exascale: Hardware-PresentazioneBS.pdf [ 15 травня 2018 у Wayback Machine.]
- Dense platform for high performance computing:
- MARCONI, the new Tier-0 system: https://www.cineca.it/en/content/marconi [ 11 липня 2017 у Wayback Machine.]
- MARCONI UserGuide: https://wiki.u-gov.it/confluence/display/SCAIUS/UG3.1%3A+MARCONI+UserGuide [ 15 травня 2018 у Wayback Machine.]
- NeXtScale System M5: https://www3.lenovo.com/ua/uk/high-density/NeXtScale-System-M5/p/77XS7DS7D11 [ 15 травня 2018 у Wayback Machine.]
Посилання
- Top500 [ 2 лютого 2018 у Wayback Machine.]
- Cineca [ 15 травня 2018 у Wayback Machine.]
- Сховище даних [ 15 травня 2018 у Wayback Machine.]
- Data Management [ 15 травня 2018 у Wayback Machine.]
- Розділ Зберігання даних і файлових систем [ 15 травня 2018 у Wayback Machine.]
Вікіпедія, Українська, Україна, книга, книги, бібліотека, стаття, читати, завантажити, безкоштовно, безкоштовно завантажити, mp3, відео, mp4, 3gp, jpg, jpeg, gif, png, малюнок, музика, пісня, фільм, книга, гра, ігри, мобільний, телефон, android, ios, apple, мобільний телефон, samsung, iphone, xiomi, xiaomi, redmi, honor, oppo, nokia, sonya, mi, ПК, web, Інтернет
Marconi Intel Xeon Lenovo NeXtScale nx360M5 ce sistema rivnya Tier 0 rozroblena CINECA i zasnovana na platformi Lenovo NeXtScale yaka zaminila kolishnyu sistemu IBM BG Q FERMI v chervni 2016 roku MARCONI zasnovana na nastupnomu pokolinni simejstva produktiv Intel Xeon Phi razom z simejstvom produktiv Intel Xeon E5 2600 v4 proponuye naukovomu spivtovaristvu tehnologichno peredovu i energoefektivnu visokoproduktivnu obchislyuvalnu sistemu V danij moment zajmaye 72 misce za rejtingom Top500 2 lyutogo 2018 u Wayback Machine Ugoda pro stvorennya sistemi bula pidpisana 30 bereznya pislya uzgodzhenoyi proceduri vidboru yaka pochalasya dekilka rokiv tomu za yevropejskim tenderom opublikovanim v kvitni 2015 roku Procedura bula zakrita v grudni 2015 roku sho zabezpechilo realizaciyu obchislyuvalnoyi sistemi vid Lenovo odin z troh najbilshih svitovih virobnikiv serveriv na rinku Stvorennya sistemi Macroni ce pershij krok italijskogo planu rozvitku komp yuternoyi infrastrukturi obranij kerivnikami Cineca sho spryamovanij na pidtrimku naukovih doslidzhen v krayini Globalnij plan rozvitku sistemi peredbachaye investiciyi v rozmiri 50 mln Tehnichni harakteristikiOsnovni harakteristiki Cej superkompyuter vikoristovuye novu arhitekturu Intel Omni Path Architecture yaka zabezpechuye visokoproduktivnij vzayemozv yazok neobhidnij dlya efektivnogo masshtabuvannya tisyachi serveriv sistemi Visokoproduktivna pidsistema zberigannya danih Lenovo GSS ob yednuyucha fajlovu sistemu IBM Spectrum Scale GPFS pidklyuchayetsya do tehnologiyi Intel Omni Path Fabric ta zabezpechuye mozhlivist zberigannya danih Zgidno informaciyi Top500 2 lyutogo 2018 u Wayback Machine ta Cineca 15 travnya 2018 u Wayback Machine Marconi Intel Xeon Lenovo NeXtScale nx360M5 Xeon E5 2697v4 18C 2 3GHz Omni Path volodiye takimi harakteristikami Superkomp yuter Marconi Intel Xeon Harakteristiki Yadra k st 54432 Vuzli k st 720 Procesor 2h18 yader Intel Xeon E5 2697v4 2 30 GGc Operativna pam yat 128 Gb vuzol 3 5 GB yadro Vbudovana merezha OmniPath Cluster Intel Arhitektura Intel OmniPath Architecture 2 1 Misce na disku 17PB Potuzhnist 1 360 80 kW Derived Operacijna sistema Linux Produktivnist sistemi Produktivnist superkomp yutera Marconi Intel Xeon zgidno Top500 12 grudnya 1998 u Wayback Machine Produktivnist Linpack Performance Rmax 1 723 89 TFlop s Theoretical Peak Rpeak 2 003 1 TFlop s Nmax 4 320 000 Sistema Marconi Marconi Network Osoblivosti merezhi Marconi za dopomogoyu yakoyi pracyuye superkomp yuter Tip merezhi novij Intel Omnipath 100 Gbit s MARCONI najbilshij u sviti Omnipath klaster Merezheva topologiya Fat tree 2 1 suprovodzhuyetsya lishe na rivni osnovnih vimikachiv Osnovni komutatori 5 h osnovnogo komutatora OPA Sawtooth Forest 768 portiv na kozhen Edge Switch 216 OPA Edge Switch Eldorado Forest 48 portiv kozhen Maksimalna konfiguraciya sistemi 5 ORA x 768 portiv x 2 zvuzhennya 7680 serveriv DostupVsi vuzli vhodu mayut identichne seredovishe i mozhut buti dosyagnuti za dopomogoyu protokolu SSH Secure Shell z vikoristannyam kolektivnogo imeni hosta gt login marconi cineca it yakij vstanovlyuye z yednannya z odnim z dostupnih vuzliv vhodu Dlya otrimannya informaciyi pro peredachu danih z inshih komp yuteriv potribno dotrimuvatis instrukcij i zasterezhen v vidilenomu rozdili Shovishe danih 15 travnya 2018 u Wayback Machine abo v dokumenti Data Management 15 travnya 2018 u Wayback Machine Keruvannya oblikovimi zapisamiDlya otrimannya informaciyi po oblikovim zapisam potribno zvernutisya do specializovanogo rozdilu Account no abo proekt vazhlivij dlya paketnogo vikonannya Vam potribno vkazati account no ce slid vrahovuvati v planuvalniku vikoristovuyuchi praporec A SBATCH A lt account no gt Potribno pam yatati sho rizni proekti yak pravilo aktivni na riznih hostah Za dopomogoyu komandi saldo b mozhlivo vkazati vsi oblikovi zapisi pov yazani z vashim im yam koristuvacha U takih sistemah yak MARCONI de rizni rozdili dostupni v odnomu seredovishi slid vkazati im ya hosta v komandi saldo gt Saldo b zviti pro proekti viznachenimi v Marconi BDW za zamovchuvannyam gt Saldo b knl zviti pro proekti viznachenimi v Marconi KNL gt Saldo b skl zviti pro proekti viznachenimi v Marconi SKL Keruvannya byudzhetom oblikovih zapisiv V MARCONI bula viznachena i vprovadzhena politika keruvannya vikoristannyam odinic byudzhetu zapasu proektu Dlya kozhnogo oblikovogo zapisu shomisyachna kvota viznachayetsya yak monthTotal total budget total no of months Pochinayuchi z pershogo dnya kozhnogo misyacya spivavtori vsih oblikovih zapisiv mozhut vikoristovuvati kvotu z povnim prioritetom Poki byudzhet spozhivayetsya zavdannya sho nadhodyat z rahunku postupovo vtrachayut prioritet do tih pir poki shomisyachnij byudzhet suma vidilena na misyac povnistyu ne vikoristayetsya Na danij moment yih robota vse she bude rozglyanutisya dlya vikonanuvana ale z menshim prioritetom nizh robota z oblikovih zapisiv yaki she mayut misyachnij zapas Cya politika podibna do tih sho vzhe zastosovuyutsya inshimi vazhlivimi centrami HPC v Yevropi ta v cilomu sviti Meta polyagaye v tomu shob polipshiti chas vidguku nadayuchi koristuvacham mozhlivist vikoristovuvati chas procesora priznachenij dlya proektu v spivvidnoshenni do yih faktichnogo rozmiru zagalna kilkist osnovnogo chasu Diski ta fajlovi sistemiOrganizaciya zberigannya vidpovidaye infrastrukturi CINECA Rozdil Zberigannya danih i fajlovih sistem 15 travnya 2018 u Wayback Machine Na dodatok do domashnoyi direktoriyi HOME dlya kozhnogo koristuvacha viznachena zona CINECA SCRATCH na disku zberigannya danih i timchasovih fajliv vikonannya WORK area viznachaye kozhen aktivnij proyekt v sistemi yakij zarezervovanij dlya vsih spivavtoriv proektu Ce bezpechna oblast zberigannya sho dozvolyaye zberigati dani pid chas vikonannya proektu na ves termin vikoristannya NeXtScale nx360 M5Sistema NeXtScale nx360 M5 NeXtScale System ce vidkrite gnuchke i proste rishennya dlya koristuvachiv centriv obrobki danih tehnichnih obchislen rozgortannya merezh analitichnih navantazhen i virtualizacijnih infrastruktur Korpus NeXtScale n1200 i server NeXtScale nx360 M5 priznacheni dlya optimizaciyi produktivnosti v mezhah infrastruktur centriv obrobki danih Korpus 6U NeXtScale n1200 pidhodit dlya standartnoyi 19 dyujmovoyi stijki i v korpus mozhna vstanoviti do 12 nx360 serveriv M5 Zavdyaki bilshij obchislyuvalnoyi potuzhnosti na vat i novim procesoram Intel Xeon v4 mozhna skorotiti vitrati zberigayuchi pri comu shvidkist i dostupnist Korpusi nx360 M5 ta n1200 mayut mozhlivosti dlya pidklyuchennya vodyanogo oholodzhuyetsya dlya dosyagnennya maksimalnoyi efektivnosti v oholodzhenni pid chas obrobki danih Vikoristannya HPC tehnichni obchislennya rozgortannya sitki analitichni navantazhennya keruvannya poslugami provajderiv ta vizualizaciya infrastruktur riznih seredovish Div takozhSuperkomp yuter TOP500 CinecaPrimitki www hpc cineca it angl Arhiv originalu za 15 travnya 2018 Procitovano 14 travnya 2018 wiki u gov it Arhiv originalu za 15 travnya 2018 Procitovano 14 travnya 2018 www top500 org angl Arhiv originalu za 15 travnya 2018 Procitovano 14 travnya 2018 www3 lenovo com ukr Arhiv originalu za 15 travnya 2018 Procitovano 14 travnya 2018 LiteraturaHPC Cineca Infrastructure State of the art and towards the exascale Hardware PresentazioneBS pdf 15 travnya 2018 u Wayback Machine Dense platform for high performance computing MARCONI the new Tier 0 system https www cineca it en content marconi 11 lipnya 2017 u Wayback Machine MARCONI UserGuide https wiki u gov it confluence display SCAIUS UG3 1 3A MARCONI UserGuide 15 travnya 2018 u Wayback Machine NeXtScale System M5 https www3 lenovo com ua uk high density NeXtScale System M5 p 77XS7DS7D11 15 travnya 2018 u Wayback Machine PosilannyaTop500 2 lyutogo 2018 u Wayback Machine Cineca 15 travnya 2018 u Wayback Machine Shovishe danih 15 travnya 2018 u Wayback Machine Data Management 15 travnya 2018 u Wayback Machine Rozdil Zberigannya danih i fajlovih sistem 15 travnya 2018 u Wayback Machine