Nagy teljesítményű számítástechnika (HPC)

Nagy teljesítményű számítástechnika egyre inkább meghódítják a világot. Ők vannak optimalizálva feladatok, változékonysága és legyen saját egyedi világ. Nézzük meg néhány megoldást, hogy tartozik ezen a világon.







A fő alkalmazási szuperszámítógépek - a számítás matematikai modellek különböző szerkezetek, jelenségek, folyamatok, stb Meghatározása, hogy az ilyen számítások nem a mi előjoga. De mi segíthet meghatározni az architektúra és összetétele szükséges egy szuperszámítógép a célra.

Döntések egyaránt lehet egyszerű mérnöki számítások, valamint az alapkutatás ráccsal dimenziónak a több száz millió sejtekben. Megoldásaink tesztelt dolgozni egyetemek, vállalkozások és a vezető ipari és tudományos kutatóintézetek.

Alapuló megoldások nagy teljesítményű SMP x86 / x64 család rendszerek

A lúgos oldatot egy szerver a gócok számát protsecsornyh darab 64 és a memória kapacitását 128 GB. Hálózati interfészek lehet ajánlani más: 1 Gigabit Ethernet, 10 Gigabit Ethernet, Infiniband QDR FDR. Az alap felület egy 10 Gigabit Ethernet következtében a sokoldalúság és a kapacitást. Az ilyen döntések rendkívül kereslet a számítások nagy modellek alapkutatás.

Alapuló megoldások klaszterek, számítási csomópontok egymással kommunikálni keresztül MPI

Ez a döntés az általános használatra. De még a standard megoldások időről időre nem mutatják meg a várt eredményeket. Ez akkor fordul elő, kizárólag eredményeként nem értik meg a követelményeknek a végrehajtási feladatok és hatékonyan optimalizálja szuperszámítógép e feladatok ellátására.

Configuration számítási csomópontok közötti kettőtől nyolc socket socket alapján szerkesztett egy processzorcsalád x86 / x64 Intel Xeon vagy AMD Opteron. memória mérete 1 GB és 16 GB-os per fizikai mag. Interconnect bázis kínált Infiniband, de egy bizonyos típusú Gigabit Ethernet használatát feladatok 10 ad nagyobb hatékonyságot.

Skálázása ez a megoldás lehetővé teszi, hogy a szuperszámítógépek a csúcsteljesítmény akár több PFlops.

Teljesítményének növelése érdekében a számítási csomópontok használnak különféle gyorsítók. Van többféle gyorsító. A fő gyorsítók alapulnak stream processzor és az alapján a programozható logikai kapukat.

Egy tipikus képviselője streaming gyorsítók AMD FireStream, nVidia Fermi, az Intel Xeon Phi. Kövesse ezeket a gyorsítók általában formájában egy expanziós kártya PCI-e felületen. Teljesítménye a fenti gyorsítók eddig mintegy 1 TFlops a dupla pontosságú műveletek.

Bármilyen szuperszámítógép több hálózatokat. Kis eltekinthetünk két vagy három. Nagy szoktál 3-5 hálózatokat. A leggyakrabban használt hálózati - Infiniband és Ethernet. Ugyanez a bizonyos szuperszámítógépek használt szakosodott hálózatok szervezésére 2D-tórusz, 3D-tórusz, ... ND-tórusz. Mindezek a hálózatok teljes forgalma alapján bármely terhelés és a minimális érték a késedelem adatátvitelt.

Bármilyen szuperszámítógép saját tároló. Ritkán van egy nagy tároló szolgál több szuperszámítógép. De ez is lehetséges. A megkülönböztető jegye a tárolási rendszer szuperszámítógépek magas IO teljesítményű és alacsony késleltetésű, a képességét, hogy egyidejű hozzáférést egy fájlba, a nagy csomópontok száma (nagy szuperszámítógépek több tízezer csomópont), a megbízhatóság, a hibatűrés, stb

Előfordul, hogy egy elég kicsi szuperszámítógépek és a szokásos tárolási nélkül párhuzamos fájlrendszer. Ezért a kiválasztási bármely tároló rendszer alapja elsősorban az igényeket a feladat.

Tárolás párhuzamos fájlrendszer

De ez nem korlátozza annak lehetőségét, hogy a saját fejlesztésű technológiával. Tehát széles körben ismert következő fájlrendszerek: GPFS, Lustre, OneFS, PanFS, StorNext, Exadata. Minden fájlrendszer egyedülálló képességekkel és elengedhetetlen a konkrét teendőket. Például, hogy megjelenítse a legalkalmasabb feldolgozási Exadata és StorNext. Együttműködik szuperszámítógépek GPFS, Lustre és PanFS. Ugyanakkor érdemes megjegyezni, hogy csak akkor működik, PanFS tároló cég Panasas, ezért csak akkor lehet használni együtt a berendezés.

Másik megkülönböztető kritérium lehet a helyét a fájlrendszerben helyet. OneFS PanFS és telepítése a tároló rendszer is. GPFS, Lustre, StorNext, Exadata telepített dedikált szerverek. Kínálunk figyelni, hogy a következő párhuzamos fájlrendszerek:

Network File System (NFS) - protokoll hálózati hozzáférés fájlrendszereket. NFS elvonásával típusú fájlrendszerek mind a szerver és a kliens, sok megvalósításai NFS-kiszolgálók és az ügyfelek különböző operációs rendszerek és architektúrák közt. Része NFS V.4.1. van pNFS - Párhuzamos NFS az NFS-párhuzamos mechanizmus kliens adatokhoz való hozzáférés több elosztott NFS-szerver. A jelenléte egy ilyen mechanizmus a szabványos hálózati fájlrendszer fogja segíteni az elosztott „felhő» ( «cloud») tárolási és információs rendszerek.

GPFS párhuzamos fájlrendszer tervezett és fejlesztett az IBM. IBM General Parallel File System (GPFS) - a nagy teljesítményű fájlrendszer több hozzáférést biztosít a lemezek, amelyek gyors hozzáférést biztosít az összes komponenst homogén vagy heterogén csoportja IBM UNIX szervereken futó AIX 5L vagy Linux operációs rendszer.

Lustre - elosztott fájlrendszer masszív párhuzamosság, általában használt nagyméretű fürt számítástechnika. Név Lustre szennyeződés van kialakítva szavak és Linux cluster. Megvalósult a GNU GPL, a projekt nagy teljesítményű fájlrendszer klaszter több tízezer csomópontot és petabájt információk tárolására.

SAN architektúra párhuzamos fájlrendszer

Az alapvető megoldás az, hogy a raktározási rendszerek blokkolja a hozzáférést és a csatolt kiszolgáló csoport, amely végrehajtja a kódot párhuzamos fájlrendszer. Ez a csoport, viszont van osztva a fájlszerver és a metaadatok szerver. Fájlszerverek közvetlenül helyezze az adatokat rendelkezésre álló lemezterületet és gyors hozzáférést biztosítanak a számukra. Ugyanakkor, a szerverek, hogy fogyaszt az adatokat, nem lehet tudni, hogy mi a fájl szerver, ezek az adatok figyelembe. Ezért az eredeti kérelem megy metaadat szerver és rámutat, hogy a fájl szerver, amely része a kért fájl kell venni.

A másik megoldás, hogy megoldja a cég NetApp. DataONTAP Cluster mód működik az egyes vezérlő és tárolási formái ezen vezérlők egyetlen peer méltányos tároló rendszer. A kérés, hogy eljött a bármely vezérlő által feldolgozott vezérlőt, és azt kéri, hogy a hiányzó adatokat a szomszédok. Így van, nem kell telepíteni egy dedikált szerver metaadatokat.







Apache ™ Hadoop® projekt fejleszti a nyílt forráskódú szoftverek megbízható, skálázható, elosztott számítási.

Apache Hadoop szoftver könyvtár egy keretrendszer, amely megvalósítja az elosztott feldolgozás nagy adathalmazok között klaszterek számítógépekkel egy egyszerű programozási modellt. Úgy tervezték, hogy skálázható egy szerver több ezer, ahol minden szerveren működik, mint egy helyi számológép és mindkét tárolórendszerek.

A Hadoop projekt alkalmazott számítási paradigma MapReduce. Hadoop MapReduce - keret programozása és végrehajtása során elosztott számítási belül MapReduce paradigma, valamint egy sor Java-osztályok és eszközök létrehozására futtatható kötegelt feladatok on-MapReduce feldolgozás. Együttesen kiegészítik egymást.

Alkalmazás fejlesztő kell végrehajtani a bázis kezelőjét Hadoop MapReduce, amely minden egyes számítási csomópont a klaszter biztosítja átalakítása kezdeti pár „kulcs-érték”, hogy a közbenső sor „kulcs-érték” párokat (a osztályt, amely megvalósítja interfész Mapper, elemzi a magasabbrendű funkciók Map), és processzor, ami csökkenti a közbenső, hogy a végső párok halmaza, rövidített tárcsázás (konvolúció, egy osztályt, amely megvalósítja interfész szűkítő). Frame továbbítja a bemenő hajtogatási rendezve következtetéseket bázis rakodók, keverő három fázisból áll - shuffle (shuffle, a kiválasztás kívánt kimeneti szakasz), sort (rendezés, csoportosítás szerint fontos megállapításai forgalmazók - dosortirovka szükséges abban az esetben, ha a különböző atomi rakodók visszaút készletek ugyanazzal a kulccsal, a rendezési szabály ebben a fázisban lehet meghatározni programozott és felhasználása különösebb belső szerkezete billentyűk), és ténylegesen csökkentik (csonkítása) - megkapta az eredmény meg. Bizonyos típusú konvolúciós feldolgozása nem szükséges, és visszaadja Hadoop MapReduce ebben az esetben a készlet rendezve pár, származtatott alap rakodók.

De a tapasztalat azt mutatja, hogy nem minden ilyen célok hatékony Hadoop eredeti formájában. Rugalmasabb és hatékonyabb architektúra volt, ahol lemezkvótákat vannak a nagy teljesítményű hibatűrő lemez tárolási és számítási csomópont közvetlenül csatlakozik a tároló már. Így olyan egyetemes és rugalmas szerkezet, amelyben minden logikai komponens kész architektúra független a többitől. A tapasztalat az annak végrehajtása megmutatta a hatékonyságát az ilyen megoldásokat.

NetApp E-sorozat - nagy teljesítményű tároló rendszerek, amelyek megfelelnek a nagy teljesítményű követelményeket a vállalkozás és a tárolókapacitás veszélyeztetése nélkül szempontból az egyszerűség és a hatékonyság. Megfelel egy több különböző követelmények kiegyensúlyozott rendszer, mégpedig oly módon, hogy egyformán jól támogatja a nagy teljesítményű fájlrendszerek nagy sávszélességet igénylő alkalmazások és terhelések során végrehajtott több műveletre. Képes használni az E-series rendszerek, a különböző lemez polcok hozzon létre egy speciális konfigurációt, adaptálható bármilyen környezetben.

DataONTAP - egy operációs rendszer NetApp tároló rendszerek. Ő több fajta: DataONTAP Seven mód, DataONTAP Cluster mód, DataONTAP Seven mód V-sorozat.

A legkeresettebb szuperszámítógépek van DataONTAP Cluster mód. A progenitor DataONTAP Cluster mód volt egy elszigetelt ága DataONTAP GX (a legújabb verzió 10). De mivel 8-as verzió, DataONTAP egyenletes számozás és változatai egyetlen kód bázis Seven Mode és a V-sorozat.

Amellett, hogy lehetőséget biztosítsanak egyidejű hozzáférést az adatokhoz. DataONTAP Cluster mód lehetővé teszi a többszörös tárolását NetApp, a Vol. H. A különböző modellek és modellek egyetlen tároló rendszer egyetlen rendszert, és egy egységes, mind található a lemezen, az összes vezérlő. Így érhető el a lehetőséget, hogy a teljesítménye minden részében egy tároló rendszer. Párhuzamos hozzáférés a NFS V.4.1 protokollt. Azt is támogatja a CIFS protokoll, az iSCSI FibreChanel.

A NetApp cég tervei a közeljövőben egyesíteni két ág hét Mode és a Cluster Mode egyetlen támogatja őket mindkét lehetőséget.

Lustre - elosztott fájlrendszer masszív párhuzamosság, általában használt nagyméretű fürt számítástechnika. Név Lustre szennyeződés van kialakítva szavak és Linux cluster. Megvalósult a GNU GPL, a projekt nagy teljesítményű fájlrendszer klaszter több tízezer csomópontot és petabájt információk tárolására.

Bayandin EA technikai támogatás és karbantartás igazgatója OOO „7 Travel Retail”

„Ahhoz, hogy befogadására szolgáltatásainkat, néztük a sok szolgáltató, ennek eredményeként választotta a vállalat IT-Grad. Már a kezdet kezdetén volt feljebb Tesztkörnyezetben és most házak része a termelő. Az együttműködés, a cég IT-Grad bizonyította felelős és kompetens megközelítés a rájuk bízott feladatok. "

Merkudanov NA Helyettes. Főigazgató OOO „üzleti döntés”

„Abban a színpadon a választás a szállító, mi vetettük alá” IT-Grad „átfogó ellenőrzést mind műszaki és szervezési szempontból. A folyamat során a „IT-Grad” mutatta a legjobb oldaláról, és továbbra is megbízható partnere majdnem két évig. "

Tekintse át a fej információs-elemző kezelése a ROC V.Kipshidze

„Mi kifejezni őszinte köszönetünket és hálánkat LLC” IT város „és személyesen főigazgatója Gachko DV a támogatást adott az ortodox internetes projekt Prihod.ru, megbízható partnere az orosz ortodox egyház területén a média és az internetes technológiák. "

Tekintse helyettes vezetője Automatizálási Tanszék „Mizar” Alexei Domannikova

„Mi szembesülnek azzal a problémával cím tisztítása nagy mennyiségű levélszemét és a vírusok. IT-Grad biztosította számunkra a virtuális szerver és a szükséges engedélyek számát Spam Titan, megfelel a jelenlegi igényeket a cég. "

Venediktov RE Főigazgató „Prometheus”

„Több mint két év, ez a cég ad nekünk a szolgáltatások egy virtuális szervezet alapuló infrastruktúra VMware technológiát. Üzleti - ez a távközlés, a számlázás, amely egyike a vállalat üzleti szempontból kritikus feladatokat „Prometheus”. Mivel a műszaki megoldások „IT-Grad” számlázási szolgáltatásunk biztosítja a legmagasabb szinten. "

Andrey Okhrimenko, CIO online áruház «Boutique.ru»

„Ezen a ponton feladtam 30 munkaállomás, és át az ügyfelek a virtuális asztali alapuló VMware View megoldás vezényeltek a nyilvános felhő«IT-Grad». Infrastruktúra munkaállomások, olvassa el a formanyomtatványt, amely elősegíti, hogy támogatja, és csökkenti a reakcióidőt, hogy a balesetek és megkönnyíti input / output folyamat az új munkahelyek az emberek. "

Főigazgató „készlet”

Elena V. Ivaschenko, helyettes főigazgatója LLC "Mosregionvent"

„Két éve már sikeresen partnereként IT fok. Mi kiadó egy konfigurációs 1C: Számvitel 8.2 és 1C: Trade Management 8.2. A konfigurációs adatok módosításra kerültek a szakemberek IT-Grad megfelelően kívánságainkat, amit ők külön köszönetet. "

Karpuhin Vjacseszlav, Informatikai igazgató Ltd. „ARMAX Group”

„2. virtuális szerver került megrendezésre alapján egy dedikált infrastruktúra: Terminal Server 1C + szerver és adatbázis szerver. Ez a megközelítés az IT-szervezet lehetővé tette számunkra, hogy magas színvonalú infrastruktúra könyvelők és ne a beruházások. "

Marina S. Sevcsenko, igazgató „ügyvéd” (könyvviteli)

„A” felhő „szolgáltatások” IT-Grad „magukban foglalják az adatok biztonságát. Biztos lehet benne, hogy lenne csak licencelt szoftverek és a védett tér ".

Boris Greydinger, CIO ESET Company

„Mi elégedettek voltak a szolgáltatások minőségét, amelyet a cég” IT-Grad”. Tudjuk beszélve a minőségi technikai támogatást és hajlandó azonnal ellátja a szükséges konzultációkat. Azt javasoljuk, kölcsönzés virtuális gépek „IT-grad”, mint egy rugalmas megoldás, amely lehetővé teszi, hogy elkerüljék a jelentős építési költségeit saját infrastruktúra. "

Pavel Vlasov igazgatója, "Information Services ház"

„Az ő idejében az” IT-Grad „csapat azonosította a következő előnyökkel használt szolgáltatások: a rendelkezésre álló, az ár, a rugalmasság és a teljesítmény a VMware platform is. Kényelmes rendszer frissítése, miután egy teljes biztonsági mentést a virtuális gépet, egyetlen pillanatfelvétel nagyon gyors visszaállítást.

Szállítási Club: mint egy felhő IaaS szolgáltatás segíti a szervezeteket az élelmiszer-ellátás

PickPoint: - az első oroszországi postamatov hálózat: 5 év a felhő IaaS

Nagy teljesítményű számítástechnika (HPC)

IaaS a kiskereskedelmi szektorban: a tapasztalat Hamleys online vásárlás

FitnessBar.ru: IaaS, hogy a legnagyobb hálózata a sport táplálkozás és tartozékok üzletek

Nagy teljesítményű számítástechnika (HPC)

Az első bit: használja IaaS cloud szolgáltatók szállít SaaS szolgáltatást

MDG: „Beszéd Technologies” a felhő-szolgáltató IaaS

Prihod.ru: tapasztalat felhő IaaS legnagyobb ortodox internetes projekt Oroszországban




Kapcsolódó cikkek