S piškotki izboljšujemo vašo uporabniško izkušnjo. Z uporabo naših storitev se strinjate z uporabo piškotkov. V redu Piškotki, ki jih uporabljamo Kaj so piškotki?
Domov » Sklopi » Dokumenti » D1.3.1: Priporočila in zahteve za petabajtni podatkovni sistem

D1.3.1: Priporočila in zahteve za petabajtni podatkovni sistem

Projekt in mejnik izročka: P1, M6

Povzetek

Celoten izroček D1.3.1  je napisan v angleščini, ker je rezultat dela mednarodne skupine. V izročku D1.3.1 KC CLASS so najprej povzete zahteve aplikativnih projektov CLASS P4-P7 za petabytni sistem za hranjenje podatkov CLASS/PetaByte. Zahteve so bile podane v ustreznih izročkih projektov P4-P7 v M3. Zatem so opisane še dodatne zahteve, ki jih je treba upoštevati, ko gradimo petabytni sistem za hrambo podatkov. Sledi opis kriterijev za primerjavo različnih izvedb sistemom, ki jih bomo upoštevali pri izbiri končne zasnove in izgradnje CLASS/PetaByte. Sledi natančnejši opis odprtokodnih izvedb in komercialnih sistemov, ki so potencialni kandidati za uporabo v končni izvedbi CLASS/PetaByte sistema.  Predstavili smo vse pomembnejše odprtokodne sisteme za hranjenje podatkov. Za nekatere od njih podajamo le opis njihovih zmogljivosti, nekatere pa smo instalirali in preskusili. Razlikovali smo  med tremi osnovnimi skupinami sistemov za hrenjenje podatkov: relacijskomi (SQL), neralacijskimi (NoSQL) ter takimi, ki lahko shranjujejo nestrukturirane podatkovne objekte. Nekateri od odprtokodnih sistemov kot npr. Sector/Sphere, so v osnovi nerelacijski toda v posebnih projektih (Space module) imajo vgrajeno tudi podporo za SQL. Posebno pozornost smo posvetili sistemu Lustre, saj je zelo široko uporabljen v masivno vzporednih sistemih. Uporabljajo ga na primer v sedmih od desetih najmočnejših svetovnih računalniških sistemih. Predstavljena je tudi najpomembnejše in pogosto uporabljena licenčna izvedba sistema za hranjenje podatkov Oracle Real Application Clusters. Da bi lahko bolje predstavili postopke, potrebne za migracijo podatkov med zasebnimi in javnimi oblaki, smo opisali tudi poznane komercialne sisteme ponudnikov Microsoft, Amazon in Google. Izroček zaključujemo z opisom tehničnih zmogljivosti sistema za hranjenje podatkov na Turboinštitutu, ki bo eden od sistemov na katerem bomo izvedli prototip CLASS/PetaByte.