S piškotki izboljšujemo vašo uporabniško izkušnjo. Z uporabo naših storitev se strinjate z uporabo piškotkov. V redu Piškotki, ki jih uporabljamo Kaj so piškotki?
Domov » Novice » Namestitev in ocena zmogljivosti porazdeljenega datotečnega sistema Hadoop na računalniških skupkih

Namestitev in ocena zmogljivosti porazdeljenega datotečnega sistema Hadoop na računalniških skupkih

20 junij 2013

HDFS sistem je nameščen na dva lokacijsko ločena računalniška skupka, ki delujeta z različnima operacijskima sistemoma in sta povezana preko interneta. Primerjali smo zmogljivosti enega in dveh povezanih računalniških skupkov.

Porazdeljen datotečni sistem Hadoop (HDFS) je eden od pomembnejših podprojektov Apache Hadoop, ki razvija programsko opremo za procesiranje velikih količin podatkov ter za zanesljiv in hiter dostop do podatkov v porazdeljenih podatkovnih shrambah.  Običajno je HDFS nameščen na enem računalniškem skupku. Če pa postane skupek premajhen, ga je lahko povečamo z dodajanjem računalnikov in naprav za hranjenje podatkov. Alternativna rešitev, ki še ni bila doslej raziskana, pa je v združitvi dveh obstoječih računalniških skupkov, ki sta na različnih lokacijah. HDFS sistem smo namestili na dva lokacijsko ločena računalniška skupka, ki delujeta z različnima operacijskima sistemoma in sta povezana preko interneta. Na računalniškem skupku Instituta Jožef Stefan smo namestili eno glavno vozlišče (namenode) in pet podatkovnih vozlišč (datanode), na skupku na Turboinštitutu d.d. smo namestili še eno podatkovno vozlišče. Testirali smo zmogljivosti samo enega in dveh povezanih računalniških skupkov. Rezultati kažejo, da HDFS na več skupkih omogoča povečanje podatkovne shrambe. Toda, hitrost procesiranja in prenosa podatkov je omejena z s pasovno širino komunikacijske povezave med obema skupkoma.


Ostale novice

06.10.2014 Class konferenca 2014
06.10.2014 Znani zmagovalci Eurocloud nagrad 2014 - med njimi tudi Slovenija
15.09.2014 Konferenca CLASS 2014
28.02.2014 Cloud for Europe – prvo poročanje o projektu
20.02.2014 KC CLASS v Bruslju
18.12.2013 KC Class sodeloval v Indiji
02.12.2013 EuroCloud na IKT 2013
21.11.2013 Slovesnost EuroCloud Congress and Awards Ceremony
20.11.2013 Evropsko kitajsko urbanizacijsko partnerstvo
18.11.2013 KC Class na EuroCloud kongresu 2013
11.11.2013 IBM Platform Symphony in Hadoop
11.11.2013 Intervju na temo start-upov
28.10.2013 Slike s CLASS konference 2013
21.10.2013 Pametna specializacija in izzivi Slovenije 2014-2020 - Izkušnje in prispevek Centrov odličnosti in Kompetenčnih centrov
17.10.2013 Najboljši cloud startup v letu 2013 v Evropi prihaja iz Slovenije - Esponce.com
07.10.2013 Znani zmagovalci programa start:Cloud 2013
01.10.2013 NIL-ov vodnik po storitvah računalništva v oblaku
27.09.2013 Konferenca ob zaključku instrumentov Centrov odličnosti in Kompetenčnih centrov
24.09.2013 Nominiranci za najboljše cloud storitve v Europi
11.09.2013 Poziv prebojnim "Cloud Computing" startupom in projektom – prijavi se na COINVEST investicijsko konferenco 2013 in osvoji 10.000 EUR
22.08.2013 Alpineon zasedel prvo mesto na tekmovanju v razpoznavanju obrazov
21.08.2013 Slovenski kompetenčni centri – orodje za implementacijo strategij pametne specializacije
21.08.2013 EuroCloud Award 2013 - Slovenija
05.06.2013 Sunbelt XXXIII
27.05.2013 Predstavitev CoCoSi tujim diplomatom
29.04.2013 ICT 2013
09.04.2013 Člani kompetenčnega centra bodo obiskali Kitajsko
09.04.2013 EuroCloud award program
09.04.2013 Sodelovanje Zavoda z EU komisijo
09.04.2013 start:Cloud 2013
29.03.2013 Kaj bo s kompetenčnimi centri po poteku financiranja konec leta 2013
28.03.2013 Uspešna predstavitev kompetenčnih centrov
18.03.2013 Sodelovanje na evropski konferenci računalništva v oblaku
20.02.2013 Povabilo k sodelovanju na dogodku Cloud computing
19.02.2013 Vlada sprejela Slovensko industrijsko politiko
12.02.2013 EuroCloud Evropa krepi evropsko partnerstvo z novim sedežem v Luksemburgu
18.01.2013 Pomembnejše novice o prihajajočih dogodkih iz sveta računalništva v oblaku
18.01.2013 ZITex katalog
19.11.2012 Dogodek CLASS 2012
23.10.2012 Srečanje s kitajsko delegacijo v Bruslju
05.10.2012 Prof. dr. Pisanski - član združenja Academia Europaea
01.10.2012 Evropska strategija računalništva v oblaku
11.07.2012 Digitalna agenda 2012
20.06.2012 Smernice o varstvu osebnih podatkov v oblaku
15.06.2012 Konferenca OTS
24.05.2012 Predstavitev projekta KC Class v reviji Quark
10.05.2012 Smernice za področje računalništva v oblaku

V tem sklopu