Kompletní Hadoop 2.0 byl uvolněn ve finální verzi



Po téměř dvou letech vývoje uvolnila organizace Apache Foundation řešení pro práci s velkými daty Hadoop 2.0. V podstatě jde ale o verzi 2.2.0, předchozí vydání ovšem nebyla úplná. Asi největší změnu v systému představuje update modulu MapReduce na Apache YARN, jenž je rovněž znám jako MapReduce 2.0 nebo MRv2.

Inovovaný modul MapReduce nově zprostředkovává vyhledávací operace bez omezení dávkového systému. Více vyhledávacích nástrojů dokáže přistupovat k datům úložného systému HDFS – Hadoop Distributed File System najednou. Koncept YARN, jehož akronym lze rozfrázovat jako Yet Another Resource Negotiator, rozdělil funkcionalitu modulu MapReduceJobTracker na dvě samostatné komponenty. Jde o globální Resource Manager a k jednotlivým aplikacím přiřazený ApplicationMaster. Rozdělením získal systém MapReduce vlastnosti tradičního operačního systému. Dokáže zpracovávat operace bez omezení na jednu pro daný okamžik.

Díky modulu MapReduce 2.0 mohou vývojáři tvorřit aplikace přímo v prostředí Hadoop. Z řešení se tedy stává plnohodnotná platforma, jejíž programy mohou okamžitě přistupovat k datům a pracovat s nimi. Ve verzi 1.0 se aplikace do prostředí importovaly z vnějšku, což snižovalo efektivitu.

Jisté změny potkaly i souborový systém HDFS. Jde například o vlastnost vysoké dostupnosti, snímkování nebo podporu pro přístup k datům v souborovém systémů NFSv3. Hadoop 2.2 je rovněž oficiálně podporován operačními systémy Microsoft Windows, což rozšiřuje prostor pro vývojáře této platformy.


(22. 10. 2013 | Lukas_Kriz)

Facebook Twitter
Komentáře, názory a rady

Zatím sem nikdo nevložil žádný komentář. Buďte první...

>>> Číst a vkládat komentáře <<<

Tip - Konference: DATOVÁ CENTRA PRO BUSINESS 2019 - 19.9.2019!
Hledáme nové kolegy pro realizaci zajímavých projektů
v oblasti IT

NOVINKA: Pozoruhodné IT produkty 2019 podruhé
Ani tentokrát si nenechte ujít produkty, které vám mohou pomoci ve vaší práci v IT.

Pozoruhodné IT produkty pro rok 2019
Náš první letošní seznam zajímavých produktů, které byste určitě neměli minout






Články čtenářů

Titulky vložené do videa a další vid...


Dnes tu má tip pro všechny, kdo nejen pracují, ale také se občas baví :). Co dělat, když potřebujete video s vloženými titulky a máte jen video, kde titulky vložené ...

Problém: Pomalá Windows 10 a jak je ...


Pomalá Windows 10, to je problém, se kterým se potkává řada uživatelů. Často přitom nastane najednou, doslova ze dne na den. Windows se pomalu spouštějí, aplikace se...

Komentáře čtenářů

TBW
Dobrý den. Koukám že váš článek je z roku 2016. Dnes je rok 2019 a situace může být odlišná. Můj dotaz z...>>
Podnikání na youtube
Zdravím, měl bych pár dotazů týkajících se podnikání na youtube. Četl jsem na http://techhity.cz/media/j...>>
Zdá se mi to nebezpečné
Přijde mi to už docela nebezpečné, že půjde platit i prostřednictvím televize. Ale pokrok nezastavíme. C...>>


©2011-2019 BusinessIT.cz, ISSN 1805-0522 | Názvy použité v textech mohou být ochrannými známkami příslušných vlastníků.
Provozovatel: Bispiral, s.r.o., kontakt: BusinessIT(at)Bispiral.com | Inzerce: Best Online Media, s.r.o., zuzana@online-media.cz
Používáme účetní program Money S3
O vydavateli | Pravidla webu BusinessIT.cz a ochrana soukromí | pg(1739)