O nás     Inzerce     KontaktSpolehlivé informace o IT již od roku 2011
Hledat
Nepřehlédněte: Usnadní vám práci: Pozoruhodné IT produkty pro rok 2024
Správa dokumentů
Digitální transformace
Informační systémy
Hlavní rubriky: Informační systémy, Mobilní technologie, Datová centra, Sítě, IT bezpečnost, Software, Hardware, Zkušenosti a názory, Speciály

Pozoruhodné IT produkty 2024
E-knihy o IT zdarma
Manuál Linux

Jazyk Milk zefektivňuje práci s velkými daty

Programovací jazyk Milk, který ošetřuje paměťové operace v rozsáhlých datových souborech, představili výzkumníci z univerzity MIT. Novinka o několik příkazů rozšiřuje rozhraní OpenMP pro paralelní programování v jazycích C, C++ nebo Fortran. Milk řeší zejména situace, v nichž aplikace vyžaduje pouze několik položek z různých míst obrovské datové sady.

Až čtyřnásobné zvýšení výkonu specifických paměťových operací slibují tvůrci programovacího jazyka Milk. V tradičním pojetí tzv. principu lokality existuje předpoklad, že pokud program vyžaduje data z určité části paměti, bude velmi pravděpodobně potřebovat i ta okolní. V běžných informačních systémech bude podobný princip platit a přizpůsobí se mu i řešení správy paměťových prostředků. Situace se mění s příchodem velkých dat, v jejichž případě princip lokality ne vždy funguje. Programy hledají různé položky a procházejí kvůli tomu obrovské rozsahy. Načítání dat představuje potenciální úzké hrdlo výpočetních systémů, zejména pokud se opakuje a program, resp. procesor na výsledky čeká.

Programovací jazyk Milk rozšiřuje o několik příkazů programovací rozhraní OpenMPS (Open Multi-Processing), které v prostředích se sdílenou pamětí slouží k tvorbě vícevláknových aplikací v jazycích C, C++ a Fortran. S jejich pomocí programátoři doplní instrukce, které procházejí, resp. vyvolávají, velké soubory dat a hledají jen několik položek. Kompilátor jazyka požadované operaci přizpůsobí správu paměti.

Přístup k datům je díky jazyku Milk řešen v podstatě dávkově. Pokud aplikace zjistí, že potřebuje určitá data, okamžitě o ně nepožádá, ale uloží jejich adresy do lokálního seznamu. V okamžiku, kdy seznam dosáhne požadovaného počtu položek, jádra procesoru spojí své seznamy a sdruží adresní oblasti podle blízkosti. Poté každé jádro dostane svůj seznam adres, o jejichž vyvolání z hlavní paměti požádá.


(20. 9. 2016 | Lukas_Kriz)

Facebook Twitter
Komentáře, názory a rady

Zatím sem nikdo nevložil žádný komentář. Buďte první...

>>> Číst a vkládat komentáře <<<
©2011-2024 BusinessIT.cz, ISSN 1805-0522 | Názvy použité v textech mohou být ochrannými známkami příslušných vlastníků.
Provozovatel: Bispiral, s.r.o., kontakt: BusinessIT(at)Bispiral.com | Inzerce: Best Online Media, s.r.o., zuzana@online-media.cz
O vydavateli | Pravidla webu BusinessIT.cz a ochrana soukromí | Používáme účetní program Money S3 | pg(4421)