D 2008

Job Provenance - Insight into Very Large Provenance Datasets

KŘENEK, Aleš, Luděk MATYSKA, Jiří SITERA, Miroslav RUDA, František DVOŘÁK et. al.

Základní údaje

Originální název

Job Provenance - Insight into Very Large Provenance Datasets

Název česky

Job Provenance - Přístup k velmi rozsáhlým provenancím

Autoři

KŘENEK, Aleš (203 Česká republika), Luděk MATYSKA (203 Česká republika, garant), Jiří SITERA (203 Česká republika), Miroslav RUDA (203 Česká republika), František DVOŘÁK (203 Česká republika), Jiří FILIPOVIČ (203 Česká republika), Zdeněk ŠUSTR (203 Česká republika) a Zdeněk SALVET (203 Česká republika)

Vydání

Berlin, Provenance and Annotation of Data and Processes. Second International Provenance and Annotation Workshop, IPAW 2008; LNCS, od s. 144-151, 8 s. 2008

Nakladatel

Springer Berlin / Heidelberg

Další údaje

Jazyk

angličtina

Typ výsledku

Stať ve sborníku

Obor

20206 Computer hardware and architecture

Stát vydavatele

Spojené státy

Utajení

není předmětem státního či obchodního tajemství

Odkazy

Kód RIV

RIV/00216224:14310/08:00026804

Organizační jednotka

Přírodovědecká fakulta

ISBN

978-3-540-89964-8

UT WoS

000262977000014

Klíčová slova anglicky

Provenance

Štítky

Příznaky

Mezinárodní význam, Recenzováno
Změněno: 18. 12. 2008 11:13, Mgr. Aleš Křenek, Ph.D.

Anotace

V originále

Following the job centric monitoring concept, Job Provenance (JP) service organizes provenance records on the per job basis. It is designed to manage very large number of records, as was required in the EGEE project where it was developed originally. The quantitative aspect is also a focus of the presented demonstration. We show JP capability to retrieve data items of interest from a large dataset of full records of more than 1 million of jobs, to perform non trivial transformation on those data, and organize the results in such a way that repeated interactive queries are possible. The application area of the demo is derived from that of previous Provenance Challenges. Though the topic of the demo (a computational experiment) is arranged rather artificially, the demonstration still delivers its main message that JP supports non-trivial transformations and interactive queries on large data sets.

Česky

Systém Job Provenance je pokračováním konceptu monitorování orientovaného na úlohy. Systém je navržen tak, aby zvládal ukládat a zpracovávat velmi velké množství záznamů (původní motivace vychází z projektu EU EGEE). Na kvantitativní pohled je také zaměřene prezentovaná práce a demo. Ukazujeme schopnost JP v reálném čase odpovídat dotazy nad více než miliónem záznamů, a provést netriviální transformaci těchto dat. Aplikační oblast vychází ze zadání předchozích akcí "Provenance Challenge". Námětem demonstrace je výpočetní experiment nad obrazovými daty NMR scanu mozku. Přestože je uspořádán částečně uměle, dokazuje inzerovanou schopnost JP pracovat interaktivně nad velkým množstvím dat.

Návaznosti

MSM0021622419, záměr
Název: Vysoce paralelní a distribuované výpočetní systémy
Investor: Ministerstvo školství, mládeže a tělovýchovy ČR, Vysoce paralelní a distribuované výpočetní systémy