|
|
Data Lineage Analysis for Databricks platform
Potočeková, Natália ; Parízek, Pavel (vedoucí práce) ; Škoda, Petr (oponent)
Technológie založené na notebookoch, ako sú Databricks a Jupyter Notebooks, si v posledných rokoch získali popularitu vďaka svojej prispôsobivosti a jednoduchému používaniu.Notebook je interaktívne výpočtové prostredie, ktoré umožňuje používateľom vytvárať dokumenty obsahujúce kód, vizualizácie a vysvetľujúci text na jednom mieste. Notebooky poskytujú priestor na prieskum dát, analýzu a dokumentáciu, čo používateľom umožňuje jednoducho rozvíjať a prezentovať svoju prácu. Schopnosť kombinovať vykoná- vanie kódu s vysvetleniami a vizualizáciami v rámci jedného dokumentu podporuje re- produkovateľnosť, zlepšuje spoluprácu medzi členmi tímu a motivuje vedcov k efektívnej práci s dátami. V tejto práci sme analyzovali technológiu Databricks, aby sme rozšírili platformu Manta Flow, vysoko automatizovaný nástroj na analýzu datových tokov, na podporu tejto technológie. Navrhli sme a implementovali nový skener, ktorý poskytuje základnú podporu pre analýzu notebookov Databricks napísaných v jazykoch Python a Databricks SQL. Poskytujeme tiež implementáciu takzvaného zdieľaného kontextu, ktorý možno použiť na prenos informácií medzi rôznymi skenermi na platforme Manta Flow. Na vizualizáciu interakcií medzi jazykmi a skenermi sme rozšírili Manta graf o nový typ uzla, ktorý predstavuje zdieľaný kontext. Okrem toho sme...
|
|
|
System providing mediawiki server content for offline browsing on mobile devices
Potočeková, Natália ; Pacovský, Jan (vedoucí práce) ; Kliber, Filip (oponent)
Pre spestrenie hodín a zvýšenie záujmu študentov o preberanú problematiku sa často využívajú rôzne pracovné listy a študijné materiály. Cieľom tejto práce je vytvoriť mul- tiplatformnú mobilnú aplikáciu, ktorá by uľahčovala vzdelávací proces. Aplikácia je za- meraná na MediaWiki server, ktorý poskytuje študijné materiály vo viacerých jazykoch. Účelom aplikácie je umožniť zobrazovanie materiálov servera aj v ofline móde, či už počas vyučovania alebo samoštúdia. S využitím technológie Bluetooth, e-mailu a ďalších apli- kácií je možné zdieľať materiály aj s tými, ktorí si z rôznych dôvodov nemôžu aplikáciu nainštalovať. Aplikácia uchováva najnovšie verzie materiálov, čo si vyžaduje synchronizáciu so ser- verom. Aby sme nezaťažovali server a nezvyšovali náklady na prevádzku, zvolili sme komunikáciu prostredníctvom mediátora. Tento mediátor je zodpovedný za uchovávanie najaktuálnejších verzií materiálov MediaWiki servera a ich poskytovanie klientským apli- káciám. Aplikácia umožňuje užívateľovi zvoliť si jazyk aplikácie, nastaviť si preferované jazyky materiálov, ich formát, ako aj frekvenciu ich aktualizovania. Aplikácia je dostupná pre platformy Android a iOS. 1
|
host ::
RSS.