Interaktivna podatkovna analitika v oblaku s programsko knjižnico Resolwe in programom Orange

Kokošar, Jaka (author), Zupan, Blaž (mentor), Štajdohar, Miha (co-mentor)

Na področju podatkovne analitike se v zadnjem obdobju soočamo z vse večjo količino podatkov, ki jih z novimi pristopi in metodami pridobivajo prav na vseh področjih človekovega udejstvovanja. Če se orodja za podatkovno analitiko želijo soočiti s tem problemom, se morajo temu primerno prilagoditi. V diplomskem delu predlagamo arhitekturo programskega sistema, ki omogoča interaktivno izvajanje analitičnih orodij v oblaku. Predlagana rešitev združuje dva odprtokodna projekta. Odprtokodni program Orange nudi intuitiven grafični vmesnik, kjer lahko s pomočjo vizualnega programiranja povezujemo različna analitična orodja. Odprtokodni projekt Resolwe pa omogoča učinkovito izvajanje analitičnih procesov v oblaku in nudi ogrodja za prenos podatkov in rezultatov na in iz strežnika. V delu predstavimo prototip predlagane programske rešitve, s katero pokažemo, da Resolwe lahko poganja podatkovno analitiko programa Orange. V delu opozorimo na omejitve kombinacije teh dveh sistemov in predlagamo rešitve, ki bi jih odpravile.

• Language: Slovenian
• Keywords: analiza podatkov, vizualno programiranje, analitični procesi v oblaku, veliki podatki
• Work type: Bachelor thesis/paper
• Organization: FRI - Faculty of Computer and Information Science
• Year: 2018
• PID: 20.500.12556/RUL-102406
• Publication date in RUL: 28.08.2018

Secondary language

• Language: English
• Title: Interactive data analytics in the cloud through integration of Resolwe library and Orange data mining

Abstract

With new approaches and the development of new methods in all areas of human endeavour we are facing an increasing amount of obtained data. The field of data analytics must adjust accordingly. In the Thesis, we propose a new architecture that allows interactive execution of data analytics in the cloud. The proposed solution combines two open source projects. Orange, the open source data mining suit, offers an intuitive graphical interface to create data analysis workflows. Resolwe is an open source dataflow package that fully supports execution of workflows in the cloud. We developed a prototype that combines the two systems and demonstrate that Resolwe is a viable solution for running Orange's data analysis workflows in the cloud. We point to the current limitations of proposed architecture and propose possible solutions that would eliminate them in the future.

• Keywords: data analytics, visual programming, analytical processes in the cloud, big data