20.500.12556/RUL-144579 Porazdeljeno procesiranje z orodji Dask in Singularity na superračunalniških gručah Distributed processing using Dask and Singularity on HPC clusters Za mnoge uporabnike predstavlja preskok iz rabe osebnega računalniku na računanje na superračunalnikih velik izziv, saj se morajo spoznati z novo strojno in programsko opremo. V diplomskem delu smo želeli uporabnikom ta preskok poenostaviti tako, da smo za superračunalniško okolje prilagodili prijazno in poznano delovno okolje. Pripravili smo prenosljivi vsebnik Singularity, ki vključuje zvezke Jupyter, programski jezik Python in knjižnico Dask. Uporabnik lahko v vsebniku izvaja svojo obstoječo programsko kodo v jeziku Python. Z nekaj popravki programske kode, ki vključujejo klice funkcij knjižnice Dask, pa lahko svojo programsko kodo pohitri s porazdeljenim računanjem na več procesorskih jedrih. Pripravljeno okolje smo preizkusili z dvema testnima aplikacijama: izrisom Mandelbrotove množice in analizo sentimenta, ter predstavili dobljene rezultate. For many users, migrating from a personal computer to a supercomputer can be challenging, as they must familiarize themselves with new hardware and software. In the thesis, we wanted to simplify the process for users by creating a friendly and familiar work environment deployed on a supercomputing cluster. Therefore, we have prepared a portable Singularity container incorporating Jupyter notebooks, the Python programming language, and the Dask library. The user can run their existing Python programming code in the container. With a few tweaks to the code and Dask library function calls, the user can speed up the code with distributed computing on multiple processor cores. We tested the environment with two applications: plotting the Mandelbrot set and sentiment analysis, and presented the results. porazdeljeno procesiranje knjižnica Dask vsebniki Singularity superračunalniška gruča programski jezik Python. distributed processing library Dask containers Singularity HPC cluster programming language Python. true false false Slovenski jezik Angleški jezik Diplomsko delo/naloga 2023-03-02 09:45:00 2023-03-02 09:45:04 2023-03-06 06:43:43 0000-00-00 00:00:00 2023 0 0 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 34893 144030211 Ujcic_Marcel_-_Porazdeljeno_procesiranje_z_orodji_Dask_in_Singularity_na_superracunalniskih_gruc.pdf Ujcic_Marcel_-_Porazdeljeno_procesiranje_z_orodji_Dask_in_Singularity_na_superracunalniskih_gruc.pdf 1 791FA0FAE5400E07D9D5D96C43F1C41C 452b7907aa3f27752ee80a3b934175d1aa3376605054bfb9b40dcd62946e337b 828f65b7-b8d6-11ed-a314-00155dcfd717 https://repozitorij.uni-lj.si/Dokument.php?lang=slv&id=166992 Fakulteta za računalništvo in informatiko 0 0 0