Vizualizacija in razvoj analitičnega orodja s kompozicionalnim hierarhičnim modelom : diplomsko delo

Zakrajšek, Luka (avtor), Divjak, Saša (mentor), Marolt, Matija (komentor)

V diplomski nalogi razvijemo orodje za vizualizacijo in analizo glasbenih posnetkov z uporabo kompozicionalnega hierarhičnega modela. Model omogoča učenje konceptov tonov iz monofoničnih posnetkov, transparenten vpogled v naučene strukture ter robustno in hitro obdelavo zvočnih posnetkov. Nadgradimo ga z metodo diskriminativne nenegativne matrične faktorizacije. S to metodo se lahko zelo dobro prilagodimo polifoničnim posnetkom. Uvedli smo tudi različne tehnike čiščenja hipotez o prisotnosti tonskih višin, s katerimi izboljšamo končne rezultate. Model preizkusimo na zbirki polifoničnih klavirskih posnetkov, vokalni zbirki ljudskih pesmi ter na sintetizirani zbirki različnih inštrumentov. Z modelom CHM in nadgradnjo DNMF dobimo zelo dobre rezultate, zato model uporabimo kot osnovo za spletno aplikacijo. Aplikacija omogoča nalaganje novih zvočnih posnetkov, učenje in testiranje novih modelov, grafično predstavitev naučenih struktur ter pogled klavirske tabulature. Slednji omogoča analizo pridobljenih transkripcij, interaktivno urejanje in dodajanje ritmičnih anotacij ter izvoz v druga orodja.

• Jezik: Slovenski jezik
• Ključne besede: kompozicionalni hierarhični model, nenegativna matrična faktorizacija, pridobivanje informacij iz glasbe, transkripcija
• Vrsta gradiva: Diplomsko delo/naloga
• Tipologija: 2.11 - Diplomsko delo
• Organizacija: FRI - Fakulteta za računalništvo in informatiko
• Založnik: [L. Zakrajšek]
• Leto izida: 2016
• Št. strani: 64 str.
• PID: 20.500.12556/RUL-80168
• COBISS.SI-ID: 1536771267
• Datum objave v RUL: 01.02.2016

Licence

• Licenca: CC BY-SA 2.5 SI, Creative Commons Priznanje avtorstva-Deljenje pod enakimi pogoji 2.5 Slovenija
• Povezava: https://creativecommons.org/licenses/by-sa/2.5/si/deed.sl
• Opis: Dovoljuje kopiranje in razširjanje vsebin v kakršnemkoli mediju in obliki. Dovoljuje remixanje, urejanje, predelava in vključevanje vsebine v lastna dela v vse namene, tudi komercialne. Primerno morate navesti avtorja, povezavo do licence in označiti spremembe, če so kakšne nastale. To lahko storite na kakršenkoli razumen način, vendar ne na način, ki bi namigoval na to, da dajalec licence podpira vas ali vašo uporabo dela. Če vsebino uredite, predelate (remixate) ali gradite na njej, morate svojo različico razširjati pod isto licenco kot izvirnik. Ne smete uporabiti pravnih določil ali tehničnih ukrepov, ki bi pravno omejili ali onemogočilo druge, da bi storili karkoli, kar licenca dovoli.

Sekundarni jezik

• Jezik: Angleški jezik
• Naslov: Visualization and analysis of musical recordings using compositional hierarchycal model

Izvleček

This thesis provides a tool for visualization and analysis of music recordings using compositional hierarchical model. Model learns the concept of music tones from monophonic recordings, transparent insight into learned structures and also robust and fast processing of sound recordings. Model is extended with discriminative non-negative matrix factorization method. With this method we can get a really good fit for polyphonic recordings. We introduced various techniques for pitch hipothesis cleaning that improve final results. Model is evaluated on polyphonic piano recording database, vocal collection of folk music and synthesized collection of various instruments. We achieve very significant results using CHM and DNMF and use CHM as a basis for the web application. Application can be used to upload new sound recordings, learn and test new models, observe graphical representation of learned structures and piano roll view. Piano roll helps us analyze generated transcriptions, interactive editing, adding rhythmic annotations and export data for further manipulation using other software products.

• Ključne besede: compositional hierarchical model, non-negative matrix factorization, music information retrieval, transcription