Napomena: Sljedeći članak će vam pomoći: Slika u glazbu: AI generira glazbenu kompoziciju inspiriranu vašom slikom
Glazbenici su uvijek bili na čelu tehnologije. Bili su među prvima koji su usvojili sintisajzere i semplere, a nedavno su brzo usvojili nove digitalne audio tehnologije. Sada se pojavljuju dvije nove tehnologije koje imaju potencijal promijeniti način na koji stvaramo glazbu: pretvorba slike u glazbu i skladanje glazbe uz pomoć umjetne inteligencije.
Novi AI sustav može automatski generirati glazbenu kompoziciju na temelju jedne slike, koristeći CLIP Interrogator i Mubert API. Sustav koristi algoritam dubokog učenja kako bi naučio mapiranje između vizualnih, tekstualnih i audio značajki i može generirati originalnu glazbu u različitim stilovima.
Vrlo je jednostavan za korištenje; sve što trebate učiniti je poslati sliku CLIP Interrogatoru, koji zatim proizvodi tekstualni upit. Mubert zatim koristi tekstualni upit za stvaranje glazbe iz ulazne slike. Sustav je obučen na skupu podataka velikog broja slika i audio datoteka i može generirati glazbu u bilo kojem stilu, uključujući jazz, klasiku i rock. Sustav se također može koristiti za generiranje glazbe za određene svrhe, kao što je stvaranje pozadinske glazbe za video ili film.
Clip Interrogator generira atraktivne upite za korištenje sa Stable Diffusion ili Midjourney i pruža bolje usklađivanje između generiranog tekstualnog odziva i izvorne slike. Mubert je platforma koju pokreću stvaratelji glazbe koja koristi AI kako bi omogućila kreatorima i tvrtkama da generiraju beskrajne naknade-free glazbu koristeći upute za pretvaranje teksta u glazbu.
Zajedno, ove dvije tehnologije mogu proizvesti izlaze koji pretvaraju slike u glazbu. Ovo otvara cijeli novi svijet mogućnosti za stvaranje glazbe, budući da se bilo koja slika može koristiti kao polazna točka za glazbeno djelo. A uz komponiranje glazbe potpomognuto umjetnom inteligencijom, glazba se može generirati automatski bez potrebe za ljudskim unosom.
Svježe generirani primjeri slike u glazbu
Taj bi sustav mogao imati niz potencijalnih primjena, od pomoći ljudima u stvaranju personalizirane glazbe za njihov dan vjenčanja do pomoći skladateljima u kreativnom procesu. Ovo je fascinantan napredak u proučavanju umjetne inteligencije i glazbe, a mogao bi imati različite namjene u budućnosti, kao što je izrada prilagođenog audio zapisa na temelju vašeg upravljača za igranje.
Pročitajte još povezanih članaka:
