Сакупите листу песама, пронађите песму која вам се заглавила у глави, напишите представу: шта вештачка интелигенција може да уради са музиком
мисцеланеа / / March 30, 2022
Препознајте композиције
Кул стаза се може чути било где: у тржном центру, у кафићу, па чак и са прозора оближњег аутомобила, док стојите у саобраћајној гужви. Да не бисте пропустили непознату песму која вам се допада, довољно је да укључите апликацију за препознавање. Име композиције и име уметника у њима вештачка интелигенција даје у секундама. Истина, иза тако брзог резултата стоји темељна припрема: да би брзо научио мелодију, програм прво треба да је запамти. Да би се то урадило, неуронске мреже се уводе у огромну библиотеку нумера, а затим алгоритми претварају звук у спектрограм и разлажу га на време, фреквенцију и интензитет.
Анатолиј Старостин
Шеф службе за развој технологије у Иандек Медиа Сервицес.
Спектрограм је график. Време се налази дуж хоризонталне осе, фреквенција звука се налази дуж вертикалне осе, а његов интензитет у одређеном тренутку се изражава бојом. Низак сигнал је представљен црвеном траком на дну, а висок сигнал на врху. Резултат је слика која се састоји од хоризонталних пруга у боји. Анализа таквих кола помаже у препознавању музике. При раду са спектрограмима користе се исти приступи неуронским мрежама као у анализи слике.
Претпоставимо да особа чује песму на радију и жели да зна име и извођача. Програм за препознавање гради спектрограм звучног пасуса и шаље га у своју библиотеку нумера. Затим упоређује „слику“ жељене мелодије са спектрограмима других композиција и бира најтачније подударање. У исто време, вештачка интелигенција препознаје мелодију чак и кроз озбиљне сметње, попут буке на путу или поправке у суседном стану.
Иначе, неуронска мрежа је у стању не само да идентификује уметника и назив нумере заглављене у глави, већ и грубо одреди њен жанр. Да би то урадила, вештачка интелигенција се учи да пронађе обрасце у различитим музичким стиловима. Такве специфичне карактеристике обично су недоступне људском виду и слуху. Али захваљујући машинском учењу, постаје могуће израчунати музичке жанрове из слика спектрограма.
Препоручите песме
Чини се да је скоро исто тако мало вероватно да ћете сами пронаћи „исту“ нумеру која одговара вашем расположењу у милијардама песама као да се заљубите на први поглед. Али захваљујући алгоритмима за препоруке, савршена подударања се не дешавају тако често. Прво, вештачка интелигенција тражи људе сличног укуса, а затим се повезују статистичке формуле: број лајкова, несвиђања, играња и прескакања одређене композиције.
Анатолиј Старостин
Препорука песме функционише по једноставној шеми: ако је Васја волела песму Кс, а онда је и Петја оценила, онда када Васја воли И, Петја такође треба да препоручи нумеру И. Када алгоритам треба да пронађе следећу песму, формула се примењује на скуп потенцијалних песама. Најприкладнији лебди до врха.
„Хладан” садржај, који се не види на плејлистама масовног слушаоца, шири се спорије. Али захваљујући неуронским мрежама, непознати уметници и ниша музика и даље имају малу шансу да трепере у току препорука. Ако поједноставимо све техничке нијансе, онда можемо рећи да у таквим случајевима вештачка интелигенција открива колико често одређени корисник слуша песме са сличним спектрограмима и повремено га позива да се упозна са новим стазе.
Мари Гу
Сингер.
Понекад тражим инспирацију у препорукама. Избор композиције поверавам музичкој служби, слушам мелодије, проналазим занимљиве звукове или текстове. Тако да се заиста можете спонтано заљубити у нумеру непознатог извођача. И још један стих који сам случајно чуо може ме подстаћи да створим сопствене песме.
Неуронске мреже такође помажу у стварању избора музике за фитнес, шетњу или спавање. Уредници садржаја бирају референтне траке за алгоритме, а на основу њихових спектрограма, вештачка интелигенција проширује тематске препоруке.
генерише музику
Раније су само композитори могли да стварају мелодије. Сада је то могуће и без учешћа музичара. Холандија је 2020. била домаћин првог такмичења за песму Евровизије за неуронске мреже - АИ Сонг Цонтест. Аустралијанац је победио сарадњу вештачка интелигенција са коалама, воденим рибама и тасманијским ђаволима. Песма је била посвећена шумским пожарима који бесне на континенту. Звукови животиња снимљени су кратким узорцима - фрагментима од 1-2 секунде. Алгоритам их је комбиновао са хитовима свих претходних победника праве Евровизије, након чега су семплове склопили у сопствену мелодију.
Ово није једини пример успешног креативног синдиката програмера и неуронских мрежа. 2019. године, на затварању Зимског међународног фестивала уметности у Сочију, Државни оркестар је извео 8-минутни комад. Написао ју је композитор Кузма Бодров из засебних фрагмената мелодија генерисаних неуронским мрежама. Данас је стварање музике најперспективнија област за развој вештачке интелигенције.
Анатолиј Старостин
Вештачка интелигенција може да ствара музику на три начина. Први је повезан са конструкцијом готових „цигли” звука – семплова. У овом случају, алгоритам их једноставно распоређује правим редоследом преко неколико аудио записа, а електронски аранжер меша готову нумеру. Други начин је генерисање нотних записа. То је као да напишете упутства музичару да на њему одсвира готово дело. И трећи начин је снимање "сировог" аудио сигнала. У овом случају, сама неуронска мрежа ствара звучне таласе који су слични, на пример, Моцарту или Битлсима.
Иначе, неуронске мреже могу да пишу поезију и за песме. За сада такве нумере звуче прилично чудно, тако да текстописци не би требало да брину о незапослености. Осим тога, „компјутерски ум“ је лишен осећања. Он не може да продре у емотивни контекст и да пренесе доживљаје који су ауторе дела натерали на стварање.
Мари Гу
Поезија и музика су пре свега о души, унутрашњем свету, искуствима, осећањима и емоцијама људи. На пример, нова песма „Не изгарај“ је моја лична прича, али је и она о свима који иду за сном и покушавају да разумеју себе. Не мислим да ће вештачка интелигенција икада заменити живог човека у музичкој индустрији. Али овде можете добити занимљив тандем "човек - неуронска мрежа". Већ знамо на десетине примера када је вештачка интелигенција помогла композиторима да створе јединствене мелодије. У ствари, ово је нови правац у музичком свету, који ће, сигуран сам, у будућности имати свог слушаоца и публику.
Вештачка интелигенција чини креативност доступном свима, а музика јој помаже да се развија. Да бисте разумели како се ова два пола спајају и утичу један на другог, можете "Бројеви лекција” из Иандек-а - „Дигитална уметност: музика и ИТ”. Заједно са јунацима стрипа, учесници ће научити како неуронске мреже препознају и генеришу нумере и које технологије помажу у раду познатих музичких сервиса. На часу ће ученици покушати сами да погоде мелодију по спектрограму и саставе плејлисту са препорукама.
Желим да "Бројеви лекција"
омот: Виллиам Брадберри / Схуттерстоцк / Ериц Исселее / Схуттерстоцк / Љупцо Смоковски / Схуттерстоцк / ФОТОСПЛАСХ / Схуттерстоцк / Олга Селепина / Лифехацкер