Téma diplomové práce VST plugin

Ozvučení, nahrávání, mixáž a mastering
matucha
Příspěvky: 5057
Registrován: 24 kvě 2002 19:30

Re: Téma diplomové práce VST plugin

Příspěvek od matucha » 13 led 2012 12:44

FinestX píše:
Hammond píše:...co dokaze ludsky mozog, a sice sustredit pozornost na nejaky vybrany objekt/dej v mnozstve dalsich. Priklad: v miestnosti je mnozstvo ludi a vsetci rozpravaju jeden cez druheho. Teba vsak zaujme rozhovor dvoch sympatickych slecien a tak zaostris pozornost na to, o com sa rozpravaju, pricom ostatne hlasy takpovediac "filtrujes". Alebo: sedis v koncertnej sale, kde hra komorny orchester a mas pocit, ze nieco neladi. Zameras pozornost a zistujes, ze je to druhy huslista z prava a dokazes celkom zretelne v zhluku ostatnych tonov identifikovat, co za bludy tam hra... Ja neviem, ako to ludsky mozog robi, ale jednoducho to vie. Mozno na zaklade nejakych spolocny znakov, na zaklade ktorych vie rozpoznat, co k comu patri a na to sa sustredi. Dokazal by toto softver? Dal by sa naprogramovat plugin, ktory by napriklad z kapely vytiahol jeden nastroj a ostatne potlacil? To by bol celkom "fasa" plugin.
Do něčeho takového bych se s veeelikou chutí pustil. Hraju si už léta s takovou jakousi vlastní implementací neuronových sítí s "genetickým" učením (ve vlastním šachovém programu)... Jenomže - není, kdo by takovou práci financoval (stejně, jako s tím šachovým programem - proto taky na něm pracuju tempem - 3 měs. práce, 3 roky pauza... :) ). A jen tak ze zájmu po večerech se to fakt dělat nedá (to jsem rád, že stihnu alespoň trošičku nějaké to hobby, jako např. muziku :) )
Na diplomku je to bohužel taky moc rozsáhlé :(, to už je "profesorská práce"... :) Ale ta myšlenka je Hammonde výborná - líbí se mi, že se tu něco takového taky objevilo...
Lidskej mozek pracuje s dvema signalama, ktery prochazej dvema znamejma filtrama (usni boltce jsou specialni filtry, ktery jsou soucasti procesu), ktery z 3d pole zakodujou do dvou 1 rozmernejch signalu. Kdyz vezmes uz hotovou nahravku, tak tyhle informace davno nemas, jsou fuc. Existujou vicemikrofonovy systemy, ktery podobnou vec umej, zazoomovat a tak... no a nebo pak michani ;).

Uživatelský avatar
Hammond
Příspěvky: 1120
Registrován: 05 říj 2010 18:44

Re: Téma diplomové práce VST plugin

Příspěvek od Hammond » 13 led 2012 12:52

matucha: Ale ked pocuvas uz hotovu nahravku na mono posluch, taktiez dokazes zameriavat pozornost na jednotlive zvuky, cize podla mna to nesuvisi iba s priestorovou lokalizaciou.

matucha
Příspěvky: 5057
Registrován: 24 kvě 2002 19:30

Re: Téma diplomové práce VST plugin

Příspěvek od matucha » 13 led 2012 13:30

OK do urcity miry je to pravda... ale (i z pohledu michani) je to uz hodne nepresnej mechanismus... podobne jak to ma melodyne DNA, taky neco trefi a neco uz je nad jeho sily rozliseni.

Brooklyn / juanita juarez
Profesionál
Příspěvky: 3559
Registrován: 06 úno 2005 01:03

Re: Téma diplomové práce VST plugin

Příspěvek od Brooklyn / juanita juarez » 13 led 2012 15:34

matucha píše:
Druha vec, co jsem nikde nevidel, parametrickej ekvalizer, kterej by mohl mit kazdej parametr modulovatelnej libovolnejma LFO, treba sumovejma a diky tomu by mohl byt ruzne nestabilni. Ale musel by to byt poradnej ekvalizer, coz nevim jestli vubec mas sanci dat dohromady za pul roku, kdyz jsi dosud zadnej eq neudelal. Ale treba se to da dostat dohlavy rychle.
modulace (hned nekolik programovatelnejch modulatoru naraz na libovolnej parametr) maji v sobe zabudovany vsechny pluginy od ceskyho melda - eq, filtry, flangery, phasery, kompresory. vubec sem nemel sily se do tyhle ficury ponorit, ale bude to mocny.

jackies

Re: Téma diplomové práce VST plugin

Příspěvek od jackies » 13 led 2012 15:54

Možná by nebyl špatný nějaký standalone VST nebo VST fx host.
Něco jako Steinberg v-stack.

Bylo by to na první pohled hódně čudlíků a hodně komplikované.
Udělat tomu nějaký hi-tech ksicht a mohla by komise "žasnout" :)

Uživatelský avatar
bassline
Příspěvky: 2667
Registrován: 22 zář 2005 16:21

Re: Téma diplomové práce VST plugin

Příspěvek od bassline » 13 led 2012 16:18

Ja mam jeden zaujimavy napad, uz som o tom pred nejakou dobou pisal na ezone - ./ostatni-software/poradte-vst-eq-t13138-30.html#p243841

Tento plugin pracuje iba s parametrami VST/VSTi a nie s audiom, takze to je pravdepodobne mimo nametov, ktore hladas.
Kazdopadne aspon popisem o co sa jedna, ked uz som to nacal:

Ide o plugin, ktory umoznuje modulovat vsetky dostupne parametre VST / VSTi pluginov.
Modulacia je zavisla na MIDI gate on/off, takze sa to sprava rovnako, ako ked si v syntaku nastavis obalku na filter.

Modulation matrix umozni vybrat source (rozne typy envelopes, LFOs) ktory bude modulovat v urcitom mnozstve akykolvek dostupny parameter VST/VSTi pluginu. K tomu je este mozne nastavit scale, ktory bude urcovat cez co, resp. akym sposobom sa modulacia spusti.
Priklad - Mam VST filter, ktory nema internu obalku pre cutoff. V modulation matrix plugine si zvolim obalku a priradim ju pre cutoff parameter z VST filtra pluginu. Pokial chcem mnozstvo cutoffu ovladaneho obalkou riadit cez velocity, tak nastavim ako scale velocity. Vysedok je, ze ovladam cutoff obalkou, v zavislosti na sile velocity.

Je to vlastne aj moznost, ako rozsirit modulacne moznosti akehokolvek VSTi syntaku alebo sampleru, ktory dane parametre neumoznuje modulovat interne.

Tento plugin teda:

- Rozsiruje modulacne moznosti akehokolvek VST / VSTi
- Umoznuje vytvarat zvuk novym kreativnym sposobom - je mozne nastavit vela kombinacii. Daju sa modulovat vsetky dostupne parametre VST/VSTi pluginov roznymi sposobmi - kreativne vyuzitie je neobmedzene

Screenshot hovori za vsetko:
Přílohy
modmatrix.jpg
modmatrix.jpg (131.65 KiB) Zobrazeno 294 x
Naposledy upravil(a) bassline dne 13 led 2012 16:19, celkem upraveno 1 x.

matucha
Příspěvky: 5057
Registrován: 24 kvě 2002 19:30

Re: Téma diplomové práce VST plugin

Příspěvek od matucha » 13 led 2012 16:19

Brooklyn / juanita juarez píše:
matucha píše:
Druha vec, co jsem nikde nevidel, parametrickej ekvalizer, kterej by mohl mit kazdej parametr modulovatelnej libovolnejma LFO, treba sumovejma a diky tomu by mohl byt ruzne nestabilni. Ale musel by to byt poradnej ekvalizer, coz nevim jestli vubec mas sanci dat dohromady za pul roku, kdyz jsi dosud zadnej eq neudelal. Ale treba se to da dostat dohlavy rychle.
modulace (hned nekolik programovatelnejch modulatoru naraz na libovolnej parametr) maji v sobe zabudovany vsechny pluginy od ceskyho melda - eq, filtry, flangery, phasery, kompresory. vubec sem nemel sily se do tyhle ficury ponorit, ale bude to mocny.
hmmmm....

Brooklyn / juanita juarez
Profesionál
Příspěvky: 3559
Registrován: 06 úno 2005 01:03

Re: Téma diplomové práce VST plugin

Příspěvek od Brooklyn / juanita juarez » 13 led 2012 16:45

bassline píše:Ja mam jeden zaujimavy napad, uz som o tom pred nejakou dobou pisal na ezone - ostatni-software/poradte-vst-eq-t13138-30.html#p243841

Tento plugin pracuje iba s parametrami VST/VSTi a nie s audiom, takze to je pravdepodobne mimo nametov, ktore hladas.
Kazdopadne aspon popisem o co sa jedna, ked uz som to nacal:

Ide o plugin, ktory umoznuje modulovat vsetky dostupne parametre VST / VSTi pluginov.
Modulacia je zavisla na MIDI gate on/off, takze sa to sprava rovnako, ako ked si v syntaku nastavis obalku na filter.

Modulation matrix umozni vybrat source (rozne typy envelopes, LFOs) ktory bude modulovat v urcitom mnozstve akykolvek dostupny parameter VST/VSTi pluginu. K tomu je este mozne nastavit scale, ktory bude urcovat cez co, resp. akym sposobom sa modulacia spusti.
Priklad - Mam VST filter, ktory nema internu obalku pre cutoff. V modulation matrix plugine si zvolim obalku a priradim ju pre cutoff parameter z VST filtra pluginu. Pokial chcem mnozstvo cutoffu ovladaneho obalkou riadit cez velocity, tak nastavim ako scale velocity. Vysedok je, ze ovladam cutoff obalkou, v zavislosti na sile velocity.

Je to vlastne aj moznost, ako rozsirit modulacne moznosti akehokolvek VSTi syntaku alebo sampleru, ktory dane parametre neumoznuje modulovat interne.

Tento plugin teda:

- Rozsiruje modulacne moznosti akehokolvek VST / VSTi
- Umoznuje vytvarat zvuk novym kreativnym sposobom - je mozne nastavit vela kombinacii. Daju sa modulovat vsetky dostupne parametre VST/VSTi pluginov roznymi sposobmi - kreativne vyuzitie je neobmedzene

Screenshot hovori za vsetko:
bluecat ma podobnej plugin, taky muzes nakreslit obalku v Xfer LFOtool a tou pak ovladat jakejkoli parametr VST (prostrednictvim midiYOKE). v cubase jsem to rozchodil. ale ma to uskali: na mym DAW zavisi responsivita celyho systemu na nastaveni bufferu zvukovky (mam RME). cim nizsi latence, tim vetsi rozliseni vysledny automatizacni krivky. celkove to proste narazi na rozlisovaci schopnost MIDI, ktera je nizka. v tomhle porad vede fruity peak controller. co bluecat nema za tak dobre vyreseny je 'obalkovani' danyho signalu -- muzes tam jednoduse pouzit nejnizsi a nejvyssi mez, ale nemuzes to nechat prepocitat pres rovnici jako treba ve fruity.

jo a jinak sem videl podobny pluginy free udelany pod max-msp pro ableton.

Uživatelský avatar
bassline
Příspěvky: 2667
Registrován: 22 zář 2005 16:21

Re: Téma diplomové práce VST plugin

Příspěvek od bassline » 13 led 2012 17:05

No ale ide o to, ze ziadny takyto konkretny plugin neexistuje...Presne toto co som hore popisal.

Proste chcem si jednoducho a intuitivne zobrat napr. downsampling z bitcrusheru, modulovat ho cez LFO, ale pouzit modulaciu cez modwheel. A podobne.
A zaroven mat k dispozicii siroku skalu roznych modulatorov. Vela detailnych nastaveni ako napr. Fade pre LFO, moznost nastavit fazu v ktorej sa spusti, keytracking, atd.
Cele to mat v prehladom UI, kde by bola napr. aj moznost pomenovat jednotlive modulacie.

Brooklyn / juanita juarez
Profesionál
Příspěvky: 3559
Registrován: 06 úno 2005 01:03

Re: Téma diplomové práce VST plugin

Příspěvek od Brooklyn / juanita juarez » 13 led 2012 17:17

bassline píše:No ale ide o to, ze ziadny takyto konkretny plugin neexistuje...Presne toto co som hore popisal.

Proste chcem si jednoducho a intuitivne zobrat napr. downsampling z bitcrusheru, modulovat ho cez LFO, ale pouzit modulaciu cez modwheel. A podobne.
A zaroven mat k dispozicii siroku skalu roznych modulatorov. Vela detailnych nastaveni ako napr. Fade pre LFO, moznost nastavit fazu v ktorej sa spusti, keytracking, atd.
Cele to mat v prehladom UI, kde by bola napr. aj moznost pomenovat jednotlive modulacie.
takhle ne no. ale umim treba modulaci v midi partu v cubase ovladat jakykoliv vst parametr kdekoliv v projektu.

TTT31
Příspěvky: 175
Registrován: 17 kvě 2010 20:46

Re: Téma diplomové práce VST plugin

Příspěvek od TTT31 » 13 led 2012 17:18

bassline - myslíš to jako insert effekt jo, chápu to dobřE?
Amorph píše:A co takhle si nejdriv precist dokumentaci k vst sdk a projet prilozene priklady, abys vubec tusil v jakych mantinelech se budes pohybovat? Jinak predpokladam, ze tezistem obhajoby bude prezentace algoritmu pripadne uziti a nikoliv gui. No a z tech nametu mi prijde pomerne dobre zvladnutelny a pri tom uzitecny te eq s moznosti modulace, co navrhoval matucha.

Jasně už to stahuju, jen je to teď hektické s časem protože máme zkoušky. Vyhradil jsem si ale tenhle víkend na Diplomku, tak se bude zkoumat a číst a zjišťovat :) chci být koncem víkendu už rozhodnutý pro jednu z možností abych mohl příští týden zajít za vedoucím to probrat a nějak pomalu dát do kupy .

Brooklyn / juanita juarez
Profesionál
Příspěvky: 3559
Registrován: 06 úno 2005 01:03

Re: Téma diplomové práce VST plugin

Příspěvek od Brooklyn / juanita juarez » 13 led 2012 23:31

TTT31 píše:bassline - myslíš to jako insert effekt jo, chápu to dobřE?
Amorph píše:A co takhle si nejdriv precist dokumentaci k vst sdk a projet prilozene priklady, abys vubec tusil v jakych mantinelech se budes pohybovat? Jinak predpokladam, ze tezistem obhajoby bude prezentace algoritmu pripadne uziti a nikoliv gui. No a z tech nametu mi prijde pomerne dobre zvladnutelny a pri tom uzitecny te eq s moznosti modulace, co navrhoval matucha.

Jasně už to stahuju, jen je to teď hektické s časem protože máme zkoušky. Vyhradil jsem si ale tenhle víkend na Diplomku, tak se bude zkoumat a číst a zjišťovat :) chci být koncem víkendu už rozhodnutý pro jednu z možností abych mohl příští týden zajít za vedoucím to probrat a nějak pomalu dát do kupy .
jako takhle -- presne, jak to popisuje bassline, to nepujde, protoze jednotlivy pluginy o sobe navzajem 'nevi'. to 'vi' jen DAW samotny, a tak by takova ficura musela byt primo zahrnuta v DAW jako takovym. ale da se to obejit posilanim MIDI dat na midi driver, co bezi v pozadi (jako MIDIyoke), a nasledny mapovani. ale to je kamen urazu, protoze ergonomie takovyho mapovani v DAW je dost hrozna. obavam se, ze tohle neni projekt pro tebe, to je aspon na rok prace bych rek ;]

Uživatelský avatar
FinestX
Příspěvky: 85
Registrován: 10 lis 2011 09:59

Re: Téma diplomové práce VST plugin

Příspěvek od FinestX » 14 led 2012 00:18

matucha píše:
FinestX píše:
Hammond píše:...co dokaze ludsky mozog, a sice sustredit pozornost na nejaky vybrany objekt/dej v mnozstve dalsich. Priklad: ......
.....
Lidskej mozek pracuje s dvema signalama, ktery prochazej dvema znamejma filtrama (usni boltce jsou specialni filtry, ktery jsou soucasti procesu), ktery z 3d pole zakodujou do dvou 1 rozmernejch signalu. Kdyz vezmes uz hotovou nahravku, tak tyhle informace davno nemas, jsou fuc. Existujou vicemikrofonovy systemy, ktery podobnou vec umej, zazoomovat a tak... no a nebo pak michani ;).
Musím oponovat... :) Co říkáš je samozřejmě pravda - ale tady se přece vůbec nehovořilo o prostorové lokalizaci, ale pouze o lokalizaci ve smyslu identifikace a separace... V nahrávce (a to i relativně nekvalitní, a pochopitelně klidně i monofonní) hovoru víc lidí současně bez problémů vybereš, co říká právě ten či onen. Stejně, jako v hudební jednoznačně oddělíš zpěv, kytaru, housle, flétnu, basu, bicí a perkuse. Například. To jsou pro tebe jasně a automaticky separovatelné věci. A nemusíš být ani "netopýr", můžeš být bez sluchu a poslouchat to na repráčkách z notebooku - pořád rozumíš, co se tam zpívá, co hraje tenhle druh nástroje a co tamten. Samozřejmě nerozeznáš zdaleka všechny nuance, ale k rozlišení toho či onoho "tracku" ti to stačí.

Udělat to softwarově je samozřejmě problém. To není žádný "jednoduchý" systém diferenciálních rovnic apod., nutno použít "poněkud jiných" algoritmů a vyhodnocovacích přístupů. Tady se o to snažíme kupř. těmi rádoby "neuronovými" sítěmi atd. Nepochybně podobný přístup bude mít i ta Melodyne (ke zkoumání těch jejich produktů se teprv chystám). Bohužel v tomhle jsme stále značně v plenkách, i když pokroky a už i výborně fungující praktické aplikace jsou (OCR, rozpoznávání obrázků - i "pozměněných" obličejů apod., a řada, řada dalších...). Problém je v nevhodnosti těhle přístupů pro sekvenční počítače, tam je třeba masivně paralelních a ideálně i analogových... Ale to už zabíhám příliš OT :) (snad to bude tolerováno, víc už se v tomhle topicu o tom rozepisovat nebudu, slibuji :) )
Žánr "pejsek/kočička dort" (folk-rock-pop-newage-symphonic-...), odrostlý na Elánech, na barovém hraní, později kytaristický vzor Plíhal...
SONAR X1 (historicky), EMU 0404 USB, MIDI keys / VSTi všech typů..., Rode NT1000, akust. kytara Aria.

Uživatelský avatar
boro
Příspěvky: 369
Registrován: 27 led 2004 12:53

Re: Téma diplomové práce VST plugin

Příspěvek od boro » 14 led 2012 11:39

FinestX píše:Koukám, řada zajímavých námětů...!

Připojím - a co něco takovýho, co tady zrovna teď poptávám já? :D Taky bych za to rád klidně nějakou kačku pustil, kdyby se to (i kdyby až třeba pak v nějaké druhé verzi...) dotáhlo dál a vychytalo - a nepochybně bych nebyl sám...
VST pro "triggering" pizzicato strun, brnkané kytary apod.

Snadný to zrovna není, ale podle mne realizovatelný ano. Dokonce bych třeba byl schopen i zvážit vlastní programátorskou účast... :)
Nepoznam "audio to midi" jednoduchy free plugin, ktory by dobre fungoval. Pouziva sa na analyzu audia vykon pocitaca? Ak nie, tak preco nie? Preco hardware na prevod audia do midi funguje dobre a software nie?

Uživatelský avatar
FinestX
Příspěvky: 85
Registrován: 10 lis 2011 09:59

Re: Téma diplomové práce VST plugin

Příspěvek od FinestX » 14 led 2012 15:25

Jóó, člověče... S těmi HW osobní zkušenost nemám. Ale pokud fungují dobře, tak jednoznačně tím, že jsou úzce specializované, snímají kupř. jednotlivé struny samostatně a už tam z nich generují noty...
Taková analýza potom je už spíš otázkou algoritmů, s výkonem to souvisí jenom do jisté míry. Pokud to má být "univerzální", dokonalé to zatím zdaleka udělat neumíme - nejde. Ani ty "rádoby neuronové sítě" (kde ten výkon samozřejmě roli hraje) nejsou tak daleko.
Jinak teď zrovna testuju ten Celemony Melodyne Editor, jeví se celkem slibně... Ale umíš si představit, kolik je práce něco takového udělat? A ty bys to chtěl ještě jako "jednoduchý FREE plugin"?? :wink: To v tomhle případě rozhodně ještě dlouho hrozit nebude...
Žánr "pejsek/kočička dort" (folk-rock-pop-newage-symphonic-...), odrostlý na Elánech, na barovém hraní, později kytaristický vzor Plíhal...
SONAR X1 (historicky), EMU 0404 USB, MIDI keys / VSTi všech typů..., Rode NT1000, akust. kytara Aria.

Odpovědět