Nahlédněte do zákulisí s PremiumBeat, když mluvíme s Jonathanem Winbushem o jeho kryptografické spolupráci s DJ Mix Master Mikem.
PremiumBeat nedávno dostal příležitost promluvit si s umělcem pohybové grafiky Jonathanem Winbushem a podívat se do zákulisí jeho nejnovějšího kryptografického projektu, kterým je spolupráce na hudebním videu s DJ Mix Master Mikem. Projekt se jmenuje Mob Recipe a zahrnuje vše od 3D skenování celého těla a snímání pohybu až po vytvoření virtuální sady v Cinema 4D a následné vyražení všeho jako NFT. Chcete-li vyzkoušet Recept Mob v celém rozsahu navštivte Jonathanovu stránku SuperRare.
PremiumBeat: Než se ponoříme do tvorby Mob Recipe , můžete všechny informovat o tom, o jaký projekt jde a o motivaci nápadu?
Jonathan Winbush: Jo, takže už pár měsíců dělám krypto umění, jen jsem si trochu namočil prsty na nohou a v minulosti jsem dělal spoustu projektů s Mix Master Mikem. Poté, co s ním mluvil o tom, co jsem dělal v prostoru NFT, řekl:„Ve skutečnosti bychom měli dát dohromady krypto umělecké album NFT se zvukem a obrazem dohromady.“ Takže to, co právě dělám, je, že pracuji na prvním singlu s Mix Master Mikem, dáme ho na SuperRare a bude to jako třicet až čtyřicet pět sekund videoklip s jeden z klipů z jeho nového alba, které vychází.
PB: Jsem si jistý, že spoustu lidí zajímá, jako pohybového grafika, jak jste se spojili s Mix Master Mike a začali dělat tyto spolupráce?
JW: Docela sranda, začalo to někdy v letech 2015-16, kdy jsem se začal dostávat do virtuální reality. Dělal jsem hodně výzkumu a vývoje, pohrával jsem si s věcmi 360 VR. V té době jsme měli společného přítele, Tonyho Washingtona, dělal spoustu Mikeových ilustračních prací, protože Mike v té době vydával komiks. Tony nás vlastně představil. Mike vždy myslel dopředu a vždy rád fušuje do nových technologií. A chtěl vydat hudební video, ale nic tradičního. Tony mu řekl, na čem jsem pracoval ve 360 VR, takže se to tak nějak spojilo. Poslal jsem mu pár věcí, na kterých jsem pracoval, a zbytek je historie.
PB: Jeden z obrázků, které jste sdíleli, byla fotka Mika v místnosti plné fotoaparátů. Předpokládám, že je to pro 3D skenování. Můžete nám to trochu přiblížit?
JW: Ano, obrázek, o kterém mluvíte, je od této společnosti s názvem The Scan Truck. S tímto konceptem přišli před pár lety. Mnohokrát, když chcete 3D skenovat předměty nebo lidi, musíte jít do zvukové scény, která je pro to stavěna. A tihle kluci skutečně postavili tu zvukovou kulisu uvnitř mobilního náklaďáku. Říkají tomu „Skenovací kamion“, protože ho skutečně mohou vzít kamkoli. Nacházejí se zde v jižní Kalifornii, ale mohou s ním jezdit kamkoli – pokud natáčíte film nebo pracujete na videohře.
Herci přijedou k náklaďáku, dostanou kompletní 3D sken, takže vše je fotorealistické. Dostávají přesnou 3D repliku kohokoli, koho skenují. Poté vezmou tento 3D model a použijí jej pro VFX ve filmech nebo videohrách. V našem případě jsme jim to pomáhali testovat a byli jsme úplně první, kdo tam šel a dělal nějakou fotogrammetrickou práci. Dali nám 3D sken Mikea a mě, a to je spousta věcí, které tam vidíte.
PB: Jak velké vyčištění 3D modelu bylo po skenování potřeba?
JW: Každá z těchto kamer snímá jiný úhel Mikea a trochu se překrývá, abyste získali obraz v co nejvyšším rozlišení. Už si nepamatuji specifikace, ale model se vrátil extrémně těžký. Takže musíte zdecimovat některé polygony a vyhlazovat je, jen aby to bylo funkční. Udělal jsem to pomocí Cinema 4D. A v podstatě používám pouze model hlavy z jeho skenu, protože jsem jeho tělo ve skutečnosti vytvořil jako kybernetickou postavu.
Jeho paže jsou zcela mechanické a visí z nich dráty. Trochu jsem čerpal inspiraci z biohackerů. Ve skutečnosti vezmou mikročipy a vloží si je do kůže – snaží se ze sebe udělat kyborgy a přimět své tělo ovládat různé mechanické věci a podobně. Takže jsem si myslel, že to bylo skvělé pro nějakou inspiraci, jediná část, která je skutečně lidská, je jeho vršek, od krku nahoru. Takže to je ta fotogrammetrická část, kterou používáme, a zbytek jeho těla je kompletně 3D modelován.
PB: A pak, pokud jde o animaci, předpokládám, že tam přichází do hry oblek pro snímání pohybu?
JW: Jo, pro snímání pohybu ve skutečnosti používám oblek Rokoko, což je cenově dostupné řešení snímání pohybu pro nezávislé umělce. Jsem si jistý, že jste viděli zákulisí lidí se spandexovými obleky, kteří mají všechny ty koule a běhají po zvukové scéně. Nyní, v roce 2021, můžeme skutečně mít ty schopnosti, které můžeme dělat v našem domě.
Oblek Rokoko může skutečně fungovat přes Wi-Fi nebo Bluetooth a má všechny senzory uvnitř teplákové soupravy. Takže jsem mohl vzít svůj oblek do Mikova studia a on si ho oblékl a předvedl plné vystoupení. Tímto způsobem jsem byl vlastně schopen zachytit celou jeho podstatu, všechny jeho pohyby rukou a pohyby jeho těla. A pak vše exportovat do souboru FBX, který bych mohl skutečně přenést a připojit k modelu.
(Pokud byste se chtěli dozvědět více o Rokoko motion capture obleku, který Jonathan používal, podívejte se na Toddův příspěvek na téma Jak začít s Motion Capture.)
PB: Poté, co získáte pohyby z obleku, jak obtížné je namontovat je na 3D model?
JW: Dělám spoustu tutoriálů o různých technikách, které jsem vymyslel, jako je použití snímání pohybu s Adobe Mixamo a Cinema 4D Character Definition. Takže už jsem si zvykl na to, co jsem chtěl dělat. A pro tento konkrétní projekt jsem vzal Mikeova data zachycení pohybu, provedl jsem malé vyčištění v Rokoko Studio a pak jsem jen exportoval z FBX, který používám Mixamo k úpravě 3D modelu.
Pokud máte model a T-pose, můžete je skutečně nahrát do Adobe Mixamo. A pak udělám automatickou soupravu, ve které se kostra položí na model automaticky. Pak to můžete přenést do Cinema 4D a jednoduše zarovnat spoje a všechno. Vlastně na to mám návod. Tento proces trvá deset až patnáct minut a vůbec to není tak obtížné.
PB: Co bylo inspirací a procesem budování futuristického DJ setu v Cinema 4D?
JW: U tohoto konkrétního projektu jsem chtěl, aby prostředí mělo také příběh, který by mohl vyprávět vedle Mikea. Tak jsem trochu kopal a líbil se mi ten Blade Runner typ prostředí – futuristické, ale přesto známé. Takže typ místa, kam jsem ho umístil, byl možná v jednu chvíli jako muzeum, ale nebylo tam obydleno už sto let. Takže je to trochu zchátralé. Možná přišli nějací lidé a vydrancovali to, a teď je to doupě pro bio-hackery, aby tam vstoupili a dělali své experimenty.
Je to trochu známé, ale protože je to tak daleko do budoucnosti a opotřebované, tak se na to zapomnělo. Myslel jsem, že by to bylo skvělé prostředí, do kterého vložit tohoto bioinženýrského Mikea. Oblast, o které nikdo přesně neví, kde se nachází. Takže jsem vykreslil osm různých úhlů kamery. Některé úhly vypadají jako sledovací kamery, jako by byl téměř špehován ve svém tajném doupěti. Jde mi především o budoucí technologie a Mike také. To je důvod, proč jsem si říkal:"Měli bychom udělat něco opravdu skvělého, ale ne jít naplno do cyber-punku," protože to je tak trochu hrané.
(Chcete se dozvědět více o Cinema 4D? Podívejte se na tipy PremiumBeat pro výuku Cinema 4D.)
PB: Můžete vysvětlit více o tom, co je Unreal Engine a jak funguje s Cinema 4D?
JW: U tohoto konkrétního projektu jsem prošel mentalitou toho, jak by se k tomu postavil herní programátor nebo herní vývojář. To, co dělají, se často nazývá „šedý box“. Svou úroveň si vybudují buď v Maye, nebo v mém případě v Cinema 4D. A všechno je to jen geometrie – žádné texturování nebo tak něco. Získáváte tak rozvržení, jak chcete, aby vaše struktury byly. Tuto strukturu mám zabudovanou v Cinema 4D a odtud ji exportuji do Unreal Engine, protože tam mám spoustu nástrojů, jako je knihovna Megascans, což je spousta různých textur a geometrie fotogrammetrie. A pak, Unreal Engine Marketplace má také spoustu skvělých věcí.
Chtěl bych do Unreal Engine vnést nezpracovanou geometrii a odtamtud mohu udělat texturu opravdu jemných detailů. Dělám vertex blend painting, kde mohu skutečně malovat na geometrii. Takže, pokud mám cihlovou zeď a chtěl jsem malovat v rozpadající se, můžu to prostě natřít. Mohu tam také jednoduše přetáhnout aktiva z Megascanů. Dělám to všechno v Unreal Engine, protože je to herní engine a jsou vytvořeny tak, aby běžely v reálném čase, takže na vykreslení není potřeba žádný čas. To, co vidíte, je to, co dostanete. To je hlavní důvod, proč používám Unreal Engine, protože je rychlý a je flexibilní.
PB: Jaký je proces, když spouštíte NFT, jako jeMob Recipe na SuperRare?
JW: Takže musíte vytvořit soubor .MPEG, a to bude formát videa, který nahrajete. Pak to musíte vložit do blockchainu a tam přichází na řadu SuperRare. Moje konkrétní peněženka se nazývá peněženka MetaMask a to je to, co zpracovává všechno moje Ethereum a věci tohoto druhu. Takže používám peněženku MetaMask, abych vzal tento kus a tokenizoval jej na blockchain. Odtud se dostane na SuperRare, což umožňuje komukoli, kdo má Ethereum, aby podal nabídku na SuperRare. Pak, pokud máte nabídku, se kterou jste spokojeni, přijmete ji a poté se Ethereum vrátí do vaší peněženky MetaMask a to je vaše transakce.
PB: Zmínil jste verzi remixu, jak funguje remix s projektem, jako je tento?
JW: Jo, takže výkon je úplně stejný, ale všechno jsem kompletně přerenderoval. A říkáme tomu „červená pilulka a modrá pilulka“, protože na té původní mělo GUI a UI a všechno tyto červené podtóny a prostředí je trochu teplé. Takže pro remix jsem vše znovu vyrenderoval s podobným modrým GUI a světla budou o něco chladnější – dá vám to úplně jinou atmosféru. Pak se Mike vrátil a skutečně zremixoval celý zvuk. Takže zvuk škrábání a všechno je stejné, ale přidal 808 bicích a basová linka je úplně jiná a intro je jiné. Takže to bude skoro jako úplně jiná trať.
Jonathan také poslal několik otázek PremiumBeat DJ Mix Master Mikeovi, aby slyšel o jeho zkušenostech s vytvářením Mob Recipe .
PremiumBeat: Představovali jste si někdy, že budete vystupovat v obleku pro snímání pohybu a jaké to bylo?
Mistr mixu Mike: Co mohu říci? Chci říct, je to jako zápas vytvořený v nebi pro tuto platformu. Ze světa VR do tohoto světa jsme vždy měli možnost odemknout všechny tyto nekonečné možnosti kreativity v rámci této platformy. Se zachycením pohybu jde všechno – nebe je limit. Mohu ukázat své škrábance. Mohl bych světu předvést, jaký jsem a jaké to je být akčním umělcem. To jsem já, akční umělec. Jak jsem řekl, toto je zápas vyrobený v nebi.
PB: Co je inspirací pro kombinaci hudby s novými technologiemi, jako je virtuální realita a NFT?
MMM: S touto platformou, světem NFT, světem virtuální reality, je to jako ultimátní platforma, která vám umožní porozumět tomu, o čem hudba je. Syrové emoce, provedení písně. A to je to, co chybí, když posloucháte oblíbené věci na Spotify nebo jen hudbu obecně. Používáte svou představivost. S touto věcí nemusíte používat svou představivost. Můžete to vidět a můžete to slyšet. Bylo to cítit. Jste zcela ponořeni do písně. To je krása těchto platforem.
PB: Jaké to bylo spolupracovat s Jonathanem na tolika projektech?
MMM: Krása mezi mnou a Jonathanovým vztahem je v tom, že máme rádi stejné věci. Pocházíme z hardcore hip-hopu. Od 80. do 90. let až do současnosti. Máme všechny ty znalosti a všechnu tu moudrost. Takže teď používáme všechny ty znalosti a moudrost a ty zkušenosti a přinášíme je do nového světa a tak trochu obrátíme k nim mileniály. Společně obracíme mileniály na všechny věci, které máme rádi. Obnovujeme to, co máme v hlavě. Všechny tyto věci se vytvářejí v našich hlavách. Bavíme se o tom pořád. Teď to svět konečně vidí a zažívá. Hodně rád Winbushovi.
Pokud se chcete dozvědět více o projektech Jonathana a Mix Mastera Mikea, podívejte se na WINBUSH na YouTube a mixmastermike.com. Podívejte se také na 360° VR prohlídku sady Mob Recipe .
Zajímají vás bezplatné skladby, které jsme použili k vytvoření tohoto videa? Poslechněte si je znovu:
- Hustlin’ od Harrisona Amera
- „Late Night Latte“ od Harrisona Amera
- Retro Chillhop od Mattijse Mullera
- „Constellation“ od Chill Chord
- „Smooth Moves“ od Reaktor Productions
- „Slunečná neděle“ od Vincenta Tonea