Треба було вирішувати питання, як вивести віртуальну зірку в реальність.
Завдання було непросте, розмістити повністю віртуальну співачку серед цілком реальних музикантів. В принципі, деякі напрацювання вже були - проекція на прозорий екран. Але крізь віртуальну співачку безсовісно просвічували живі музиканти, що геть-чисто вбивало всю ілюзію реальності.
Була застосована наступна схема, проектор залишили, а ось з екраном зробили кілька цікавих речей.
На сцену поставили прозорий екран, таким чином, що б в поле зору глядачів, що дивляться в цей екран, що не потрапляло ніяких яскравих або підсвічених предметів. Відразу за ним поставили напівпрозорий сферичний екран, на який і спроектували зображення віртуальної співачки.
Поки в залі було включено освітлення, на сцені стояло звичайне скло. Але як тільки згасло світло, перед глядачами утворилося якесь темне вікно в Віртуальний світ в якому з'явилася Богиня! (Ну, по крайней мере, шанувальники, які опинилися на цьому концерті думали саме так. Упевнений!)
Тепер, завдяки продуманому висвітлення, крізь проекції не просвічує реальні об'єкти, а сферичність екрану створювала ефект псевдооб'емності. Так що голограм на сцені ніколи не було - була звичайна плоска проекція, прикрашена деякими оптичними ефектами.
Треба додати, що на першому з серії концертів MikuPa взагалі не було ні прозорого екрану, ні проектора. Вони використовували просто велику плазмову панель, яку поставили між музикантами.
Виглядало це приблизно так:
Потім панель чи розбили, то чи залили водою, коротше, з тих чи інших причин, перейшли на технологію з проекторами.
Якщо порівнювати ці технології з боку глядачів в залі, то для них, однозначно, краще проекція, так як вони в повній мірі насолоджуються ефектами псевдо-обсягу. (Справедливості заради, треба сказати, що цей ефект помітний далеко не в усьому залі). А ось глядачі, що насолоджуються концертом на екрані, цих тонкощів не бачать. Зате промені від прожекторів проектора відразу кидаються в очі. Порівняємо Міку Хатсуне на плазмі (лівий скрін) і у вигляді проекції (правий)
Так чи інакше, на момент написання статті, основним способом візуалізації віртуальних співаків є саме проекція.
У деяких випадках режисери обходять вузькі моменти цієї технології (практично всі концерти Magical Mirai), а, іноді, сідають в калюжу всюди, де тільки можна (провальний Концерт в Кансай).
Але опис сучасних технологій буде неповним без згадки про метод доповненої реальності.
Як же створюються танці, які виконують Міку Хатсуне і інші вокалоід під час своїх виступів?
Зрозуміло, працює професійний хореограф, а потім?
Упевнений, що багато хто відразу згадали про програму MikuMikuDance і, звичайно ж, помилилися.
Проблема в тому, що для того, щоб створити танець вручну в цій програмі, знадобиться добре знання анатомії ( "кістки" в цій програмі не мають фізіологічних обмежень і їх можна крутити як завгодно), відмінне просторове мислення і дуже, дуже багато часу.
Давно вже MikuMikuDance дружить з сенсором захоплення рухів Kinnect, але, будь-хто, хто його використовував підтвердить, що захоплення відбувається дуже не точно, тонкі руху пальців не захоплюються і правити моушен (файл танцю для 3d моделі) доведеться не набагато менше, ніж його створювати з нуля .
Тому, починаючи з самого першого концерту, руху моделі не програмували, а захоплювали з живого професійного танцюриста за допомогою просунутої системою сенсорів.
Розглянемо процес на прикладі комплексу PERCEPTION NEURON.
На танцюриста одягається спеціальний костюм з 32-ма взаємопов'язаними датчиками. Датчики фіксують положення і рухи голови, шиї, плечей, грудей, талії, обох рук, пальців обох рук, ніг, великого пальця обох стоп.
Система може посилати дані на комп'ютер через порт USB, за допомогою Wi-Fi або писати дані прямо на флешку.
Дані обробляються програмою AXIS Neuron для їх коригування, виправлення можливих помилок і перетворення в більшість найпопулярніших форматів для управління і розробки 3-d моделей, в тому числі і для MikuMikuDance.
Але всі ці системи дозволяють записувати руху в файл і потім, обробивши на комп'ютері, використовувати в концерті або кліпі.
Концерт - живе дійство, Міку звертається до глядачів за заданою програмою і, як правило, все проходить більш-менш нормально. Але ось на злощасному концерті в Кансай, коли у Міку раптово пропав голос, організаторам вельми придалася б зворотний зв'язок
Але зовсім недавно, в мережу потрапив кліп, який пройшов зовсім непоміченим. Вірніше, Міку Хатсуне просто виступила в якості Ді Джея.
Насправді, це було випробування системи Li-VR, при якому проекція Міку управлялася живою людиною в реальному часі. В процесі шоу був збій звуку і жива реакція Міку була вельми до речі! Дивитися з 2:00.
Таким чином і в плані хореографії намічається прорив. Можливо, зовсім скоро, Міку або інші вокалоід (точніше ті, хто управляє голограмою-проекцією) спілкуватимуться з глядачами наживо і адекватно реагувати на непередбачені моменти в залі.
На жаль, все залежить від продюсерів концертів і їх зацікавленості.
P.S. Я згадав, що MMD в серйозних концертах не використовується. Але окремі концерти проводяться чисто під движком MMD і без супроводу живих музикантів. Кілька років тому була ціла серія концертів Hatsune Appearans.
Проте, популярність у цих концертів була дуже невелика і інформації про нові на даний момент немає.
228 плюсів 41 мінус
- Кращі зверху
- перші зверху
- Актуальні зверху
До чого техніка дійшла
