Дослідники з Лабораторії комп’ютерних досліджень і штучного інтелекту (CSAIL) при Массачусетському технологічному інституті (MIT) заявляють про створення технології, що дає можливість «доторкнутися» до об’єктів, які з’являються на екрані.
Насправді, відео не є інтерактивним носієм, однак новий дослідницький проект від групи вчених з MIT покликаний змінити цю ситуацію: в лабораторії CSAIL при інституті розробили технологію, завдяки якій глядач зможе протягнути руку і «доторкнутися» до об’єкта, присутнього на відео, а також маніпулювати таким об’єктом, досягаючи ефекту, подібного до того, якого ви досягаєте, торкаючись об’єктів з реального світу.
Це означає, що, використовуючи цю технологію при перегляді відео, на якому хтось грає на гітарі з можливістю збільшення масштабу так, щоб можна було чітко бачити гриф, ви зможете, використовуючи мишку, «посмикати» струни і побачити, як вони починають вібрувати – так, немов ви торкнулися їх в реальному житті. Також ви можете випробувати на міцність старий міст, застосувавши до нього віртуальні стрес-фактори, наприклад, імітацію вітру або проїзд вантажівки.
Принцип роботи нової моделі від CSAIL заснований на аналізі вібрацій, створюваних кожним об’єктом, зафіксованих шляхом проведення зйомок з використанням традиційної камери, а потім проаналізованих за допомогою алгоритмів, розроблених командою дослідників.
Аналіз даних коливань з використанням нової технології на основі відео конкретного об’єкта тривалістю всього в п’ять секунд дозволяє створити реалістичну передбачувану модель, яка може показати, яким способом даний об’єкт буде реагувати на інші рухи і додані до неї зусилля, а також імітувати дані реакції.
Зазвичай для того, щоб досягти подібного ефекту у відеоіграх та інших інтерактивних медіа потрібна побудова віртуальної моделі, що може стати дорогим, трудомістким і тривалим процесом. Крім того, є школа кіновиробництва Кролика Роджера, в якій віртуальні або анімовані персонажі взаємодіють з оточуючою їх реальністю. Нова технологія дозволяє легко змішувати реальні відео з продуктами комп’ютерної графіки.
В якості можливих областей для застосування даної нової технології з цікавими результатами в MIT називають, наприклад, гру Pokémon Go. Уявіть собі, що бульбазавр, якого ви намагаєтеся зловити, дійсно впливає на зарості чагарнику, з яких він щойно вийшов. А в блокбастерах дана технологія набагато полегшить візуальну демонстрацію того, як створені засобами комп’ютерної графіки прибульці сіють хаос в реальних містах Землі.
Поява нової технології з’явилася вчасно, піймавши хвилю інтересу (і інвестицій) до теми віртуальної і доповненої реальності. Найбільш важливо те, що дана технологія може значно здешевити створення безлічі інтерактивних проектів віртуальної реальності, що, в свою чергу, зможе простимулювати черговий раунд інтересу в сфері створення контенту. Зрештою, люди хочуть бачити щось, що доводить їм те, що розробки в сфері віртуальної реальності дійсно мають сенс. І новий проект CSAIL може дійсно показати, що віртуальна реальність стає все більш цікавим і двостороннім явищем.