Всередині американець велика ставка на розширену та віртуальну реальність

Amazon робить грандіозний вхід у розширений простір та віртуальної реальності за допомогою шумерської, всенаціональної платформи розвитку, яка може створювати додатки AR та VR для смартфонів і гарнітур, і - досить скоро - додатки AR / VR, які працюватимуть правильно у вашому браузері.

У рамках цього досвіду шумер може створити занурюючі віртуальні світи, заселені "хазяями" - 3D символами, втіленими в життя тим же техніком штучного інтелекту, що і Alexa.

Шумерський - платформно-агностичний. Замість того, щоб розробити власний фірмовий пристрій чи гарнітуру, Amazon вибрав інтеграцію з існуючими пропозиціями. Sumerian побудований на відкритих веб-стандартах і підтримує як ARKit Apple, так і Google ARCore, тобто творці додатків можуть створити одне шумерське додаток, яке працює на Android, iOS, Oculus Rift, HTC Vive та інших.

Як нове доповнення до веб-сервісів Amazon, Sumerian розцінюється за допомогою моделі на основі використання цього сервісу замість передплати і підключається до інших служб AWS.

Amazon випустив попередній перегляд шумерів у листопаді, коли він був вперше оголошений, але перед його очікуваним травневим запуском PCMag отримав ексклюзивний вигляд усередині шумерських та декількох ранніх програм для клієнтів.

Кайл Рош, генеральний директор Amaer Sumerian, провів мене через демонстрацію тривимірної платформи для створення додатків. Я ознайомився з редактором програм перетягування програм «Шумер» та бібліотекою 3D-об’єктів, його Visual State Machine для створення складних автоматизованих сцен, і зайшов у процес створення штучно інтелектуальних хостів, з якими можна вести повні розмови з цими віртуальними враженнями .

Я також розмовляв з Марко Аргенті, віце-прем'єр-міністр, який контролює не лише AR / VR, а й підрозділи AWS Mobile, без серверних обчислень та IoT. Амазонка має амбітні плани щодо шумерів, і навіть більш велике бачення розширеної ролі та віртуальної реальності в поєднанні з AI зіграє у нашому пов'язаному майбутньому.

• Чому Amazon робить ставку на AR / VR

  Проникнення в абсолютно нову галузь чи галузь ніколи раніше не зупиняло Amazon. Подивіться на Whole Foods, Amazon Video або його зусилля в галузі охорони здоров'я та фармацевтичної галузі.

  Рош пожартував, що ім'я шумерська походить від науково-фантастичної книги « Сніговий крах» (яку Амазонка насправді адаптує як серію) а ідея для "господарів" прийшла з Westworld HBO. Але, за словами Аргенті, рішення Amazon увійти в простір AR / VR насправді зводилося до трьох ключових факторів: поява розширеної реальності на базі смартфонів; невикористані можливості VR на ринку бізнес-бізнес (B2B); і допомагати клієнтам AWS вирішувати больові точки з тими, що вони вже намагалися зробити.

  "Ці сигнали були нам досить сильними, щоб насправді почати вступати в процес розробки шумерських. Класичним способом Amazon ми почали працювати назад від випадків використання клієнтів і потім врешті-решт фінансували команду з розробки продукту", - пояснив Аргенті.

  Додаток B2B включає такі сценарії, як інтерактивна цифрова вивіска (подумайте, як гігантські рекламні голограми від Blade Runner: 2049 ), віртуальне навчання та безліч промислових Інтернет речей використовують такі випадки, як використання датчиків для створення цифрових близнюків та складних моделювань. Аргенті також підкреслив важливість досягнення АР на базі смартфонів через точку перегину через ARKit та ARCore.

  "Камера стає дуже потужним інструментом взаємодії з реальністю та вивчення світу навколо вас", - сказав він. "Швидкі графічні процесори можуть накладати інформацію в режимі реального часу, а датчики можуть допомогти побудувати 3D-реальність. Ідея полягає в тому, що у вас в руках мільйони людей є якісний сенсорний сенсор високої чіткості."



Як Амазонка побудувала шумерські

Amazon почав думати про те, як виглядатимуть AR та VR для клієнтів AWS наприкінці 2016 року, а попередній перегляд дебютував на AWS re: Винайдіть приблизно через рік. Між ними трапилось кілька речей.

По-перше, Amazon придбав банкрут шведського стартапу під назвою Goo Technologies; його середовище створення 3D Goo Goo стало основою інтегрованого середовища розвитку шумерів (IDE).

Візуальне 3D-моделювання Goo Create також було хмарним сервісом на базі веб-сайтів, але Amazon зробила це на крок далі, перемістивши бек-енд на AWS. Існує велика кількість переваг для побудови на основі масштабованої хмарної інфраструктури, якою ви вже володієте, але велика - це різко скоротити затримки. Рош сказав, що однією з найбільших точок продажу в Шумері є те, що незважаючи на те, наскільки потужний редактор, завантажувати та встановлювати нічого немає. Під час демонстрації шумерів завантажували з URL-адреси браузера за лічені секунди. Навіть обробка природних мов у режимі реального часу (NLP) та надання складної анімації не дуже сповільнили її.

Як і у випадку з платформами з низьким кодом, Sumerian може використовуватися на базовому рівні майже без досвіду розробника. Однак, кодери та вчені з даними можуть значно глибше за допомогою програмованих API та інтерфейсу командного рядка Шумерія налаштувати сцени та записати складну логіку програми.

"Ми хочемо отримати досвід, коли ти натиснеш, і ти відразу опинишся в сцені", - сказав Аргенті. "Тоді у вас є інструменти 3D-графіки, куди можна перетягувати і викидати об'єкти. Шумер - це візуальний інструмент, який може асоціювати те, що відбувається, коли відбуваються дії чи події, потенційно без написання рядка коду."



Створення 3D-шумерських програм

Більш широка філософія дизайну, яку Amazon дотримується разом із шумерською, полягає в максимальному закріпленні досвіду створення. Рош сказав, що ідея полягає у маскуванні багатьох завдань, що повторюються, тому основний процес створення шумерського додатку той самий, незалежно від платформ AR та VR, на яких ви його остаточно публікуєте.

Починається з вибору шаблону або з переходу прямо на створення нової сцени. Деякі шаблони за замовчуванням шумерів включають такі сцени, як офісні приміщення, навчальні кімнати та склади, вантажне судно та відкритий багаття. Головний редактор підтримує WebGL та WebVR, і він викладений так само, як і багато інструментів із низьким кодом, які ми перевірили.

Зліва - панель сутностей. Суб'єкт по суті - це таблиця в базі даних, яка допомагає вам керувати даними, що потрапляють у ваш додаток. Нижче - це вікно активів, де ви можете шукати об’єкти, які ви хочете витягнути на сцену, або відкрити повну бібліотеку активів для всіх 3D-моделей шумерів. Рош заявив, що шумерський охоплює ряд об'єктних бібліотек з відкритим кодом та інтегрується з API Sketchfab. Amazon також зацікавлений у інтеграції з такими платформами, як TurboSquid та Google-об'єктна бібліотека Poly AR / VR, сказав він. Ви також можете імпортувати власні активи в шумерські і викидати їх на сцену.

"Панель активів може служити зоною падіння для трубопроводу з налагодженням", - пояснив Рош. "Ви можете перетягнути найпоширеніші формати 3D-файлів; ми перетворимо їх, оптимізуємо їх і збережемо для вас. Одне з речей, які ми робимо на задньому плані - це якщо ви використовуєте один і той же актив у кількох сценах, "Я фактично створять посилання для вас."

Посередині екрану - головне полотно, де можна перетягувати активи та 3D-моделі на сцену. У куті полотна розміщена кнопка для запуску WebVR-попереднього перегляду вашої сцени.

Нижче - редактор часової шкали, який працює аналогічно інструментам редагування відео. Коли ви втягуєте анімації та звуки в кадри та використовуєте машину Visual State Machine для створення дій, поведінки хостів та прогресій подій, все це відображатиметься на часовій шкалі, де ви можете налаштувати перехід одного стану в інший.

Правий стовпець - це панель інспекторів, яка показує деталі будь-яких компонентів, які ви переглядаєте, і як їх можна налаштувати. Для моделі, яка має, можливо, сто різних варіацій, ви можете налаштувати такі речі, як атрибути та текстури, не торкаючись насправді сцени.



Стратегія Амазонки: інтегруватися з усіма

Sumerian грає не тільки в просторі розробки 3D з такими платформами, як Unity, Unreal Engine і Vuforia, але і в більш широкій екосистемі AR / VR разом з ARKit, ARCore та Windows Mixed Reality. Рош заявив, що шумерський застосовує філософію "побудувати один раз, запустити куди завгодно" до програм AR / VR і особливо для розробників підприємств.

"Розробники Pro 3D або аніматори мають студію, яка працює з ними. Але більшість розробників в Інтернеті чи мобільних програмах навчаються чомусь на зразок Unity", - сказав Рош. "Єдність - це чудово, але бути справді хорошим у цьому набагато складніше, ніж це здобути навички, які вони мають - як, якщо вони хороші в JavaScript - і таким чином полегшити їх у 3D. Тому ми вирішили зосередитись на цьому частина ринку ».

Sumerian підтримує декілька основних відкритих стандартів: WebGL, WebAR, WebVR та майбутній фреймворк WebXR, який принесе програми AR / VR на всі пристрої та браузери на різних платформах. Всесвітній веб-консорціум (W3C) проголосує за ратифікацію WebXR у найближчі місяці. З цього часу шумерські програми зможуть запускатися безпосередньо в браузерах.

Між WebGL, WebVR та WebXR Sumerian є повністю платформою, а шумерські опубліковані власні обгортки, щоб безпосередньо інтегруватися з ARKit та ARCore для AR-додатків на основі смартфонів. Рош заявив, що Sumerian може створювати додатки для будь-якої платформи, яка підтримує WebVR, маючи на увазі не лише Oculus Rift та HTC Vive, а й Samsung Gear VR, Google Daydream View та інші. Sumerian також тісно співпрацює з командою Google Chrome на WebXR для браузерних додатків.

Інший головний гравець в кімнаті - Microsoft. Хоча Amazon не пішов так далеко, щоб сказати, що шумерський інтегруватиметься з екосистемою змішаної реальності Windows, Рош заявив, що останній реліз RS4 Microsoft HoloLens включає підтримку WebAR, що означає, що шумер може запускати сцени HoloLens. Amazon також переглядає інші гарнітури від таких компаній, як Magic Leap та Meta, але його підхід надає шумеру перевагу гнучкості.

"Ми зробили вибір. Ми могли піти шляхом створення власної фірмової речі та підштовхувати розробників до цього", - сказав Аргенті. "Що ми вирішили замість цього - бути максимально широким, підтримуючи те, що, на нашу думку, буде масовим ринком. Як тільки все перейде до WebXR, вся екосистема пристрою приходить разом із цим. Ми йдемо за основу".

• AI-господарі шумерів - це гра, що змінюється

  Хости - одна з найбільш унікальних торгових точок Шумеру. Хост - це 3D-анімований персонаж, який можна розмістити на сцені AR або VR. Користувачі можуть задавати питання господарям, а розробники можуть складати складний набір дій, поведінки, жестів та рухів, які може виконувати господар, коли він веде розмови та ходить по сценах. Амазонка черпала натхнення для господарів у будь-яких місцях, включаючи онлайн-ігри на кшталт Second Life та The Sims, сказав Рош.

  Наразі в шумері є два хости за замовчуванням - Крістін та Престон, але вони запустить цілу серію хостів протягом цього року. Amazon вбудував багато нюансів у ці символи AI. Рош показав мені демонстрацію Крістін, де він затягнув господаря на сцену, і відкрив панель інспектора, щоб налаштувати її емоції, міміку та жести. Amazon автоматично генерує жести під час переговорів з господарем, заснованим на природній мовній обробці розмови. Отже, якщо Крістін каже «Привіт», це може викликати махаючи рухом.

  Якщо ви називаєте систему цікавих точок, ви можете встановити прапорець у редакторі, щоб очі господаря завжди звертали увагу на камеру. Тож якщо ви носите HTC Vive Pro, прогулюючись навколо 360-градусного простору, господар може піти за вами. Якщо це програма AR, підключена до камери вашого смартфона, Рош пояснив, що система глибокого навчання Amazon Rekogservation може провести аналіз обличчя як там, де ви знаходитесь, так і там, де ваше обличчя знаходиться в кадрі, щоб зробити так, що господар повертається назад через ваш екран безпосередньо у вас. Це дає вам ілюзію очного контакту.

  Клієнти також можуть створювати власні власні хости з нуля, використовуючи майя SDK Amazon, але Amazon надає основний каркас, за допомогою якого ви можете налаштувати зовнішній вигляд, діалект та переклади, мову та інше. В довгостроковій перспективі Amazon роздумує над способами, як спростити створення хостів. Аргенті розповів про ідею створення генератора хостів для аватарів від першої особи або про використання розпізнавання обличчя, щоб відповідати наданим персонажам реальним людям.

  "У поєднанні з Rekognation, якщо ми процедурно генеруємо якомога більше цих символів, ми можемо спробувати зрівняти вас з найближчим аватаром. Ми зробимо вашу фотографію та запустимо зворотне розпізнавання обличчя та співставимо його з випадковим символом, щоб дати вам хост, схожий на вашу версію ".

  Аргенті пояснив, як інтеграція інших служб AWS, як-от послуга обробки природних мов Amazon Comprehend, може зробити хостів ще більш реальними. Зробити аналіз тексту, щоб витягнути метадані на такі речі, як аналіз настрою та настроїв. Тож господар може мати різний вираз обличчя чи манеру чи висловлювання залежно від настрою людини, з якою спілкується.

  "Якщо вони сердяться, можливо, господар заспокоює їх", - сказав Аргенті. "Існує еволюція не лише в тому, як ми передаємо інформацію, але і в тому, як ми її представляємо, за допомогою глибокого аналізу настроїв".



Потяг за голосовими послугами позаду Alexa

Господарі не дуже хороші, якщо вони не вміють говорити. Ви не можете сказати "Hey Alexa" в шумерському додатку так само, як ви можете активувати Cortana в Windows Mixed Reality. Натомість Amazon використовує автоматичне розпізнавання мовлення та API розуміння природних мов позаду Alexa, щоб хазяї могли спілкуватися.

Шумерський інтегрований з Amazon Lex та Amazon Polly. Поллі - це послуга з текстовим мовленням, яка перетворює текст у сценарії, якими може говорити хост. Lex - це двигун NLP для побудови розмовних інтерфейсів, завдяки чому хости можуть зрозуміти та відповісти на те, що говорять користувачі в додатку AR або VR. Наразі Sumerian підтримує понад два десятки мов через Polly, і є функція синхронізації губ, яка буде відповідати рухам рота господаря до каденції мови чи мови.

"Голос - це середовище, яка справді має сенс, поки ви занурені в AR або VR", - сказав Аргенті. "Я хочу поговорити з персонажем, якщо я можу побачити, що він стоїть там. Тому ми зібрали два з цих інструментів з групи AI і спробували реально їх уособлювати. Ми хочемо, щоб сцена могла слухати і відповідати на нас". ви можете взяти цілий потік Lex так, як ви хотіли б для чат-бота, і просто перетягнути його на персонажа. Багато способів це насправді простіше, ніж будувати вміння Alexa. "



Логіка сценаріїв у занурених світах

Візуальна державна машина Sumerian - це місце, де можна викласти складні послідовності та віртуальне моделювання. Використовуючи візуальний редактор часової шкали або повний інтерфейс JavaScript, творці програм та розробники можуть сценарій логіки, керуючи тим, як хости або інші об'єкти у ваших сценах реагують на різні дії. Наприклад, Шумер включає об'єкт, що летить безпілотника, який ви можете сценарію пролітати навколо.

Це все ускладнюється, коли ви вводите в рівняння об’єкти реального світу. Оскільки Аргенті також здійснює нагляд за підрозділами обчислень без сервера та підрозділами IoT на AWS, він розповів про те, як підключення шумерів до таких служб AWS, як Lambda та Greengrass, може відкрити більше можливостей для складних моделей. Greengrass - це спосіб машинного навчання моделей роботи локально на пристроях IoT. Подумайте про навчання моделі ML на даних, отриманих від машини на заводській підлозі, а потім перетягніть цей алгоритм в шумерський, щоб імітувати ту саму машину за допомогою AI.

"Дійсно може бути модельований світ в AR та VR, де кожен персонаж або об'єкт розумні від машинного навчання в реальному світі", - сказав Аргенті. "Зрештою, ви хочете спробувати відновити реальність максимально реалістичним способом. Сьогодні ми можемо наблизитись, але це ще не зовсім з поведінкової точки зору, щоб імітувати, як все насправді працює".



Симулятор метеоролога Weatherbug

Коли Amazon провів мене через кілька демонстрацій клієнтів шумерських, я спочатку був здивований, коли першим був додаток погоди.

Але, як пояснив генеральний директор WeatherBug Олів'є Вінсент, віртуальна реальність має набагато більше сенсу для погодних даних, ніж ви могли б подумати. Оскільки люди почали перевіряти свою погоду в додатках на відміну від перегляду прогнозів по телевізору, Вінсент заявив, що звіти про погоду втратили один із найкращих дотиків: ваш місцевий синоптик перед зеленим екраном.

"Погода - це розповісти про те, що відбувається в даний момент у певному місці. Ви можете зробити це у приємному двовимірному режимі у вашому додатку для швидкого огляду, але ми знали, наскільки популярні погодники та жінки протягом багатьох років". - сказав Вінсент. "Отже, ідея полягає в тому, щоб знову представити цю людину погоди в рамках більш глибокого досвіду роботи в додатку".

WeatherBug побудував на шумерській сцені віртуальну студію новин із якірним столом та зеленими екранами, а метеоролог запросив господаря Амазонки за замовчуванням. Додаток отримує поточні дані про погоду для вашого місцезнаходження, які потім господар буде читати вам назад у рамках персоналізованого прогнозу погоди. З головного додатку WeatherBug Вінсент запустив програму перегляду VR, яка збільшувала 3D-модель на Манхеттені, оскільки Крістін давав прогноз у комплекті з високими та низькими температурами та падаючими сніжинками.



Аддісон, віртуальний вихователь

Технологічна компанія «Меніджмент охорони здоров’я», заснована в Нью-Мексико, мала багато іншого шумерського досвіду.

Компанія пропонує технології для людей похилого віку, як носіння, за допомогою кнопки медичної допомоги, але вона також розробила рішення, яке називається Addision Care, яке скорочує витрати на догляд в домашніх умовах та використовує розмовний ШІ для оцінки ризиків падінь літніх пацієнтів. Компанія випускає кіоск для аптек, лікарень та лікарів, які аналізують ходу пацієнта за допомогою машинного навчання. Програмне забезпечення також використовує Addison, призначений для шумерів хост, для перегляду користувачів через усну анкету про їхню історію падіння.

"Домогтися того, щоб люди похилого віку засвоїли технологію, не так просто", - заявив CTO з електронного вихователя Брайан Часько. "У міру того, як покращується, голосові технології залучатимуть цей ринок. Ви ніколи не змусите їх сісти перед клавіатурою та мишкою, але з Аддісоном вони можуть просто поговорити".

Електронний доглядач роками працює над Аддісоном, розробляючи 3D-персонаж за допомогою Amazon Lex та Polly. Компанія є одним із замовників AWS, які допомогли Amazon осмислити больові точки, які вона може вирішити за допомогою шумерських та як автоматизувати трубопровід створення AR / VR.

Джуда Твейто, віртуальний розробник електронного догляду, заявив, що шумері взяли процеси, над якими працювали місяцями, і перетворили це на кілька кліків. Компанія також працює над мобільним додатком Addison.

Зрештою, електронний доглядач передбачає Аддісона як домашнього віртуального доглядача, сказав Часько. Для літніх користувачів, які живуть самостійно, ШІ може робити такі речі, як нагадати їм приймати ліки або автоматично телефонувати на номер 911, якщо трапляється падіння чи інша медична допомога.

"Одне з найбільших проблем, з яким ми можемо вирішити цю проблему, - це ізоляція, яку відчувають люди похилого віку, коли живуть наодинці", - сказав Часько. "Ми дуже хочемо мати постійне домашнє середовище цілодобово, коли, коли ти не розмовляєш з Аддісоном, ти знаходишся у ванній кімнаті і падаєш, просто можеш кричати:" Мені потрібна допомога ", можна врятувати багато життів . "



Виробники грошей: B2B та IoT

Amazon багато говорив про те, як шумерські програми могли жити в інтерактивних цифрових вивісках. Уявіть, що хтось проходить через вестибюль готелю, торговий центр чи стадіон і бачить господаря, що йде поруч із ними на екран. Це може здатися моторошним, але хости можуть також обробити контекстну інформацію, наприклад місцеположення, щоб перетворити рекламу в персональну розмову. Аргенті розглядає хостів як віртуальні розширення бренду компанії, які можуть змінюватися відповідно до того, що потрібно бізнесу.

"Якщо ви розміщуєте ці програми десь камерою, ви можете уявити, як 3D-персонаж взаємодіє з вами особисто. Знаючи, хто ви, можливо, востаннє ви були в місці, або навіть останнє, що ви замовили", - сказав Аргенті.

"Круїзний корабель - хороший приклад. Господар може сказати:" Ей, виходячи з того, де ви зараз перебуваєте на судні, ваше бронювання за 20 хвилин, ви не збираєтеся робити це. Ви хочете, щоб я відсунув його назад 15 хвилин? Існує також візуальний аспект досвіду, який ви створюєте наново. Ведучий, який розмовляє з вами про подорожі, виглядатиме по-різному, ніж той, хто розмовляє з вами про ваші фінансові стратегії. Додавання інформації про місцезнаходження може змінити символи залежно від місця вони знаходять себе; те, як вони одягаються, і те, як вони рухаються, перегини у них ".

Amazon вивчає низку програм B2B та IoT для шумерських клієнтів. Що стосується промислового фронту, Аргенті сказав, що Nokia створила систему з датчиками та візуалізаціями для моніторингу навколишнього середовища всередині контейнерів для транспортування для вимірювання таких речей, як температура в приміщенні та поглинання ударів, фактично не відкриваючи їх.

"Ви можете уявити собі світ АР, де ми підключаємо мільйони пристроїв до AWS та отримуємо безліч сенсорних даних, що надходять із реального світу", - сказав він. "Тоді ми можемо використовувати AR з тріангуляцією для ідентифікації об'єкта та відображення відповідної інформації поверх нього. Існує величезна застосовність у всьому, що варіюється від обслуговування та ремонту до моніторингу, безпеки тощо".

Існують також широкі можливості електронної комерції, коли ви працюєте з віртуальними активами. Будь-яка 3D-модель в шумерії, яка надходить із власного каталогу покупок Amazon, може заробити плату за реферали розробника, якщо додати її до сцени AR / VR. Це спосіб і підприємствам, і малому бізнесу, і незалежним розробникам на AWS монетизувати свої шумерські програми.

Аргенті передбачає безліч схрещувальних можливостей між відділами роздрібної торгівлі Шумеру та Амазонки.

"Ми можемо вирішити частину роботи, яку наша команда роздрібної торгівлі виконує вдома, домашній електроніці та інших високоцінних предметах для створення 3D-моделей", - сказав він. "Тоді ви можете використовувати їх для фотореалістичного проходу простору. Як мені створити сучасний горище? Які меблі ми організовуємо?"



Все повертається до AWS

Побудова мостів до всіх пристроїв та платформ AR / VR є розумним способом знизити перешкоду для входу в розвиток AR / VR, не тільки для B2B-компаній, але й розробників. У той же час, найбільш переконливий стимул для бізнесу, що стоїть за шумером, є інструментом для широкого використання AWS. Це справедливо як для існуючих клієнтів, які випробовують нову послугу, так і для нових шумерських користувачів, які потім починають користуватися послугами зберігання, обчисленнями, обробкою, AI та іншими послугами Amazon, оскільки всі вони інтегровані в цей досвід. Модель ціноутворення також приваблива, тому що Amazon не стягує плати за передоплату. AWS стягує плату лише за те, що ви використовуєте.

Це все є частиною того, що Amazon бачить як більший цикл, де все протікає через AWS. Дані надходять із пристрою IoT, обробляються функцією AWS Lambda, розгортаються на AWS Greengrass, щоб дістатися до AWS IoT, де він тренує модуль машинного навчання, і в кінцевому підсумку потрапляє як 3D-модель у візуалізацію AR на шумерії.



Бачення Amazon для нашого майбутнього AR / VR

Амазонка сподівається, що шумери можуть зіграти певну роль у стимулюванні цієї галузі у виробництві продуктів масового ринку 3D та зменшенні витрат. Стосовно AR, Аргенті заявив, що основні можливості є завдяки ARKit та ARCore. Він сказав, що підказка настане, коли розробників вистачить на додаток та відеовміст. Що стосується VR, то великі зміни, на які сподіваються побачити Amazon, полягають у тому, що апаратне забезпечення знижується в ціні, стає менш незграбним в зносі та стає бездротовим.

"Коли це станеться, і ви можете носити досвід VR, як пару окулярів, VR дійсно зніметься", - сказав Аргенті. "Я думаю, що це повинно бути таким же природним, як перегляд відео на планшеті або включення телевізора, перш ніж воно буде готове до споживання в основному на тому ж рівні, що й інші екрани, які ми маємо сьогодні. Як ви це робите, розробляйте навколо себе цілу екосистему для творців контенту, рекламодавців, кінцевих користувачів та компаній, які обслуговують цих користувачів ».

Аргенті також підкреслив важливість зануреності у досвід віртуальної та змішаної реальності. Ще один із випадків цільового використання Amazon для шумерських додатків - це освіта та навчання. Незалежно від того, чи ви навчитеся користуватися медичним приладом, обслуговувати транспортний засіб чи вивчати нову мову, він сказав, що це стосується того, щоб ви потрапили в оточення, яке почувається максимально візуально, як реальний світ.

"Ви можете сісти у французьке бістро і вивчити мову, фактично не перебуваючи там", - сказав він. «Аватари господаря розмовляють з вами французькою мовою. Меню французькою мовою. І тоді в межах цієї реальності ви можете автоматично торкнутися меню і побачити його переклад, провівши пальцем у верхній частині елемента, щоб побачити, як слова змінюються на іншу мову. Так багато освіти є контекстуальною, і тому як інструмент навчання, досвід роботи залучає всі ваші почуття ».