Будинки Appscout Швидкий перемотка вперед: thad starner розмовляє google glass, допомагаючи собакам розмовляти

Швидкий перемотка вперед: thad starner розмовляє google glass, допомагаючи собакам розмовляти

Відео: My Custom Google Glass - 1000-ish Subscriber Special! (Вересень 2024)

Відео: My Custom Google Glass - 1000-ish Subscriber Special! (Вересень 2024)
Anonim

Минулого місяця я був в Остіні, Техас, на SXSW Interactive, де мені випала можливість сісти з кількома виконавцями технічної галузі за мою відеосерію Fast Forward, включаючи Кріса Бехерера, віце-президента з продукту Pandora.

У цьому випуску Fast Forward ми розмовляємо з Тадом Старнером, професором обчислювальної техніки Georgia Tech. Тад був технічним керівником проекту, який врешті-решт привів світ до Google Glass, який він носив під час нашого чату. Але він знаходився в ношальному просторі набагато довше за це, і його робота зосереджена на самій природі інтерфейсу людина-машина. Його найновіша робота передбачає створення носіїв для читання розуму для собак. Перегляньте наш чат у відео та стенограмі нижче.

Ден Коста: Це зайнятий SXSW. Про розширену реальність багато говорять. Тут багато розмов про віртуальну реальність. Носіння досі дуже гаряча тема. Коли більшість людей думає про зношені речі, вони думають про Google Glass або про Fitbit, який ви носите на зап'ясті, щоб відстежувати свої кроки. Коли ви думаєте про зношені речі, що ви думаєте?

Тад Старнер: Ну, для мене це будь-який комп’ютер, будь-який пристрій, що носиться на тілі, який допомагає тобі, коли ти робиш якесь інше, головне завдання. Це будь-який комп’ютер, одягнений на тілі, призначений для другорядного використання. Це допомагає вам у вирішенні інших основних завдань, як-от відповіді на запитання під час співбесіди.

Мої нотатки є на моєму iPad mini. Мені потрібно продовжувати дивитись, щоб отримати останні нотатки та щоб виправити свою назву. Ви маєте це право в собі.

Так. Все, що мені потрібно зробити - це поглянути вгору, схопити пару слів і повернутися прямо до розмови. Мої старі системи, я не знаю, чи ви переглядали деякі мої старіші фотографії, але тут були відображені мої старі системи. Власне кажучи, був такий із 1997 року, де він навіть був у об’єктиві. Це зробила компанія на той час під назвою Micro Optical. Це насправді дозволяє вам бути дуже чудовим з розумним помічником, який може допомогти вам з другої секунди. Це дійсно змінює вашу впевненість і змінює вашу здатність робити речі на ходу, про які ви, звичайно, можете натрапити.

Ви були одним із оригінальних екіпажів. Здається, що ви, хлопці, майже змагалися, щоб побачити, хто міг би створити найкрутішу, найскладнішу, найфункціональнішу носну систему.

Я почав створювати свою систему ще в 1990 році, але не вдавався знову і знову. Тільки до '93 року я нарешті мав систему, яку я міг носити у своєму повсякденному житті. У той час я працював у компанії під назвою BBN. Вони допомогли зробити перші маршрутизатори для Інтернету. Після того, як я ввімкнув пристрій, через місяць зрозумів, що це не просто хороші дослідження. Це був вдалий спосіб життя.

Ось про що ці пристрої. Це створює вбивчий спосіб життя для вас. Звичайно, тоді у мене було з'єднання мобільного телефону для Інтернету, яке вимірювалося в футах, а не в швидкості передачі. Іншими словами, скільки футів я міг пройти, перш ніж впав аналоговий дзвінок стільникового телефону, і мені довелося повторно набрати з'єднання?

Врешті-решт я повернувся до лабораторії MIT Media і почав набирати все більше і більше студентів, які були зацікавлені в цьому. У нас було трохи конвою людей, які виготовляли пристрої для своїх особливих потреб, і ми придумали, як жити як громада кіборгів. Це змінило те, що ми думали про технологію. Наведу приклад: припустимо, ви приїжджаєте як VIP в гості до лабораторії. У нас буде одна людина, яка поговорить з вами про те, які ваші інтереси. Поки це відбувається, між очними яблуками інших членів групи з'являтимуться повідомлення, які намагаються спланувати свій день. "О, його дуже цікавлять посилені почуття. Тож ви берете його на обід. Мені потрібно йти на прийом до лікаря о третій, тож я отримаю його в два". Таким чином, у вас ці люди набирають клавіатури, надсилаючи повідомлення один одному, тоді як розмова ведеться, намагаючись запланувати день, виходячи з ваших інтересів. Це свого роду потрапляє до стадії телепатії.

Дуже багато разів це звучить як Slack, де ми маємо спілкування в реальному часі та різні сегменти формуються. Але замість того, щоб зробити його на базі терміналу і зробити його підключеним до комп'ютера, де ви повинні бути перед своїм ноутбуком чи телефоном, це де б ви не знаходилися. Ви можете робити дві речі одночасно. Ви можете вести цю розмову і запланувати обід.

Ну, ні, ви не хочете цього робити. Коли ви намагаєтесь це зробити, ваш IQ знижується на 40 балів. Що ви хочете зробити, це зробити так, щоб комп'ютер підтримував розмову. Наприклад, у нас є система під назвою «Агент пам’яті», яка має невеликий мікрофон, що зменшує шум, слухає мою сторону розмови, і все, що я кажу, переписується і поміщається в текстовий буфер. А потім комп’ютер постійно шукає попередні електронні листи, попередні документи, попередні розмови, які можуть стосуватися того, про що ми говоримо. Це відображає мало нагадувань у моєму відображенні деталей, які я б хотів включити до цієї розмови. Тож це підтримує розмову, надає мені інформацію.

У мене був студент, який розмовляв зі мною про розпізнавання мовлення - як ви хочете використовувати розпізнавання мовлення з носяться. І я сказав: ну, якщо ти справді хочеш це зробити, ти повинен - ​​і я витягнув свої замітки, коли ми ведемо розмову - я йому кажу, ти справді повинен подивитися на розмову Стіва Уіттакера про Філохат з 1995 року. Я вірю він мав кілька чудових подробиць про те, як до 93 відсотків людей день проводить в умовно-патогенному спілкуванні. Я надав йому всі ці подробиці. Моя студентка просто дивилася на мене так, "як ти все це знаєш?" Тут все гаразд. Я знав достатньо, щоб шукати Стіва Віттакера, і тоді комп'ютер надав мені всі деталі. Надання такої підтримки в режимі реального часу - це справді дивовижно.

Ми також це робили раніше, коли я давав деякі свідчення в Національній академії наук у Вашингтоні, що стосуються збільшення людей. Я показав їм, що я роблю. У мене були студенти, студенти мого ступеня, в Georgia Tech - тому я був в DC, мої студенти в Georgia Tech слухали, а також я показував усім, що маю прямі відгуки про Georgia Tech. Я викладав як свої презентаційні записки, так і замітки учнів, які вони пропонували в режимі реального часу.

Тож, як я давав свідчення, вони сказали: "О, ви повинні про це поговорити", і вони кинули мене URL-адреса, "або вам слід про це поговорити" та підкидання матеріалів, надання іншої інформації. Панель, яка опитувала мене, почала задавати питання студентам, а не мені.

Я був просто своєрідним чоловіком за всі ці знання цього консорціуму людей у ​​лабораторії, який міг швидко відповісти на запитання, оскільки вони були фахівцями в цій галузі. Але вони могли шукати інформацію набагато швидше, ніж я міг. Вони просто використовували мене для розмови. Ці інтелектуальні колективи, ця здатність звертатися до експертів, здатні допомогти вам за мить, - це досить вагома річ. З іншого боку, якщо ви намагаєтесь сказати "Читати електронну пошту" під час розмови, ви звучите як ідіот. Люди не можуть дуже багато задач.

Це не багатозадачність. Це дійсно збільшення.

Правильно.

Здається, що природа розумності, природа знань, природа інтелекту змінилися. Ви раніше запам'ятовували всі ці речі, щоб вести бесіду з ним, не звертаючись до своїх заміток, і це вже не парадигма. Вам просто потрібно знати, які питання потрібно задавати, і бути підключеними до системи, яка може доставити ці відповіді вам.

Існує певна кількість інформації, яка вам потрібна для того, щоб інтерналізувати, щоб ви могли швидко її шукати і мати можливість думати в цих областях, але для багатьох інших речей ви просто хочете, щоб знання у світі були під рукою, і вони були доставлені коли вам це потрібно. Ця ідея своєчасного пошуку інформації дуже потужна. Ось, на мою думку, це станеться протягом найближчих п’яти чи 10 років. У нас будуть ці розумні помічники, які можуть допомогти нам щосекунди.

Це одна з чудових речей щодо носячих комп'ютерів. Я думаю, що визначає носні комп'ютери, це те, що комп'ютер стає частиною нас. Ви, мабуть, раніше використовували бінокль? Це щось, що ти береш. Ти дивишся на щось здалеку. Ви регулюєте фокус. Вони такі вигадливі, правда? Ви повинні утримувати їх правильно і налаштувати фокус кожного разу, коли ви переходите від одного предмета до іншого. Ви кладете їх вниз, вгору і вниз. Ви не думаєте про свій бінокль як про себе. Але окуляри, ви надягаєте їх, і ви користуєтесь ними цілий день. Ви бачите через них. Ти не думаєш про них. Ви просто їх використовуєте. Отже, що ми маємо зараз із більшістю цих пристроїв, більшістю цих комп’ютерів, нашими смартфонами, планшетами; вони не частина нас. Вони інші.

Як тільки ви підходите до пристроїв близько до корпусу, раптом технологія виходить із шляху. Це парадокс носимих комп'ютерів. Наблизивши технологію до тіла, вона виводить її із шляху. Я думаю, що саме там ми підемо в майбутньому. Ми будемо бачити все нові і нові способи, щоб технології допомогли нам зробити нас більш потужними, більш незалежними, впевненішими та більш обізнаними на частку секунди за роздільною секундою. Я хочу бачити, як ці розумні помічники йшли від чогось, про що ти розмовляєш; до чогось, що є частиною вас. Щось, що допомагає вам з однієї миті в іншу дуже ініціативно.

Я думаю, що концепція досвіду світу за допомогою технології, а не просто використання цієї технології, є вирішальною відмінністю.

Це досвід, над яким я працював. Багато з цього - просто швидкість доступу. Ларрі Пейдж сказав мені: "Вся справа в скороченні часу між наміром і дією". Я був приголомшений Я намагався сформулювати важливість швидкості доступу до пристрою. Ось він це зробив однією фразою. Час між наміром і дією має вирішальне значення.

Один із демонстрацій, які я роблю, - це щоб усі виконали два завдання. Я маю їх підняти руку після виконання кожного завдання. Отже, я скажу щось на кшталт: "Гаразд, який час?" Я підніму руку, бо зараз мій час знаходиться на передній частині екрана, і моя аудиторія також дуже швидко виконує завдання. Потім, друге завдання, яке я маю їм виконати, - відповісти на запитання типу "де гора Пінатубо?" Я можу підняти руку, тому що задавши питання, я отримав відповідь на екрані прямо зараз. Це на Філіппінах, і, власне, у мене на екрані є невелика карта того, де він зараз знаходиться.

Моїй аудиторії так важко швидко дістатись до цієї інформації, що вони навіть не турбуються про це. Я говорю про технічну аудиторію на кшталт Xerox Park або Georgia Tech чи Stanford. Тож ось я, в аудиторії, повної дурнів, роблю експеримент з ними, і більшість із них навіть не намагаються дістатись до цієї інформації, бо знають, що це займе занадто довго.

Що робити, якщо ми можемо змінити це з чогось, що займає занадто багато часу, на те, що так просто, як перевірка часу. Раптом ви робите людей набагато сильнішими. Якщо ви можете скоротити час наміру дії до двох секунд або менше, раптом люди зроблять це, не замислюючись про це. Це частина їх. Як тільки це перевищує дві секунди, використання йде вниз, і люди думають як про "іншого".

Перш ніж ми почали записувати, ми говорили про покровителів. І ми намагалися з’ясувати, який святий Станіслав був покровителем. У мене в руках планшет, підключений до Інтернету. Я хотів інформацію. Але я не переймався відкривати Google, набирав його та шукав, тому що мене це мало не хвилювало. Але тільки провівши цю розмову, вона вискочила на ваш екран.

Я маю на увазі, що я маю це тут. Я просто запитав. Це більш чітко. Я сказав, просто запитав: «Святий Станіслав був покровителем?» - відповідь - Польща, - а потім вискочив через пару секунд. Це досить потужно. Це зменшує своєрідне небажання намагатися знайти інформацію про це у світі. Мені це як професору чудово, адже він робить мене більш розумним, ніж я.

Це те, що було, коли я був студентом MIT. Я брав клас у Джастін Кассел, і це було приблизно жест . Під час рецензування перед заключним іспитом вона запитала: "У чому важливість Дейксіса?" У мене на комп’ютері були всі нотатки класу, і я міг дуже швидко отримати доступ до нього за допомогою цієї клавіатури. Це було до того, як розпізнавання мови вийшло дуже добре. Що б я зробив, це побудувати свої речення, щоб я міг вчасно знайти відповідь, щоб закінчити речення.

Тому я підняв руку, щоб відповісти на запитання. Вона закликала мене. Я сказав: "На початку уроку ми сказали, що важливість deixis була uh, uh, uh, um", тому що я помилився. Я скинув клавіатуру. Я потрапив у неправильний режим E-Macs. Я сказав: "Мені доведеться повернутися до вас. Я потрапив у неправильний режим".

Весь клас розпався сміхом. Вони весь цей час провели зі мною і не зрозуміли, що я роблю це щодня. Професор, який брав зі мною клас, нахилився і сказав: "Зараз я хочу його. Ти це робиш весь час, чи не так? Ти можеш так швидко отримувати інформацію. Схоже, це частина тебе". Так, саме це я і роблю.

Дивовижно було, що ці професори та студенти, з якими я працював роками, просто ніколи не усвідомлювали, яку допомогу мені надає пристрій. Перший раз, коли я говорив професійно, один із старшокласників підійшов і сказав мені: "Тад, це була найкраща розмова, яку я коли-небудь чув, що ти давав, але чому ти носив комп'ютер?"

Вона не мала уявлення, що хоча більшість людей мають індексні картки 3-на-5, у мене це є тут. Надання такої допомоги зробило мене кращим оратором. Людям в той час було просто вражаюче, що ти можеш використовувати свою машину таким чином.

Отже, давайте зробимо невеликий стрижень. Ми багато говорили про носіння людини. Ви зараз працюєте з собаками. Поясніть роботу, яку ви виконуєте.

Проект називається FIDO, полегшує взаємодію для собак із заняттями. Так, це абревіатура, але це мило. Ідея полягає в тому, що там є всі ці робочі собаки. Собаки, які є алергічними собаками або медичними собаками, шукають і рятують, виявляють бомбу, перевіряють ТСА на контрабанду чи землеробство. Ці собаки роблять багато робіт, але їм дуже важко повідомляти, що вони відчувають і що вони думають зі своїми обробниками.

Пару років тому у нас був один з наших тренерів, щоб зробити демонстрацію. Вона діабетик і одна з таких людей, яка може просто знепритомніти від нестачі цукру в крові. У неї є собака, яка навчена реагувати на цю насторожувальну ситуацію. Собака йде і знаходить найближчу людину, хапає їх і намагається піднести до неї, бо незабаром вона пройде.

Перш ніж вона зіткнеться, вона проходить і отримує допомогу?

Так. Це насправді може відчути, що зміни в хімії тіла від запах , і отримати допомогу. Це сталося біля воріт безпеки в аеропорту Атланти, і собака зробив те, що їй було навчено - піднявся на службу безпеки TSA. Офіцер безпеки просто подумав, що собака є доброзичливим, але наш дресирувальник сказав: "Я заминуся через секунду. Я повинен сісти". Ви можете уявити, що було б набагато краще, якби собака могла говорити.

Отже, ми зробили жилет, куди ходить собака і передають сигнали, натягаючи жилет. Коли датчик активований і каже: "Будь ласка, йдіть за мною. Мій власник потребує вашої допомоги". Звичайно, перший раз, коли ви тестуєте це, люди думають, що їх розіграли, або вони просто не вірять у це. Це собака просто розмовляв зі мною?

Це звуковий запис людського голосу, який насправді говорить це речення?

Так. Ми повинні навчити собаку робити це двічі, тому що люди вперше не вірять у це.

Чи вдруге собака каже: "Ні, справді! Я маю на увазі це цього разу?"

Ні, у нас просто це повторюється те саме, і це, здається, працює. Ми все ще тестуємо це. Нам потрібно перевірити це на деяких неподозрілих людей у ​​Georgia Tech і подивитися, що вони кажуть. Якщо це трапляється з вами, ви знаєте, що це частина нашого тестування. У нас буде один із наших собак-помічників, які навчаються тут, щоб зробити цю демонстрацію.

Це собака має навчитися нових хитрощів до 14:00 сьогодні вдень?

Власне кажучи, ми спочатку думали, що у нас будуть проблеми з привозом собаки до SXSW, і тому ми сьогодні будемо робити багато тренувань, щоб мати змогу показати, що ми хочемо.

Думка про те, що ці собаки мають усі ці уявлення, які вони можуть артикулювати до нас, є якось новою. Ми мали певний натиск на наш жилет FIDO, і нам зателефонували з поліції Georgia Tech з проханням, чи можна жилети використовувати для собак, які нюхають бомбу. Ми здивовані, дізнавшись, що у них є собаки, що нюхають бомби, пояснили, що собаки використовуються для сканування спортивних майданчиків, перш ніж люди заходять. "Ми як" О. Розкажіть про нюхання бомби. "Нам цікаво щоб дізнатися більше .

Виявляється, собак навчають до таких речей, як пістолетний порошок та С4, а також до таких, як пероксидні бомби, які … пахнуть дуже різними. Пероксидні бомби також дуже нестабільні. Якщо ви отримаєте один із таких, ви не хочете, щоб собака чи обробник не були поблизу. Порох або С4 дуже стабільні, і це не проблема. Те, що хотіла зробити поліція Georgia Tech, - це те, щоб собаки мали жилет з двома маленькими іграшками. Якщо собака пахне порошок пістолета , вони витягують порошок пістолета один і його геолокація вони показують розташування собаки на дисплеї офіцера, де знаходиться собака. Тоді вони знають, що тут є бомба, але це стабільна бомба, і вони можуть просто наказати собаці залишитися там і просто гавкати на бомбу, поки вони не зможуть її швидко знайти.

Якщо собака тягне з іншого боку жилету, це пероксидна бомба. Ми знаємо, що це нестабільно, і тоді ти насправді згадуєш собаку, щоб вийти з неї, а потім відправляєш інший тип підрозділу бомби.

Те саме і з пошуками та порятунком … і з цими сільськогосподарськими собаками за тим, що вони пахнуть в багажі людей. Ви можете і навіть зробити це для огляду полів фермерів. Є такі речі, як гниття солодкої картоплі, де ви не можете сказати зовні, що є проблема. Це нова річ у Північній Кароліні, яка просто пограбує їх врожаї. Собаки це можуть відчути запах. Ви можете відправити собак і мати їх, щоб вони могли шукати поля, поки не знайдуть. Якщо вони знайдуть, вони попереджають. Ви бачите, де вони. Ти йдеш туди. Ви можете побачити, де вони знаходяться, викопати коріння, підтвердити, що воно насправді гниє, і тоді ви позбудетеся тієї частини поля і почніть знову.

Виявляється, що як тільки ми починаємо використовувати цих собак для виконання цих справ, все більше людей виходить із дерев’яних виробів, відкриваються нові програми. Наприклад, собаки, які нюхають трюфелі.

Ось що я думав.

Це один із моїх улюблених. У нас є хобіст, який хоче зараз грати з нами на цьому.

Чи можна позичити собаку на вихідні?

Саме так.

Мені подобається, що ви даєте людям доступ до сприйняття собаки, яка багато в чому перевершує людину, і просто використовуєте технологію, яка дозволяє їм передавати це сприйняття.

Їх нюх в 100 разів кращий за все, що ми робимо в електронному вигляді. У них дуже хороший слух. Їх зір не такий хороший, як у нас, але вони сприймають по-різному. Якщо ми просто дозволимо їм реально спілкуватися краще, ми можемо дізнатися набагато більше про те, що вони здатні робити і як вони можуть краще робити свою роботу. Звичайно, собаки вважають, що це дуже цікаво. Це все для них гра.

Давайте перейдемо до тактичного зворотного зв’язку та тактичного навчання та деяких систем, які ви там зробили. Це правда, ви можете навчити когось грати на фортепіано, не граючи насправді фортепіано ?

Це досить божевільно. Ми називаємо цю річ пасивним гаптичним вивченням пасивного зворотного зв'язку. Це одна із суперсил, яку можуть надати вам носимі комп'ютери. Ідея, що вона може навчити вас складного механічного завдання чи складного ручного завдання без вашої уваги. Це щось дивно. Ми робили це з фортепіано кілька разів.

Припустимо, ви хочете навчитися Бетховена "Ода радості". Це одна з найпростіших, яку ми використовуємо для демонстрацій. У нас ви наділи рукавичку, і рукавичка має мало вібраційних двигунів на кожному пальці. Ви надягаєте гарнітуру Bluetooth, і вона просто відтворює пісню знову і знову, коли ми з вами розмовляємо, або ви читаєте електронну пошту, або їдете за кермом, що завгодно. Ви ігноруєте це, і він просто знову і знову відтворює пісню. Під час відтворення кожної ноти вона торкається пальця, що належить до неї. Через 20 хвилин у вас з’явилася перша строфа «Ода радістю».

Наступні 20 хвилин у вас є друга. Приблизно через годину і 30 хвилин просто цього постукування, ми повинні розбити його в потрібних шматках, але приблизно через годину тридцять хвилин у вас є вся пісня. Якщо ви покладете пальці вниз, то кладете руку вниз на фортепіано, ми відзначаємо, де перша нота інакше ви б не знали, і ваша рука одержима, і вона просто грає пісню. Це одна з таких речей, що якщо ви зосереджуєтеся на цьому занадто сильно, ви не можете цього зробити, але якщо я вас відволікаю, ви можете.

Ви граєте пісню і, я думаю, ви відтворюєте звуки в голові, щоб спробувати вдарити по тих же нотах.

Ми зробили це з Чадом Майерсом на CNN один раз. У нього немає музичного таланту. Ми поклали його на руку, поки він відстежував ураган у Перській затоці, а потім вивели його наживо на CNN. Ви могли бачити, як він переляканий на цій сцені. Цього хлопця щодня перед 20 мільйонами людей, але він перелякує на сцені, коли кладе руку на фортепіано. Ви могли бачити, що він навіть не знав, що це за пісня. Він просто починає постукувати. Він не знає, що це буде, але, продовжуючи, він розпізнає мелодію. Раптом його ритм покращується, і він потім повторює. Він стає все краще і краще, коли йде. Ви можете побачити це одкровення "о, моє слово" на його обличчі. Зробивши це пару разів, я скажу, що це дуже дивна річ.

Те, що ми зараз намагаємось зробити є фігура як далеко ми можемо зайти до цього. Почали ми лише з однієї ноти, мелодії синглу. Тоді мій учень Кейтлін придумав, як робити акорди. Тепер наш стандартний твір - турецький марш Моцарта. Для людей, які є музикантами, ви знаєте, що дві руки дуже різні, на них дуже різні ритми. Це досить складний твір, що вивчити його нетривіально. Ми беремо повних новачків, кидаємо рукавички на руки і після кількох сеансів вони грають у цей складний твір. Я не кажу, що вони чудові музиканти, але я кажу, що вони знають послідовність нот. Ми зацікавились тоді у чому ще ми могли б навчити.

Одна з речей, на яку ми почали дивитися, - це набрати текст. Оскільки ми придумали, як робити акорди, ми спробували зробити шрифт шрифтом Брайля. Брайля включає ці шість пальців, тож це крапки, або ці вісім пальців, якщо ви робите розширену форму. Більшість людей не переймаються навчанням шрифтом Брайля, коли вони старіють, коли втрачають зір. Це також справжня криза зі студентами. Близько 40 відсотків з них ніколи не вивчають шрифт Брайля, принаймні, недостатньо, щоб спілкуватися з ним. Навчання брайлем для сліпого студента є одним із важливих показників майбутнього успіху в навчанні, а також економічного успіху. Ці вчителі шрифтом Брайля, які викладають брайль, - це подорож, рух. Вони просто ходять від школи до школи, тому що не вистачає попиту мати постійного вчителя в конкретній школі.

Ми почали дивитись на виготовлення рукавичок, які могли б навчити людей брайлів пасивно. Відповідь була так. За чотири години я можу дати тобі вушну трубку і ці рукавички. Поки ти робиш, і ти можеш робити все, що завгодно, і це просто повторює тобі: "Швидка бура лисиця перестрибує ледачого собаку". Це робить кожну букву за один раз, і ви відчуваєте букву на своїх пальцях. Приблизно через чотири години цього я кажу: "Яка буква G", і ви знаєте, що це те. Яка буква А, «ви знаєте, що це що. Ви можете не тільки набрати його, але і відчути. Ви проводите пальцем по піпси і знати, як набрати букву. Ти йдеш: "Гаразд, тепер як би я це набрав? Гаразд, значить, це Г." На наш подив, це просто працює.

Як ви думаєте, що відбувається в мозку, щоб увімкнути такий зв'язок? Тому що це не свідомо і це не просто інтелектуально? Це щось інше між розумом і тілом.

Є багато чого я насправді не знаю. Але є певні міркування мого колеги, який вважає, що те, що відбувається, полягає в тому, що почуття дотику - це набагато раніше еволюційний людський сенс, який люди отримали еволюційно. Практично всі тварини мають відчуття дотику. Це, здається, відповідає ідеї, що дотик є частиною дуже низько функціонуючої частини нашого мозку, дуже дрібного мозку типу ящірок. Можливо, це вплив насправді обумовлює нас розпізнавати ці закономірності. У той час як ви намагаєтеся вивчити щось на зразок мови, коли ви спите, це не дуже добре працює, тому що аудіо - це набагато вища штука мозку. Ось чому ми не очікували, що експеримент із текстовим введенням працює. Музика - це дуже низький вміст мозку, тоді як системи мови вважаються вищими функціями мозку.

Це не пов'язано з мовою.

Правильно. Те, що навчання тексту тексту працювало, було для нас несподіванкою. Ми не зовсім впевнені, як далеко ми можемо зайти. Чи можемо ми навчити мову жестів? Чи можемо ми навчити танцювати? Чи можемо ми допомогти експертам стати більш ефективними? Одне з речей, які ми хочемо зробити, - це придбати кілька бейсбольних глечиків і записати свої рухи і побачити, чи зможемо ми відіграти їх у час простою та збільшити їх узгодженість.

Я не маю уявлення, чи буде якийсь цей матеріал спрацювати. Однак ми намагалися кодексу Морзе. Брайля - це лише ключова послідовність. Код Морзе - це ритм.

Ми виявили, що можемо використовувати індукційний перетворювач на склі. Щоб постукати по боці голови. Зараз це нормально працює, коли вібрація черепа виходить і передає звук безпосередньо до вашої кохлеї, минаючи барабанну перетинку. Ось чому я можу це носити і отримувати невеликі сповіщення, і не мати нічого, що блокує мої вуха, але якщо ваш удар з 15 герц, це відчуває себе краном.

Ми почали з тренувань у стилі "швидкої коричневої лисиці через ледачу собаку", але тепер ми просто постукуємо по голові в кодекс Морзе і віримо чи не через 4 години - здається, що чарівний час для алфавіту - більшість наших учасників знизилися до 0 помилок … коли ми просимо їх набрати S. Ми можемо показати їм тире і крапки на папері, і вони можуть записати букви для цього. Ми можемо знову постукати їх головою, і вони можуть знати, яке повідомлення ми надсилаємо.

Тому чотири години, і ми змушуємо їх робити це під час відеоігри. Тож ми переконуємося, що відволікаємо їх на відеоігри. Відеоігри виявляються найбільш ефективним відволіканням.

Ми це знаємо дуже давно.

Це правда. Ми пробуємо вступні іспити для випускників. Дайте їм розуміння читання або математичні проблеми. Виявляється, єдине, що відволікає увагу, - це відеоігри.

Це цікава річ. Ми просто говорили з Poppy Crum раніше сьогодні про звук та змішування почуттів. На цьому шоу багато AR; є багато віртуальної реальності. Деякі найцікавіші речі відбуваються не просто в одному сенсі, а в колекції почуттів. Отже, у цій розмові ми говорили про візуальний простір, ми говорили про аудіопростір, а також про фізичний. Тактильне відчуття. Коли ви збираєте все це, то здається, що справді цікаві речі починають відбуватися.

Ось і вся справа. Це не лише синтез чи почуття. Це також факт, що це щось, що ви можете носити з собою протягом дня. Коли у вас є така близькість до тіла, ви можете робити всілякі речі з тілом, про яке ми не думали раніше.

Навчання пасивного тактильного натискання - одне, а інша річ - реабілітація пасивного тактильного натискання. Це також було для нас досить несподіванкою. У нас був відкритий будинок, де демонстрували нашу гру на фортепіано і один з наших колег в Центрі вівчарок - який багато працює над травмою спинного мозку - вона завітала і сказала: "Ей, Тад, я хочу це для своїх пацієнтів". Я не могла зрозуміти, чому вона хоче, щоб люди з тетраплегією займалися на фортепіано. Вона сказала: "Ні, ви не розумієте, тетраплегія означає, що всі чотири кінцівки уражені. Мої пацієнти з частковою травмою спинного мозку все ще відчувають певну відчуття і спритність. Б'юсь об заклад, якщо ми надінемо ваші рукавички і навчили їх грати на фортепіано, що вони реально відновлять якусь сенсацію, покращують своє відчуття та спритність ".

Вона мала рацію. Ми навчали близько восьми різних пісень протягом восьми тижнів. Учасники мали би рукавички дві години на день, п’ять днів на тиждень, а потім три рази на тиждень мали б заняття з фортепіано. Наприкінці восьми тижнів учасники, які мали рукавички, зробили набагато краще. Вони відчутно покращили відчуття руки та спритність порівняно з людьми, які просто провели звичайні уроки фортепіано.

Отже, ця ідея про те, що ми можемо зробити реабілітацію, що можемо обманути ваш мозок виділяти все більше і більше ресурсів для пояснення цих сигналів, що виходять з вашої руки, просто вражає. Я не знаю, якщо у вас колись була зламана нога чи у вас був батько, який переніс операцію на стегні, але реабілітація потребує тривалого часу. Це дуже нудно, і важко зробити це веселим. Важко домогтися відповідності. Якщо я можу просто надіти рукавичку і пережити реабілітацію, і до речі, ми дамо вам цю супер-силу, що ви до кінця будете вчитися грати на фортепіано, це свого роду мотивація для багато людей.

Це те, що ми зараз робимо. Ми це робимо прямо зараз. Ми намагаємося зрозуміти, чи може це допомогти відновити відчуття руки після інсульту. Якщо це виявиться справним, то ми можемо допомогти мільйон людей на рік. Це дуже умоглядно. Ми не маємо уявлення, буде це працювати чи ні, але ми побачимо.

Гаразд. Перейдемо до деяких питань, які я задаю всім своїм гостям. Які тенденції технологій ви зараз бачите, що вас найбільше хвилюють? Що тримає вас у ночі?

Дуже мало тримає мене в ночах. Я сплю досить добре.

У вас три роботи.

У мене три роботи. Я не встигаю спати. Дуже багато хвилювань людей щодо технології - це те, що ви бачите в пресі. Реальність - це набагато нудніше, ніж те, що багато коментаторів змусять вас повірити або фільми будуть. Я здогадуюсь, що мене найбільше хвилює - це ехокамера, яку можуть викликати соціальні медіа. Люди можуть вірити псевдонауці. Людей можна змусити повірити в речі, які просто не відповідають дійсності. Люди коментують мою роботу, і мені подобається, це неправильно.

Я багато працюю з громадою глухих. Виявляється, навчання вашої дитини знакової мови допоможе швидше засвоїти мовні навички. Найдовше люди вірили, що якщо ви навчите своїх дітей жестовій мові, це затримає початок нормальної мови. Це точно неправильно. Викладання мови жестів з народження допомагає вдосконалити мовні навички кожного.

Більшість дітей насправді не можуть складати слова цілісно, ​​поки їм не виповниться 12 місяців. Вони можуть почати формувати знаки, ви знаєте такі речі, як молоко чи їжа. Вони можуть це зробити за півроку. Народження дітей вміти виражати себе - це те, що їм дає короткий термін пам'ять. Ви дізнаєтесь короткочасну пам’ять, навчившись спілкуватися. Отже, якщо діти зможуть підписатись на півроку раніше, ніж вони можуть говорити, це може дати їм перевагу щодо пам’яті та мови загалом. Оригінальному дослідженню було 20 років, але вони майже впевнені в цьому зараз. Тож не так давно навіть медичне співтовариство сказало: "О, ви повинні вчити не лише глухих дітей, але і всіх жестів дітей". Це досить потужна річ.

У нас є гра під назвою Pop Sign, яка дозволяє батькам глухих дітей вивчати мову жестів, або будь-яких батьків вивчати мову жестів, граючи на цьому захоплюючому ігровому сайті або на їх мобільних телефонах.

Отже, повертаючись до вашого первинного запитання, я бачу інші ситуації, коли люди, які потрапляють до ехо-камер, особливо з рідкісними знаннями. Легко змусити людей йти неправильним шляхом.

З оптимістичної сторони, що вас найбільше заохочує та найбільше сподівається?

Ну, мені подобаються речі, які робить Елон Маск із спроби перетворити нас на сонячну енергію. Я така людина, яка чекає, коли ці черепиці будуть доступні, щоб я міг перетворити свій будинок.

З мого власного простору знімається обчислювальна техніка, розумний помічник. Бачити, як життя людей змінилося завдяки наявності цього пристрою, це не лише тому, що це покращує їх особисте життя чи їхнє професійне життя, а буквально рятує життя на столі операційної, саме завдяки інформації, яку ми можемо вчасно доставити хірургу.

Тож ця ідея, що ми маємо мати цих розумних помічників, які можуть допомогти нам щосекунди. Нарешті ми переходимо до того етапу, коли цей матеріал стає корисним.

Який гаджет, послуга чи пристрій, яким ви користуєтесь щодня, змінили ваше життя? Що ти найбільше любиш? Ви не можете вибрати Google Glass.

Чи можу я обрати свій попередній прототип фотосистема ?

Я думаю, я дозволю це.

Система, яку я мав до Glass, - це Micro Optical SVB6 дисплей та клавіатура Twiddler та комп'ютер із плечовими пакетами. Обладнання не було зміною ігор, це було можливість робити нотатки під час розмов і посилатися на ці нотатки, що має змінило моє життя. Якщо я сиджу за столом від лауреата Нобелівської премії на обід, я хочу мати можливість згадати цю розмову. Я хочу знати лише п’ять слів, які будуть стимулювати мою природну пам'ять.

Виявляється, наявність цієї клавіатури, щоб я могла вводити під стіл і робити нотатки на тій розмові, зробила мене набагато ефективнішою людиною і більш соціально витонченою. Одна з речей, яку шокували мої студенти, - це те, що перш ніж я когось побачу, я підтягую свій Rolodex на них. Це останній раз, коли ми говорили разом, і про що ми говорили. Це дійсно допомагає мені перезавантажити мій мозг про наші розмови.

Припустимо, я відвідую давнього друга. У мене є записки на кшталт "Гей, так, дитина його дочки збиралася в коледж. Вона вивчала геологію; я хотіла зв’язати її зі своєю дружиною. Я мушу запитати, чи це сталося". Це дійсно дозволяє вам не лише у професійній кар’єрі, але й бути більш соціальною.

Так, ми багато говорили про ці пристрої, роблячи нас розумнішими та роблячи нас розумнішими. Це розширення пам’яті, де ви раптово пов’язані з більшою частиною свого життя, тому що можете запам'ятати більше цього, тому що ви можете отримати доступ до нього більше та отримати ці нагадування в режимі реального часу, це цікавий додаток.

У перші дні носимих обчислень ми зробили три речі. Ми робили розширену / чергуючу реальність, інтелектуальні колективи та розширену пам’ять. Інтелектуальний колектив - це свого роду соціальний медіа. Розгорнута реальність є цілою мовою в ці дні. Більшість людей не розуміють, що це називалося Штучною реальністю, перш ніж ми ввели термін "Альтернативна посилена реальність". Власне, я можу вам сказати, чому ми змінили назву.

Чому ти це зробив?

У мої перші роки вивчення цієї штучної реальності було хлопця на ім’я Майрон Крюгер, який написав чудову книгу під назвою « Штучна реальність 2» . Я настійно рекомендую всім, хто хоче зрозуміти розширену реальність. У будь-якому випадку, я думаю, що саме Тимофі Лірі почав проводити інтерв'ю для преси, де він розповідав про віртуальну реальність та штучну реальність, як про поїздки з наркотиками на LSD. У той час я був студентом, який писав грантову пропозицію, і я не хотів, щоб вони шукали термін "Штучна реальність" і бачили, що він пов'язаний з LSD.

Тож я подумав, що мені потрібно знайти інший термін, який би не втягнув щось в Інтернеті, що могло б занепокоїти мене, тому ми прийняли це свідоме рішення називати його Доповненою реальністю. На щастя для я ці інші хлопці з Boeing також розглядали використання доповненої реальності для складання цього матеріалу для виготовлення електричних джгутів та виготовлення літаків, і вони придумали той самий термін. Тож я думаю, що у мене була перша письмова версія, і у них була перша публікація. Назва Доповнена реальність застрягла.

Ви отримали грант?

Я робив. Тому я сьогодні тут. Дякую NDSEG, випускникові стипендії Національної оборонної науки та техніки, я вірю. Якби не ви, хлопці, я не був би тут. Я б не був професором. Цей грант дозволив моєму професорові взяти на себе студента додаткового ступеня і дозволив мені зробити так, щоб носилися комп'ютери. Тож дуже дякую

  • Швидкий форвард: "Зауваження до самооцінки" Ведучий Мануш Зомороді Швидкий форвард: "Зауваження до себе" Ведучий Мануш Зомороді
  • Швидкий форвард: Стів Сінгх SAP з питань автоматизації, бізнес без кордонів Швидкий форвард: Стів Сінгх SAP з питань автоматизації, бізнес без кордонів
  • Швидкі запитання вперед: Як побудувати емоційні машини Швидкий перехід вперед: Як побудувати емоційні машини

Якщо люди хочуть стежити за вами та дізнатися, над чим ви працюєте, як їм це зробити в Інтернеті?

Найпростіший спосіб - зайти до Google Академія та ввести моє ім’я, і ви отримаєте доступ до всіх моїх робіт та просто натисніть на останні. Якщо ви хочете побачити що-небудь, що є з кожним днем, якщо ви переходите до спільноти Google+ на "Носисті обчислення", це я, яку я запускаю, я намагаюся поставити найкрутіші речі, які там відбуваються. Принаймні, з мого дослідження, і ми розпочнемо перегляд деяких речей, які відбуваються загалом.

Швидкий перемотка вперед: thad starner розмовляє google glass, допомагаючи собакам розмовляти