Жести, голограми та завантаження свідомості у стилі матриці

Спочатку це були перфокарти, потім це були культові миша та клавіатура. Інструменти та системи, які ми використовуємо для роботи з комп’ютерами, – це те, що дозволяє нам контролювати та будувати світ навколо нас у спосіб, який наші предки не уявляли. Ми пройшли довгий шлях, щоб бути впевненими, але коли мова заходить про користувальницький інтерфейс (UI або засоби, за допомогою яких ми взаємодіємо з комп’ютерними системами), ми насправді ще нічого не бачили.

У двох останніх випусках нашої серії «Майбутнє комп’ютерів» ми досліджували, як майбутні інновації змінять скромний мікрочіп та дисковод у свою чергу започаткує глобальні революції в бізнесі та суспільстві. Але ці інновації будуть блідими в порівнянні з досягненнями інтерфейсу користувача, які зараз випробовуються в наукових лабораторіях і гаражах по всьому світу.

Кожного разу, коли людство винаходило нову форму спілкування — будь то мова, письмове слово, друкарський верстат, телефон, Інтернет — наше колективне суспільство розквітало новими ідеями, новими формами спільнот і абсолютно новими галузями. У наступному десятилітті відбудеться наступна еволюція, наступний квантовий стрибок у комунікації та взаємозв’язку… і це може просто змінити те, що означає бути людиною.

Що таке хороший інтерфейс користувача?

Десять років тому почалася ера тиць, щипків і махів по комп’ютерах, щоб змусити їх робити те, що ми хочемо. Для багатьох це почалося з iPod. Коли колись ми звикли клацати, друкувати та натискати міцні кнопки, щоб передати машині свою волю, iPod популяризував концепцію проведення пальцем ліворуч або праворуч по колу, щоб вибрати музику, яку ви хочете послухати.

Смартфони з сенсорним екраном також почали виходити на ринок приблизно в той час, представивши низку інших тактильних командних підказок, як-от тиснення (щоб імітувати натискання кнопки), щіпки (для збільшення та зменшення масштабу), натискання, утримання та перетягування (для пропуску) між програмами, зазвичай). Ці тактильні команди швидко набули популярності серед громадськості з кількох причин: вони були новими. Усі круті (відомі) діти це робили. Технологія сенсорних екранів стала дешевою та масовою. Але найбільше рухи відчувалися природними, інтуїтивно зрозумілими.

Ось у чому суть хорошого інтерфейсу користувача комп’ютера: створення більш природних та інтуїтивно зрозумілих способів взаємодії з програмним забезпеченням і пристроями. І це основний принцип, яким керуватимуться майбутні пристрої з інтерфейсом користувача, про які ви збираєтеся дізнатися.

Тикати, щипати та махати по повітрю

Станом на 2015 рік смартфони замінили стандартні мобільні телефони в більшості розвинених країн світу. Це означає, що значна частина світу тепер знайома з різними тактильними командами, згаданими вище. За допомогою додатків та ігор користувачі смартфонів навчилися різноманітним абстрактним навичкам керування суперкомп’ютерами у своїх кишенях.

Саме ці навички підготують споживачів до наступної хвилі пристроїв — пристроїв, які дозволять нам легше поєднати цифровий світ із нашим реальним середовищем. Отже, давайте поглянемо на деякі інструменти, які ми будемо використовувати для навігації в нашому майбутньому світі.

Управління жестами під відкритим небом. Станом на 2015 рік ми все ще живемо в епоху сенсорного керування. Ми все ще тикаємо, щипаємо та проводимо пальцем у своєму мобільному житті. Але це сенсорне керування повільно поступається місцем формі управління жестами під відкритим небом. Для геймерів ваша перша взаємодія з цим, можливо, була надто активними іграми Nintendo Wii або останніми іграми Xbox Kinect — обидві консолі використовують вдосконалену технологію захоплення руху, щоб узгодити рухи гравців з ігровими аватарами.

Що ж, ця технологія не обмежується відеоіграми та створенням фільмів на зеленому екрані; Незабаром він вийде на широкий ринок побутової електроніки. Яскравим прикладом того, як це може виглядати, є підприємство Google під назвою Project Soli (перегляньте дивовижне коротке демонстраційне відео тут). Розробники цього проекту використовують мініатюрний радар для відстеження тонких рухів вашої руки та пальців, щоб імітувати тикати, щипати та змахувати на відкритому повітрі, а не на екрані. Це та технологія, яка допоможе зробити переносні пристрої простішими у використанні, а отже, привабливішими для ширшої аудиторії.

Тривимірний інтерфейс. Продовжуючи це управління жестами під відкритим небом, до середини 2020-х років ми можемо побачити традиційний інтерфейс робочого столу — надійну клавіатуру та мишу — повільно замінений інтерфейсом жестів у тому самому стилі, який популяризував фільм Minority. звіт. Справді, Джон Андеркофлер, дослідник інтерфейсу користувача, науковий консультант і винахідник сцен голографічного інтерфейсу жестів із Minority Report, зараз працює над реальна версія— технологія, яку він називає просторовим операційним середовищем інтерфейсу людина-машина.

Використовуючи цю технологію, ви колись сидітимете або стоятимете перед великим дисплеєм і керувати комп’ютером різними жестами. Це виглядає дуже круто (перегляньте посилання вище), але, як ви могли здогадатися, жести рукою можуть бути чудовими для пропуску телевізійних каналів, вказівки/клацання посилань або створення тривимірних моделей, але вони не працюватимуть так добре під час тривалого написання нариси. Ось чому, оскільки технологія жестів під відкритим небом поступово входить до все більшої кількості споживчої електроніки, до неї, ймовірно, приєднаються додаткові функції інтерфейсу користувача, такі як розширені голосові команди та технологія відстеження райдужної оболонки ока.

Так, скромна фізична клавіатура ще може дожити до 2020-х років… принаймні до тих пір, поки ці наступні дві інновації повністю не оцифрують її до кінця цього десятиліття.

Тактильні голограми. Голограми, які ми всі бачили особисто або у фільмах, як правило, являють собою 2D або 3D проекції світла, які показують об’єкти або людей, що ширяють у повітрі. Спільним для всіх цих виступів є те, що якщо ви простягнете руку, щоб схопити їх, ви отримаєте лише жменю повітря. Так не буде довго.

Нові технології (див. приклади: один та два) розробляються для створення голограм, до яких можна доторкнутися (або принаймні імітувати відчуття дотику, тобто тактильні дії). Залежно від використовуваної техніки, будь то ультразвукові хвилі чи плазмова проекція, тактильні голограми відкриють абсолютно нову галузь цифрових продуктів, які можна використовувати в реальному світі.

Подумайте про це, замість фізичної клавіатури ви можете мати голографічну клавіатуру, яка дасть вам фізичне відчуття набору тексту, де б ви не стояли в кімнаті. Ця технологія стане основним напрямком Інтерфейс Minority Report під відкритим небом і закінчити епоху традиційного робочого столу.

Уявіть собі це: замість того, щоб носити з собою громіздкий ноутбук, одного разу ви могли б носити з собою невелику квадратну пластину (розміром, можливо, з коробку для компакт-дисків), на якій би виділявся сенсорний екран і клавіатура. Якщо зробити ще один крок далі, то уявіть офіс, у якому є лише стіл і стілець, а потім за допомогою простої голосової команди весь офіс проектуватиметься навколо вас — голографічна робоча станція, настінні прикраси, рослини тощо. Купуйте меблі чи прикраси в майбутньому може включати відвідування магазину додатків разом із відвідуванням Ikea.

Віртуальна та доповнена реальність. Подібно до тактильних голограм, описаних вище, віртуальна та доповнена реальність відіграватимуть подібну роль в інтерфейсі користувача 2020-х років. Кожен матиме власні статті, щоб їх повністю пояснити, але для цілей цієї статті корисно знати наступне: Віртуальна реальність здебільшого обмежуватиметься просунутими іграми, навчальними симуляціями та візуалізацією абстрактних даних протягом наступного десятиліття.

Тим часом доповнена реальність матиме набагато ширшу комерційну привабливість, оскільки вона накладатиме цифрову інформацію на реальний світ; якщо ви коли-небудь бачили рекламне відео Google Glass (відео), тоді ви зрозумієте, наскільки корисною може бути ця технологія одного дня, коли вона досягне зрілості до середини 2020-х років.

Ваш віртуальний помічник

Ми розглянули форми дотику та руху інтерфейсу користувача, який засвоїть наші майбутні комп’ютери та електроніку. Тепер настав час вивчити іншу форму інтерфейсу користувача, яка може здатися ще більш природною та інтуїтивно зрозумілою: мова.

Ті, хто володіють найновішими моделями смартфонів, швидше за все, вже стикалися з розпізнаванням мовлення, чи то у формі Siri на iPhone, Google Now на Android чи Windows Cortana. Ці служби створені, щоб дозволити вам взаємодіяти зі своїм телефоном і отримати доступ до банку знань Інтернету, просто усно повідомивши цим «віртуальним помічникам», що ви хочете.

Це дивовижний інженерний подвиг, але він також не зовсім досконалий. Будь-хто, хто користувався цими службами, знає, що вони часто неправильно тлумачать ваше мовлення (особливо для людей із сильним акцентом), і час від часу дають вам відповідь, яку ви не шукали.

На щастя, ці недоліки триватимуть недовго. Google оголошений у травні 2015 року, що його технологія розпізнавання мовлення зараз має лише вісім відсотків помилок і скорочується. Якщо поєднати цей падаючий рівень помилок із масовими інноваціями, які відбуваються з мікрочіпами та хмарними обчисленнями, можна очікувати, що до 2020 року віртуальні помічники стануть жахливо точними.

Переглянути це відео як приклад того, що можливо і що стане загальнодоступним за кілька років.

Це може бути шокуючим усвідомленням, але віртуальні помічники, які зараз розробляються, не лише чудово розумітимуть вашу мову, але й розумітимуть контекст запитань, які ви ставите; вони розпізнають непрямі сигнали, які видає ваш тон голосу; вони навіть братимуть участь у довгих бесідах з вами, Її-стиль.

Загалом, віртуальні помічники на основі розпізнавання голосу стануть основним способом доступу до Інтернету для наших повсякденних інформаційних потреб. Тим часом фізичні форми інтерфейсу користувача, досліджені раніше, ймовірно, домінуватимуть у нашій цифровій діяльності, орієнтованій на дозвілля та роботу. Але це ще не кінець нашої подорожі інтерфейсом користувача, далеко не так.

Увійдіть у Матрицю за допомогою інтерфейсу Brain Computer

Коли ви вже думали, що ми вже все це розглянули, з’явилася ще одна форма спілкування, яка навіть більш інтуїтивно зрозуміла та природна, ніж дотик, рух і мова, коли йдеться про керування машинами: сама думка.

Ця наука є галуззю біоелектроніки під назвою Інтерфейс мозок-комп’ютер (BCI). Він передбачає використання імплантату або пристрою для сканування мозку для моніторингу ваших мозкових хвиль і пов’язування їх із командами для керування всім, що виконується комп’ютером.

Насправді ви могли цього не усвідомлювати, але перші дні BCI вже почалися. Інваліди зараз тестування роботизованих кінцівок керується безпосередньо розумом, а не через датчики, прикріплені до культі власника. Подібним чином зараз є люди з серйозними вадами (наприклад, паралізовані паралічами). використання BCI для керування своїми моторизованими інвалідними візками і маніпулювати роботами. Але допомога людям з ампутованими кінцівками та особам з обмеженими можливостями вести більш незалежне життя — це не те, на що здатний BCI. Ось короткий перелік експериментів, які зараз тривають:

Контроль речей. Дослідники успішно продемонстрували, як BCI може дозволити користувачам контролювати побутові функції (освітлення, штори, температура), а також ряд інших пристроїв і транспортних засобів. Дивитися демонстраційне відео.

Контроль тварин. Лабораторія успішно випробувала експеримент BCI, у якому людина змогла зробити a лабораторний щур ворушить хвостом використовуючи лише свої думки.

Мозок до тексту. Команди в US та Німеччина розробляють систему, яка декодує мозкові хвилі (думки) у текст. Початкові експерименти виявилися успішними, і вони сподіваються, що ця технологія може не тільки допомогти звичайній людині, але й надасть людям з серйозними вадами (як відомий фізик Стівен Гокінг) можливість легше спілкуватися зі світом.

Мізок до мозку. Міжнародна команда вчених змогла мімічна телепатія коли одна людина з Індії подумала слово «привіт», і за допомогою BCI це слово було перетворено з мозкових хвиль у двійковий код, а потім надіслано електронною поштою до Франції, де цей двійковий код знову перетворився на мозкові хвилі, щоб сприйняти особа, яка приймає . Спілкування «мозок до мозку», люди!

Запис снів і спогадів. Дослідники з Берклі, Каліфорнія, досягли неймовірного прогресу в перетворенні мозкові хвилі в зображення. Випробовуваним показували серію зображень, підключених до датчиків BCI. Ті самі зображення потім були реконструйовані на екрані комп’ютера. Реконструйовані зображення були надзвичайно зернистими, але враховуючи приблизно десятиліття часу розробки, це підтвердження концепції одного разу дозволить нам відмовитися від нашої камери GoPro або навіть записувати наші мрії.

Кажете, ми станемо чарівниками?

Все вірно, до 2030-х років і до кінця 2040-х років люди почнуть спілкуватися один з одним і з тваринами, керувати комп’ютерами та електронікою, ділитися спогадами та мріями, а також орієнтуватися в Інтернеті, і все це за допомогою нашого розуму.

Я знаю, про що ти думаєш: Так, це швидко загострилося. Але що все це означає? Як ці технології інтерфейсу користувача змінять наше спільне суспільство? Гадаю, вам просто доведеться прочитати останню частину нашої серії «Майбутнє комп’ютерів», щоб дізнатися.

ПОСИЛАННЯ СЕРІЇ "МАЙБУТНЄ КОМП'ЮТЕРІВ".

Уповільнення апетиту Мурса Лоу до бітів, байтів і ліктів: майбутнє комп’ютерів P1

Революція цифрових накопичувачів: майбутнє комп’ютерів P2

Суспільство та гібридне покоління: майбутнє комп’ютерів P4