퀀텀런

이미지 크레딧: 퀀텀런

제스처, 홀로그램 및 매트릭스 스타일 마인드 업로드

David Tal, 발행인, 미래학자
@DavidTalWrites
링크드인

수, 09 / 16 / 2020 - 03 : 47

처음에는 펀치 카드였고 다음은 상징적인 마우스와 키보드였습니다. 우리가 컴퓨터를 사용하는 데 사용하는 도구와 시스템을 통해 우리는 조상들이 상상할 수 없는 방식으로 우리 주변의 세상을 제어하고 건설할 수 있습니다. 우리는 확신하기 위해 먼 길을 왔지만 사용자 인터페이스(UI 또는 컴퓨터 시스템과 상호 작용하는 수단) 분야에 관해서는 아직 아무것도 보지 못했습니다.

Future of Computers 시리즈의 마지막 두 편에서 우리는 다가오는 혁신이 겸손한 모습을 어떻게 변화시킬지 탐구했습니다. 마이크로 칩 와 디스크 드라이브 차례로 비즈니스와 사회에 글로벌 혁명을 일으킬 것입니다. 그러나 이러한 혁신은 현재 전 세계의 과학 연구실과 차고에서 테스트되고 있는 UI 혁신과 비교할 때 창백할 것입니다.

인류가 말, 문자, 인쇄기, 전화, 인터넷과 같은 새로운 형태의 커뮤니케이션을 발명할 때마다 우리의 집단 사회는 새로운 아이디어, 새로운 형태의 커뮤니티, 완전히 새로운 산업으로 꽃을 피웠습니다. 다가오는 XNUMX년은 커뮤니케이션과 상호 연결성의 다음 진화, 다음 비약적인 도약을 보게 될 것입니다. 그리고 그것은 인간이 된다는 것이 의미하는 바를 재편성할 수도 있습니다.

어쨌든 좋은 사용자 인터페이스는 무엇입니까?

우리가 원하는 것을 하기 위해 컴퓨터를 찌르고, 꼬집고, 스와이프하는 시대는 XNUMX년 전에 시작되었습니다. 많은 사람들에게 그것은 iPod에서 시작되었습니다. 클릭, 타이핑, 기계에 우리의 의지를 전달하기 위해 튼튼한 버튼을 누르는 데 익숙해진 반면, iPod은 원을 왼쪽이나 오른쪽으로 스와이프하여 듣고 싶은 음악을 선택하는 개념을 대중화했습니다.

터치스크린 스마트폰도 그 무렵 시장에 진입하기 시작했고, 찌르기(버튼 누르기를 시뮬레이트하기 위해), 핀치(확대하거나 축소하기 위해), 누르고 누르고 끌기(건너뛰기)와 같은 다양한 촉각 명령 프롬프트를 도입했습니다. 일반적으로 프로그램 사이). 이러한 촉각 명령은 다음과 같은 여러 가지 이유로 대중들 사이에서 빠르게 주목을 받았습니다. 모든 멋진 (유명한) 아이들이 그것을 하고 있었습니다. 터치스크린 기술은 저렴하고 주류가 되었습니다. 그러나 무엇보다 움직임이 자연스럽고 직관적으로 느껴졌습니다.

이것이 바로 좋은 컴퓨터 UI의 핵심입니다. 소프트웨어 및 장치를 사용하는 보다 자연스럽고 직관적인 방법을 구축하는 것입니다. 그리고 이것이 여러분이 배우려는 미래의 UI 장치를 안내할 핵심 원칙입니다.

공중에 찌르고, 꼬집고, 쓸어 넘기기

2015년을 기준으로 대부분의 선진국에서는 스마트폰이 표준 휴대전화를 대체했습니다. 이것은 세계의 많은 부분이 이제 위에서 언급한 다양한 촉각 명령에 익숙하다는 것을 의미합니다. 스마트폰 사용자는 앱과 게임을 통해 주머니 속의 슈퍼컴퓨터를 제어하는 다양한 추상 기술을 배웠습니다.

이러한 기술은 소비자가 차세대 장치, 즉 디지털 세계를 실제 환경과 보다 쉽게 통합할 수 있도록 하는 장치를 준비할 수 있도록 하는 것입니다. 이제 미래 세계를 탐색하는 데 사용할 몇 가지 도구를 살펴보겠습니다.

야외 제스처 제어. 2015년 현재, 우리는 여전히 터치 컨트롤의 마이크로 시대에 있습니다. 우리는 여전히 모바일 생활에서 찌르고, 꼬집고, 쓸어 넘깁니다. 그러나 그 터치 컨트롤은 서서히 개방형 제스처 컨트롤의 형태로 자리를 내주고 있습니다. 게이머의 경우 이것에 대한 첫 번째 상호 작용은 과도한 Nintendo Wii 게임이나 최신 Xbox Kinect 게임을 하는 것일 수 있습니다. 두 콘솔 모두 고급 모션 캡처 기술을 사용하여 플레이어의 움직임을 게임 아바타와 일치시킵니다.

음, 이 기술은 비디오 게임과 그린 스크린 영화 제작에만 국한되지 않습니다. 곧 더 넓은 소비자 가전 시장에 진출할 것입니다. 이것이 어떻게 생겼는지 보여주는 한 가지 놀라운 예는 Project Soli라는 Google 벤처입니다. 여기에서 지금 확인해 보세요.). 이 프로젝트의 개발자는 소형 레이더를 사용하여 손과 손가락의 미세한 움직임을 추적하여 화면이 아닌 야외에서 찌르고 꼬집고 쓸어넘기기를 시뮬레이션합니다. 이것은 웨어러블을 사용하기 쉽게 만들고 더 많은 청중에게 더 매력적으로 만드는 데 도움이 되는 기술입니다.

XNUMX차원 인터페이스. 이 야외 제스처 제어를 자연스럽게 진행하면서 2020년대 중반까지 전통적인 데스크탑 인터페이스(신뢰할 수 있는 키보드 및 마우스)가 영화 마이너리티(Minority)에서 대중화된 동일한 스타일로 제스처 인터페이스로 서서히 대체되는 것을 볼 수 있습니다. 보고서. 사실, UI 연구원이자 과학 고문이자 Minority Report의 홀로그램 제스처 인터페이스 장면의 발명가인 John Underkoffler는 현재 실생활 버전—그가 인간-기계 인터페이스 공간 운영 환경이라고 부르는 기술.

이 기술을 사용하면 언젠가는 대형 디스플레이 앞에 앉거나 서서 다양한 손 제스처를 사용하여 컴퓨터에 명령을 내릴 수 있습니다. 정말 멋져 보이지만(위 링크 참조) 짐작할 수 있듯이 손 제스처는 TV 채널을 건너뛰거나 링크를 가리키거나 클릭하거나 XNUMX차원 모델을 디자인하는 데 유용할 수 있지만 긴 글을 쓸 때는 잘 작동하지 않습니다. 에세이. 그렇기 때문에 야외 제스처 기술이 점점 더 많은 소비자 가전에 포함됨에 따라 고급 음성 명령 및 홍채 추적 기술과 같은 보완적인 UI 기능과 결합될 가능성이 높습니다.

예, 겸손하고 물리적인 키보드는 2020년대까지 살아남을 수 있습니다. 적어도 다음 두 가지 혁신이 그 XNUMX년 말까지 완전히 디지털화할 때까지는 말이죠.

햅틱 홀로그램. 우리 모두가 직접 또는 영화에서 본 홀로그램은 물체나 공중에 떠 있는 사람을 보여주는 빛의 2D 또는 3D 투영인 경향이 있습니다. 이 모든 예상의 공통점은 손을 뻗어 그것을 잡으려고 손을 뻗으면 한 줌의 공기만 얻을 수 있다는 것입니다. 더 이상 그렇지 않을 것입니다.

새로운 기술(예제 참조: 한 와 두)은 만질 수 있는(또는 최소한 촉각, 즉 햅틱을 모방한) 홀로그램을 만들기 위해 개발되고 있습니다. 사용되는 기술에 따라 초음파 또는 플라즈마 프로젝션이든 햅틱 홀로그램은 실제 세계에서 사용할 수 있는 완전히 새로운 디지털 제품 산업을 열 것입니다.

생각해 보세요. 물리적 키보드 대신 홀로그램 키보드를 사용하여 방에 서 있는 모든 위치에서 물리적으로 타이핑하는 느낌을 줄 수 있습니다. 이 기술은 주류가 될 것입니다 마이너리티 리포트 공개 인터페이스 그리고 전통적인 데스크탑의 시대를 끝내십시오.

상상해 보세요. 부피가 큰 노트북을 들고 다니는 대신 언젠가는 터치 가능한 디스플레이 화면과 키보드를 투사할 수 있는 작은 정사각형 웨이퍼(CD 케이스 크기일 수 있음)를 들고 다닐 수 있습니다. 한 걸음 더 나아가 책상과 의자만 있는 사무실을 상상해 보세요. 간단한 음성 명령으로 홀로그램 워크스테이션, 벽 장식, 식물 등 사무실 전체가 주변에 투영됩니다. 미래의 가구 또는 장식 쇼핑 이케아 방문과 함께 앱 스토어 방문이 포함될 수 있습니다.

가상현실과 증강현실. 위에서 설명한 햅틱 홀로그램과 마찬가지로 가상 현실과 증강 현실은 2020년대의 UI에서 비슷한 역할을 할 것입니다. 각각에 대해 완전히 설명하는 자체 기사가 있지만 이 기사의 목적을 위해 다음을 아는 것이 유용합니다. 가상 현실은 향후 XNUMX년 동안 주로 고급 게임, 훈련 시뮬레이션 및 추상 데이터 시각화에 국한될 것입니다.

한편, 증강 현실은 현실 세계에 디지털 정보를 오버레이할 것이기 때문에 훨씬 더 광범위한 상업적 매력을 가질 것입니다. Google glass에 대한 프로모션 비디오를 본 적이 있다면(비디오), 그러면 이 기술이 2020년대 중반까지 성숙되면 언젠가 이 기술이 얼마나 유용할 수 있는지 이해하게 될 것입니다.

가상 비서

우리는 미래의 컴퓨터와 전자 제품을 대신할 UI 세트의 터치 및 이동 형태를 다루었습니다. 이제 훨씬 더 자연스럽고 직관적으로 느껴질 수 있는 또 다른 형태의 UI인 음성을 탐색할 때입니다.

최신 스마트폰 모델을 소유한 사람들은 iPhone의 Siri, Android의 Google Now 또는 Windows Cortana의 형태로 된 음성 인식을 이미 경험했을 가능성이 큽니다. 이 서비스는 단순히 '가상 비서'에게 원하는 것을 구두로 말하면 전화기와 인터페이스하고 웹의 지식 은행에 액세스할 수 있도록 설계되었습니다.

이것은 엔지니어링의 놀라운 위업이지만 완벽하지도 않습니다. 이러한 서비스를 사용해 본 사람이라면 누구나 종종 귀하의 말을 잘못 해석한다는 것을 알고 있습니다(특히 억양이 두꺼운 사람들의 경우). 그들은 때때로 귀하가 찾고 있지 않은 답변을 제공합니다.

운 좋게도 이러한 실패는 오래 지속되지 않습니다. Google 발표 2015년 2020월 음성 인식 기술은 현재 오류율이 XNUMX%에 불과하며 줄어들고 있다고 밝혔습니다. 이렇게 떨어지는 오류율과 마이크로칩 및 클라우드 컴퓨팅에서 발생하는 대규모 혁신을 결합하면 XNUMX년까지 가상 비서가 놀라울 정도로 정확해질 것으로 기대할 수 있습니다.

이 비디오보기 가능한 것과 몇 년 안에 공개적으로 사용할 수 있는 것에 대한 예입니다.

그 사실을 깨닫는 것은 충격적일 수 있지만 현재 엔지니어링되고 있는 가상 비서는 귀하의 연설을 완벽하게 이해할 뿐만 아니라 귀하가 묻는 질문의 배경도 이해할 것입니다. 그들은 당신의 목소리 톤에 의해 발산되는 간접적인 신호를 인식할 것입니다. 그들은 심지어 당신과 긴 형식의 대화에 참여할 것입니다. 그녀의-스타일.

전반적으로 음성 인식 기반 가상 비서는 일상적인 정보 요구를 위해 웹에 액세스하는 주요 방법이 될 것입니다. 한편, 앞서 살펴본 물리적 형태의 UI는 여가 및 업무 중심의 디지털 활동을 지배할 가능성이 높습니다. 그러나 이것이 UI 여정의 끝이 아닙니다.

두뇌 컴퓨터 인터페이스로 매트릭스 입력

우리가 모든 것을 다뤘다고 생각했을 때, 기계를 제어할 때 터치, 움직임, 말보다 훨씬 직관적이고 자연스러운 또 다른 형태의 커뮤니케이션이 있습니다. 바로 생각 그 자체입니다.

이 과학은 BCI(Brain-Computer Interface)라는 생체 전자 분야입니다. 여기에는 뇌파를 모니터링하고 컴퓨터에서 실행되는 모든 것을 제어하는 명령과 연결하기 위해 임플란트 또는 뇌 스캐닝 장치를 사용하는 것이 포함됩니다.

사실, 당신은 그것을 깨닫지 못했을 수도 있지만, BCI의 초기 단계는 이미 시작되었습니다. 절단 환자는 지금 로봇 팔다리 테스트 착용자의 그루터기에 부착된 센서 대신 마음에 의해 직접 제어됩니다. 마찬가지로 중증 장애(예: 사지 마비)가 있는 사람들은 BCI를 사용하여 전동 휠체어 조종 로봇 팔을 조작합니다. 그러나 절단 장애인과 장애인이 보다 독립적인 삶을 영위할 수 있도록 돕는 것은 BCI가 할 수 있는 범위가 아닙니다. 현재 진행 중인 실험의 간단한 목록은 다음과 같습니다.

통제하는 것. 연구원들은 BCI를 통해 사용자가 가정 기능(조명, 커튼, 온도)은 물론 다양한 기타 장치 및 차량을 제어할 수 있는 방법을 성공적으로 시연했습니다. 보다 데모 비디오.

동물 통제. 실험실은 인간이 만들 수 있는 BCI 실험을 성공적으로 테스트했습니다. 실험용 쥐가 꼬리를 움직인다 그의 생각만을 사용합니다.

두뇌에서 텍스트로. 팀 US 와 독일 뇌파(생각)를 텍스트로 해독하는 시스템을 개발 중입니다. 초기 실험은 성공적인 것으로 입증되었으며 이 기술이 평범한 사람을 도울 뿐만 아니라 심각한 장애가 있는 사람들(저명한 물리학자 Stephen Hawking과 같은)이 세상과 더 쉽게 소통할 수 있는 능력을 제공할 수 있기를 바랍니다.

두뇌 대 두뇌. 국제 과학자 팀은 텔레파시를 흉내내다 인도에서 온 한 사람이 "안녕하세요"라는 단어를 생각하게 하고 BCI를 통해 그 단어를 뇌파에서 이진 코드로 변환한 다음 프랑스로 이메일을 보냈습니다. . 두뇌 대 두뇌 커뮤니케이션, 여러분!

꿈과 추억을 기록합니다. 캘리포니아 버클리의 연구원들은 믿을 수 없는 발전을 이루었습니다. 뇌파를 이미지로. BCI 센서에 연결되어 있는 동안 테스트 대상에게 일련의 이미지가 제공되었습니다. 그런 다음 동일한 이미지를 컴퓨터 화면에 재구성했습니다. 재구성된 이미지는 매우 거칠었지만 약 XNUMX년의 개발 시간을 감안할 때 이 개념 증명을 통해 언젠가는 GoPro 카메라를 버리거나 꿈을 기록할 수 있을 것입니다.