Sýndardagskrá fyrir framtíðina

Hröð tækniþróun skapar nýjar leiðir til frásagnar, með því að breyta hefðbundnum frásögnum í eitthvað gagnvirkara og fjölskynjanlegra.

Þetta má til dæmis sjá í Skynjunarsögur, röð verka sem nú eru sýnd á Myndasafn á hreyfingu í New York til 26. júlí 2015. Öll verkin vekja athygli á gestum í sjón, heyrn, snertingu og lykt í gegnum sýndarveruleikaupplifun (VR), gagnvirkar kvikmyndir, þátttökuuppsetningar og íhugunarviðmót.

Fuglalegt leyfir manni að fljúga um byggingar Manhattan, sem gefur áhorfandanum stjórn á að stjórna sér í gegnum hverfið; Evolution of Verse er kvikmynd sem gerir áhorfendum kleift að fljóta yfir kílómetra af vötnum og fjöllum; Herders and Clouds over Sidra eru stuttar heimildamyndir þar sem persónur virðast vera raunverulegar manneskjur öfugt við flytjendur; Faldar sögur innihalda röð af hlutum á safnveggnum með skynjurum sem sýna hljóð á hlutunum - hlustendur geta jafnvel tekið upp sína eigin „búta“. Lista yfir öll verkin er að finna á Heimasíða safnsins.

Fuglalegt (Mynd: Thanassi Karageoriou, Museum of the Moving Image)

Faldar sögur (Mynd: Thanassi Karageoriou, Museum of the Moving Image)

Charlie Melcher, stofnandi og forseti Melcher Media og Framtíð sögusagna, skoðar þessa tæknibreytingu frá aðgerðalausri lestri sögu úr texta yfir í eitthvað virkara og raunverulegra. Í Wired grein, útskýrir Melcher að „við erum að yfirgefa þennan aldur sem er skilgreindur af stafrófinu. … Við erum í því ferli að breytast bókstaflega úr stafrófshugi í þann sem er nettengdur, sem byggir meira á tengingum milli hluta frekar en stigveldi.“

Frá texta til sviðs

Samkvæmt Rouhizadeh o.fl., fagfólk og rannsakendur nútímans eru að brúa bilið milli tungumáls, grafíkar og þekkingar með því að breyta texta í „nýja tegund merkingarmyndar“ – það er að segja sýndar þrívíddarsenu.

Ein slík viðleitni birtist í MUSE Verkefni (Machine Understanding for Interactive StorytElling), sem er að þróa a þýðingarkerfi að umbreyta texta í þrívíddar sýndarheima. Nánar tiltekið myndi þetta kerfi sem er í vinnslu virka með því að vinna úr tungumáli tiltekins texta og breyta því í aðgerðir, persónur, aðstæður, söguþræði, stillingar og hluti sem eru stilltir í sýndar þrívíddarheima, „þar sem notandinn getur kanna textann með samspili, endurgerð og leikjaleik með leiðsögn“.

Hingað til hefur prófessor dr. Marie-Francine Moens – umsjónarmaður þessa verkefnis – og teymi hennar búið til kerfi sem getur unnið texta með tilliti til merkingarlegra hlutverka í setningum (hver, hvað, hvar, hvenær og hvernig), staðbundið tengsl milli hluta og tímaröð atburða.

Að auki hefur þetta verkefni sem styrkt er af Evrópusambandinu einnig verið að gera tilraunir með barnasögur og fræðsluefni fyrir sjúklinga, „þýtt orð frá náttúrulegum tungumálum í leiðbeiningar í myndrænum heimi“. Myndbandssýning á verkefninu má finna á heimasíðu þeirra.

Í CORDIS (Community Research and Development Information Service) Tilkynning, teymið opinberar áætlanir sínar um að koma þessari texta-til-senu tækni á markaðinn og gera hana aðgengilega almenningi.

Texta-til-sviðsstefnan

Önnur væntanleg kerfi fylgja í kjölfarið og breyta texta í grafíska heima í von um að komast á markað.

Til dæmis, vefforrit sem heitir WordsEye gerir notendum einnig kleift að búa til þrívíddar senur úr grunntextalýsingum, aðgerð sem þeir kalla „sláðu inn mynd“. Þessar lýsingar samanstanda ekki aðeins af staðbundnum tengslum, heldur einnig aðgerðum sem framkvæmdar eru. Forrit eins og WordsEye gera það að verkum að þrívíddargrafík er áreynslulaust, tafarlaust og minna tímafrekt og krefst ekki sérstakrar færni eða þjálfunar. Bob Coyne frá Columbia University og Richard Sproat frá Oregon Health and Science University tilkynna að „það er ákveðinn töframaður í því að sjá orð sín breytt í myndir“ með því að nota slíkan hugbúnað.

Á sama hátt, Lærðu Immersive hjálpar til við að kenna tungumál með VR með því að „[búa til] senulýsingar og textaþýðingar“ á raunverulegu umhverfi. Samkvæmt meðstofnandanum, Tony Diepenbrock sem talaði við gizmag, til þess að ná tökum á erlendu tungumáli á skynsamlegum tíma, þarf maður að vera á kafi í því. Diepenbrock lýsti baráttu bandaríska skólakerfisins fyrir tungumálanámi: „Ég lærði frönsku í 12 ár, en þegar ég reyndi að tala hana í landinu svöruðu útlendingar mér oft á ensku. … Þú þarft að sökkva þér niður í aðstæður þar sem þú þarft að finna út hvað þú átt að segja“. Learn Immersive leysir þetta vandamál með því að flytja notendur í umhverfi þar sem tungumál eru innfædd og ríkjandi.

Lærðu Immersive (Mynd: Panoptic Group)