Обширна гама от интерфейсни технологии XR: Постигнете пълно потапяне

Въпреки че потребителите стават много запознати с разпознаването на реч, настоящите дискусии за метавселената и разширената реалност (XR) пропускат в по-голямата си част подходящата реч и аудио да могат да се възпроизвеждат във виртуална или разширена среда. В края на краищата, повечето хора взаимодействат почти постоянно с околната среда, издавайки и идентифицирайки звуци.

Това е основен пропуск. Наистина, докато стремежът към завладяващо изживяване в метавселената продължава, целта за истинско потапяне ще бъде постигната само когато пейзажите или виртуалните елементи предоставят комбинация от всички усещания, които позволяват на потребителите да бъдат на едно място с тези среди.

Siri се превърна в един от най-популярните говорни асистенти, откакто Apple представи функцията през 2011 г. Технологията датира от проект на SRI International от 2003 г. Изследователският институт е създаден като самостоятелно дружество през 2007 г. Тази компания беше придобита от Apple през 2010 г. и оттогава Amazon.com представи Alexa, а Google създаде свой собствен Google Assistant.

Microsoft има собствена функция за разпознаване на реч и през март 2022 г. я получи Nuance CommunicationsДоставчик на технологии за разпознаване на реч и изкуствен интелект (AI). По стечение на обстоятелствата Nuance е частично собственост на друго дъщерно дружество на SRI International, придобито през 2005 г. преди да стане част от Microsoft.

Звукът може да се превърне в историята

Но звукът може да бъде нещо повече от това и разработчиците на филми и игри показаха, че звукът може да се превърне в историята – независимо дали е тракане на часовник или слаб, почти отекващ сърдечен ритъм, да не говорим за експлозии и други подобни.

Флексунд Той е разработил технология, която може да бъде вградена в столове за театър или игри, както и възглавници или дори мебели. Системата позволява създаването на персонални звукови полета и позволява на потребителите да усещат звука с телата си. докато, Sennheiser разработи завладяващ звук Което сега Netflix използва в някои от своите филми и избрани сцени. Sennheiser също създаде AMBEO, който осигурява пространствено аудио за широк спектър от приложения, включително Кинематографична виртуална реалност.

Също така, много компании вече предлагат услуги за проектиране на смислени аудио среди за нишови приложения – дори ако текущият им фокус не е върху XR или приложения, свързани с metaverse. Тези усилия варират от доста изчерпателни услуги до добре насочени приложения.

Фирма МаканиНапример, той разработва саундтраци за търговски обекти, хотели, офиси и музеи, наред с други места. Кино звукмеждувременно се фокусира върху проектирането на по-приятни и по-малко стресиращи звуци за болници и здравни обекти. Лесно е да се види как това разбиране на дизайна ще намери своя път към създаването на по-осъществими и потапящи приложения за разширена реалност (AR) и виртуална реалност (VR).

Чистото докосване

Друг набор от интерфейсни технологии, които вече играят роля в игрите от висок клас, ще помогнат на XR приложенията да станат по-завладяващи и в много случаи по-изчерпателни и удобни. докосване Той може да позволи случаи на употреба, които в момента са трудни за превод от реални във виртуални среди.

Докосванията се делят на тактилни и кинестетични усещания. Тактилните преживявания са свързани главно с кожата, като възприемане на текстура, допир, натиск или вибрация. Кинестетичните преживявания са свързани с мускулите, сухожилията, ставите, възприемането на теглото и разтягането, но също и с движението на части от тялото. Различни интерфейси вече съществуват и ще се развиват, за да се справят с тези видове чувствителност.

Усещането за допир в ръцете е може би най-полезно. Държането на инструмент, натискането на нещо или усещането на повърхност във виртуални среди ще подобри автентичността на изживяването, ако се добави хаптична обратна връзка. На най-елементарно ниво, хаптичната обратна връзка ще позволи виртуални презентации на стандартни интерфейси, като бутони, които могат да бъдат натиснати, или циферблати, които се въртят и осигуряват някакво усещане за щракване.

Държането на инструмент, натискането на нещо или усещането на повърхност във виртуални среди ще подобри автентичността на изживяването, ако се добави хаптична обратна връзка.

Редица компании предлагат ръкавици като интерфейси. HaptX Той разполага с двата вида обратна връзка и включва проследяване на движение за приложения във виртуална реалност или за дистанционни роботи на роботи. SenseGlove Той предлага усъвършенствано решение, което позволява на потребителите да научат за размера, плътността и съпротивлението на обектите във виртуалната реалност. Усещанията в пръстите и ръцете при манипулиране и изследване на обекти във VR осигуряват ясни предимства.

Така че не е изненада, че и Reality Lab на Facebook е така Опитайте тактилната ръкавица, за да разберете нейните възможности. Други компании се опитват да постигнат подобни усещания, без да се налага да носят ръкавици. ултра либ Той е един от тях и използва ултразвук, за да покаже тактилни усещания на ръцете.

Тези различни подходи ще се използват в различни среди и за различни случаи на употреба. Ултразвукът може да се използва по-лесно на обществени места и за добавена реалност, където необходимостта от носене на ръкавици може да създаде триене в експеримента. Междувременно физическите ръкавици могат да създадат по-разнообразни усещания и да представят определени обекти по-точно.

За да създадете пълно усещане за потапяне, пълните костюми могат да доставят обгръщащи усещания. За да станете напълно едно цяло с виртуални среди за забавление, обучение, диагностични и терапевтични приложения, системите, които могат да осигурят тактилни усещания на горната част на тялото или на цялото тяло, са добре дошли допълнения. Един от тези bHaptics ‘ Линия от така наречените продукти TactSuit, които по същество са жилетки, които включват хаптична обратна връзка, разпространявана по цялото тяло. Фирмата предлага и хаптична ръкавица.

тласоМеждувременно предлага линия от материални дрехи: Teslaglove и Teslasuit, който се състои от сако и панталон. Тук тактилните усещания се основават на електрическа стимулация.

По-потапящи виртуални среди

Изследователите също експериментират с различни техники за създаване на тактилни усещания. Група учени от Чикагския университет казаха, че са “идентифицирали… Пет химикала могат да направят тактилните усещания постоянни: изтръпване (sanshool), анестезия (лидокаин), смъдене (цинамалдехид), затопляне (капсаицин) и охлаждане (ментол).” Тези тактилни устройства включват обвивка, която обгражда част от предмишницата и лента, която може да бъде Поставя се под видимата слушалка на бузите на потребителя.

Може би прикрепящите се аксесоари за слушалки за масовия пазар – подобно на начина, по който изследователите от Чикагския университет използват своята лента заедно със слушалки – ще се превърнат в ниша на пазара, за да предоставят на потребителите определени усещания. Feelrealкойто започна като a Kickstarter кампания, е подобно на щит устройство, което се прикрепя към дъното на визуална слушалка. устройството може Осигурява усещане От хладен бриз до топли пръски вода и голямо разнообразие от аромати.

докато, OVR технология Той представя устройство, което може да се свърже с VR слушалки, за да предостави широка гама от аромати. Компанията споменава случаи на употреба като медитация и обучение за отговор за това устройство. Използването на обонянието на потребителите на VR трябва да е естествено за разработчиците, които искат да създадат по-потапящи виртуални среди. Аарон Вишневски, главен изпълнителен директор на OVR, казва:Това би било метавселена без миризма като живот в черно и бяло. “

Тези разширения могат да предоставят широк спектър от възможности за взаимодействие. Изследователски екип от Университета за приложни науки в Залцбург разработи AirRes, добавка за слушалките Meta Quest 2. Устройството изглежда като противогаз, който изследователите описват като дишащ интерфейс. Той подобрява дишането на потребителя като входна информация чрез активиращ съпротивителен клапан Взаимодействайте с виртуални вятърни машиниИли надуйте торта за рожден ден или използвайте духалка за задвижване на снаряди, например.

Съпротивителното устройство може също така да ограничи дишането на потребителя, като по този начин симулира влизане в задимено помещение, например.

Приложенията в игрите или аварийното обучение са очевидни. Някои от приложенията, представени от изследователите, сочат способността на устройството да подобрява виртуални среди с нови нива на надеждност. Лека въздишка в огледалата на тяхната мъгла може да разкрие скрити числа, останали след себе си, подобно на начина, по който децата си оставят съобщения в мистериозни игри.

Замъгляването на стъклени или метални повърхности може да създаде усещане за реалистично взаимодействие с обекти в околната среда и предлага възможност за оставяне на съобщения за други играчи на виртуални прозорци или метални повърхности за игрови цели, например.

докато, H2L Technologies Той разработи каишка за китка, която може да причини болка чрез малки електрически удари. „Чувството на болка ни позволява да превърнем мерника в реален свят, с Повишени усещания за присъствие и потапяне. Въпреки че устройството може да осигури усещане за болка, основната му цел е да създаде усещане за съпротива и тежест, когато това се случи. Взаимодействайте с обекти във виртуалната реалност.

И накрая, мозъчните интерфейси могат да бъдат най-добрата връзка с виртуални светове и разширени пейзажи. Такива връзки с XR среди в момента са спекулативни, но с времето и развитието на невронауките ще станат възможни сравнително прости приложения и компаниите вече проучват свързани технологии.

Reality Labs на Meta Platforms проучва използването на интерфейс мозък-компютър (BCI) за очила с добавена реалност, особено за Използване на BCI в комуникационни приложения. Други също виждат предимства в комбинирането на очила за добавена реалност с мозъчни интерфейси. През март 2022 г. поп Придоби NextMind, разработчик на BCI. Snap вероятно проучва използването на такъв интерфейс със своите интелигентни AR очила, Snap Spectacles. Възможните приложения за интерфейса могат да включват игри или устройства за възпроизвеждане, например.

Междувременно Neuralink на Илон Мъск като цяло разработва интерфейси, които позволяват “Пряка връзка между мозъка и ежедневните технологииПрез 2021 г. компанията публикува информация за макаците Възможност за преместване на курсорите по екрана Видеоиграта Pong се играе само чрез мозъчна дейност.

Усъвършенстван XR

В момента много от разработките в XR и метавселената са експериментални и интерфейсните технологии са част от тези експерименти. Наистина завладяващите среди ще изискват усъвършенствани интерфейси, които могат да копират реални представяния в реалния свят. Но тромавите и трудни за използване интерфейси могат да попречат на потребителите да се потопят и във VR.

Разходите са друго съображение, а безопасността ще играе все по-важна роля. Но VR приложенията ще стимулират търсенето на интерфейси, които позволяват по-завладяващи взаимодействия с виртуални обекти и светове – а усъвършенстваните интерфейси ще позволят още по-сложни XR приложения.

Мартин Шверн е автор на Small Data, Big Disruption: How to Spot Signals of Change and Manage Uncertainty (ISBN 9781632651921). Той също така е старши съветник и стратегически визионер в Business Finland, като помага на стартиращи и утвърдени компании да намерят своето място на пазара на утрешния ден.