Alex Kipman vet mycket väl vad hårdvara är. Sedan han gick med Microsoft för 16 år sedan var han den viktigaste uppfinnaren av över hundra patent, inklusive den banbrytande rörelsedetekteringstekniken XboxKinect, som banade vägen för några av funktionerna i hans senaste skapelse, ett holografiskt 3D-headset kallat HoloLens.
Men idag, på sitt kontor vid Microsofts huvudkontor i Redmond, Washington, talar Kipman inte om hårdvara. Han diskuterar förhållandet mellan människor och maskiner ur ett bredare filosofiskt perspektiv. Oavsett om vi interagerar med maskiner genom skärmar eller saker som sitter på våra huvuden, för honom är allt detta bara ett "ögonblick i tid."
Brasilianskfödda Kipman, en teknisk specialist på Microsofts Windows and Devices Group, förklarar entusiastiskt att en viktig fördel med tekniken är dess förmåga att ersätta tid och rum. Han citerar exemplet med "blandad verklighet" (MR), en Microsoft-term för en blandning av den verkliga världen med datorgenererad grafik. Enligt Kipman kommer det en dag att osynligt kombinera förstärkt och virtuell verklighet. Bland de mest slående egenskaperna hos MR, säger han, är potentialen att släppa loss "supermakterna i ersättningen" i den verkliga världen.
Människor lägger särskilt värde på den känsla du får när du fysiskt delar utrymme med en annan person. Det är därför Alice Bonasio från FastCompany beslutade att intervjua Kipman ansikte mot ansikte. "Men om du kunde göra den här typen av interaktion utan att slösa bort tid på att flytta," säger Kipman, "livet skulle vara mycket mer intressant." Längre från den första personen.
"Min dotter kan kommunicera med sina bröder i Brasilien varje helg, och mina anställda behöver inte resa världen för att göra sitt jobb," fortsätter han.”Med tillkomsten av konstgjord intelligens kunde vi fortsätta konversationen, men jag skulle inte vara här längre. En dag kommer du och jag att prata, du kommer att vara på Mars och jag kommer att vara döda i hundra år. Våra tekniker jobb är att påskynda framtiden och ständigt undra hur man gör det."
Microsoft bankar på blandad verklighet för att hjälpa oss komma in i framtiden. Och här går vi tillbaka till hårdvaran igen. Tillgängligheten för rätt enhet till rätt pris kommer att vara en faktor för att avgöra om konsumenterna omfattar blandad verklighet (även om enheter ensam inte kommer att starta MR-revolutionen, som VR har visat). Medan HoloLens är den enda fristående holografiska datorn på marknaden (till skillnad från OculusRift eller HTCVive om du inte behöver ansluta kablar till en extern enhet), tjänar de 3 000 $ smarta glasögonen mer som ett bevis på koncept än en konsumentprodukt.
Nu vill Microsoft ändra det. Företaget lanserar Windows Mixed Reality Headsets i höst, det första allvarliga försöket att marknadsföra konceptet för allmänheten. Medan denna enhet fortfarande är närmare en perfekt hybrid av förstärkt och virtuell verklighet, har den redan förkroppsligat huvudfunktionerna i HoloLens - som avancerade spårnings- och kartläggningsmöjligheter - och erbjuder ett mer överkomligt pris på 300-500 dollar. Headsetet kommer att finnas i olika former från en mängd hårdvarupartners inklusive Dell, HP och Samsung, och gör att användare kan skapa 3D-utrymmen som kan anpassas med media, appar, webbläsarfönster och mer.
Enligt Microsoft är implementering av en plattform som gör att alla i allmänhet kan skapa sin egen digitala värld det första steget i att uppnå det här språnget till morgondagens värld. "Om du tror, som vi gör, att blandad verklighet är den oundvikliga nästa trenden inom datoranvändning, måste du utnyttja produktivitet, kreativitet, utbildning och en helt ny serie underhållning, från casual till hardcore-spel," säger Kipman.
Kampanjvideo:
Förbättrad blandad verklighet
Kipman är inte den enda optimistiska om blandad verklighet. Kalifornien-baserad start Avegant arbetar på en plattform som presenterar detaljerade 3D-bilder genom att lägga flera fokalplan, som företaget kallar "light field" -teknologi. "Ansökningarna är oändliga", säger Avegant VD Jörg Tewis.”Från designers och ingenjörer som direkt manipulerar 3D-modeller med sina händer, till medicinska professorer som illustrerar olika hjärtsjukdomar med hjälp av ett exempel på en praktiskt levande modell för sina studenter. Hemma kan användare omge virtuella hyllor med sina favoritprodukter. Den blandade verkligheten gör att människor kan interagera direkt med sina idéer istället för skärmar och tangentbord."
För att göra allt detta måste enheter med blandad verklighet stödja virtuella bilder som verkar oskiljbara från den verkliga världen och interagera med den i ett stycke. Enligt professor Gregory Welch, en datavetare vid University of Central Florida, har de flesta tekniker som hittills utvecklats ännu inte nått denna jämvikt. "Blandad verklighet är särskilt svår eftersom det varken är den dolda ofullständigheten hos den virtuella eller den verkliga slående renheten."
Han och hans kollegor fann att i vissa fall kan det relativt breda synfältet av den verkliga världen som HoloLens tillhandahåller skada en viktig känsla av närvaro. Medan en frisk person ser 210 grader förstorar HoloLens-skärmen mitten av ditt synfält med 30 grader eller så. I experiment av Welch och hans team minskade klyftan mellan det verkliga och det utvidgade landskapet känslan av nedsänkning och närvaro.
"Detta innebär att om du tittar på en virtuell person framför dig (som var fallet i vårt experiment) så ser du bara en del av honom flyta i rymden framför dig," säger Welch.”Du måste flytta huvudet upp och ner för att 'rita' uppfattningen om honom, eftersom du inte kan se hela personen på en gång om du inte tittar på honom på avstånd (han kommer att se ut mindre). Problemet är att din hjärna ständigt ser den "normala" världen runt den, och detta "skriver över" många av de typer av uppfattning som du annars kan ha."
Welch fortsätter med att förklara att i demos som vi idag ser med HoloLens eller Apple ARKit, kan till exempel virtuella objekt fixeras på en plan yta, men utöver den grundläggande formen och det visuella utseendet känner programvaran vanligtvis inte till många viktiga fysiska egenskaper hos objektet, t.ex. vikt, centrum för massa och beteende eller ytan som den ligger på - för att inte tala om någon aktivitet i den verkliga världen som sker runt föremål.
"Om jag av misstag rullar ett par tärningar från det virtuella bordet, kommer de inte att" falla "när de når kanten och studsar ut som förväntat baserat på deras typ och golvmaterial," förklarar han.
I en artikel som Welch författade med professor Jeremy Baylinson, chef för Virtual Human Interaction Lab (VHIL) vid Stanford University, redogjorde de för några av sina forskningsresultat som visar att virtuellt innehåll har mycket högre värde när det visar beteenden som vi gör. förvänta sig av fysiska föremål i den verkliga världen.
"I vårt laboratorium börjar vi använda HoloLens för att förstå förhållandet mellan den förstärkta verklighetsupplevelsen och den efterföljande psykologiska relationen till det fysiska rummet," säger Beilinson. Till exempel förklarar han att hans experiment visar att virtuella människor som "går som spöken" genom verkliga föremål snarare än att kringgå eller försöka undvika dem, uppfattas som mindre "verkliga" än de som följer fysikens lagar.
Framsteg i blandad verklighet kommer sannolikt att göra headset billigare och lättare, men det är också möjligt att åtminstone några av våra framtida interaktioner med denna teknik inte alls inkluderar bärbar elektronik. Spatial Augmented Reality (SAR), till exempel, utvecklad av Welch för många år sedan, låter dig använda projektorer för att ändra utseendet på fysiska föremål runt omkring dig, till exempel materialet i ett bord eller färgen på en soffa - utan glasögon.
"Naturligtvis kommer SAR inte att fungera i alla situationer, men när det gör det kommer det att vara övertygande och enkelt," säger Welch.”Om det är något magiskt med när världen omkring dig förändras och du har ingenting att göra med det - inget headset, ingen telefon, ingenting. Du existerar bara i den fysiska världen, som praktiskt taget förändras omkring dig."
Virtuellt samarbetsverktyg i den verkliga världen
Nonnie de la Peña, grundare och VD för Emblematic, hjälpte till att använda VR som ett rapporteringsverktyg och för berättelser. Hon kallas”virtuell verklighetens gudmor” och hon tror att nedsänkningsteknologi är det närmaste att föreställa sig en publik - det vill säga att sätta den i stället för en berättare. Hon tror att HoloLens har potential att öka kvaliteten och djupet i vår förståelse av världen, delvis tack vare volumetrisk fångst, som skapar en 3D-modell av objekt med flera kameror och en grön skärm. "Microsoft började erbjuda realism på hög nivå med hjälp av volumetrisk fångst, och det plockades omedelbart upp av journalister," säger de la Peña. Emblematics egen skapelse, After Solitary, är en prisbelönad dokumentär.skapat i samarbete med PBS och KnightFoundation, som använde denna teknik för att förmedla essensen av traumat av en lång fängelse.
Den största förändringen som blandad verklighet lovar är att innehåll inte kommer att knytas till någon speciell enhet. MR använder byggstenar (verkliga objekt eller datorgenererade objekt) för att skapa miljöer som människor kommer in i för ytterligare interaktion. I det här sammanhanget blir enheter ett fönster som gör att du kan titta på och komma åt dessa världar, snarare än ett arkiv som lagrar ditt personliga innehåll (som din smartphone).
I dessa delade verkliga / virtuella miljöer, konstaterar Kipman, förändras vår relation med datoranvändning från personlig till delad - från enheter som lagrar ditt eget personliga innehåll till delade kreativa utrymmen medierad av teknik. Kipman anser att detta har stora konsekvenser för hur vi kommer att utveckla applikationer i framtiden. Om du till exempel skapar en virtuell staty och placerar den som ett hologram ovanpå ett bord i ditt vardagsrum, kommer en annan person med en blandad verklighetsenhet att se din staty när de kommer in i rummet och flytta den om de vill. Eftersom innehållet inte lagras på din enhet utan på själva miljön, definierar de objekt (både verkliga och virtuella) som bebor den.
"Dessa koncept kräver omprövning av operativsystemet i en blandad verklighetskontext," säger Kipman.”Du måste bygga en grund som går från kisel till molnarkitektur för att förverkliga din egen rörelse från personlig datoranvändning till samarbetsdatorer. Det kommer att ta tid,”ler han.
Ilya Khel