Tv buiten de doos: met behulp van mobiele telefoons zou een nieuw systeem tv-programma's van het scherm laten vallen (met video)

Tv buiten de doos: met behulp van mobiele telefoons zou een nieuw systeem tv-programma's van het scherm laten vallen (met video)

Anonim

door Larry Hardesty, Massachusetts Institute of Technology

Image

Augmented reality is een opkomende discipline die draagbare apparaten gebruikt om digitale gegevens over de echte wereld te superponeren: als u bijvoorbeeld in Parijs bent en uw telefoon op de Eiffeltoren richt, verschijnt het beeld van de toren op het scherm, samen met, misschien informatie over de geschiedenis of de openingstijden. Met een tv-verbetering met de naam Surround Vision, brengen onderzoekers van MIT's Media Lab dezelfde technologie in de woonkamer.

Santiago Alfaro, een afgestudeerde student in het lab van Media Lab-onderzoekswetenschapper Michael Bove, had een jaar lang onderzoek gedaan naar het gebruik van mobiele telefooncamera's als digitale interfaces toen hij een intrigerende gedachte had. De soundtracks van hedendaagse films, tv-shows en videogames zijn vaak opgevat in twee dimensies in plaats van slechts één: met surround sound-technologie kan een publiek in feite horen wat er buiten het scherm gebeurt. "Als je tv kijkt en je hoort een helikopter in je surround sound, " zegt Alfaro, "zou het niet cool zijn om je gewoon om te draaien en die helikopter te zien als hij het scherm ingaat?"

Surround Vision is bedoeld om te werken met standaard, met internet verbonden handheld-apparaten. Als een kijker wilde zien wat er aan de linkerkant van het televisiescherm gebeurde, kon ze eenvoudig haar mobiele telefoon in die richting richten en een beeld zou op het scherm verschijnen. De technologie kan een gast op een Super Bowl-feestje bijvoorbeeld ook in staat stellen om verschillende camerahoeken te raadplegen over een bepaald spel, zonder dat dit van invloed is op wat de andere gasten op het tv-scherm zien.

Om het idee te demonstreren, maakte Alfaro videobeelden van de straat voor het Media Lab tegelijkertijd vanuit drie invalshoeken. Een televisie speelt de beelden van de middelste camera opnieuw af. Als een kijker een bewegingsgevoelig handheld-apparaat rechtstreeks op de tv richt, verschijnt hetzelfde beeldmateriaal op het scherm van het apparaat. Maar als de kijker het apparaat naar rechts of naar links zwaait, schakelt het over naar een van de andere perspectieven. De kijker kan bijvoorbeeld een bus naderen op het kleine scherm voordat deze op het grote scherm verschijnt.

Alfaro en Bove stellen zich voor dat, als het systeem op de markt zou worden gebracht, de video die op het handheld-apparaat wordt afgespeeld via internet zou worden gestreamd: tv-dienstverleners zouden hun uitzendingen of settopboxen niet hoeven aan te passen. De handheld zou eenvoudig zijn ingebouwde camera gebruiken om zijn oriëntatie naar de tv en het geselecteerde kanaal te bepalen; voor beide doeleinden kan het wijzen op de insignes die de meeste zenders in de rechteronderhoek van het tv-scherm weergeven. Kijkers die ervoor hebben gekozen om de verbeterde programmering niet te gebruiken, hoeven nooit te weten dat ze iets misten. Degenen die het wel hebben gebruikt, hebben niets anders nodig dan een smartphone en een standaard wifi-verbinding.

Veel bestaande draagbare apparaten hebben ingebouwde bewegingsmelders die versnellingsmeters worden genoemd. Maar schakelen tussen kijkhoeken met het Surround Vision-systeem lijkt beweging te subtiel te maken voor accelerometers om te registreren. Om zijn prototype in gebruik te nemen, moest Alfaro een magnetometer - een kompas - op een bestaand handheld-apparaat aansluiten en software schrijven die zijn gegevens met die van de andere sensoren van het apparaat opnam. Maar Alfaro en Bove zeggen dat apparaten die nu op de markt zijn - inclusief de meest recente versie van de iPhone - ingebouwde magnetometers hebben. De onderzoekers hebben de meeste technische vragen over het systeem beantwoord; nu is hun voornaamste zorg het bepalen van het beste gebruik ervan.

Daartoe plannen ze een reeks gebruikersstudies in het voorjaar en de zomer, waarbij gebruik wordt gemaakt van inhoud die is ontwikkeld in samenwerking met een aantal partners. Bove zal geen namen noemen, maar hij zegt: 'We kijken naar sport; we kijken naar kinderprogrammering, zowel live-actie als cartoons; we kijken naar, laten we zeggen, gewone amusementsprogramma's, evenals programma's die zijn opgenomen in een studio zoals talkshows. En we hopen vrij snel voorbeelden van een aantal hiervan te hebben. Er zijn ook een of twee andere dingen die op dit moment categorisatie tarten, die je soort van moet zien om te begrijpen wat ze zijn. "

Omdat sportuitzendingen en andere live tv-shows al beelden bevatten die vanuit meerdere camerahoeken zijn genomen, passen ze natuurlijk bij het systeem. Veel shows van kinderen moedigen al een soort publieksparticipatie aan die kan worden verbeterd, zegt Bove, en kijkers van het soort crimineel-forensische shows die nu populair zijn, kunnen Surround Vision gebruiken om, bijvoorbeeld, te zien waar de protagonisten naar kijken door de microscooplens .

Natuurlijk zijn de tv-programma's van vandaag vaak voorzien van korte scènes met snelle afsnijdingen tussen verschillende camerahoeken, waardoor er weinig tijd is om de virtuele omgeving te verkennen. Maar "het systeem zoals het er nu uitziet, zou geen constante functie moeten zijn", zegt Alfaro. "We kunnen een gebruiker niet vragen om een ​​apparaat constant op armlengte te houden: ze zullen snel moe worden en het helemaal niet gebruiken." Alfaro suggereert dat naarmate tv-regisseurs de sterke punten van het systeem gingen waarderen, ze waarschijnlijk hun stijlen zouden aanpassen aan profiteer van hen.

Een partner die waarschijnlijk zal deelnemen aan de gebruikersstudies is het openbare televisiestation WGBH in Boston, dat een lange geschiedenis heeft met het laboratorium van Bove. "We leren altijd van het werken met Mike en zijn groep", zegt Annie Valva, technisch directeur en interactieve multimedia van WGBH. Of een experimentele technologie rechtstreeks leidt tot nieuwe toepassingen, het stelt het personeel van het station in staat om "content in de archieven vanuit een ander perspectief te bekijken, omdat er een ander opkomend platform is om het beschikbaar te maken", zegt Valva. “De uitzending is een zeer beperkt medium, en vaak zetten we op wat het beste verhaal maakt en wat in het programmeringsschema past. Maar met een technologie als Surround Vision helpt het ons meer waarde te benutten ten opzichte van dingen die we fotograferen en maken maar die toevallig niet worden uitgezonden. "

Als de gebruikersstudies uitgevoerd door de groep van Bove samenkomen op sommige toepassingen die resoneren met kijkers, kan Surround Vision echter iets meer zijn dan een aansporing tot de verbeelding. "In het Media Lab, en zelfs mijn groep, is er een combinatie van dingen die ver in de toekomst liggen en dingen die op zeer korte termijn beschikbaar zijn, en dit is een voorbeeld van de laatste, " zegt Bove. "Dit zou volgend jaar bij u thuis kunnen zijn als een netwerk zou besluiten dit te doen."