1 / 15

Bridging Real and Virtual Performers with High-Performance Computing

Explore the fusion of real and virtual performers on a holo-stage using high-performance computing. Learn about 3D reconstruction, augmented reality, and tracking technology enhancing live performances.

damon-vargas
Download Presentation

Bridging Real and Virtual Performers with High-Performance Computing

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Performance med computer ”Playing on a holo-stage: towards the interaction between real and virtual performers” Af Kia Ng, Vítor Sequeira, Emanuele Bovisio, Neil Johnson, David Cooper, João G.M. Gonçalves og David Hogg (UK/Italien) (2000) 1

  2. Kort om forfatterne • University of Leeds, UK • European Commision – Joint Research Centre, Italien • Forskningsinteresser: • 3D Reconstruction • Computer vision & Pattern Recognition: Learning & Analysis of Behaviour • Augmented Reality & Tele-Presence 2

  3. Opbygning og indhold • Intro: • ’high performance computing’ kan med fordel anvendes i teater & live performance • gruppens bidrag: • Automatisk rekonstruktion af et hvilket som helst fysisk rum samt automatisk ’tracking’ af performance i ’virkelige’ rum • præsentation af gruppens igangværende forskning/projekter 3

  4. Igangværende projekter • RESOLV projektet • REconstruction using Scanned Laser and Video • ikke oprindeligt designet til teater eller performance – men applicérbart resultatet • http://www.scs.leeds.ac.uk/resolv/ 4

  5. Muligheder – RESOLV • Præcise og realistiske 3D-modeller • oprindeligt fokuseret på interiør • laser giver mulighed for også at ’indfange’ eksteriør • fx anvendelse af bygningsværker som scenografi (’kulturarv’) • mulighed for manipulation 5

  6. Igangværende forskning • ’Tracking performance & modelling behaviour’ • På baggrund af videosekvenser • kortlægning & fortolkning af performerens position, bevægelsesmønstre, mimik etc. • Ud fra ’training data’ - fx generere ’3D virtual humans/VRML manikins’ • Realistic behaviours can be randomly generated and applied to VRML manikins for animation” 6

  7. Formål • at fremme naturlig ’user-machine interaktion’ • ”to equip a virtual human to interact in a natural way” • Virtual immortality? 7

  8. Gruppens mål • Her - kobler ’performance’ og ’ performance space’ • Håb om at udvikle en ’hybrid metode’ • anvendelse af synsbaseret ’tracking’ • sensorer der kan tracke bevægelse • = skabe autonom 3D avatar • ’Idealistic aim’ • ”[…] to develop 3D computer models of artificial environments with virtual performers that can mimic, interact with and react to live performers.” 8

  9. Sørensens Framework… Problem Domain: • Human Interaction i VR Problem Area: • Interaktion mellem virtuelle og virkelige aktører i et digitalt teater (holostage) • anvendelse af 3D scenografi 9

  10. …Sørensens framework Research Approach • Empirisk, konstruktivt What have others done? • refererer til og henter belæg i projekter og forskning, der bidrager og understøtter • Acknowledgement: partners of RESOLV consortium Research Results • Tekst = Bidrag til udvikling af et interaktivt VR miljø for ’performance art’ (bl.a. muligheder med RESOLV) 10

  11. En videnskabelig artikel… • Samler trådene fra forskellige projekter • Underbygger med referencer til såvel forfatternes egne/andres forskning/projekter • Præsentation af forskellige igangværende projekter – som anslået i ’abstract’ – ’state-of-the-art’ • ’Idealistisk mål’ & visioner • Helhedsudtryk • Gennemgående vagt – hverken meget stærke eller ’flyvske’ påstande (alt følges op). • Svært at overskue de beskrevne projekters omfang og grænser (flydende overgange) - komplekst • Efterlader læser med spørgsmålet om, hvad præcis denne teknik kan bruges til? (Erstatning/supplement…) 11

  12. Perspektivering • 3D vs. VR diskussion fra sidst… • 3D modellering som redskab… • Overordnet – 2 hovedaspekter 1. Hvorfor anvende virtuel/3D scenografi? • Virtuel (’Immersive’: laserteknik - applicerer 3D scenografi i rum) • I teatret: fantasien allerede i spil – kulisser og andre virkemidler bidrager til oplevelsen.. 12

  13. En af mulighederne ved RESOLV er at mixe performance og 3D scenografi til output på et interface • Dixon’s tekst ”Remediating theatre in a digital proscenium” • Ritualer/immersive oplevelse knyttet til det at gå i teateret - lader sig ikke indfange på skærm • Nødvendigt at skabe et andet udtryk til skærmen! - men optagelsen kan anvendes i et mix • Oplevelsen vil til hver en tid være en ganske anden 13

  14. 2. Virtuel repræsentation • Betydning af virtuel repræsentation diskuteres af Wennberg i ”Virtuel Life” • Collective & physical sharing of experience • Being immersed • Able to interact as ’real-time avatars’ • Hvilke muligheder - interaktion mellem virtuelle og virkelige aktører…….? • I forhold til performance/generelt… 14

  15. VR-teater projekt ’Orakel’ (VRmedialab): ”Orakel er verdens første virtual reality-teater-performance. En kombination af virtual reality, supercomputer, traditionelt teater og ny performance - og en hel del mere.” • http://www.vrmedialab.dk/projects/orakel/orakel_hvader.htm 15

More Related