Na segunda-feira, 22 de abril, THE 100%—uma narrativa em VR “única no gênero”—estreou no Tribeca Film Festival em Nova York. Vencedor do prêmio Tribeca X Award de Melhor Filme em VR deste ano, o filme conta a história de Maggie Kudirka, uma jovem bailarina do Joffrey Concert Group, cuja carreira foi interrompida devido ao câncer. Usando vídeo volumétrico e LiDAR para criar uma experiência em VR que conta a história de Maggie, a Springbok Entertainment inovou no campo das narrativas imersivas.
Conversamos com Andy Cochrane, chefe de conteúdo imersivo da Springbok Entertainment, sobre o uso do Leica BLK360 como parte essencial do projeto.
Qual é o enredo de THE 100%?
THE 100% é uma narrativa imersiva em VR que se passa no Orpheum Theater em Vancouver. Essa experiência é uma interpretação teatral da história real de Maggie, que teve sua promissora carreira como bailarina interrompida por um câncer de mama metastático aos 23 anos. O projeto foi desenvolvido para beneficiar a organização sem fins lucrativos Stand Up To Cancer (SU2C). No final, THE 100% trata de superação de adversidades e perseverança diante de grandes desafios, com o objetivo de levar esperança aos pacientes com câncer e seus apoiadores.
Por que VR para este projeto?
Documentários imersivos são impactantes devido a um efeito de “transporte”, onde o espectador sente como se estivesse realmente lá. Este efeito tem sido comparado à diferença entre pensar sobre algo que você assistiu e se lembrar de algo que você viveu – a VR tem a capacidade de criar algo que parece ser memórias. Isso, por sua vez, leva a um senso muito maior de empatia pelo tema de um documentário imersivo, algo que podemos atestar com base em quantas pessoas foram levadas às lágrimas após experimentar THE 100% em um headset de VR.
Qual é o maior benefício de usar a tecnologia de Reality Capture para recriar este espaço?
Algumas das experiências de VR mais realistas usaram fotogrametria e LiDAR como base para a criação de seus ambientes. A sensação de realmente estar em um local real é incrivelmente eficaz para ajudar o espectador a sentir que está verdadeiramente em uma realidade virtual, o que, por sua vez, leva a um engajamento muito maior com a experiência geral.
No caso de THE 100%, adicionamos capturas de vídeo volumétrico a um ambiente capturado com LiDAR e HDRI para um nível totalmente novo de imersão. Embora este seja um trabalho teatral, trabalhamos arduamente para que parecesse uma performance real em um espaço real, colocando o público no palco no meio da história de Maggie. Sem a capacidade de capturar o mundo real com detalhe e qualidade, teríamos ficado com uma experiência que parecia superficial e mais semelhante a um videogame do que a uma realidade cinematográfica.
Cada triângulo amarelo representa uma localização de varredura no Orpheum Theater capturada com o BLK360.
Qual é a parte deste projeto da qual você mais se orgulha?
O impacto que essa experiência já está tendo no mundo desde sua estreia no Tribeca. No setor de entretenimento, muitas vezes nos esforçamos para distrair e entreter um público, mas em trabalhos como THE 100% temos uma oportunidade rara de criar arte que terá um impacto mensurável nas pessoas que lidam com o câncer, aumentando o financiamento para pesquisas sobre novas maneiras de ajudá-las.
Todos nós nos sentimos honrados por trabalhar neste projeto, e cada um de nós tem experiências pessoais com o câncer, então temos nossas próprias razões individuais para querer que este trabalho seja bem-sucedido. Como grupo, compartilhamos um profundo orgulho pelo que criamos e sentimos uma responsabilidade de levar isso o mais longe possível para maximizar o impacto que podemos ter.
Como experiências autênticas ajudam a gerar e estabelecer empatia com o público? E por que isso é importante para a narrativa e documentários em particular?
Como esta é a primeira experiência desse tipo, muitos aspectos da produção eram teóricos ou instintivos de nossa parte. Contudo, sabíamos que a tecnologia de captura volumétrica da Microsoft estava pronta para produção de alto nível e tínhamos a equipe, o cronograma e o orçamento para realizar isso, mas tínhamos que adivinhar como o filme se sentiria para o público. Também sabíamos que ficar 1:1 frente a frente com Maggie seria impactante. Ficamos agradavelmente surpreendidos em cada estágio desse processo com quão bom tudo parece e quão real tudo se sente.
Alguns de nossos primeiros espectadores de teste não sabiam que era um 3D totalmente renderizado em tempo real, pois estavam acostumados a conteúdos previamente renderizados em 360º ou de baixa qualidade em tempo real. O vídeo volumétrico é uma categoria completamente nova de tecnologia imersiva, e isso nos encantou com quão pessoal, bonito e envolvente pode ser.
Como o Leica BLK360 foi usado para capturar o espaço?
Usamos dois BLK360 para escanear cada milímetro do Orpheum Theater em Vancouver. Capturamos muito mais dados do que precisávamos, apenas para ter um enorme conjunto de dados para refinar nossa linha de processamento posteriormente.
Carregamos os BLK360 com mais de 60 escaneamentos de alta qualidade, que produziram uma quantidade absolutamente incrível de detalhes dentro do auditório e do saguão. Descobrimos até que capturamos parte da rua do lado de fora através das janelas do saguão!
Andy Cochrane e a equipe da Springbok Entertainment escaneando o Orpheum Theater com o BLK360.
Como foi o processo de uso do LiDAR? O que você faria sem o LiDAR, e quais são as vantagens percebidas do LiDAR?
O BLK360 revolucionou a maneira como capturamos ambientes. Nos primeiros dias dos efeitos visuais (VFX), usávamos equipamentos de levantamento, plantas baixas, fotografias de referência e suposições para criar um modelo 3D correspondente a um local real. Usando fotogrametria, conseguimos capturar mais detalhes em menos tempo, mas a quantidade de esforço necessário para capturar milhares de fotografias bem expostas e nítidas com iluminação variável sempre foi um desafio. O erro inerente à fotogrametria também tem sido um problema para todos os departamentos de 3D, exigindo muita intervenção manual.
O LiDAR sempre foi considerado um luxo que poucos podiam pagar, então não foi até o surgimento do BLK360 que conseguimos até considerar a construção de um pipeline de captura de realidade em torno dele. Agora que podemos capturar bilhões de pontos 3D precisos no local sem precisar interromper tudo por horas, o LiDAR se tornou a pedra angular do nosso pipeline de captura de realidade, com a fotogrametria e HDRI contribuindo com detalhes de textura, mas não com a geometria subjacente. Trabalhamos duro para desenvolver um pipeline que une essas tecnologias díspares em um fluxo coeso que aproveita a precisão do LiDAR e os detalhes da fotografia, e THE 100% foi apenas a primeira execução desse emocionante processo.
O que você usou além do BLK360?
Capturamos milhares de fotos HDRI do Orpheum Theater em conjunto com os escaneamentos do BLK360, e acabamos usando esses panoramas de alta qualidade para texturizar a malha 3D que obtemos do 3DReshaper.
O que você espera que os espectadores lembrem mais? Como você espera que isso os impacte?
A mensagem positiva de Maggie e a incrível projeção de esperança foram o que mais nos inspirou durante essa produção. Queremos que os espectadores saiam dessa experiência com um senso de empatia por Maggie e a urgência de ajudar a encontrar uma cura para tantos afetados pelo câncer. Esperamos mais do que tudo que os espectadores saiam do headset decididos a fazer algo, e que esse desejo de ação se torne tangível em benefício do SU2C.
Aviso Legal: Este artigo apresenta o Leica BLK360 G1. Explore as capacidades expandidas do modelo BLK360 mais recente aqui.
BLK360
BLK2GO
BLK2GO PULSE
BLK ARC
BLK2FLY
BLK3D
Software
Acessórios