Considerações Criativas para Experiências de Realidade Prolongada

Esta semana, a Fast Company lançou seu Festival Anual de Inovação, apresentando sessões Fast Track que levam os participantes aos bastidores e às casas de algumas das empresas mais inovadoras da cidade de Nova York. As sessões Fast Track envolvem marcas e criativos através de conversas e experiências práticas apresentadas pelas empresas participantes, incluindo a MediaMonks.

Nosso escritório de Nova York abriu as portas para o dojo, convidando as marcas a entrar em nossa casa para discutir todas as coisas da realidade ampliada. Em uma sessão de painel dedicada à realidade aumentada e sua aplicação à música e entretenimento, nossos monges mergulharam profundamente no processo de design e desenvolvimento do Pharos AR - uma experiência AR móvel feita em colaboração com Childish Gambino, Wieden+Kennedy, Unity e Google. Levando os usuários em uma viagem cósmica contra uma faixa exclusiva de Childish Gambino, o aplicativo é notável por ser o primeiro vídeo musical multiplayer.

Com um painel que inclui Snider-Held (Creative Technologist, MediaMonks), Thomas Prevot (Produtor Sênior, MediaMonks) e Tony Parisi (Chefe de Soluções de Marca VR/AR, Unity), a sessão serviu como um bate-papo casual à lareira. A conversa começou estabelecendo o estado do VR e do AR, muitas vezes caracterizado pelos sentimentos conflitantes de que o VR está morto e que o caso claro de uso do AR ainda não foi encontrado. Mas ambas as tecnologias estão bem estabelecidas, cada uma se destacando em alcançar objetivos diferentes dentro de ambientes diferentes.

Mostrando nossa experiência Batman como um forte exemplo dos poderes imersivos do VR, Snider-Held observou que "Estas experiências ainda são muito baseadas na instalação", e que a distribuição do AR através do celular oferece o potencial para um maior alcance com uma experiência mais simples. Ao explicar o processo de desenvolvimento do AR Pharos em particular, o grupo explorou considerações-chave para os desafios a serem considerados ao desenvolver uma experiência de realidade ampliada.

O RA pode se sentir real sem ser fotorreal

O constrangimento estimula a criatividade - um adágio que se aplica tão bem à AR quanto qualquer outro meio de fazer arte. Como as experiências de AR móvel são projetadas para uso em uma variedade de dispositivos, elas devem ser relativamente leves para proporcionar uma experiência suave para a maior parte dos usuários. A falha em manter as restrições técnicas no topo da mente pode, em vez disso, resultar em uma experiência de gagueira retardada que quebra a imersão.

Embora isto seja verdade para qualquer experiência digital, é especialmente verdade para AR, um meio que, segundo Parisi, visa "interagir inteligentemente com o mundo real" Esta expectativa de integração perfeita com o ambiente ao redor pode fazer com que os gráficos da gagueira se destaquem como um polegar dorido. "Você quer manter a taxa de quadros acima de 30 quadros por segundo", diz Snider-Held, "porque o usuário irá comparar o movimento na tela com a ação que acontece ao seu redor na realidade"

O trio aproveitou este desafio como uma oportunidade para discutir o visual altamente estilizado alcançado com o Pharos AR. Embora um grafismo fotorealista possa ser impraticável para um dispositivo móvel renderizar realisticamente em tempo real, um visual estilizado apresenta a oportunidade de diferenciar sua experiência através de uma escolha estratégica em estética; para a Pharos AR, a equipe se inspirou visualmente nos espetáculos de palco pontuados a laser de Childish Gambino, garantindo o visual do aplicativo e a sensação de integração natural com o resto da marca visual do artista.

"Estilisticamente, estávamos tentando permanecer dentro das restrições do processamento móvel de uma forma visualmente atraente", disse Snider-Held. Um exemplo disso é o uso de efeitos de partículas, nos quais brilhos de luz se fundem em uma imagem fantasmagórica de Childish Gambino enquanto ele dança a música, animado através da captura de movimento. "Este é o melhor exemplo de por que você não precisa fazer fotorrealismo", disse Parisi. "Fomos capazes de capturar a essência de Donald, porque é a sua dança"

Planeje cuidadosamente o Ambiente Narrativo

As experiências de realidade ampliada são interativas por natureza, o que significa que elas dependem de uma abordagem diferente de como você planejaria e traria experiências mais lineares. Há um ato de equilíbrio cuidadoso entre dar aos usuários as rédeas para explorá-las por conta própria versus encadeá-las ao longo de um fio narrativo. O fundador da MediaMonks e COO Wesley ter Haar observa que "a IU narrativa é a chave para a integração e orientação do usuário em uma experiência AR", tornando incrivelmente importante que você planeje as interações dos usuários e use pistas ambientais para dar forma a uma narrativa.

Enquanto Pharos AR começa e termina através da interação aberta do usuário, ele ainda segue uma narrativa clara através do desempenho virtual do single de Childish Gambino, "Alogrhythm" Ao explorar o caminho principal através da experiência, a equipe começou a planejá-la em forma de storyboard, muito parecido com o que você faria para um filme. "Este processo não só serve como pesquisa visual, mas também como um briefing para a equipe de animação e uma visão de como as ações se desenvolverão no ambiente do usuário", disse Snider-Held.

Isso faz sentido - mas o que define o storyboarding para AR ou VR diferente de outras formas de narração digital? Como os usuários poderiam brincar com o aplicativo em suas casas, a equipe teve que planejar para outras variáveis o tamanho da cena virtual, e que ações seriam possíveis para múltiplos usuários dentro de um ambiente menor - como a sala apertada de um apartamento em Nova York, para oferecer um exemplo com o qual os participantes do Fast Track poderiam se relacionar. O desafio demonstra como é importante mapear a cena virtual para diferentes cenários e usuários.

Uma visão interessante revelada no painel foi que a equipe não se baseou apenas em métodos visuais de planejamento como mapas e storyboards. Devido à natureza da música de fundo que se acumula à medida que os usuários exploram o espaço ao seu redor, a equipe também desenvolveu uma linha do tempo musical que mapeia como as diferentes interações desencadeiam a estratificação da música. A etapa mostra como as pistas sensoriais e ambientais podem moldar a ação dentro de uma experiência de realidade imersiva e ampliada.

Seja desenvolvendo para VR ou AR, experiências de realidade estendida exigem que os desenvolvedores repensem a abordagem criativa além da história linear padrão. A partir de considerações na definição, restrições técnicas e variações no número de usuários entre plataformas, o desenvolvimento da realidade estendida depende de uma compreensão abrangente dos blocos de construção que compõem uma experiência total do usuário. Snider-Held encerrou a sessão com uma ambição sobre o que a MediaMonks pretende alcançar com as marcas através de tais experiências: "Nós nos esforçamos para promover o uso da tecnologia do impossível ao provável, e experimentamos como promovê-la, também"