O iPhone torna-se câmara no Blender — sem aplicação

A câmara virtual no Blender dispensa um programa à parte no telefone. O add-on PocketCam apresenta a interface de filmagem diretamente no Safari: o utilizador lê um código QR a partir do Blender e o smartphone transforma-se numa câmara dentro da cena — rodar o corpo do aparelho roda o enquadramento, dar um passo pela sala desloca a câmara, agachar-se dá um ângulo baixo. O movimento é escrito na linha de tempo fotograma a fotograma, como uma animação normal.

O autor do projeto é o diretor de fotografia, artista 3D e animador Lewis Martin. A aplicação para o telefone é uma página web que o add-on publica na conta gratuita de Cloudflare do próprio utilizador. Não são necessárias loja de aplicações nem subscrição, e também não é preciso uma Wi-Fi comum: o computador e o smartphone comunicam através da internet e podem estar em redes diferentes.

O telefone segura a câmara, não roda o viewport

Na versão completa estão disponíveis duas variantes de tracking. A primeira assenta apenas nos sensores de movimento: o giroscópio responde pelas rotações e inclinações, enquanto o deslocamento é definido por joysticks no ecrã, incluídos em todas as edições. A segunda, markerless, acrescenta o deslocamento no espaço — o sistema acompanha-o pela câmara do smartphone e pelos sensores de movimento, e é precisamente ela que dá o efeito de andar com a câmara nas mãos.

O desenvolvedor refere as condições de filmagem em separado: o tracking assenta no que a câmara vê, pelo que uma parede branca e lisa não lhe dá pontos de referência, e recomenda-se filmar numa sala bem iluminada e com detalhes no enquadramento. O parâmetro Movement Scale é descrito como um multiplicador criativo e não como uma escala real calibrada. A imagem da câmara é processada no próprio telefone e não é transmitida para nenhum lado, e a ligação ao Blender passa pela conta de Cloudflare do utilizador e não pelos servidores do autor.

Para que a filmagem à mão não se transforme em tremura, o add-on tem bloqueio do horizonte, fixação da altura, modo de tripé (apenas panorâmicas e inclinações), suavização em tempo real e o mesmo Movement Scale: um passo real pode ser equiparado a um passo em volta de uma cena de secretária ou a um voo sobre uma cidade. Funcionam em separado os micromovimentos do pulso — Hand Pivot e Movement, que acrescentam paralaxe e uma tremura natural ao enquadramento. Há botões Recenter e Home, podendo o ponto de origem ser o cursor 3D ou a câmara atual. Nas versões Pro e Studio é possível controlar a câmara com um gamepad Xbox, sem sequer pegar no telefone.

As takes são escritas na linha de tempo e corrigidas após a filmagem

Para o telefone vai a vista de câmara que o próprio Blender renderiza — o ecrã do computador não é gravado, por isso no macOS não aparecem pedidos de acesso à gravação de ecrã nem fotogramas negros. O tamanho, a frequência de fotogramas e a qualidade do fluxo podem ser ajustados à ligação. A ótica escolhe-se entre seis focais fixas — 14, 24, 35, 50, 85 e 135 mm; a roda de zoom contínuo de 12 a 200 mm está disponível em Pro e Studio, funciona também o gesto de pinça, e a mudança de distância focal é gravada juntamente com a take.

O mais prático para os animadores é o trabalho com takes. A gravação corre com o som da linha de tempo, pelo que a câmara pode ser conduzida ao ritmo de música ou de uma fala. Cada take é guardada em separado, a alternância faz-se com um clique, as falhadas são eliminadas e a animação original da câmara permanece intacta. Já depois da filmagem é permitido resuavizar a take com um cursor de 0 (dados em bruto) a 1 (como com um steadicam) ou redefinir a objetiva: manter a gravada, fixar uma única distância focal para toda a take ou animá-la manualmente. Ou seja, um erro devido ao tremor da mão não obriga a filmar a cena de novo.

Estão previstas também as miudezas do processo de filmagem: contagem decrescente de 0 a 10 segundos antes do início, modo Review depois da take, moldura vermelha do visor durante a gravação, código de tempo e número de fotograma na linha superior do telefone. Após uma quebra de ligação, o telefone volta a ligar-se sozinho, sem nova leitura do código QR.

Quanto custa e o que é preciso para começar

O add-on é vendido na Superhive em três edições com pagamento único: a PocketCam Lite, por 12 dólares, dá giroscópio e joysticks com focais fixas; a Pro, por 24 dólares, acrescenta 6 DoF completos com deslocamento no espaço, a roda de zoom e o suporte para gamepad; a Studio, por 69 dólares, cobre até dez artistas de uma mesma empresa. O uso comercial é permitido em todas as variantes e sem limite de receitas, e o autor entrega 1% de cada venda ao Blender Development Fund.

É anunciada compatibilidade com o Blender desde a 4.2 LTS até à 5.2 em Windows e macOS; na documentação indica-se que os testes foram feitos em Mac e iPhone no Safari, enquanto Android, outros navegadores e tablets não foram testados para esta versão e, por agora, não são suportados. Ambos os dispositivos precisam de internet — não há modo offline. A configuração é feita uma única vez e leva cerca de cinco minutos: conta de Cloudflare, token de API de nível Workers Admin, botão Create Phone App no Blender; não são necessários terminal nem código. Vale a pena ter o token em conta à parte: dá permissões para gerir todos os Workers da conta escolhida, e os preços e limites da Cloudflare não têm relação com o preço do add-on.

Porque é que a câmara virtual foi para o navegador

A produção virtual manteve-se durante muito tempo um tema caro: para filmar um plano à mão numa cena 3D, os estúdios instalavam trackers de sistemas de VR, mantinham um espaço de captura de movimento ou compravam aplicações móveis à parte, que era preciso atualizar a seguir às versões dos pacotes DCC e às mudanças de política das lojas. A escolha do Safari e dos Cloudflare Workers em vez de uma aplicação nativa parece uma tentativa de remover exatamente essa barreira — a distribuição e a compatibilidade.

O efeito secundário desta abordagem nota-se de imediato: a infraestrutura é paga e administrada pelo próprio utilizador e o desenvolvedor livra-se de servidores e da revisão na loja de aplicações. Se o modelo funcionar, outros autores de ligações «telefone — pacote DCC» irão provavelmente pelo mesmo caminho: o limiar de entrada para um desenvolvedor solitário é aqui bastante mais baixo do que no caso de uma aplicação móvel.

Para equipas pequenas e freelancers, isto significa que o trabalho de câmara em rascunho — voos em torno, travellings, filmagem ao ritmo da música — depende menos da compra de equipamento. A qualidade do tracking pela câmara do smartphone fica previsivelmente atrás dos sistemas de hardware e, a julgar pelas ressalvas do próprio desenvolvedor sobre a iluminação e a textura no enquadramento, para o plano final é melhor vê-lo como uma base que depois se corrige com suavização. Para previs, animática e procura de ângulos, isso costuma bastar.

Está disposto a entregar a câmara virtual ao navegador ou vai ficar na ligação por cabo ao telefone? O que falta para levar a filmagem para o Safari?