"Aprendemos sobre o seu sistema de rastreamento e queremos vê-lo em ação agora, porque retornaremos a São Petersburgo à noite!"Embora estivéssemos no escritório, as medidas preventivas não permitiam que ninguém, exceto os funcionários, entrasse no prédio, por isso continuamos a conversa telefônica e elaboramos um plano de ação levando em consideração as medidas de "quarentena".
Os clientes do outro lado da linha eram os caras da Black Anchor Productions Ltd. e Parallax Digital. Eles mais uma vez descreveram o problema que deveria ser resolvido com nosso sistema de rastreamento (captura de movimento), indicaram as características desejadas do sistema e concordamos com a primeira série de testes online.
Sem estar online este ano, em lugar nenhum e, portanto, antes de realizar testes em seu site em São Petersburgo, era importante para o cliente entender as capacidades do sistema como um todo e determinar a possibilidade de integrá-lo em seus processos. Portanto, juntos definimos as condições em que é necessário testar o sistema e os métodos de visualização e apresentação dos resultados dos testes.
Testes caseiros
Depois disso, com toda a alegria, fomos preparar o sistema e realizar, de fato, os próprios testes, que conseguimos perder durante a quarentena e “remoção”. A tarefa consistia em mostrar o funcionamento do sistema em estática com a presença de vários ruídos que estavam à nossa disposição naquele momento e sem eles, e os mesmos testes em dinâmica. Ao mesmo tempo, na saída, nosso sistema deveria fornecer coordenadas 3D (devido aos módulos de rádio) e ângulos de giro (devido aos sensores inerciais).
Mandaram todos os resultados - agora, como dizem, "a bola está do lado deles". Após várias semanas de feedback e esclarecimento da nossa parte sobre as características e condições de trabalho exigidas, e da sua parte - das capacidades e modos de operação atuais e potenciais do nosso sistema (claro, não foi sem esclarecimento de testes com a chegada de novas informações), recebemos um convite para vir para os testes offline para a capital cultural de nossa pátria - São Petersburgo, ele é Pedro, ele é São Petersburgo, e os velhos dirão - Leningrado. Então, seu CEO Kirill Andreevich nos ligou e disse:
"Venha amanhã a São Petersburgo para nosso site por uma semana, nós o ajudaremos com a acomodação"É difícil recusar uma oferta tão boa, então montamos um sistema, pegamos as passagens do trem noturno e corremos para São Petersburgo! Como um amante das viagens, fiquei duplamente feliz em partir para algum lugar a mais de 100 km de Moscou, após mais de seis meses de quarentena e isolamento, e até mesmo para uma cidade tão linda!
Reconhecimento em vigor
Chegamos à estação ferroviária Moskovsky, onde fomos recebidos e instalados em um apartamento próximo ao local do cliente pela charmosa Anna Karelkina, gerente operacional da Black Anchor Productions & Parallax Digital.
Instalamo-nos na nossa nova casa, alguns dos membros da nossa equipa até conseguiram dormir um pouco e chegaram ao local na hora marcada. Então tudo é como uma névoa ...)
O local está localizado no centro histórico do bairro de Petrogrado, no centro de televisão da JSC "Teleradiocompany Petersburg" - um pavilhão de tiro completo, no qual as filmagens reais do programa ocorreram no momento em que fomos lá pela primeira vez.
Um enorme pavilhão de 17 * 30 metros com pé-direito alto - 10 metros, que tanto falta no nosso campo de treino. Acho que muitos pensaram ao assistir filmes e programas de TV“Como é tudo filmado? Como vão as coisas? " ... E então entramos no corpo - nos bastidores e vimos com nossos próprios olhos como a magia da televisão e do cinema é realizada. Portanto, se você me perguntar sobre alguns detalhes das negociações daquele primeiro dia, quase não consigo me lembrar de nada, pois observei o processo de filmagem com curiosidade.
A propósito, sobre o processo de filmagem. Ele não era tão comum porque estávamos no local não apenas com os mágicos, mas também com os mágicos de primeiro nível! (bem, ou qual gradação eles têm lá). Esta é uma nova tecnologia revolucionária na área de cinema que permite reduzir não só o tempo de produção, mas também o seu orçamento.
A ideia da filmagem combinada surgiu há muito tempo e, se falarmos dela em seu sentido clássico, referindo-nos aos métodos já testados e comprovados, a filmagem combinada realmente expande significativamente as capacidades visuais do cinema e permite reduzir os custos de produção e facilitar o trabalho da equipe de filmagem. Geralmente é usado quando a filmagem direta de uma cena é muito cara em comparação com a combinação. Dessa forma, por exemplo, é possível evitar os custos de filmagens caras de cenas de atuação em locações durante uma expedição, especialmente em locais de difícil acesso.
A vantagem qualitativa da nova tecnologia em nosso mercado, que agora está sendo desenvolvida pela equipe da Black Anchor Productions & Parallax Digital, é o efeito Parallax - uma mudança na posição aparente de um objeto em relação a um fundo distante, dependendo da posição do observador. Sobre a utilização das propriedades físicas e ópticas desse efeito "cósmico" - no sentido literal - afinal, esse termo nos veio da astronomia, onde é usado para medir a distância a objetos distantes (em particular em parsecs), apostou por Jon Favreau e Disney + e criou com ela ajuda a série "Star Wars: The Mandalorian", que se tornou um verdadeiro avanço na indústria cinematográfica. Como os líderes admitiram, essa foi uma das coisas que os inspirou a começar a trabalhar nessa direção. Foi então que ficou claro que o uso de tecnologias de ponta e de ponta é o verdadeiro credo da equipe Black Anchor, e como poderia ser diferente - para isso contam com todos os especialistas necessários, cuja equipe está em constante expansão, e atuam não só no set, mas também em outras cidades da Rússia e no exterior.
Para eles, pesquisar coisas novas e encontrar aplicações práticas para seus próprios desenvolvimentos de software e hardware na indústria de vídeo, eventos e cinema é uma das tarefas prioritárias, e o espírito de pioneiros é um estilo de vida.
No momento, a Parallax Digital é uma das poucas associações criativas e científicas que conheço, que aposta tão seriamente na criação de seu próprio software, acho que é essa abordagem que aproxima nossas equipes.
No processo de observação do processo de filmagem, as vantagens desse tipo de produção de conteúdo ficaram imediatamente claras:
- , , Epic Games — Unreal Engine, , , . realtime LED – , 4000 lm, 16K.
- vfx , osc dmx AR CGI , .
- – , – , , . – , , , .
- , – , «».
Rastreamento de câmera
Para que a cena virtual na tela mude seu ângulo, seguindo a mudança na posição da lente na área de rastreamento, um chamado Genlock é necessário - este é um método no qual a saída de vídeo de uma fonte (ou um sinal específico) é usada para sincronizar outras fontes de imagem juntas. Isso ajuda a garantir que os sinais coincidam no tempo no ponto de fusão ou troca. Para isso, é necessário conhecer os dados de movimentação da câmera e enviá-los em tempo real ao servidor para sincronização com a cena virtual. Aqui, os personagens principais são sistemas de rastreamento. Mencionei as peculiaridades das condições de trabalho dos sistemas ópticos e inerciais no meu último artigo "Castelo para beber em condições" extremas "ou como participamos no espetáculo" DOZOR ", no entanto, essa é uma tarefa um pouco diferente de uma maquete única de atores - o sistema deve rastrear os movimentos da câmera durante o processo de filmagem e em quase todas as condições de filmagem. O sistema de rastreamento ideal para tal ocasião - versátil, confiável, preciso e à prova de balas!
Especialistas da Black Anchor prod. testamos todas as soluções de rastreamento disponíveis no mercado, porém, não encontramos um universal e totalmente adequado para o maior número de cenários e condições, por isso no momento utilizam sistemas diferentes, escolhendo o certo com base nas condições em que deve funcionar não só de forma estável, mas também com um submilímetro precisão. Isso significa que há uma grande oportunidade de ser o primeiro a criar a solução mais versátil e adequada para tarefas de rastreamento de câmera na produção de filmes!
Com um maior grau de probabilidade, tal tarefa é viável para um sistema de rastreamento híbrido (combinando 2 ou mais sistemas), pois neste caso é possível enfatizar todas as vantagens e minimizar todas as desvantagens que os sistemas apresentam separadamente.
É uma solução híbrida que nossa equipe de rastreamento de SCM está desenvolvendo! Com a ajuda de nosso software, melhoramos e combinamos os dados enviados por módulos radioinerciais. Assim, nosso software combate o erro sistemático do sistema inercial e a presença do componente de ruído dos módulos de rádio de banda ultra-larga (UWB). Para fazer isso, nosso arsenal inclui algoritmos não lineares para filtragem complexa com base em nossos próprios modelos de movimento. O sistema de rádio implementa o algoritmo de diferença de tempo de chegada (TDoA). Sua essência é a seguinte. Alguns dos módulos, aqui chamados de âncoras, são estacionários ao longo do perímetro da zona com coordenadas conhecidas, sincronizam-se entre si e emitem um sinal periódico. Em pessoas, partes de seus corpos ou outros objetos, cuja posição e orientação devem ser rastreadas, módulos são anexados, chamados de marcadores,que funcionam exclusivamente para receber esses sinais. Porque os momentos de emissão de sinais ao marcador são desconhecidos, ele mede as diferenças nos momentos de tempo de sua recepção. Esta abordagem permite fornecer um número ilimitado de marcadores e um longo alcance de seu trabalho - uma grande área de trabalho.
A teoria é boa, claro, mas e na prática?
Então, de volta ao site!
Conhecemos os principais membros da equipe de produção da Black Anchor. e determinou o plano de teste para o primeiro dia, levando em consideração o processo de filmagem. Recebemos um lugar no site onde podemos nos posicionar, nossos PCs e sistema - um local de trabalho completo!
No primeiro dia, pudemos demonstrar a operação do sistema em uma pequena área com a saída dos resultados na tela do nosso laptop, e também verificar se havia alguma influência mútua do nosso sistema com o equipamento no local - o equipamento não afetou significativamente o funcionamento do nosso sistema, bem como o nosso sistema no equipamento ... Todo o segredo está nos módulos de rádio UWB, que operam em uma frequência dedicada na faixa de microondas. A propósito, já agora o módulo UWB está incluído nos dispositivos móveis da nova geração, o que abre grandes oportunidades para transmissão de dados, etc., mas já conhecemos e podemos trabalhar com UWB).
Nos próximos dias, conseguimos lançar o sistema em uma área maior na frente da tela em um ambiente mais silencioso no local (o volume de filmagem e a ocupação do local foi menor do que no primeiro dia) e, junto com a equipe do cliente, sincronizar com a cena virtual e avaliar a suavidade e precisão do ângulo da câmera. com o movimento do marcador. Para isso, colocamos 4 tripés na área de trabalho em frente à tela e neles colocamos 8 módulos de ancoragem, conforme mostrado na foto.
Os módulos eram alimentados por baterias externas comuns de 2300 mAh, o que era suficiente para um dia inteiro de trabalho. O marcador foi anexado à câmera ou a um tripé quando a câmera estava em uso.
Durante os testes, vimos com nossos próprios olhos todo o fluxo de trabalho, discutimos e olhamos para as decisões atuais dos caras - os mais reconhecimentos em vigor e "donzelas de casta em campo", o que mais você poderia querer?
E isso é só o começo! Então…
A equipe de desenvolvimento nos iluminou em seus planos futuros: no futuro, a prioridade mudará para a criação de nossos próprios sistemas de hardware e software, o que permitirá que o sistema seja implantado em qualquer local, e o complexo será completamente móvel e permitirá que funcione sem perda de qualidade e precisão dos sistemas de rastreamento. Anna, ao nos despedir, disse que em um sentido mais amplo, o vetor adicional de desenvolvimento da empresa será determinado em função das necessidades do mercado e da indústria cinematográfica como um todo - e sugeriu,que pretendem mostrar o seu progresso nesta direção, inclusive a partir do exemplo do próprio curta - o trabalho de sua produção já foi concluído - a etapa mais extrema permanece - a pós-produção - mas como já entendemos - não vai demorar muito - a tecnologia permite que você veja quase o final "Picture" já está em processo de filmagem, o que talvez seja outro recurso importante e interessante.
Agradecimentos especiais à equipe de produções da Black Anchor. para uma recepção realmente calorosa (incluindo um programa cultural), a oportunidade de ver a "dor do cliente" e entender quais parâmetros e características do sistema precisam ser finalizados para um case de rastreamento de câmera para tarefas de filmagem virtual.
Como resultado, determinamos nossos próximos passos: finalizamos alguns parâmetros e voltamos ao site de São Petersburgo para conquistá-los!
Continua ...