Tal como o filme de Vitorio De Sica que lhe serve de referencial e o alimenta plasticamente, este trabalho desfaz-se de adornos e procura, numa representação depurada, a manipulação de um plano de Umberto D, por reacção à atenção que o espectador lhe dedica, analisada computacionalmente.
Neste filme, um dos expoentes do neo-realismo italiano, o realizador retrata, numa Itália em profunda depressão, a luta interior de um funcionário público reformado pela sobrevivência diária e pela manutenção da sua dignidade.
O movimento de Umberto D no plano em que tenta mendigar, é utilizado como reflexo do resultado da análise da atenção do espectador, por intermédio de um sistema computacional com essas capacidades. O excerto em que Umberto estende a mão, só se reproduz se ninguém estiver observando o personagem ou, apenas, olhando de soslaio, num reflexo da forma como a sociedade olha envergonhada para a pobreza mas também da angústia de a assumir. Quando o espectador observa com atenção Umberto D, este, vira a mão, simulando que percepciona a queda de gotas de chuva. Como faz no filme, quando, finalmente, um transeunte lhe oferece esmola.
Attention as Interface
Attention is the cognitive process of selectively concentrating on one aspect of the environment while ignoring other things. [Strayer, D. L., Drews, F. A. & Johnston, W. A. (2003) Journal of Experimental Psychology: Applied, 9,” 23-32.]
A interacção com o espectador resulta da análise da atenção que o mesmo lhe dedica. O dispositivo de interacção procura conceptualizar um nível de interacção não apenas reactivo mas, também, cognitivo. A interacção é resultado de uma interpretação afectiva do comportamento do espectador, através de várias abordagens tecnológicas e conceptuais e não apenas resultado da reacção a um estímulo imediato de sensores.
Estratégias e tecnologias que começam a ser utilizadas em publicidade para aferição de impacto comunicacional são aqui convocadas. Métodos mistos de visão por computador e de sensores, associados a algoritmos de computação afectiva, permitem definir áreas e comportamentos que revelam detalhes emocionais do utilizador, face a um dispositivo comunicacional. O contexto de apresentação da peça, excluído de outros estímulos e pressupondo a disponibilidade do espectador, proporciona uma interpretação mais simples embebida na análise temporal da direcção do olhar e da distância do espectador à projecção de Umberto D, não deixando de convocar, conceptualmente, uma interpretação afectiva.
: “the future of cinema is loops” unpublished article by Nicholas Negroponte
A partir da análise computacional do comportamento do(s) espectador(es) procede-se a uma reconstrução dinâmica do plano de De Sica, respeitando critérios de linearidade e coerência temporal, tão caros ao movimento neo-realista italiano. O conjunto de entradas do sistema, visão computacional e sensores de proximidade, permitem analisar o comportamento do(s) espectador(es), reflectindo na manipulação do loop de Umberto D o comportamento destes para com a situação social que se lhe depara. Desde a posição em que Umberto está com a mão no queixo, cabisbaixo, envergonhado porque estão muitas pessoas, perto e atentas a ele, até considerar disfarçar porque alguém se aproxima, observando-o. O algoritmo de montagem dinâmica procura criar, a partir deste loop de De Sica, uma experiência cinemática coerente que só a repetição controlada, denuncia. A abordagem à edição de imagem, apesar de computacional, procura uma continuidade espacial, temporal e comportamental verosímil, enquanto experiência cinemática clássica. Pequenos loops dentro do loop global e transições naturais entre sequências de imagens, são a estratégia composicional da montagem.