O software criado na Universidade recebe a música, “ouve-a” e depois cria um desenho animado de um pianista e replica os movimentos com grande rigor, tal como se fosse um pianista de carne e osso.
O sistema baseia-se na ideia de que um pianista virtuoso vai sempre mover as mãos de forma fluida, que relaxe o corpo e permita poupar energia.
O programa informático de Yuanfeng Zhu calcula o caminho mais eficiente para os dedos tocarem nas teclas e a posição do dedo é calculada para cada acorde na música. O algoritmo tem ainda em conta a posição do dedo em todas as ocasiões, mesmo quando não está envolvido no próximo acorde.
Apesar do desenho das mãos não parecer real, o movimento de cada mão e cada dedo é o mais real possível, conforme pode ser visto no vídeo da NewScientist.
