A investigação da Electronic Frontier Foundation mostra que o NGI do FBI não é muito eficiente e que, para cada rosto estudado, aparecem cerca de 50 possibilidades e apenas 85% de probabilidade de devolver o nome do suspeito.
Segundo o The Verge, o desempenho do programa do FBI é ainda pior quando comparado com o DeepFace, do Facebook. O programa da rede social de Zuckerberg consegue identificar, com 97% de certezas, se é o mesmo rosto que está em duas fotografias diferentes. Esta precisão é comparável ao que consegue fazer o ser humano.
Apesar de o Facebook considerar outros dados que não só a imagem do rosto, a impressão geral é que o FBI está mais atrasado do que a rede social no que diz respeito ao reconhecimento de rostos.
O sistema do FBI também requer que o suspeito esteja de frente para a câmara, ou seja, que o desvio face ao eixo central não seja superior a 15 graus. Esta condicionante impede a utilização do sistema para reconhecimento de um rosto captado, por exemplo, por câmaras de trânsito. É preciso existir ainda uma evolução nas câmaras de vigilância existentes para poderem começar a ser usadas em reconhecimentos faciais.
Os especialistas não preveem que o sistema de reconhecimento vá ter uma grande evolução nos próximos cinco a dez anos. Outra das críticas principais prende-se com a elevada possibilidade de haver falsos positivos e não existirem mecanismos redundantes de verificação, como a validação da altura ou outros.
A base de dados do FBI centraliza 50 milhões de fotos e o programa vai estar disponível em todos os EUA. O Facebook, por sua vez, tem mais de 250 mil milhões de fotografias e consegue oferecer uma cobertura a nível mundial.
Tudo indica que se a rede do FBI tiver mais fotos, mais nomes e uma forma mais inteligente de se organizar, será bastante mais eficiente no reconhecimento facial.
As autoridades federais podem, no fundo, querer fazer um pouco de engenharia reversa e desconstruir o modelo usado pelo Facebook ou exigir, em tribunal, que a rede social revele os seus segredos para construir um sistema melhor.