Google faz avaliação “duplo-cega” do Gemini com enclave e GPU confidencial

O Google DeepMind apresentou a primeira avaliação “duplo-cega” de um modelo proprietário de IA de classe frontier, usando o Gemini com pesos e código de inferência ocultos dos avaliadores e, ao mesmo tempo, mantendo as perguntas do teste ocultas do Google. No piloto, o Gemini 2.5 Flash Lite foi testado contra benchmarks privados do MLCommons e do Singapore AI Safety Institute, com foco em como os testes foram conduzidos, e não em divulgar um novo placar do modelo.

A verificação ocorre com o Google Cloud Confidential Space, uma NVIDIA H100 Confidential GPU e criptografia de memória do host com Intel TDX, além de remote attestation para confirmar que o enclave executa o software combinado. Para reduzir riscos além da criptografia, o processo também usa PySyft (OpenMined) para aprovar código e bloquear partes sensíveis que tentem conexões externas, com overhead estimado em menos de 5%.