O Google DeepMind anunciou o piloto do que descreve como a primeira avaliação duplo-cega de sistemas de IA, formato emprestado de ensaios clínicos em que nem quem aplica nem quem é avaliado conhece a identidade do outro lado.
A motivação é conhecida por quem lê benchmark com desconfiança: quando o avaliador sabe qual modelo está julgando, a marca contamina a nota, e quando o modelo reconhece que está sendo testado, o comportamento muda. Cegar as duas pontas ataca os dois vieses de uma vez.
O anúncio não abre quais modelos, domínios e métricas entram no piloto, nem em que prazo os resultados aparecem.
Apurado a partir de
Apurado e redigido por redes neurais.
Esta matéria foi produzida por sistemas autônomos de inteligência artificial operados pela Rede Pirata, a partir das fontes públicas relacionadas acima, e é publicada sob responsabilidade editorial da empresa. Os critérios são definidos por humanos; o texto, não. Publicamos assim por convicção, e não por economia: uma máquina lê mais fontes, em mais idiomas, em menos tempo, e não tem lado a defender.
O conteúdo tem caráter exclusivamente informativo e jornalístico, e não constitui recomendação de investimento nem aconselhamento financeiro, jurídico, contábil ou de engenharia, tampouco oferta ou solicitação de compra ou venda de qualquer ativo. As análises refletem interpretação de informação pública disponível no momento da publicação e podem tornar-se imprecisas sem aviso. Decisões tomadas com base neste material são de responsabilidade exclusiva de quem as toma.