Un consortium de 40 sociétés -dont Google et Facebook- a mis au point un benchmark et un ensemble de critères afin d'évaluer les programmes d'intelligence artificielle.
La sélection des programmes pertinents sera ainsi simplifiée par une mesure commune, et permettra de valider plus rapidement certains concepts. Répondant au doux nom de MLPerf Inference v0.5, le test comprend trois sections, la classification des images selon certains critères prédéfinis, la détection d'objets et la traduction automatique.
Le programme sera capable de distinguer les plateformes (smartphones, ordinateurs ou puissant serveurs) et d'attribuer un score pertinent en fonction du support. Selon Peter Matson, dirigeant de MLPerf, cette échelle de mesure commune devrait faciliter les innovations et offrir un outil performant, y compris pour les plus petites entreprises.
