Primate Labs, l’entreprise derrière le célèbre benchmark Geekbench, annonce le lancement de Geekbench AI 1.0. Cet outil innovant promet de redéfinir la façon dont nous évaluons les capacités d’IA de nos PC.
Enn effet, l’intelligence artificielle (IA) révolutionne rapidement notre environnement numérique, créant ainsi un besoin croissant d’évaluer avec précision ses performances. En réponse à cette demande, Primate Labs a développé Geekbench AI 1.0, un outil innovant conçu pour mesurer efficacement les capacités des systèmes d’IA modernes.
Geekbench AI : Une nouvelle approche des benchmarks d’IA
Après cinq ans de développement, Geekbench AI 1.0 arrive sur le marché avec une promesse audacieuse : offrir une mesure précise et pertinente des performances en matière d’apprentissage automatique, d’apprentissage profond et de tâches spécifiques à l’IA. Contrairement aux benchmarks traditionnels, Geekbench AI a été conçu pour refléter l’utilisation réelle de l’IA dans les applications et logiciels que nous utilisons quotidiennement.
Ces scores permettent de mesurer les différentes façons dont l’IA effectue son travail, offrant ainsi une image plus complète des performances de l’appareil testé.
Les différents tests effectués
Geekbench AI propose une série de tests de vision par ordinateur couvrant un large éventail de tâches d’inférence, spécifiquement conçus pour évaluer les performances des applications sur ordinateurs portables et appareils mobiles :
- Classification d’images : Utilise MobileNetV1 pour identifier la catégorie d’un objet dans une image.
- Segmentation d’images : Utilise DeepLabV3+ avec MobileNetV2 comme base pour classer chaque pixel d’une image.
- Estimation de pose : Utilise OpenPoseV2 avec VGG19 comme base pour estimer la position des articulations du corps humain.
- Détection d’objets : Utilise SSD (Single Shot Detector) avec MobileNetV1 comme base pour détecter et localiser plusieurs objets dans une image.
- Détection de visages : Utilise RetinaFace avec MobileNetV2 comme base pour détecter et localiser les visages dans une image.
- Estimation de profondeur : Utilise ConvNets avec EfficientNet-lite3 comme base pour créer une carte de profondeur à partir d’une image RGB.
- Transfert de style : Utilise Image Transform Net pour appliquer le style d’une image à une autre.
- Super-résolution d’image : Utilise RFDN (Residual Feature Distillation Network) pour convertir une image basse résolution en haute résolution.
- Classification de texte : Attribuer un texte libre à des catégories prédéfinies comme par exemple déterminer si une critique de film est positive ou négative
- Traduction automatique : Traduire du texte d’une langue à une autre avec un mécanisme d’auto-attention sophistiqué pour analyser les liens entre les mots, qu’ils soient proches ou éloignés dans la phrase.
Au-delà de la vitesse : l’importance de la précision
Geekbench AI ne se contente pas de mesurer la vitesse. Il évalue également la précision des résultats, un facteur crucial dans les applications réelles de l’IA. En comparant la sortie du modèle à la vérité terrain, Geekbench AI donne un aperçu de la fiabilité des résultats d’IA sur l’appareil testé.
Compatibilité étendue et facilité d’utilisation
Geekbench AI 1.0 est disponible sur une large gamme de plateformes :
- iOS (via l’App Store)
- Android (via le Google Play Store)
- Windows, macOS et Linux (via le site web officiel)
Avec une interface simple et intuitive, Geekbench AI permet d’obtenir des résultats détaillés en un seul clic.
Trois nouveaux scores pour une évaluation complète
Geekbench AI introduit trois nouveaux scores pour capturer les nuances des performances en IA :
- Score de précision simple (SP)
- Score de demi-précision (HP)
- Score quantifié (Q)
Test GeekBench AI : Ryzen 9 9950X vs Core i9-14900K
Tant qu’a faire, nous avons proceder à une comparaison entre les deux géants CPU du moment, le nouveau AMD Ryzen 9 9950X et l’eternel Intel Core i9-14900K :
En général, le Ryzen 9 9950X) surpasse le Core i9-14900K dans la plupart des tâches d’IA, avec des performances particulièrement impressionnantes dans l’estimation de pose et le transfert de style. Voici les résultats détaillé
| AI Performance | Ryzen 9 9950X | Core i9 14900K | 9950X % 14900K |
|---|---|---|---|
| Image Classification (SP) | 2677 | 2686 | 99.7% |
| Image Classification (HP) | 229 | 170 | 134.7% |
| Image Classification (Q) | 6074 | 4733 | 128.3% |
| Image Segmentation (SP) | 2907 | 2652 | 109.6% |
| Image Segmentation (HP) | 404 | 333 | 121.3% |
| Image Segmentation (Q) | 4172 | 3905 | 106.8% |
| Pose Estimation (SP) | 30421 | 12831 | 237.1% |
| Pose Estimation (HP) | 183445 | 144 | 356.6% |
| Pose Estimation (Q) | 86560 | 41305 | 209.6% |
| Object Detection (SP) | 3393 | 3302 | 102.8% |
| Object Detection (HP) | 324 | 261 | 124.1% |
| Object Detection (Q) | 3307 | 2944 | 112.3% |
| Face Detection (SP) | 4863 | 6125 | 79.4% |
| Face Detection (HP) | 486 | 381 | 127.6% |
| Face Detection (Q) | 7291 | 6744 | 108.1% |
| Depth Estimation (SP) | 14758 | 12240 | 120.6% |
| Depth Estimation (HP) | 1632 | 1104 | 147.8% |
| Depth Estimation (Q) | 16608 | 14297 | 116.2% |
| Style Transfer (SP) | 47659 | 29516 | 161.5% |
| Style Transfer (HP) | 38592 | 12998 | 296.9% |
| Style Transfer (Q) | 54966 | 35977 | 152.8% |
| Image Super-Resolution (SP) | 4696 | 4313 | 108.9% |
| Image Super-Resolution (HP) | 4242 | 2435 | 174.2% |
| Image Super-Resolution (Q) | 6601 | 6571 | 100.5% |
| Text Classification (SP) | 2304 | 2015 | 114.3% |
| Text Classification (HP) | 1012 | 884 | 114.5% |
| Text Classification (Q) | 621 | 721 | 86.1% |
| Machine Translation (SP) | 4124 | 2434 | 169.4% |
| Machine Translation (HP) | 990 | 831 | 119.1% |
| Machine Translation (Q) | 4018 | 3136 | 128.1% |
L’avenir des benchmarks d’IA
Alors que l’IA continue d’évoluer à un rythme effréné, Geekbench AI s’engage à rester à la pointe de la technologie. L’outil intègre déjà les derniers frameworks d’IA pour les nouveaux matériels, offrant ainsi une vision complète des capacités actuelles et futures en matière d’IA.
Conclusion
Geekbench AI 1.0 marque une étape importante dans l’évaluation des performances d’IA. Que vous soyez développeur, early adopter ou simplement curieux des capacités de votre appareil, cet outil vous fournira des informations précieuses sur les performances en IA.
Pour en savoir plus et télécharger Geekbench AI, visitez le site officiel de Primate Labs.
