Primate Labs è stato lanciato ufficialmente AI di Geekbenchuno strumento di benchmarking progettato specificamente per carichi di lavoro incentrati sull'apprendimento automatico e sull'intelligenza artificiale.
Il rilascio di Geekbench AI 1.0 segna il culmine di anni di sviluppo e collaborazione con clienti, partner e la comunità di ingegneri dell'intelligenza artificiale. Il benchmark, precedentemente noto come Geekbench ML durante la sua fase di anteprima, è stato rinominato per allinearsi alla terminologia del settore e garantire chiarezza sul suo scopo.
Geekbench AI è ora disponibile per Windows, macOS e Linux tramite il sito web di Primate Labs, nonché su Google Play Store e Apple App Store per dispositivi mobili.
L'ultimo strumento di benchmarking di Primate Labs mira a fornire un metodo standardizzato per misurare e confrontare le capacità dell'IA su diverse piattaforme e architetture. Il benchmark offre un approccio unico fornendo tre punteggi complessivi, che riflettono la complessità e l'eterogeneità dei carichi di lavoro dell'IA.
“Misurare le prestazioni è, per dirla in parole povere, molto difficile”, ha spiegato Primate Labs. “Non perché sia difficile eseguire un test arbitrario, ma perché è difficile determinare quali test siano i più importanti per le prestazioni che si desidera misurare, specialmente su piattaforme diverse e in particolare quando tutti fanno le cose in modi leggermente diversi”.
Il sistema a tre punteggi tiene conto dei vari livelli di precisione e delle ottimizzazioni hardware presenti nelle moderne implementazioni AI. Questo approccio multidimensionale consente a sviluppatori, fornitori di hardware e appassionati di ottenere informazioni più approfondite sulle prestazioni AI di un dispositivo in diversi scenari.
Un'aggiunta degna di nota a Geekbench AI è l'inclusione di misurazioni di accuratezza per ogni test. Questa funzionalità riconosce che le prestazioni dell'IA non riguardano solo la velocità, ma anche la qualità dei risultati. Combinando metriche di velocità e accuratezza, Geekbench AI fornisce una visione più olistica delle capacità dell'IA, aiutando gli utenti a comprendere i compromessi tra prestazioni e precisione.
Geekbench AI 1.0 introduce il supporto per un'ampia gamma di framework AI, tra cui OpenVINO su Linux e Windows e delegati TensorFlow Lite specifici del fornitore come Samsung ENN, ArmNN e Qualcomm QNN su Android. Questo ampio supporto di framework assicura che il benchmark rifletta gli strumenti e le metodologie più recenti utilizzati dagli sviluppatori AI.
Il benchmark utilizza anche set di dati più estesi e diversificati, che non solo migliorano le valutazioni di accuratezza, ma rappresentano anche meglio i casi di utilizzo dell'IA nel mondo reale. Tutti i carichi di lavoro in Geekbench AI 1.0 vengono eseguiti per un minimo di un secondo, consentendo ai dispositivi di raggiungere i loro massimi livelli di prestazioni durante i test, pur continuando a riflettere la natura burst delle applicazioni del mondo reale.
Primate Labs ha pubblicato descrizioni tecniche dettagliate dei carichi di lavoro e dei modelli utilizzati in Geekbench AI 1.0, sottolineando il loro impegno per la trasparenza e le metodologie di test standard del settore. Il benchmark è integrato con Browser Geekbenchfacilitando confronti multipiattaforma e condivisione dei risultati.
L'azienda prevede aggiornamenti regolari di Geekbench AI per tenere il passo con i cambiamenti del mercato e le funzionalità AI emergenti. Tuttavia, Primate Labs ritiene che Geekbench AI abbia già raggiunto un livello di affidabilità che lo rende adatto all'integrazione in flussi di lavoro professionali, con importanti aziende tecnologiche come Samsung e Nvidia che utilizzano già il benchmark.
(Credito immagine: Laboratori sui primati)
Vedi anche: xAI presenta Grok-2 per sfidare la gerarchia dell'IA
Vuoi saperne di più sull'intelligenza artificiale e sui big data dai leader del settore? Guardare Fiera AI e Big Data che si svolge ad Amsterdam, California e Londra. L'evento completo è co-localizzato con altri eventi leader tra cui Conferenza sull'automazione intelligente, BloccoX, Settimana della Trasformazione DigitaleE Fiera della sicurezza informatica e del cloud.
Esplora altri prossimi eventi e webinar sulla tecnologia aziendale forniti da TechForge Qui.
Fonte: www.artificialintelligence-news.com
