Primate Labs는 기존 Geekbench ML을 Geekbench AI로 공식 출시했습니다. 이 벤치마크 도구는 Windows, Linux, macOS, Android, iOS 등 다양한 플랫폼에서 인공지능(AI) 성능을 평가하도록 설계되었습니다. Geekbench AI는 단일 정밀도, 반 정밀도, 양자화된 데이터 등 3가지 다른 점수를 사용하여 AI 성능과 하드웨어 아키텍처의 영향을 측정합니다.
성능 지표 외에도 Geekbench AI는 AI 모델의 정확성을 평가하는 기능을 포함하고 있습니다. 예를 들어, 핫도그 감지 모델은 빠른 속도를 보일 수 있지만 정확도가 낮을 수 있습니다. 이를 통해 성능 향상을 위한 데이터 크기 축소와 정확도 간의 트레이드오프를 파악할 수 있습니다.
버전 1.0 출시와 함께 OpenVINO, ONNX, Qualcomm QNN(Windows), TensorFlow Lite Delegates(Android) 등 새로운 프레임워크에 대한 지원이 추가되었습니다. Primate Labs는 성능 점수 조작을 방지하기 위해 모든 테스트를 최소 1초 이상 실행하도록 설계했습니다.
Geekbench AI의 결과는 Geekbench 브라우저에 보고되어 장치 성능을 비교할 수 있습니다. 이 도구는 지속적으로 업데이트되고 개선될 것으로 기대됩니다. 주요 하드웨어 제조업체 외에는 AI 성능을 측정할 수 있는 옵션이 제한적이므로, Geekbench AI는 벤치마킹 분야에 중요한 추가 기능이 될 것입니다. 그러나 다양한 실제 사용 사례 부족으로 인해 AI 성능 평가의 과제가 여전히 존재합니다.
* 이 글은
tomshardware.com의 기사를 요약한 것입니다. 전체 기사의 내용은
이곳에서 확인하실 수 있습니다.