Популярный инструмент для тестирования производительности Geekbench представил новую кросс-платформенную утилиту, предназначенную для оценки производительности устройств при больших нагрузках на ИИ. Geekbench AI измеряет работу процессора (CPU), графического процессора (GPU) и нейропроцессора (NPU) устройства, чтобы определить, насколько успешно оно справляется с задачами машинного обучения.
Разработчик Geekbench, компания Primate Labs, начал работать над программой под названием Geekbench ML, которая была выпущена в качестве предварительной версии в 2021 году. Однако позже название было изменено на AI по очевидным причинам. Для анализа того, как различное оборудование справляется с задачами, связанными с искусственным интеллектом, программа оценивает производительность на основе точности и скорости. Geekbench AI поддерживает различные фреймворки, такие как ONNX, CoreML, TensorFlow Lite и OpenVINO.
Программа выдает три типа оценок: точную, половинную и квантованную. Primate Labs утверждает, что также применяется измерение точности, чтобы оценить, насколько результаты работы соответствуют реальности, или, иными словами, насколько точно модель выполняет свою задачу.
Нам потребуется больше времени, чтобы протестировать устройства с использованием встроенного ИИ, таких как Copilot Plus для ПК и новые модели телефонов, чтобы понять, как их производительность в реальных условиях соотносится с результатами Geekbench AI. Если раньше мы проверяли частоту кадров или время загрузки, сейчас мы можем оценивать точность предсказываемого текста или результат генеративного ИИ в редакторах изображений.
Вы можете скачать утилиту и попробовать ее самостоятельно на платформах Windows, macOS, Linux, Android и iOS.
Источник: TheVerge