Консорциум, включающий 40 технологических компаний, в том числе Facebook и Google, намерен создать выпустить набор оценочных тестов для искусственного интеллекта. Сравнивая продукты ИИ с этими эталонами, компании на местах смогут определить оптимальные решения и «быть уверенными» в том, что они внедряют именно то, что будет лучше всего справляться с поставленными задачами.
Набор тестов, получивший название MLPerf Inference v0.5, сосредоточен на трёх общих задачах машинного обучения: классификации изображений, обнаружении объектов и машинном переводе. Учитывая разные возможности обработки этих задач на разных устройствах, существуют отдельные тесты для ИИ на разных платформах, таких как смартфоны, серверы и чипы.
Предполагается, что такие общепринятые эталонные тесты позволят ускорить развитие и внедрение инноваций в сфере искусственного интеллекта. Воспользоваться ими смогут даже небольшие компании, что упростит и удешевит процесс разработки и тестирования решений в сфере ИИ.
