Более 30 компаний в сфере IT, в том числе Faceboo и Google, разработают специализированные тесты для оценки уровня искусственного интеллекта.
В зависимости от умственных способностей ИИ будут заполнять соответствующие цифровые продукты. Консорциум из компанией для определения методики оценки ИИ называется MLPerf.
Созданная программа тестер (бенчмарк) будет анализировать машину по трём направлениям: распознание цифровых картинок, поиск объектов и перевод с одного языка на другой. В некоторых браузерах для Windows 10 уже применяется машинное обучение для мгновенного и более точного перевода.
Также приложения будут отличаться в зависимости от платформы и устройства. Разработанные тесты будут применяться в реальных повседневных условиях.
Разработчики определено видят полезность для ИИ-систем, т.к. будут выявлять недостатки для последующего обучения совершенствования машин.