Документ подготовлен подкомитетом SC42 «Искусственный интеллект» (Artificial intelligence), входящим в состав Объединенного технического комитета JTC1 «Информационные технологии» Международной организации по стандартизации (ИСО) и Международной электротехнической комиссии (МЭК).
«Сравнительный анализ (бенчмаркинг – benchmarking) часто используется для сопоставления показателей качества программных систем с эталонными или с целевыми значениями. Учитывая разнообразный характер и неоднородное воздействие систем ИИ, такого рода эталонные и целевые значения могут значительно различаться в разных системах и в разных внедрениях аналогичных систем в различных контекстах использования. Для учёта этого разнообразия и неоднородности, дифференцированный сравнительный анализ (дифференцированный бенчмаркинг) может рассматривать разные показатели качества в сопоставлении с различными эталонными значениями. В настоящем документе проведен анализ концептуальных структур управления ИИ с точки зрения их способности предлагать рекомендации по проведению дифференцированного бенчмаркинга показателей качества систем ИИ.
… В настоящем документе представлен обзор концептуальных рамок для градуированного бенчмаркинга показателей качества систем искусственного интеллекта (ИИ). Цель заключается в том, чтобы изучить возможность использования дифференцированного сравнительного анализа (дифференцированного бенчмаркинга) показателей качества на основе сложности и контекста использования системы ИИ.»
Содержание документа следующее:
Предисловие
Введение
1. Область применения
2. Нормативные ссылки
3. Термины и определения
4. Обзор соответствующих методов сравнительного анализа (бенчмаркинга)
5. Сравнительный анализ (бенчмаркинг) систем ИИ
6. Методы дифференцированного сравнительного анализа (бенчмаркинга)
7. Анализ возможности применения
Приложение А: Примеры уровней спецификации
Приложение Б: Описание показателей
Библиография
Источники: сайт ИСО
https://www.iso.org/standard/86903.html
Комментариев нет:
Отправить комментарий