30 ноября 2020
—
заканчивается
20 января 2021
Проект
Разработчик
Технический комитет
ОКС/МКС/ISO
ОКС 35.020
Описание
Стандарт устанавливает общие требования к оценке качества систем искусственного, включая:
- виды существенных характеристик систем искусственного интеллекта, подтверждение значений которых установленным требованиям обеспечивает доверие к этим системам;
- порядок выбора и оценки метрик качества на основании представленного набора существенных характеристик;
- требования к набору входных и выходных данных для тестирования СИИ;
- вопросы планирования, разработки программы и контроля процедуры оценки качества СИИ, позволяющих провести надлежащую валидацию и верификацию продукта в целях подтверждения его надежности, безопасности и функциональности.
Принципы, установленные в стандарте, применимы к системам искусственного интеллекта в различных отраслях, и их следует придерживаться, насколько это возможно, с учетом региональных и национальных регулирующих требований.
Стандарт распространяется на все системы, использующие различные методы искусственного интеллекта, включая программное обеспечение на основе машинного обучения (обучение по прецендентам) и экспертные системы (на основе дедуктивного обучения).
1 обсуждение
Публичное обсуждение проекта продлится до 20 января 2021 г.
Целью стандарта является обеспечение надлежащего контроля качества и оценки технологий искусственного интеллекта в различных отраслях, обеспечение единства терминологии и классификации существенных характеристик и показателей качества систем искусственного интеллекта (СИИ), определение порядка действий, проводимых на этапах разработки, выпуска и эксплуатации данных систем в целях обеспечения требуемого уровня качества выпускаемого продукта.
Это позволит заинтересованным сторонам в зависимости от этапа жизненного цикла СИИ:
- определить текущие параметры системы и выполнить действия, направленные на повышение ее надежности, качества и производительности, а также расширение функционала системы (путем выполнения процедур по устранению неисправностей и совершенствованию программного обеспечения);
- удостовериться, что выходные данные СИИ являются приемлемыми и обоснованными для решения поставленной задачи в условиях, представленных в описании СИИ, с учетом современного уровня развития отрасли;
- убедиться в достижении целей предназначения СИИ в условиях обеспечения заданной точности, надежности и достоверности выходных данных;
- подтвердить соответствие характеристик СИИ требуемым значениям, установленным в технической, эксплуатационной документации и/или нормативно-правовых актах.