О применении экспертных методов при оценке эффективности и качества информационных систем

Статья посвящена вопросу применения экспертных методов при оценке эффективности и качества информационных систем (ИС). Рассмотрены общие вопросы применения экспертных оценок, включая проведение процедуры экспертного опроса и установление согласованности мнений экспертов. Представлены различные подходы к определению числа экспертов, включая формулы для проведения расчетов, и сделаны сравнительные расчеты по этим формулам. Изложен формализованный подход к оценке компетентности экспертов, включающий их научную квалификацию, аргументированность оценок и степень знакомства с оцениваемой проблемой.