Медицина
/Организация здравоохранения
К.м.н. Глухова
Е.А.
Первый
Московский государственный медицинский университет, Россия
Научно-методологические основы мониторинга и индикаторов оценки научной
деятельности по профилю «Общественное здоровье и здравоохранение»
Формирование методологической базы
мониторинга и системы индикаторов оценки научной деятельности по профилю
«Общественное здоровье и здравоохранение» актуальная проблема проектирования
системы менеджмента качества научной (медицинской) организации, отвечающей
требованиям обеспечения конкурентного преимущества путем постоянного
совершенствования, повышения качества
менеджмента, процессов, научной продукции [1].
Цель исследования – научно обосновать
методологические основы мониторинга и оценки качества деятельности научной
(медицинской) организации по профилю «общественное здоровье и здравоохранение».
Методы исследования:
-анкетирование с оценкой удовлетворенности
и потребностей внутренних потребителей;
- самооценка;
- экспертная оценка;
- рейтинговая оценка научного сотрудника,
научной группы, научной организации;
- эталонная балльная оценка;
-оценка степени зрелости процессов по
рубрикам: приобретение знаний, инновационный подход, система менеджмента
качества, обязательства руководства, менеджмент ресурсов, жизненный цикл
продукции, улучшение системы менеджмента качества, улучшение системы
менеджмента качества.
По результатам исследования разработана и
апробирована модель рейтинговой оценки
результативности научной и инновационной деятельности, отображающая
взаимоотношения между структурными элементами «производство знаний»
(исследования и разработки), «воспроизводство знаний» (научно-методическая
работа) и «диффузия знаний» (инновации) и результатами.
Структурообразующими
элементами модели являются характеристики, влияющие на результативность научной
и инновационной деятельности.
К ним отнесены: компетенции (способность применять знания и умения),
продуктивность (производительность, публикационная активность), коммуникации
(уровень обмена информацией, установления связей и контактов, академической
мобильности), инновации (использование и коммерциализация результатов, инвестиционная
привлекательность).
Для измерения характеристик деятельности
использованы экспертный опрос - анкетирование руководителей структурных
подразделений и руководства научной (медицинской) организации. С той целью
разработаны вопросники с
перечнем заданных свойств оценки по 5-ти балльной шкале, выполненной в
соответствии с требованиями типовой методики оценки Минобразования и
науки по следующим позициям: научный потенциал и эффективность научных
исследований; вовлеченность научной организации в национальное и мировое
научно-образовательное сообщество; коммерциализация и прикладное значение
результатов исследований [2].
В
ходе проверки методики
на обоснованность с
помощью процедур внешней (анализ
документов) и внутренней (анализ оценки смещения дисперсии) оценки
был получен результат (коэффициент конкорданции, равный
0,80), свидетельствующий о достаточной валидности
применяемой методики.
Разработана
методология экспертного оценивания. Она
включает: определение перечня первичных и комплексных показателей оценки деятельности, их ранжирование, определение
ориентиров для эталонной оценки, формирование индивидуальных отчетов и
разбиение научных групп на типы (кластеры).
Расчет рейтинга осуществлен с применением
персонифицированной базы данных, включающей основные конструктивные
характеристики, используемые для оценки результативности научного сотрудника,
научной группы.
Для обработки данных экспертного
оценивания используются комплекс методов и процедур: балльная оценка,
ранжирование, суммирование, весовые коэффициенты, рейтинговая оценка [3].
К показателям оценки результативности деятельности отнесены: число публикаций автора за
последние 5 лет, суммарный объем цитирований
из публикаций автора за 5 лет, индекс Хирша, среднее число публикаций в расчете на одного автора, среднее
число цитирований в расчете на одну публикацию, число самоцитирований из публикаций научной организации.
Итоговый показатель оценки в баллах
рассчитывается путем суммирования (свертки) показателей, применяемых для
оценочных критериев оценки и весовых
значений показателей. Сумма баллов и будет оценкой результативности научной
работы с точки зрения формальных показателей. Полученные абсолютные значения
показателей нормируются по максимальному значению показателей, полученных в
организации. Результирующие оценки приводится к 100 балльной шкале.
Сформирована целостная система индикаторов
и целевых показателей оценки научной
продукции (средние значения, максимум), являющихся ориентирами в системе
менеджмента качества деятельности научной (медицинской) организации: среднее
число публикаций в расчете на 1 автора
– 2,0 (максимум 4,3); среднее число
цитирований в расчете на публикацию -1,50 (максимум-7,3); средневзвешенный
импакт-фактор журналов – 0,127 (максимум-0,497).
Научно обоснованы принципы мониторинга,
измерения и улучшения деятельности: минимум требований задается нормативными
документами, следование и выполнение которых является необходимыми; критерии
оценки должны обладать категорией меры, поддаваться прямому или косвенному
измерению; полученный результат должен быть измерим, а результаты измерения соотнесены
с определенной шкалой балльной оценки; постоянство измерений и применение
стандартизованных процедур, уровней оценивания и системообразующих критериев.
Научно обоснован механизм мониторинга и процедуры измерений качества деятельности с помощью
анкетирования об удовлетворенности и требованиях внутренних потребителей,
самооценки профиля возможностей, измерения степени зрелости процессов и
качества научной продукции в балльных шкалах применительно к возможностям и
планированию улучшений в организации.
Литература:
1.
Квитко А.В. Управление качеством: Учебное
пособие. Московский
государственный университет экономики, статистики и информатики. – М., 2005. – 183 с.
2.
Приказ Рособрнадзора от
25.06.2010 N 1756 "Об утверждении методики оценки результативности
деятельности научных организаций, выполняющих научно-исследовательские,
опытно-конструкторские и технологические работы гражданского назначения,
подведомственных Федеральной службе по надзору в сфере образования и
науки" Зарегистрировано в Минюсте РФ 02.08.2010 N 18033.
3.
Экспертные оценки. http://spc-consulting.ru/app/expert.htm
(дата обращения 16.09.2011).