Медицина /Организация здравоохранения

К.м.н. Глухова Е.А.

Первый Московский государственный медицинский университет, Россия

Научно-методологические основы мониторинга и индикаторов оценки научной деятельности по профилю «Общественное здоровье и здравоохранение»

 

Формирование методологической базы мониторинга и системы индикаторов оценки научной деятельности по профилю «Общественное здоровье и здравоохранение» актуальная проблема проектирования системы менеджмента качества научной (медицинской) организации, отвечающей требованиям обеспечения конкурентного преимущества путем постоянного совершенствования, повышения качества менеджмента, процессов, научной продукции [1].

Цель исследования – научно обосновать методологические основы мониторинга и оценки качества деятельности научной (медицинской) организации по профилю «общественное здоровье и здравоохранение».

Методы исследования:

-анкетирование с оценкой удовлетворенности и потребностей внутренних потребителей;

- самооценка;

- экспертная оценка;

- рейтинговая оценка научного сотрудника, научной группы, научной организации;

- эталонная балльная оценка;

-оценка степени зрелости процессов по рубрикам: приобретение знаний, инновационный подход, система менеджмента качества, обязательства руководства, менеджмент ресурсов, жизненный цикл продукции, улучшение системы менеджмента качества, улучшение системы менеджмента качества.

По результатам исследования разработана и апробирована модель рейтинговой оценки результативности научной и инновационной деятельности, отображающая взаимоотношения между структурными элементами «производство знаний» (исследования и разработки), «воспроизводство знаний» (научно-методическая работа) и «диффузия знаний» (инновации) и результатами.

Структурообразующими элементами модели являются характеристики, влияющие на результативность научной и инновационной деятельности.               К ним отнесены: компетенции (способность применять знания и умения), продуктивность (производительность, публикационная активность), коммуникации (уровень обмена информацией, установления связей и контактов, академической мобильности), инновации (использование и коммерциализация  результатов, инвестиционная привлекательность).

Для измерения характеристик деятельности использованы экспертный опрос - анкетирование руководителей структурных подразделений и руководства научной (медицинской) организации. С той целью разработаны вопросники с перечнем заданных свойств оценки по 5-ти балльной шкале, выполненной в соответствии  с требованиями  типовой методики оценки Минобразования и науки по следующим позициям: научный потенциал и эффективность научных исследований; вовлеченность научной организации в национальное и мировое научно-образовательное сообщество; коммерциализация и прикладное значение результатов исследований [2].

В  ходе  проверки  методики  на  обоснованность  с  помощью  процедур внешней (анализ документов) и внутренней (анализ оценки смещения дисперсии)  оценки  был  получен  результат (коэффициент конкорданции, равный 0,80),  свидетельствующий о достаточной  валидности  применяемой методики.

Разработана методология экспертного оценивания.  Она включает: определение перечня первичных и комплексных  показателей оценки деятельности, их ранжирование, определение ориентиров для эталонной оценки, формирование индивидуальных отчетов и разбиение научных групп на типы (кластеры).

Расчет рейтинга осуществлен с применением персонифицированной базы данных, включающей основные конструктивные характеристики, используемые для оценки результативности научного сотрудника, научной группы.

Для обработки данных экспертного оценивания используются комплекс методов и процедур: балльная оценка, ранжирование, суммирование, весовые коэффициенты, рейтинговая оценка [3].

К показателям оценки результативности деятельности  отнесены: число  публикаций автора  за последние 5 лет, суммарный объем цитирований  из публикаций автора за 5 лет, индекс Хирша,  среднее число публикаций в расчете на одного автора, среднее число цитирований в расчете на одну публикацию, число самоцитирований из публикаций научной организации.

Итоговый показатель оценки в баллах рассчитывается путем суммирования (свертки) показателей, применяемых для оценочных критериев оценки  и весовых значений показателей. Сумма баллов и будет оценкой результативности научной работы с точки зрения формальных показателей. Полученные абсолютные значения показателей нормируются по максимальному значению показателей, полученных в организации. Результирующие оценки приводится к 100 балльной шкале.

Сформирована целостная система индикаторов и целевых показателей  оценки научной продукции (средние значения, максимум), являющихся ориентирами в системе менеджмента качества деятельности научной (медицинской) организации: среднее число публикаций  в расчете на 1 автора – 2,0 (максимум 4,3);  среднее число цитирований в расчете на публикацию -1,50 (максимум-7,3); средневзвешенный импакт-фактор журналов – 0,127 (максимум-0,497).

Научно обоснованы принципы мониторинга, измерения и улучшения деятельности: минимум требований задается нормативными документами, следование и выполнение которых является необходимыми; критерии оценки должны обладать категорией меры, поддаваться прямому или косвенному измерению; полученный результат должен быть измерим, а результаты измерения соотнесены с определенной шкалой балльной оценки; постоянство измерений и применение стандартизованных процедур, уровней оценивания и системообразующих критериев.

Научно обоснован механизм мониторинга и процедуры измерений качества деятельности с помощью анкетирования об удовлетворенности и требованиях внутренних потребителей, самооценки профиля возможностей, измерения степени зрелости процессов и качества научной продукции в балльных шкалах применительно к возможностям и планированию улучшений в организации.

Литература:

1.                 Квитко  А.В.  Управление качеством:  Учебное  пособие. Московский  государственный университет экономики, статистики и информатики. М., 2005. 183 с.

2.                 Приказ Рособрнадзора от 25.06.2010 N 1756 "Об утверждении методики оценки результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения, подведомственных Федеральной службе по надзору в сфере образования и науки" Зарегистрировано в Минюсте РФ 02.08.2010 N 18033.

3.         Экспертные оценки. http://spc-consulting.ru/app/expert.htm (дата обращения 16.09.2011).