Рейтинг региональных общественных палат (2023 год) — Методика

Рейтинг региональных общественных палат 2023 года

Методика составления

Скачать презентацию проекта

Скачать полную версию аналитических материалов с методикой

Рейтинг позволяет в доступной и сжатой форме получить информацию о соотношении объектов (участников рейтинга), образующих однородную в каком-либо отношении группу, в результате ряда аналитических и измерительных операций.

Такая форма подачи информации всегда вызывает интерес: «Где в списке я? Где мои знакомые, партнеры, конкуренты? На кого и на что стоит обратить внимание?»

При условии соблюдения базовых принципов составления рейтингов, иного инструмента, превосходящего их по информативности и доступности, пока не предложено.

В данном рейтинге проанализированы сведения, характеризующие все 85 региональных общественных палат субъектов Российской Федерации по эффективности деятельности (полноте реализации своих функций и полномочий).

Ключевой элемент исследования – это рейтинговый вопрос, в соответствии с ответом на который упорядочиваются участники рейтинга. Он сформулирован разработчиками следующим образом: какая общественная палата наиболее эффективна (наиболее полно реализует свои функции и полномочия).

Основой для разработки методики стали беседы с экспертами ОП РФ, региональных палат, а также Федеральный закон от 23 июня 2016 г. № 183-ФЗ «Об общих принципах организации и деятельности общественных палат субъектов Российской Федерации».

С методической точки зрения данный рейтинг, по сути, должен представлять собой рэнкинг (см. методологический словарь), то есть упорядоченный список регионов по эффективности деятельности региональных общественных палат. Именно таким рейтинг был в первом, пилотном выпуске, будучи представленным в составе одного из факторов рейтинга «Регион-НКО». Однако, с учётом предпосылок и причин, изложенных выше, было принято решение ограничиться делением всех рейтинговых объектов на четыре рейтинговых класса:

• «Лидеры рейтинга» (топ-10),
• «Регионы с высокой эффективностью региональных общественных палат»,
• «Регионы со средней эффективностью региональных общественных палат»,
• «Регионы с максимальным потенциалом роста».

Таким образом, настоящий рейтинг является классическим рейтингом, когда каждому из объектов присваивается рейтинговый класс, в рамках которого все объекты равны.

Основной целевой аудиторией данного рейтинга является гражданское общество регионов. Мы надеемся, что результаты исследования будут интересны, в первую очередь, самим региональным общественным палатам, и с его помощью они смогут произвести оценку своих достижений, использовать в качестве аргументов в переговорах с органами власти, институтами развития гражданского общества.

Помимо основной аудитории можно выделить также другие, сопутствующие целевые группы:

• федеральные органы власти и органы власти субъектов Российской Федерации;
• органы местного самоуправления;
• члены федеральной и региональных, а также муниципальных общественных палат;
• члены общественных советов при федеральных и региональных органах исполнительной власти;
• эксперты, исследователи, преподаватели, студенты;
• средства массовой информации.

         Основными источниками информации для данного рейтинга стали:

• анкеты региональных общественных палат, включая данные о перечне членов, бюджетах региональных ОП, об обеспеченности помещением для заседаний, количестве общественных экспертиз проектов региональных и федеральных НПА, количестве случаев применения законодательной инициативы и другие данные;
• данные мониторинга сайтов региональных палат;
• данные мониторинга социальных сетей;
• юаза данных «СКАН-Интерфакс» (цитируемость и упоминаемость в информационном пространстве региональных общественных палат, членов региональных общественных палат, коннотация таких упоминаний);
• данные службы мониторинга интернет-ресурсов Similarweb;
• результаты специального экспертного опроса Общественной палаты РФ в рамках подготовки рейтинга «Регион-НКО»;
• данные Общественной палаты РФ (сведения о количестве сообщений, направленных от РОП);
• результаты специального экспертного опроса Общественной палаты РФ, охватившего 6431 участника из всех регионов России – из них 1747 членов региональных общественных палат, а также 4684 эксперта некоммерческого сектора.

Рейтинговая модель

Рейтинговая модель исследования включает в себя 8 факторов (критериальных групп). Каждый фактор в свою очередь рассчитывается на основе нескольких показателей – в сумме их 30. При этом все они прямо или косвенно помогают ответить на основной рейтинговый вопрос.

Большее увеличение размерности рейтинговой модели пока невозможно как из-за ограниченности доступной данных, так и из-за пока еще недостаточной разработанности многих методологических вопросов по этой теме.

Сокращение модели (отказ от тех или иных критериев) авторы исследования сочли нежелательным, так как, во-первых, каждый из критериев так или иначе характеризует рейтинговый вопрос, во-вторых, сокращение размерности приводит к ухудшению качества модели (её устойчивости).

Таким образом, уровень эффективности деятельности региональной общественной палаты определяется семью объективными факторами (определяются на основе статистических показателей), а именно:

1. общественно-наблюдательная активность региональной общественной палаты;
2. нормотворческая деятельность региональной общественной палаты;
3. информационная открытость
   региональной общественной палаты;
4. медиаактивность региональной общественной палаты;
5. публичная активность членов региональной общественной палаты;
6. материальная обеспеченность и организационная работа;
7. взаимодействие с ОП РФ.

Помимо семи объективных факторов, восьмым является результат экспертного опроса членов региональных общественных палат и других региональных экспертов.

Веса между всеми факторами и параметрами в рамках каждого фактора были определены экспертным путём в ходе консультаций, многократных обсуждений и с учётом результатов тестирования рейтинговой модели.

Общие принципы подготовки рейтинга

1. Максимальная информативность. Использованы все доступные на данный момент источники информации о предмете рейтинга, которые смогли рекомендовать разработчики и участники рабочей группы).
2. Валидность информации для рейтинга (по подавляющему числу параметров была собрана информация по всем 85 региональным общественным палатам, был проведён анализ информации на предмет выявления очевидных ошибок, была проведена математическая, строго формализованная фильтрация данных для удаления «выбросов»).
3. Устойчивость рейтинговой модели (то есть малые отклонения в исходных данных или настройках модели не приводят к существенному изменению результата).
4. Оптимальная размерность рейтинговой модели (точнее, неизбыточная размерность: любое сокращение числа показателей приводит к ухудшению качества модели).
5. Интегральность. Для целей экспертной оценки и принятия управленческих решений следует использовать, прежде всего, интегральный рейтинг, однако для большей наглядности и демонстрации достижений регионов в отдельных направлениях возможно использовать субрейтинги по отдельным факторам.

Фактор «Общественно-наблюдательная активность региональной общественной палаты»

Вес фактора – 15%, включает в себя следующие показатели:

• количество общественных наблюдателей, подготовленных к единому дню голосования в текущем году (показатель учитывается только в случае проведения в регионе выборов в ЕДГ, в противном случае вес метрики распределяется между другими метриками данного фактора);
• проведение палатой контрольно-наблюдательных мероприятий по отношению к региональным органам власти;
• реализация инициатив палаты (например, рассмотрение вопросов, вызывающих большой общественный резонанс);
• участие в заседаниях палаты главы региона или его заместителей;
• количество проведенных массовых общественных мероприятий (не менее 100 участников).

Фактор «Нормотворческая деятельность региональной общественной палаты»

Вес фактора – 15%, включает в себя следующие показатели:

• количество общественных экспертиз (обсуждений) проектов региональных нормативно-правовых актов, проведённых общественной палатой в прошедшем году (по количеству подготовленных заключений);
• количество общественных экспертиз (обсуждений) проектов федеральных нормативно-правовых актов, проведённых палатой в прошедшем году (по количеству подготовленных заключений);
• количество случаев применения палатой права законодательной инициативы за предыдущие три года (учитывается только в случае наличия такого права, в противном случае вес метрики распределяется между другими метриками данного фактора).

Фактор «Информационная открытость региональной общественной палаты»

Вес фактора – 15%. В рамках анализа информационной открытости региональных общественных палат проверялось наличие следующих элементов:

• раздел «Новости»:
  • факт наличия,
  • количество новостей за прошедший год,
  • количество новостей за месяц, предшествующий дате мониторинга;
• годовой отчёт;
• отчёты по обращениям граждан и организаций;
• раздел «План работ»;
• раздел «Горячие проекты» или аналогичный по смыслу;
• информация о членах региональной палаты;
• информация о комиссиях и рабочих группах региональной ОП;
• контактные данные.

Фактор «Медиаактивность региональной общественной палаты»

Вес фактора – 15%, включает в себя следующие показатели:

• доля упоминаний региональной общественной палаты в СМИ в общем объёме публикаций о регионе за три года как свидетельство активности палаты в регионе (данные «СКАН-Интерфакс»);
• доля федеральных публикаций с упоминанием палаты в общем числе публикаций с упоминанием палаты как свидетельство значимости деятельности региональной палаты для других регионов и страны (данные «СКАН-Интерфакс»);
• количество подписчиков страниц региональной палаты в соцсетях (VK, OK, Telegram, Youtube, Rutube);
• посещаемость сайта региональной общественной палаты.

Фактор «Публичная активность членов региональной общественной палаты»

Вес фактора – 10%, включает в себя следующие показатели:

• количество упоминаний членов региональной общественной палаты в СМИ за три календарных года, предшествующих дате измерения (по данным «СКАН-Интерфакс»);
• доля федеральных публикаций с упоминанием членов палаты в общем числе публикаций;
• показатели концентрации упоминаний (равномерно распределена активность между членами палаты или же цитируются лишь несколько «звезд»):
  • индекс Херфиндаля-Хиршмана для упоминаний членов РОП,
  • индекс Хирша для публикаций с упоминанием членов РОП.

Фактор «Результаты экспертного опроса»

Вес фактора – 10%.

Экспертная оценка деятельности общественной палаты основана на результатах опроса, проводимого ОП РФ в рамках подготовки рейтинга «Регион-НКО» (август-сентябрь). В опросе приняло участие 6431 чел. из 85 регионов РФ, из них 1747 членов региональных палат и 4684 эксперта некоммерческого сектора. Опрос основывался на теоретической модели, согласно которой деятельность РОП может быть описана как институциональная сфера, основной функцией которой является создание условий для распознавания и решения обществом, государством и бизнесом социально значимых проблем.

Исходя из этого, были сформулированы группы вопросов, позволяющие получить экспертную оценку функционального состояния и взаимодействия региональных общественных палат со всеми группами интересов (стейкхолдерами) процесса распознавания и решения социально значимых проблем.

Респондентам предлагалось оценить вклад региональных общественных палат в развитие некоммерческого сектора региона, дав оценку ряду утверждений:

региональная общественная палата…

… является площадкой для диалога между НКО и органами власти,

… оказывает НКО информационную поддержку,

… оказывает НКО консультационную и методическую поддержку,

… отстаивает интересы и защищает права НКО,

… работает фактически как ресурсный центр для НКО,

… является проводником инновационных и актуальных инициатив НКО, направленных на решение общественно значимых проблем.

Фактор «Материальная обеспеченность и организационная работа»

Вес фактора – 10%, включает в себя следующие показатели:

• бюджет аппарата региональной общественной палаты (истекший год), отнесённый к бюджету региона;
• количество штатных сотрудников в аппарате палаты;
• расходы на командировки в истёкшем году;
• обеспеченность общественной палаты региона помещением для заседаний:
  • помещения нет,
  • помещение в пользовании,
  • помещение в пользовании на постоянной основе,
  • собственное помещение;
• заседания РОП:
  • количество за прошедший год
  • в том числе очных
  • в том числе выездных
  • в том числе совместно с органами власти.

Фактор «Взаимодействие с ОП РФ»

Вес фактора – 10%, включает в себя следующие показатели:

• экспертная оценка аппарата ОП РФ;
• доля членов общественной палаты, принявших участие в экспертном опросе ОП РФ об уровне и качестве развития некоммерческого сектора в текущем году (август-сентябрь 2023 г.).