Раздел: Результаты экспертного опроса о развитии некоммерческого сектора (2020—2024 гг.)
Топ-20 регионов по фактору «Экспертная оценка сектора СО НКО в регионе», 2023 год — Методика
Региональный рейтинг третьего сектора «Регион-НКО – 2023»
Методика составления
В рейтинге проведён всесторонний анализ данных, характеризующих 85 субъектов Российской Федерации по уровню и качеству развития некоммерческого сектора.
Основная цель составления любого рейтинга – получение в доступной форме информации о взаимном отношении участников рейтинга (рейтинговых объектов), образующих однородную в каком-либо отношении группу. Эта цель достигается путём сбора первичных данных об объектах рейтинга, их последующей обработки и аналитических операций над ними.
Основными понятиями настоящего рейтинга являются «качество и уровень развития» и «некоммерческий сектор». За каждым из этих понятий может и должна стоять определенная теоретическая модель, набор критериев. Что включать в понятие «некоммерческий сектор»? Например, формально к нему могут быть отнесены все организации, которые включает в число НКО законодательство. Но справедлив ли будет такой подход, ведь в этом случает туда попадут и госкорпорации?
Очевидно, что некоммерческий сектор – это не столько формально-юридическое понятие, сколько общественно-политическое. Это те виды активности граждан, которые, будучи облечены в соответствующие организационно-правовые формы, создают институциональную среду для функционирования гражданского общества. Именно в этом заключается смысловая и ценностная суть понятия «третий сектор». Третий сектор – это не про власть и не про деньги. Третий сектор – это про защиту важных для данного общества ценностей и продвижение новых, ещё не распознанных общественным мнением социальных и экологических проблем; третий сектор – это про добровольчество и социальную помощь, про развитие новых форм социальной адаптации и реабилитации инвалидов и многое другое. Исходя из этих методологических соображений, авторы и участники данного проекта придерживались двух постулатов:
- отсечение из анализа тех видов НКО, которые по своей сути больше тяготеют к коммерческим или исключительно корпоративным субъектам;
- комплексное использование объективных и экспертных (по некоторым ощущениям – даже более точных для оценки влияния некоммерческого сектора на принимаемые властью решения и его роли в решении проблем общества) данных для составления рейтинга.
Ключевой элемент исследования – это рейтинговый вопрос, в соответствии с ответом на который упорядочиваются участники рейтинга. Он сформулирован разработчиками следующим образом: насколько развит некоммерческий сектор в регионе, насколько велик его потенциал и насколько эффективно этот потенциал реализуется на практике для взаимодействия с главными заинтересованными сторонами (населением, властью, бизнесом, другими НКО и СМИ).
С методической точки зрения данный рейтинг, по сути, представляет собой рэнкинг (см. методологический словарь), то есть упорядоченный список объектов рейтинга.
Основной целевой аудиторией данного рейтинга является некоммерческий сектор регионов. Мы надеемся, что результаты исследования будут интересны в первую очередь самим НКО, работающим на местах, что с его помощью они смогут произвести оценку своих достижений, использовать в качестве аргументов в переговорах с органами власти, бизнесом, благотворителями, институтами развития гражданского общества.
Помимо основной аудитории можно выделить также другие, сопутствующие целевые группы:
- федеральные органы власти и органы власти субъектов Российской Федерации;
- члены федеральной и региональных, а также муниципальных общественных палат;
- члены общественных советов при федеральных и региональных органах исполнительной власти;
- институты поддержки и развития некоммерческого сектора;
- социально активный и ответственный бизнес, благотворительное сообщество;
- эксперты, исследователи, преподаватели, студенты;
- средства массовой информации, интересующиеся социальной и региональной тематикой.
Источники информации для составления рейтинга
Рейтинг использует 21 источник объективной информации для оценки некоммерческого сектора в регионах по девяти рейтинговым факторам, число оцениваемых метрик – 164.
Основными источниками информации для данного рейтинга стали:
- данные Минюста России о количестве и деятельности НКО;
- база данных «СПАРК-Интерфакс» (финансовые показатели НКО);
- база данных «СКАН-Интерфакс» (цитируемость и упоминаемость в информационном пространстве некоммерческого сектора, общественных палат и их членов, ресурсных центров поддержки НКО, а также коннотация таких упоминаний);
- данные Росстата (макроэкономические показатели регионов);
- данные Минэкономразвития России о поддержке социально ориентированных НКО, данные реестра СО НКО, агрегированные данные отчётов 1-СОНКО;
- данные научно-образовательного центра «Общественно-государственное взаимодействие, некоммерческий сектор и социальное предпринимательство» ИГСУ РАНХиГС;
- данные Министерства труда и социальной защиты Российской Федерации;
- данные ИФНС о социальных налоговых вычетах на благотворительность;
- данные Фонда президентских грантов, Фонда культурных инициатив, Росмолодёжи, крупнейших благотворительных фондов, Российского фонда культуры о количестве и суммах грантовых заявок, конкурсов #МЫВМЕСТЕ;
- рейтинг благотворительных фондов RAEX;
- данные аналитической платформы Similarweb;
- данные Агентства социальной информации;
- данные медиа-базы «СКАН-Интерфакс»;
- данные поисковых систем «Яндекс», Google;
- данные мониторинга СМИ исследовательской группы ЦИРКОН (число упоминаний и коннотация информационных сообщений в контексте некоммерческого сектора);
- данные Общественной палаты РФ и региональных общественных палат о перечне членов и бюджетах региональных ОП;
- открытые данные региональных администраций, ресурсных центров, оказывающих поддержку НКО в регионах, социальных сетей;
- данные сайта «Добро.РФ»;
- данные мониторинга в рамках разработки БД портала «НКО.РФ», создаваемого при поддержке Фонда президентских грантов;
- результаты специального экспертного опроса Общественной палаты РФ.
Основные методологические новации в 2023 году
В ходе работы над очередным выпуском рейтинга было проведено множество обсуждений, рассмотрен ряд предложений, проанализирован опыт лидеров рейтинга. В результате были приняты следующие решения о доработке методики рейтинга:
- количество показателей в рейтинге выросло до 58. И это улучшает итоговый результат: даже при посредственном качестве исходных данных вероятность погрешностей значительно снижается. Новый рейтинг учитывает 164 метрики (исходных значений).
- Фактор «Активность деятельности НКО» дополнен показателями конкурсов проекта #МЫВМЕСТЕ, грантов Росмолодёжи и конкурсов волонтёрства. В текущем выпуске рейтинга (2023г.) число показателей, оценивающих активность СО НКО, достигло 14.
- Переработан фактор «Значимость ресурсных центров СО НКО»: теперь он опирается на данные, анализируемые в ходе разработки базы данных портала «НКО.РФ». Все ресурсные центры проходят тщательный отбор и детально анализируются в рамках процедуры мониторинга.
- Разработана принципиально новая методика оценки онлайн-доступности информации о мерах региональной поддержки СО НКО. Теперь оценка максимально формализована: по специально составленному перечню ключевых фраз производится поиск ресурсов с информацией о мерах поддержки в поисковых системах «Яндекс» и Google, и в результате оценивается их потенциальная поисковая аудитория. Релевантные ресурсы и страницы, которые удаётся найти на первых позициях, получают более высокую оценку онлайн-доступности.
Рейтинговая модель
Рейтинговая модель исследования включает в себя 9 факторов (критериальных групп). Каждый фактор, в свою очередь, рассчитывается на основе нескольких показателей – в сумме их 58. Если за единицу информации учитывать каждый пункт заполняемой экспертами анкеты и чек-листа мониторинга сайтов, то можно говорить, что каждый регион описывается более, чем по 164 первичным параметрам. При этом все они прямо или косвенно помогают ответить на основной рейтинговый вопрос.
Таким образом, уровень развития некоммерческого сектора определяется 8 объективными факторами (определяются на основе статистических показателей), а именно:
- экономическая значимость некоммерческого сектора в регионе;
- устойчивость существования некоммерческого сектора в регионе;
- активность деятельности некоммерческого сектора в регионе;
- уровень поддержки НКО со стороны государства;
- онлайн-доступность информации о поддержке СО НКО в регионах РФ;
- медиаактивность региональных НКО;
- социальная значимость некоммерческого сектора в регионе;
- Значимость ресурсных центров СО НКО и площадок РОП.
Девятым фактором являются результаты экспертного опроса членов региональных общественных палат и других региональных экспертов.
Экономическая значимость НКО
Фактор «Экономическая значимость НКО в регионе» (вес – 15%) включает в себя следующие показатели:
- количество НКО в регионе – для сопоставимости используется удельное значение, в расчёте на 1 тыс. жителей, из рассмотрения исключены НКО, заведомо не являющиеся социально ориентированными (адвокатские палаты, политические партии и др.);
- суммарные сборы НКО в регионе – целевые пожертвования (согласно 6-й форме бухгалтерской отчётности), удельные, отнесённые к бюджету региона (в пилотном рейтинге – к ВРП региона);
- суммарная выручка НКО в регионе – продажа услуг, товаров (2-я форма бухгалтерской отчётности), удельная, отнесённая к бюджету региона (в пилотном рейтинге – к ВРП региона).
Устойчивость существования сектора НКО
Фактор «Устойчивость существования некоммерческого сектора в регионе» (вес – 5%) включает в себя следующие показатели:
- жизнеспособность НКО (сколько НКО из всех, зарегистрированных в регионе в течение 5 лет, не было ликвидировано);
- доля действующих НКО (НКО, которые не просто зарегистрированы, но и сдают ненулевую отчётность);
- количество новых НКО, созданных за 3 года, в расчёте на 1 тыс. жителей;
- доля судебной нагрузки на НКО в общих активах НКО региона;
- средний возраст НКО в регионе;
- доля НКО, имеющих в собственности нежилое помещение (из всех НКО, действующих в регионе);
- концентрация сборов НКО в регионе – коэффициент Херфиндаля-Хиршмана, отражающий, насколько сборы НКО «монополизированы»;
- волатильность налоговых вычетов на благотворительность – коэффициент вариации – показывает, насколько стабильна сумма социальных вычетов, заявляемых населением региона (иначе – объём осознанных пожертвований со стороны населения).
Активность деятельности НКО
Фактор «Активность деятельности НКО» (вес 15%) включает в себя следующие показатели:
- активность участия в конкурсах Фонда президентских грантов (количество НКО, подающих заявки на грант, в расчёте на 1 тыс. жителей региона);
- результативность участия в конкурсах Фонда президентских грантов (доля получивших гранты от подавших);
- значимость полученных грантов ФПГ – полученные средства Фонда президентских грантов, отнесённые к бюджету региона (в пилотном рейтинге – к ВРП региона);
- активность участия в конкурсах Фонда культурных инициатив (количество НКО, подающих заявки на грант, в расчёте на 1 тыс. жителей региона);
- результативность участия в конкурсах Фонда культурных инициатив (доля получивших гранты от подавших);
- значимость полученных грантов ФКИ – полученные средства Фонда культурных инициатив, отнесённые к бюджету региона (в пилотном рейтинге – к ВРП региона);
- значимость полученных грантов: полученные средства конкурса НКО – 2022, конкурса волонтерских проектов и грантов Росмолодёжи, отнесённые к бюджету региона;
- количество крупнейших БНКО, представленных в регионе;
- представленность в реестре СО НКО Минэкономразвития России (реестр, учитывающий СО НКО, которые могут претендовать на дополнительные меры государственной поддержки);
- количество региональных НКО в рейтингах благотворительных фондов RAEX;
- сумма заявки региона на грант Фонда президентских грантов на развитие некоммерческого сектора (отнесённая к бюджету региона);
- результативность получения регионом гранта на развитие некоммерческого сектора (отношение суммы выделенного гранта к сумме, одобренной координационным комитетом);
- активность участия НКО региона в конкурсе #МЫВМЕСТЕ (количество СО НКО, подающих заявки на конкурс, в расчёте на 1 тыс. жителей региона);
- Результативность участия НКО региона в конкурсе #МЫВМЕСТЕ (доля победителей в конкурсах).
Медиаактивность НКО
Фактор «Медиаактивность НКО» (вес 10%). Параметры:
- количество публикаций о региональных НКО в материалах АСИ за 3 года (отнесено к общему количеству СО НКО, действующих в регионе);
- количество публикаций о региональных НКО в материалах АСИ за последний календарный год (отнесено к общему количеству СО НКО, действующих в регионе);
- количество публикаций о региональных НКО за период пандемии в федеральных и региональных СМИ по данным исследовательской группы ЦИРКОН (отнесено к общему количеству СО НКО, действующих в регионе);
- доля публикаций об НКО в региональных СМИ в негативной коннотации по данным исследовательской группы ЦИРКОН (отнесено к общему количеству СО НКО, действующих в регионе);
- количество упоминаний сектора НКО в СМИ по данным «СКАН-Интерфакс».
Поддержка НКО региональной властью
Фактор «Поддержка НКО региональной властью» (вес 15%) включает в себя следующие показатели:
- объём поддержки СО НКО, оказанной регионом, отнесённый к бюджету региона (в пилотном рейтинге – к ВРП региона);
- количество поддержанных регионом СО НКО (отнесено к общему количеству СО НКО в регионе);
- объём поддержки инфраструктуры СО НКО региона, отнесённый к бюджету региона.
Онлайн-доступность информации о поддержке СО НКО
Фактор «Онлайн-доступность информации о поддержке СО НКО в регионах РФ» (вес 5%) в 2023 году претерпел значительные изменения.
Если ранее оценка производилась на основе мониторинга и сильно зависела от человеческого фактора, что вызывало вопросы, то теперь оценка полностью формализована и объективно отражает видимость и востребованность информации о поддержке НКО в регионе: по сути это оценка потенциальной аудитории, отнесённой к населению региона.
Подготовка обновлённых показателей фактора онлайн-доступности представлена следующими этапами:
- Сбор прямых ссылок на страницы с информацией о мерах поддержки СО НКО – публикации о конкурсах, субсидиях, грантах и иных мерах поддержки во всех регионах РФ. Массив ссылок сформирован из двух источников:
- анкеты, полученные от региональных администраций, – от 72 регионов;
- дополнительный прямой поиск информации в поисковых системах и социальных сетях.
Сформирован реестр, представленный 1687 уникальными ресурсами (страницами в сети «Интернет»).
- Формирование «семантического ядра» – т. е. ключевых слов (фраз), по которым потенциальные получатели поддержки могут найти информацию. Семантическое ядро представлено такими поисковыми фразами, как «поддержка НКО», «гранты НКО», «консультации НКО», «семинары НКО», «конкурсы НКО» и др. – всего 42 фразы, каждая из которых представлена в 85 вариантах (по числу регионов) – т. е. общее число поисковых фраз составляет 3570.
- По каждой поисковой фразе из семантического ядра производится:
- анализ частотности их использования в системах «Яндекс» и Google (как часто пользователи ищут информацию по данным поисковым фразам);
- анализ позиций, на которых находятся страницы с информацией о мерах поддержки СО НКО по каждому из поисковых запросов.
- Результат поиска агрегируется в два сводных индекса («Яндекс» и Google), отражающих потенциальную поисковую аудиторию всех ресурсов региона с информацией о поддержке СО НКО; при этом чем выше в поисковой выдаче находится искомая страница, тем выше её влияние на индекс.
Поисковая интернет-аудитория сайтов региона (R) для выбранного семантического ядра рассчитывается по следующей формуле:
где:
N – количество поисковых фраз в семантическом ядре,
Аналогичным образом вычисляется потенциальная поисковая интернет-аудитория для системы Google.
Алгоритм анализа онлайн-доступности информации о поддержке СО НКО в регионах РФ можно рассмотреть на представленной схеме:
Социальная значимость СО НКО
Фактор «Социальная значимость некоммерческого сектора в регионе» (вес 15%) включает в себя следующие показатели:
- кол-во исполнителей общественно полезных услуг (ИОПУ), отнесённое к количеству СО НКО;
- численность работников СО НКО в регионе, отнесённая к численности населения региона;
- численность волонтёров СО НКО в регионе, отнесённая к численности населения региона;
- численность волонтёров СО НКО по данным Добро.РФ;
- динамика численности работников СО НКО в сравнении с предшествующим периодом;
- динамика численности добровольцев СО НКО в сравнении с предшествующим периодом;
- сумма социальных налоговых вычетов на благотворительность (отнесённая к доходам населения региона);
- количество жителей региона, заявивших налоговые вычеты на благотворительность (отнесённое к численности населения региона);
- динамика налоговых вычетов на благотворительность (линейный тренд за 5 лет);
- количество СО НКО в реестре поставщиков социальных услуг (в рамках ФЗ-442);
- общий объём социальных услуг в регионе (отнесённый к бюджету региона);
- наличие региона в перечне пилотных регионов по социальному заказу (да/нет).
Значимость ресурсных центров поддержки СО НКО
Фактор «Значимость ресурсных центров поддержки СО НКО и площадок региональных общественных палат» (вес 10%):
Этот фактор был кардинальным образом переработан по результатам многочисленных экспертных консультаций и дискуссий в регионах. В рамках анализа ресурсных центров в регионе первоначально был составлен перечень таких организаций.
В перечень изначально были включены ресурсные центры, представленные на порталах «Карта ресурсных центров НКО» (rcmap.igrajdanin.ru), «Инфраструктурные организации для НКО» (ngomap.ru), а также ресурсные центры, которые получали поддержку Минэкономразвития.
Далее полученный перечень был дополнен организациями, которые удалось найти в поисковых системах «Яндекс» и Google при поиске по запросам «ресурсный центр НКО <наименование региона>», «поддержка НКО <наименование региона>» и др., содержимое сайтов которых позволяло идентифицировать их как относящиеся к анализируемой тематике.
Предварительный перечень организаций, потенциально относящихся к категории «ресурсный центр СО НКО», составил 712 организаций.
Под ресурсным центром для целей рейтинга подразумевается структура, публично оказывающая следующие виды ресурсной поддержки социально ориентированным некоммерческим организациям:
- финансовую (в частности, предоставление грантового финансирования для СО НКО);
- материальную (предоставление помещений и оборудования на безвозмездной или льготной основе)
- образовательную (проведение обучающих семинаров, конференций, вебинаров для СО НКО);
- консультационную и методическую (оказание индивидуальных управленческих, юридических, бухгалтерских и иных профильных консультаций, необходимых в деятельности СО НКО).
Ресурсный центр учитывается в рейтинге, если он имеет сайт, на котором сформулировано предложение об одном или нескольких видах поддержки с указанием условий и порядка предоставления такой поддержки. При обнаружении такого предложения оно размещается на платформе НКО.РФ – все заинтересованные лица имеют возможность ознакомиться с имеющейся у составителей рейтинга информацией и дать свои поправки.
В итоговом рейтинговом факторе учтены следующие показатели по каждому региону РФ:
- кол-во ресурсных центров, оказывающих публичную помощь, отнесённое к количеству СО НКО в регионе;
- суммарные сборы ресурсных центров региона, отнесённые к сборам всех СО НКО в регионе;
- доля ресурсных центров, оказывающих безвозмездную публичную помощь СО НКО;
- доля ресурсных центров, сдающих ненулевую бухгалтерскую отчётность из всех действующих ресурсных центров в регионе;
- суммарная аудитория соцсетей ресурсных центров, оказывающих публичную помощь СО НКО;
- балл региона в рейтинге РОП.
Экспертный опрос
Экспертный опрос (вес 10%).
В 2023 г. экспертный опрос охватил 6431 участника из всех субъектов Российской Федерации (для сравнения, в выпуске рейтинга 2022 года число участников экспертного опроса составило 2438, а в 2021 году – лишь 1881).
Опрос основывался на теоретической модели, согласно которой некоммерческий сектор может быть описан как институциональная сфера, основной функцией которой является создание условий для распознавания и решения обществом, государством и бизнесом социально значимых проблем.
Исходя из этого, были сформулированы группы вопросов, позволяющие получить экспертную оценку функционального состояния и взаимодействия некоммерческого сектора со всеми группами интересов (стейкхолдерами) процесса распознавания и решения социально значимых проблем:
- оценка взаимодействия некоммерческого сектора и власти в регионе:
- вовлечённость власти в развитие некоммерческого сектора,
- влияние НКО на принимаемые властью решения,
- уровень административных барьеров для деятельности НКО;
- оценка взаимодействия некоммерческого сектора и СМИ в регионе:
- внимание СМИ к тематике некоммерческого сектора,
- способность НКО привлекать внимание СМИ к социальным проблемам,
- компетенции НКО во взаимодействии со СМИ,
- представленность некоммерческого сектора в социальных сетях;
- оценка взаимодействия некоммерческого сектора и бизнеса в регионе:
- развитие социального предпринимательства в регионе,
- вовлечённость бизнеса в развитие некоммерческого сектора,
- распространённость практик корпоративной социальной ответственности;
- оценка вклада региональных общественных палат в развитие некоммерческого сектора;
- оценка сплочённости самого некоммерческого сектора.
Общие принципы подготовки рейтинга можно сформулировать следующим образом:
- Максимальная информативность. Использованы все доступные на данный момент источники информации о предмете рейтинга, которые смогли рекомендовать разработчики и участники рабочей группы).
- Валидность информации для рейтинга (по подавляющему числу параметров была собрана информация по всем 85 регионам, был проведён анализ информации на предмет выявления очевидных ошибок, была проведена математическая, строго формализованная фильтрация данных для удаления «выбросов»).
- Устойчивость рейтинговой модели (то есть малые отклонения в исходных данных или настройках модели не приводят к существенному изменению результата).
- Оптимальная размерность рейтинговой модели (точнее, неизбыточная размерность: любое сокращение числа показателей приводит к ухудшению качества модели).
- Интегральность. Для целей экспертной оценки и принятия управленческих решений следует использовать прежде всего интегральный рейтинг, однако для большей наглядности и демонстрации достижений регионов в отдельных направлениях возможно использовать субрейтинги по отдельным факторам.