В последние десятилетия вопросы социальной ответственности бизнеса и оценки реального влияния проектов на общество вышли на первый план среди приоритетов как коммерческого, так и некоммерческого сектора. Организациям всё чаще требуется не просто отчитаться о потраченных средствах, но и доказать, какие именно изменения произошли в жизни целевых групп и насколько эти изменения значимы. Методология оценки социального воздействия призвана ответить на ключевой вопрос: «Какой эффект создан проектом и можно ли этот эффект измерить в сопоставимых единицах?» В отличие от традиционного мониторинга проектов, который фиксирует количество оказанных услуг или достигнутых результатов, оценка социального воздействия стремится к монетизации изменений — то есть к переводу социальных, экологических и человеческих эффектов на язык финансовых эквивалентов. Наиболее признанной и системной методологией в этой области является подход SROI (Social Return on Investment — социальный возврат на инвестиции), разработанный организацией Social Value International (SVI). Именно эту методологию мы стремимся использовать в своей работе, планируя социально значимые проекты и оценивая результаты их реализации.
Социальный возврат на инвестиции. Метод
SROI — подход основан на монетизации всех результатов проекта и расчёте соотношения созданных ценностей к инвестированным ресурсам. Согласно руководству Social Value International, оценка по методологии SROI включает шесть последовательных шагов:
Этап 1. Определение объекта анализа Определяются границы проекта, целевая аудитория, основные стейкхолдеры и горизонт планирования. Обычно горизонт составляет от 3 до 10 лет — для образовательных проектов, как правило, 5–10 лет, поскольку эффект от образования проявляется в долгосрочной перспективе. На этом этапе важно задать четкие рамки анализа SROI и определить, кто будет участвовать в процессе оценки и каким образом это участие будет организовано.
Этап 2. Составление карты результатов Совместно со стейкхолдерами вы разработаете карту результатов или теорию изменений, которая будет показывать связи между вкладами в проект, его результатами и конечными эффектами для каждого стейкхолдера. На этом этапе определяются ключевые индикаторы — количественные (например, число обученных, уровень трудоустройства) и качественные (например, удовлетворённость, уровень компетенций), которые будут измеряться.
Этап 3. Подтверждение и измерение результатов На этом этапе происходит сбор данных по каждому индикатору. Определяется исходный уровень до проекта и проводится мониторинг на протяжении всего горизонта планирования, чтобы подтвердить или опровергнуть достижение результатов. Критически важно привлекать контрольную группу — выборку, не участвовавшую в проекте, для сравнения.
Этап 4. Оценка финансовой или денежной ценности Для каждого результата ищется «финансовый или денежный эквивалент» — рыночная или близкая к рыночной стоимость, которая позволяет перевести социальный эффект в деньги. Этот процесс также называют «монетизацией».
Финансовые эквиваленты или прокси-переменные — это ключевой инструмент монетизации. Они подбираются из следующих источников (в порядке предпочтения):
–Прямые рыночные цены (если социальный эффект имеет рыночное выражение)
–Среднерыночные показатели (например, средняя заработная плата в регионе)
–Стоимость аналогичных услуг (например, стоимость государственного образования на одного учащегося)
–Готовые данные каталога IRIS+, где для сотен метрик уже определены финансовые эквиватенты
–Отраслевые исследования и правительственные отчёты
Например, для сферы образования типичные финансовые эквиваленты включают:
Индикатор
Финансовый эквивалент
Число завершивших обучение
Стоимость 1 года обучения в вузе / школе
Уровень трудоустройства выпускников
Среднегодовая зарплата по специальности × 1 год
Рост зарплаты выпускника на 10%
Дельта зарплаты × количество выпускников
Снижение безработицы среди уязвимых групп
Сумма не выплаченных пособий по безработице
Повышение навыков чтения
Стоимость дополнительного репетиторства для эквивалентного улучшения
Социальная инклюзия (число участников)
Средняя стоимость групповой терапии / тренинга
Улучшение здоровья (снижение заболеваемости)
Сэкономленные расходы на лечение / лекарства
Время, сэкономленное участниками
Средняя почасовая зарплата × сэкономленные часы
После того как были собраны данные о результатах проекта и подобраны финансовые эквиваленты, из анализа исключаются следующие изменения: – Которые произошли бы в любом случае даже без проекта (deadweight). Например, если без участия в программе 60% безработных всё равно нашли бы работу, то deadweight = 60%. – Которые стали возможны в результате воздействия других факторов (attribution). Например, если выпускники признают, что проект обеспечил им 70% компетенций, а 30% — благодаря самостоятельному обучению, то attribution = 30%. – Которые переносят проблему в другую область – другой регион или на другую группу людей (displacement). Например, если проект трудоустроил выпускника на позицию, которая в противном случае досталась бы другому местному кандидату, а не привел к созданию нового рабочего места, то значительная часть эффекта является «переносом» (displacement).
Также учитывается постепенное снижение эффекта после завершения проекта (decay). Например, 10% в год.
Этап 5. Расчёт социального эффекта На этом этапе все положительные результаты проекта или деятельности в денежном эквиваленте суммируются, из них вычитаются все выявленные в процессе анализа отрицательные результаты и полученный итог сопоставляется с общей суммой инвестиций в проект или деятельность, т.е. рассчитывается чистая приведённая стоимость (NPV) всех социальных выгод с учётом дисконтирования. На этом этапе также проводится анализ чувствительности построенной модели социального возврата на инвестиции (SROI) к изменениям различных ее компонентов.
Суммарный чистый социальный эффект (Net Social Value – NSV) за весь горизонт планирования T рассчитывается с учётом дисконтирования — приведения будущих выгод к текущей стоимости:
NSV = NPV = Σ [ Vкор(t) × E(t) ] / (1 + r)^t − I, где
Vкор(t) — скорректированная ценность результатов года t (без учёта decay)
E(t) — фактор decay для года t
r — ставка дисконтирования
I — общая сумма инвестиций в проект (капитальные и операционные расходы)
NSV > 0 означает, что проект создаёт дополнительную социальную ценность; NSV < 0 — проект не окупает вложенных в него социальных инвестиций.
–SROI = 2:1 — на каждый вложенный рубль создано 2 рубля социального эффекта
–SROI = 3:1 — на каждый вложенный рубль создано 3 рубля социального эффекта
При этом SROI отражает создание социальных ценностей, а не финансовую прибыль — это принципиально разные понятия.
Этап 6. Подведение итогов, верификация и использование результатов Полученные результаты публикуются в виде отчёта об оценке SROI, проводится его независимая верификация, результаты обсуждаются со стейкхолдерами. На основе оценки SROI принимаются решения о масштабировании, корректировке или прекращении проекта.
В качестве справочных систем для подбора индикаторов (метрик) и привязки результатов к глобальным целям могут использоваться другие международные стандарты, такие как:
–IRIS+ (Impact Reporting and Investment Standards) — каталог универсальных метрик, разработанный консорциумом GIIN (Global Impact Investing Network). Позволяет единообразно описывать результаты для их последующего агрегирования и сравнения.
–SDG (Sustainable Development Goals) — Цели устойчивого развития ООН, предоставляющие систему индикаторов для сопоставления проектов с глобальными приоритетами.
Методология SROI, несмотря на свою строгость, содержит несколько источников неопределённости, которые необходимо учитывать:
–Выбор ставки дисконтирования –Точность финансовых эквивалентов: если они основаны на средних значениях по отрасли, они могут не отражать реальную ситуацию конкретной группы –Определение deadweight и attribution: эти параметры требуют сбора первичных данных (опросов, контрольных групп) и достаточно субъективны –Негативные эффекты: методология SROI рекомендует учитывать и негативные результаты, но на практике они часто игнорируются –Монетизация не всех результатов: некоторые качественные изменения (уверенность в себе, чувство общности) трудно перевести в деньги и могут быть недоучтены.
В связи с этим результаты SROI следует представлять в виде диапазона (best-case / worst-case) и сопровождать качественным описанием ограничений.
Иллюстративный пример: оценка образовательного проекта в сфере ИТ
Рассмотрим гипотетический проект: программа подготовки в сфере информационных технологий для 50 выпускников региональных школ из малообеспеченных семей с последующим трудоустройством. Горизонт планирования — 5 лет.
Исходные данные:
Параметр
Значение
Число участников
50
Стоимость обучения на одного (I)
150 000 руб.
Общие инвестиции (50 × 150 000)
7 500 000 руб.
Горизонт планирования
5 лет
Ставка дисконтирования (r)
5% (0,05)
Средняя зарплата выпускников (год 1)
45 000 руб./мес. = 540 000 руб./год
Средняя зарплата контрольной группы
25 000 руб./мес. = 300 000 руб./год
Расчёт корректировок:
Предположим (на основе собранных отраслевых данных):
–Deadweight (M) = 30% — то есть 30% трудоустройства произошло бы и без проекта (отраслевая статистика показывает, что в IT-секторе растёт спрос на кадры)
–Attribution (A) = 20% — выпускники признают, что 20% навыков получено вне проекта
–Displacement (D) = 10% — незначительный эффект переноса
–Decay — не применяется в течение 5 лет программы (эффект сохраняется)
–Пропорция трудоустройства после программы: 80% участников (40 человек)
–Прирост дохода на одного трудоустроенного: (540 000 − 300 000) = 240 000 руб./год
Вывод: на каждый вложенный рубль проект создаёт 1,31 рубль социальных ценностей; чистый социальный эффект (NSV) за 5 лет составляет 2,32 млн рублей. Это означает, что проект экономически оправдан с точки зрения социальной ценности.
Пример использования метода в мировой практике:
В качестве примера приведем оценку социального воздействия программы Learning Outside the Classroom[1] в Великобритании (далее – LOtC, с англ. «Обучение вне класса»), которая реализуется с 2008 года и направлена на интеграцию образовательных путешествий и внеклассной работы в школьную программу.
LotC реализует некоммерческий благотворительный фонд: Совет программы (Council for Learning Outside the Classroom, CLOtC, далее - Совет). Департамент образования Великобритании выступает учредителем Совета, однако бюджетного финансирования программа не имеет. Основными источниками дохода Совета являются программы сертификации для объектов размещения и показа (56% доходов), гранты на целевые образовательные мероприятия (22% доходов) и членские взносы школ-участниц (20% доходов).
Для оценки эффективности программы используется показатель SROI (Social Return on Investment[2]), который показывает соотношение затраченных на реализацию программы средств к эффекту, который она оказала на школьников, учителей и волонтёров (в денежном выражении). Оценка показателя проводилась в 2019 – 2022 годах в рамках проекта Nature Friendly Schools (Школы, дружелюбные к природе). Данные для оценки были получены в результате опросов в школах участницах программы.
При оценке использовались следующие параметры:
Эффект – учащиеся принимают большее участие в жизни местного сообщества
Индикатор – снижение антисоциального поведения
Численность – 90 школьников
Период – 2 года
Прокси-переменная – издержки ареста подростка и попадания в систему уголовного правосудия
Издержки – £5.960, итог – £95.586,48.
Ключевой результат программы LOtC – SROI (4,32). Это значит, что на каждый £1, инвестированный в образовательные путешествия, приходится £4,32 социальной ценности.
Ключевые ограничения при использовании метода
Основным ограничением при использовании данного метода является наличие данных для оценки финансовых эквивалентов по двум причинам: отсутствие наблюдений за целевой группой после завершения проекта и недостаток данных для оценки стоимости прокси-переменных.
Первое связано с тем, что социальный эффект редко проявляется сразу по завершению проекта. Как правило, социальный эффект – воздействие проекта на жизнь представителей целевой группы или местного сообщества – можно оценить через несколько лет после выхода участников из проекта (3 – 5 лет).
Второе обусловлено тем, что далеко не по всем переменным можно найти данные в открытых источниках о рыночной стоимости. Например, отсутствуют данные о величине издержек при попадании подростков в систему правосудия из-за асоциального поведения.
Проведение оценки при отсутствии данных о финансовых эквивалентах
При отсутствии данные о финансовых эквивалентах, необходимых для использования SROI, при оценке социальных эффектов проектов мы опираемся на динамику показателей качественных результатов, характеризующих изменения в жизни целевых групп.
Пример, в 2022 году мы разработали методику оценки социального воздействия реабилитационной программы для подростков, реализуемой Центром святителя Василия Великого из г. Санкт-Петербурга (далее – Центр). Центр – это единственная организация в России, которая занимается реабилитацией с обязательным проживанием подростков в конфликте с законом по специально разработанной программе в режиме открытого социального центра.
Центр был учрежден Православным Приходом св. вмц. Анастасии Узорешительницы в 2004 году как альтернатива закрытым учреждениям для ребят, совершивших уголовные преступления, в основном, средней тяжести. В Центре создаются необходимые условия для развития и становления зрелой ответственной личности.
Таким образом, Центр представляет собой социальную институцию вместо тюрьмы, где для ребят, находящихся в конфликте с законом, созданы все условия для получения нового позитивного социального опыта, который позволяетт им ответственно сделать правильный жизненный выбор.
Методика оценки разрабатывалась для масштабирования деятельности организации на другие территории, в том числе посредством использования механизма проектов социального воздействия.
Нами было предложено оценку проводить по следующим параметрам:
–Оценка достижения целевых значений показателей социального эффекта;
–Анализ результатов выполнения мероприятий укрупненного плана мероприятий;
–Анализ взаимосвязи мероприятий проекта, использованных технологий и методов социального воздействия и полученных результатов, а также оценка факторов и условий внешнего и внутреннего характера, необходимых для масштабирования проекта на других территориях региона.
Оценка достижения целевых значений показателей социального эффекта
Оценка проводится по следующим показателям проекта:
Наименование показателя
Единица измерения
Целевое значение
Доля подростков, совершивших правонарушения, работа с которыми проводится по программам индивидуального развития
Проценты
Не менее 80% от общего числа
Сокращение числа повторных правонарушений, совершенных подростками, по сравнению с предыдущим отчетным периодом
Проценты
Не менее чем 10%
Доля подростков - участников программы социальной реабилитации, совершивших повторные правонарушения после завершения участия в программе
Проценты
Не более 25% от общего числа участников программы социальной реабилитации
Доля подростков - участников программы социальной реабилитации, отказавшихся от употребления психоактивных веществ
Проценты
Не менее 75% от общего числа подростков– участников программы, употреблявших ПАВ, на момент поступления в программу
Расчет значений показателей предложено проводить на основе данных, предоставленных территориальными Комиссиями по делам несовершеннолетних (далее – Комиссия). Целевые значения показателей рассчитаны на основе данных Центра о результатах своей деятельности за предыдущий период.
Анализ результатов выполнения мероприятий укрупненного плана мероприятий.
Анализ предложено осуществлять на основании итогового отчета о реализации проекта масштабирования.
Анализ взаимосвязи мероприятий проекта, использованных технологий и методов социального воздействия и полученных результатов, а также оценка факторов и условий внешнего и внутреннего характера, необходимых для масштабирования проекта на других территориях региона.
Анализ необходимо проводить на основе результатов независимого оценочного исследования. Исследование должно охватывать все целевые аудитории проекта, в том числе представителей органов власти и организаций комплексной системы профилактики правонарушений подростков, родителей, подростков, принявших участие в мероприятиях по профилактике. Дизайн оценки программы разрабатывается независимым оценщиком самостоятельно и согласовывается на этапе составления Технического задания. В результате такой оценки ключевые стейкхолдеры должны получить ответы на следующие вопросы:
– Могут ли изменения, произошедшие в целевой группе проекта, быть объяснены данным проектом, или они возникли под воздействием других факторов?
– Имеет ли проект какие-либо внешние эффекты, позитивные или негативные?
– Различается ли эффект воздействия проекта для разных групп благополучателей, разных регионов?
– В какой степени реализованный проект повлиял на развитие потенциала организации, территориального образования, сообщества, реализовавшего его?
Результатом исследования становится заключение о факторах и условиях внешнего и внутреннего характера, необходимых для масштабирования проекта на других территориях.