helps use resources more effectively to improve people’s lives. She recalls that evaluation of social projects and programs originated in the United States and was first used in projects aimed at fighting poverty and overcoming social inequality.
“Globally, evaluation is about improving the lives of the most vulnerable people. When I began to specialize in evaluation, I realized it was really an analysis that allowed me to improve the quality of the program. It is a tool for informing your actions, learning from experience, and improving from empirical data. After all, this is not just any evaluation: this is about evaluating social projects, ensuring a more efficient use of resources and a higher effectiveness of social projects,” she says.
WILL THE EVALUATION BE DEMANDED IN THE FUTURE
The profession of evaluator will certainly be in demand in the future all over the world, the experts agree. “It’s already the gold standard in the public and private sector,” Irina Sinelina says.
“Evaluation has everything it takes to become a profession, and it will certainly become one. But this will be the result of an evolutionary process, through accumulation of knowledge, understanding of the reasons why it is needed, the growing demand for evaluation professionals, establishment of a community that can raise those professionals, and the emergence of educational products,” Marina Mikhailova forecasts.
The future is often associated with artificial intelligence. “Who is a project and program evaluator?”, we asked ChatGPT. This is what the AI told us: “A project and program evaluator is a professional expert engaged in assessing the value of projects and programs. He or she can work in various sectors of the economy, as well as in the legal market. To be successful, the professional needs to be educated and experienced in financial analytics, be able to work with various forms of assets, to develop valuation models, analyze information, and produce recommendations on improving property values.”
As we can see from this definition, the neural network does not yet understand the difference between a property evaluator and a project and program evaluator. This means that the Russian professional community still has a lot of work to do to make itself known. After all, the profession is still in its infancy. And it still has a long journey ahead, building the demand, ensuring full employment of specialists, setting up professional training schools, developing and approving professional standards, the code of ethics, and establishing an image for itself. As they say, time will tell how the professionalization of evaluation will develop and whether artificial intelligence can compete with it.
This article was written using presentations by Alexey Kuzmin and a video from the ASPPE conference “Valuation in a Changing World: Partnerships and Infrastructure”, session “Professionalization of Evaluation in Russia and the World”.
Оценка в настоящем и будущем: взгляд грантодающих организаций
Ирина Ефремова-Гарт, Татьяна Печегина
DOI 10.55140/2782–5817–2023–3–1–28–33
Какие значимые изменения произошли в 2022 году в сфере оценки в целом и в практике проведения оценки в грантодающих организациях? Каким вопросам стоит уделить внимание профессиональному сообществу в 2023 году? Редакция журнала «Позитивные изменения» спросила об этом представителей Форума Доноров – ассоциации крупнейших грантодающих организаций, системно занимающихся благотворительностью, и чья работа направлена на повышение прозрачности фондов и НКО.
Ирина Ефремова-Гарт
Первый заместитель директора Форума Доноров
Татьяна Печегина
Журналист
ТРЕНДЫ, СФОРМИРОВАВШИЕСЯ В 2022 ГОДУ
В современном обществе в последние годы происходит трансформация социальной сферы – все чаще стали говорить о социальном воздействии, качественных изменениях в обществе и эффективных результатах реализации соответствующих проектов и программ.
2022 год продемонстрировал реальный потенциал и пользу оценки. На сегодняшний момент доноры рассматривают ее как инструмент, позволяющий сделать выводы об эффективности поддержанной или самостоятельно реализованной проектной деятельности. При этом у большинства уже есть понимание, что оценка – это в первую очередь источник информации для разработки дальнейшей стратегии: развитие или прекращение проектной деятельности, сонастройка с меняющимися внешними условиями, обеспечение устойчивости имеющихся позитивных изменений и возможности тиражирования технологий, успешно прошедших стадию пилотирования.
Неизменно растет число доноров, умеющих описывать ожидаемые результаты программ в измеряемых и конкретных формулировках, с привязкой к определенному сроку. Еще одним качественным изменением стала практика разработки цепочки результатов: от немедленных к долгосрочным, что позволяет отследить последовательность позитивных изменений, которые происходят во внешней среде благодаря поддержке донора.
Всё чаще стал встречаться гибридный подход к процессу оценки, когда сторонние эксперты участвуют в разработке методологии, анализе данных и выработке рекомендаций, а сбор информации, интерпретация данных, презентация результатов коллегам и контроль за процессом их использования остается за заказчиком. Ранее внешние специалисты привлекались преимущественно на полный цикл.
Что касается использования донорами результатов оценки, то чаще всего они направлены на повышение эффективности программной деятельности. Чуть реже их применяют для пересмотра целей программы или направлений деятельности, зафиксированных в программных портфелях. Наиболее серьезным был скачок, произошедший за последние несколько лет, в использовании результатов оценки для уточнения стратегических приоритетов. Сегодня для этой цели ее используют подавляющее большинство крупных донорских структур, то есть она становится не только инструментом оперативного, но и стратегического управления благотворительной деятельностью и социальными инвестициями.
Еще одним трендом, оформившимся в течение 2022 года, стало внимание доноров к оценке институционального развития НКО. Все чаще они оказываются готовы инвестировать в укрепление и развитие организационного потенциала НКО, а не только в проектную деятельность, поскольку очевидно, что сильные проекты не может делать слабая организация. Но и в вопросе финансирования проектов доноры стали обращать внимание на уровень организационной зрелости потенциальных партнеров и грантополучателей из числа некоммерческих организаций. Как отстроены процессы стратегического планирования и управления операционной деятельности, процессы фандрайзинга, внешних и внутренних коммуникаций, управления человеческими ресурсами и их развитием – все это является крайне важным. При этом оценка может быть проведена как самим донором или нанятыми им внешними экспертами, так и НКО, претендующей на получение финансирования. Это не только вносит вклад в формирование культуры оценки в НКО, но помогает ей определить зоны своего организационного развития.
Важно отметить, что до сих пор многие организации ошибочно считают социальный эффект от реализации программ
