Оценка эффективности НКО: методология и результаты исследования

В данном случае мы исходим из объективного метода отбора экспертов. Исходя из специфики нашего исследования, он предусматривает подбор экспертов на основе должности, стажа работы в области, связанной с предметом исследования, участия в специализированных советах и комиссиях. Помимо этого, еще одним параметром отбора является территория его деятельности. Учитывая эти параметры, мы сформировали следующие выборочные совокупности.

Представители органов власти. В каждой области: орган власти субъекта федерации – 1 эксперт, муниципалитет столичного города – 1 эксперт, муниципалитет города, расположенного на территории области – 1 эксперт. Соответственно, общее количество экспертов от органов власти составит 12 человек.

Представители социально-ответственного бизнеса. По 3 эксперта в каждой области. Общее количество экспертов от бизнеса составит 12 человек.

Представители экспертного сообщества (члены Общественных Палат, представители ФСКН и наркологи). По 3 эксперта в каждой области. Общее количество экспертов – 12 человек.

Лидеры некоммерческих организаций. По 3 эксперта в каждой области. Общее количество экспертов – 12 человек.

Журналисты, специализирующиеся на социальной тематике. По 3 журналиста в каждой области. Общее количество экспертов – 12 человек.

Таким образом, общее количество экспертов составит 60 человек. (Ориентировочный список экспертов по каждой территории представлен в Приложении № 6.)

Контроль полевого этапа

Контроль экспертного опроса будет осуществляться супервайзерами, в функции которых входит:

1. выборочный обзвон экспертов, принявших участие в опросе

2. проверка заполненности бланка (проверяется каждый бланк),

3. контроль сроков проведения опроса,

4. контроль наличия аудиозаписей интервью экспертов.

Итогом работы супервайзеров являются проверенные, полностью заполненные бланки и аудиозаписи на 100% отражающие запланированный список экспертов и отчет контроля качества выполнения полевых работ.

Характеристика интервьюеров

Перед началом работы со всеми интервьюерами проводится инструктаж по бланку и пилотажные интервью, направленные на ознакомление интервьюеров с вопросником, выявление возможных проблемных мест в бланке и определения степени подготовленности интервьюеров к полевым работам. К работе будет допущен лишь тот, кто имеет опыт работы с экспертными интервью и владеет надежными базисными знаниями в области ведения коммуникации.

Каждый интервьюер получает комплект полевых документов: список экспертов; бланк интервью; визитные карточки СООО АНЦ «Спасение» с указанием ФИО интервьюера.

Эмпирическая интерпретация

Поскольку эксперты представляют основные институты, от которых зависит решение проблемы распространения наркотиков и профилактики наркозависимости, нам необходимо, в первую очередь, проанализировать структуру и сущность взаимодействия, существующего у них с НКО. Помимо этого, в зависимости от плотности и опыта контактов участников опроса с представителями различных некоммерческих организаций, мы можем получить комплексное представление экспертов о видении критериев результативности. Выше нами уже были проинтерпретировано содержание «взаимодействия» и «результативность». Исходя из этого, мы выделили следующие замеряемые параметры:

Программа № 3. «Получатели услуг»

Объект: получатели услуг НКО, работающих в сфере профилактики распространения наркотиков и реабилитации лиц, зависимых от потребления

География: реабилитационные центры, расположенные на территории Свердловской, Тюменской, Челябинской и Пермской областей.

Основные задачи Программы № 1.

Задачи состоят в получении мнения «изнутри», т.е. набора позиций, которые являются оценочными для получателей услуг НКО, обладающих непосредственным опытом взаимодействия с некоммерческими организациями.

Для решения этих задач нам необходимо выяснить мнение клиентов реабилитационных центров о качестве получаемых услуг, а также оценку реальных изменений, к которым привело получение данных услуг. Ниже (см. Эмпирическую интерпретацию) представлены параметры, через выяснение которых мы сможем получить необходимую для нас информацию.

Метод сбора информации

анкетирование

Выборка

Сплошная выборка, включает в себя всех (около 350 человек5) получателей услуг реабилитационных центров на территории областей, входящих в географию проекта.

Методика реализации выборки

Разрабатывается отдельная анкета для проведения опроса респондентов.

Данные о численном составе получателей услуг запрашиваются у менеджеров реабилитационных центров. Через центры проводится сплошной опрос клиентов центров.

Контроль полевого этапа

В ходе опроса в каждом реабилитационном центре контроль полевого этапа будет осуществляться супервайзерами, в функции которых входит:

1. сбор информации о числе получателей услуг и видах предоставляемых услуг

2. проверка полноты заполняемых анкет (проверяется каждая анкета),

3. контроль сроков проведения опросов,

4. контроль выборки (проверка всех точек, попавших в опрос, и контроль списка респондентов для опроса получателей услуг)

Итогом работы супервайзеров являются проверенные, полностью заполненные анкеты, на 100% отражающие выборочную совокупность, и отчет контроля качества выполнения полевых работ.

Эмпирическая интерпретация

Выше мы уже отметили, что основное содержание деятельности НКО, занятых в данной сфере можно сгруппировать в два направления:

1. реабилитация (медицинская, психологическая, социальная) лиц, зависимых от потребления ПАВ и других химических веществ;

2. информирование (в т.ч. пропаганда здорового образа жизни, распространение информации о вреде потребления наркотиков и т.п.) о проблеме наркомании.

Соответственно, из этого мы и будем исходить в разработке эмпирических параметров.

Программа № 4. «Руководители НКО»

Объект: Менеджеры НКО, работающих в сфере противодействия распространению наркомании и реабилитации наркозависимых.

География: НКО, осуществляющие свою деятельность на территории Свердловской, Тюменской, Челябинской и Пермской областей.

Основные задачи Программы № 4.

Аналитические задачи исследования направлены на выяснение параметров устойчивости некоммерческих организаций с точки зрения состояния ее внутренних элементов и эффективности систем взаимодействия с внешней средой.

Метод сбора информации

Фокус-группа

Обоснование метода

Использование метода фокус-группа обусловлено, с одной стороны, спецификой объектов нашего исследования, а с другой – возможностью получения необходимой глубины информации, в частности, для изучения группового мнения менеджеров реабилитационных центров относительно внутренних и внешних параметров деятельности некоммерческих организаций.

Специфика качественных методов состоит том, что, в отличие от количественных они дают более глубокую и детальную информацию (что люди думают, представляют или как воспринимают то или иное событие). Помимо этого, с методологической точки зрения, данные методы обладают определенной гибкостью и дают возможность в ходе их использования не только осуществлять проверку собственных выводов, но и расширять список аспектов, нюансов. Естественно, в сочетании с количественными методами, это позволит нам максимально приблизиться к получению комплексной картины.

Выборка и ее характеристики

При формировании выборки участников фокус-групп мы исходили из следующих принципов. Сегодня наиболее целесообразная численность группы определяется в 8-10 человек. Это позволяет обеспечить эффективность группового обсуждения и получить необходимые данные.

Помимо этого, при составлении списка участников каждой группы мы будем исходить опять же из объективного подхода. Для достижения поставленных целей нам необходимо проведение фокс-группы в каждой области. При этом, основными характеристиками, которые принимаются нами при определении состава групп, являются: принадлежность к «столичному» или территориальному реабилитационному центру и стаж работы в данной организации. В связи с этим, из 10 участников первая половина будет представлять «столичный», а вторая половина – территориальный центры.

Таким образом, общее количество участников фокус-групп будет составлять 40 человек. Ориентировочный список участников фокус-групп см. в Приложении № 11.

Контроль полевого этапа

Контроль проведения фокус-групп будет осуществляться супервайзерами, в функции которых входит:

1. организация места для проведения фокус-группы в каждом городе (материально-техническое обеспечение, помещение, явка экспертов и пр.)

2. организация аудио- и видеозаписи фокус-групп,

3. контроль сроков проведения фокус-групп.

Итогом работы супервайзеров являются отчет контроля качества выполнения полевых работ.

Описание итоговых результатов

Итогом фокус-групп является аналитический отчет, отражающий в себе структуру параметров устойчивости некоммерческих организаций с точки зрения состояния ее внутренних элементов и эффективности систем взаимодействия с внешней средой.

Эмпирическая интерпретация

Поскольку лидеры НКО владеют информацией как о внутреннем состоянии своих организаций, так и о системе взаимодействия с представителями внешней среды, перед нами стояла задача вычленения эмпирических позиций, которые бы отражали каждую и этих сред. В связи с тем, что для опроса экспертов, представляющих различные социальные институты внешней среды данные позиции нами уже были сформулированы, то в рамках фокус-группы нам остается выяснить информацию по данным параметрам уже с точки зрения руководителей НКО.

Примечания