190 likes | 430 Views
Правила игры нужно знать, но лучше устанавливать их самому. Анджей Сток. Процессный подход к разработке стандартов управления качеством исследовательского процесса и его результатов. Ольга Рыбакова, Фонд «Социум».
E N D
Правила игры нужно знать, но лучше устанавливать их самому. Анджей Сток Процессный подход к разработке стандартов управления качеством исследовательского процесса и его результатов Ольга Рыбакова, Фонд «Социум»
Отношение профессионального сообщества к идее разработки нового профессионального кодекса стандартов качества
АРГУМЕНТЫ ЗА Инструмент эффективной коммуникации участников исследования Ориентир для формирования Заказа участниками рынка на проведение маркетингового /социологического исследования: государственного заказа, брифа, и выбора подрядчика Критерии для осуществления внешнего и внутреннего аудита качества продукции на всех этапах оказания услуги Основание для демонстрации качества продукции заказчику и профессиональному сообществу Для урегулирования прав на продукцию социологического / маркетингового исследования, публикации, тиражировании социологической информации. Средство противостояния «девальвации социологии» АРГУМЕНТЫ ПРОТИВ Достаточность международных кодексов, отсутствие необходимости «создавать велосипед» Сомнения в том, что российские компании будут следовать стандартам при наличии «черного демпинга» на рынке Предположение, что стандартизация сузит возможности повышения эффективности имеющихся методов, и перспективы разработки новых, то есть ограничат научное творчество Аргументация про и контра
Выгоды: • Четкие ориентиры, позволяющие оценить уровень надежности результатов исследования, иметь представление о нормативном и организационном оформлении исследовательского проекта • Способствовать развитию методологической и методической грамотности ключевых участников исследовательского процесса. • Способствовать укреплению положительной репутации и рыночных позиций исследовательских компаний путем повышения эффективности менеджмента при организации и проведении социологического/маркетингового исследования; • Опасения: • Неготовность участников рынка придерживаться стандартов • Недостаточность методической культуры заказчиков и исполнителей • Несовершенство законодательной базы • Финансовые ограничения
Все правила достойного поведения давным-давно известны, остановка за малым - умением ими пользоваться. Блез Паскаль
Типология имеющихся профессиональных кодексов • Акцент на нормах профессиональной этики исследователя (Кодекс профессиональной этики американской социологической ассоциации (ASA) ISI Declaration on Professional Ethics (Интернациональный Институт Статистики) Международный кодекс ICC/Esomar по практике проведения маркетинговых и социологических исследований; Профессиональный кодекс социолога Советской социологической ассоциации (март 1987 г. , новая редакция РОС 2011г) • Концентрация на регламентации процедуры исследования, и документации, протоколирующей взаимодействие участников исследовательского процесса. Кодекс профессиональной этики и практики // AAPOR Code of Standards and Ethics for Survey Research. // CASRO (Council of American Survey research organization) · ISO 20252 - Market, Opinion and Social Research (2006) · ISO 26362 - Access Panels in Market, Opinion and Social Research (2009)
Основание: ГОСТ Р ИСО 9000—2001 • определяет требования к системам менеджмента качества для тех случаев, когда организации необходимо продемонстрировать свою способность предоставлять продукцию, отвечающую требованиям потребителей и установленным к ней обязательным требованиям, и направлен на повышение удовлетворенности потребителей • ГОСТ Р ИСО 9000—2001 ПРИНЯТ И ВВЕДЕН В ДЕЙСТВИЕ Постановлением Госстандарта России от 15 августа 2001 г. № 332-ст
Процесс исследования Заказчик и другие заинтересованные Стороны УДОВЛЕТВОРЕННОСТЬ • ИСПОЛНИТЕЛЬ • Этапы исследования: • Подготовительный этап, концептуализация. • Полевые работы • Первичная обработка массива данных • Анализ данных, составление и оформление отчетных документов по исследованию Заказчик и другие заинтересован ные стороны ТРЕБОВАНИЯ ВХОД БРИФ-ТЗ ВЫХОД ПРОДУКЦИЯ
Представления о требуемой информации для принятия управленческого решения Заказчик Исследования Представления о исследовательском процессе как качественно заказать исследование Б Р И Ф: Требования Представления о качественном Исполнителе - подрядчике Бюджетный коридор
Постановка исследовательских задач Исследовательская компания: Как организовать исследование и получить качественный результат Коммерческое предложение (ТЗ): условия выполнения требований Дизайн исследования Ресурсное обеспечение
Этап концептуализации: 1. Разработка дизайна исследования: задачи и исследуемые показатели 2. Определение метода сбора информации Разработка инструментария 3.Моделирование объекта и определение типа и объема выборочной совокупности 4. Пилотажное исследование 5. Разработка плана исследования (временные и организационные ресурсы ) Вход: ТЗ • Выход: • План исследования • Пакет методических • документов
Вопросы, от которых зависит качество этапа: • Конструктная валидность –согласованность объемов и содержания исследовательских задач, гипотез, аналитических моделей, индикаторов • Адекватность типа и объема выборки исследовательским задачам (носители искомой информации, их доступность и требуемое количество) • Адекватность методической стратегии: используемые методы, их сочетание, последовательность. Инструментарий. • Предполагаемый контроль качества поля 1.Стандарты взаимодействия Сторон 2. Стандарты документарного оформления результатов этапа Залог качества: Коммуникация исследователя и заказчика!
Полевой этап: 1. Оганизация полевых работ в зависимости от методической стратегии: 2.Интервьюеры (кодировщики), контролеры 3. Ресурсное обеспечение Вход: Пакет методических документов Выход: Массив данных, Заполненные полевые документы Результаты контроля
Вопросы, от которых зависит качество этапа • Стандарты взаимодействия Сторон: заказчик, исследователь – подрядчик, субподрядчик.. • Стандарты взаимодействия участников полевых работ: аналитики, супервайзеры, интервьюеры, кодировщики, котролеры и т.д. • Стандарты документарного оформления результатов этапа • Наличие необходимого и достаточного набора полевых документов в зависимости от метода • Необходимое ресурсное обеспечение: работники, рабочие места • Порядок взаимодействия с субподрядчиками • Инструктажи, тренинги интервьюеров, кодировщиков • Текущий и итоговый контроль • Внешний контроль со стороны заказчика
Этап первичной обработки массива данных: • Чекинг и ремонт выборки • Выбор формата и составление базы данных, транскриптов и т.д. • Контроль качества ввода данных • Переформатирование базы данных для презентации заказчику Вход: Массив данных, Заполненные полевые документы Методический отчет, Результаты контроля Выход: База данных в формате, необходимом для составления отчета База данных для презентации заказчику Полевые документы
Вопросы, от которых зависит качество этапа • Объем и структура переменных • Точность ввода, проверяемость • Контроль точности ввода • Согласованный формат базы данных • Описание процедур, используемых для получения окончательного списка переменных • Стандарты контроля точности ввода данных • Стандарты согласования формата базы данных, транскриптов и т.д. в соответствии с последующим менеджментом (доступ, совместимость, возможности вторичного и сравнительного анализа) • Стандарты передачи и хранения базы данных Важно: Решение задач текущего исследования Передача и хранение БД Перспективное использование
Этап анализа данных и составления отчетных документов: Вход: База данных в формате, необходимом для составления отчета • Определение и согласование структуры и формата отчета • 2. Анализ данных и составление отчета • 3. Подготовка и передача отчетных документов заказчику Выход: Отчетные документы База данных для передачи Заказчику Полевые документы для внешнего котроля
Вопросы, от которых зависит качество этапа • Список отчетных документов • Структура и формат отчета • Базы данных для заказчика • Акты передачи отчетных документов • Формат презентациирезультатов 1 Стандарты структуры отчета (сроки проведения исследования, информация об авторах, описание методов сбора, выборки, процедур взвешивания и т.д.) 2. Стандарты соблюдения требование конфиденциальности персональных данных респондентов при передаче баз данных 3. Документарное оформление прав на продукцию Залог качества: Коммуникация исследователя и заказчика!
Послесловие:Соблюдая правила, Вы можете заставить их работать на себя. (Йохан Хёйзинга)