Цель, критерии и методы оценки персонала
После периода приема на работу работника необходимо определить степень эффективности его труда.
Оценка результатов деятельности работника можно представить как продолжение функции контроля в системе управления персоналом и предприятием в целом, поскольку эти системы органически взаимосвязаны и от деятельности работника зависит результативность деятельности предприятия в целом. Следовательно, если по курсу менеджмента общеизвестно, что процесс контроля предусматривает установление стандартов и измерение результатов с целью определения отклонений от установленных норм, аналогично и процесс оценки результатов работника требует сбора информации о том, насколько эффективно каждый работник выполняет делегированные ему функции. Это является основой принятия решений о выплате вознаграждения работнику, его поощрения и наказания, продвижения по службе и увольнения подобное.
Следовательно, оценка результатов деятельности работника должна достичь трех важнейших целей самой системы управления персоналом, а именно: административной, информационной и мотивационной.
По определению, которое чаще всего применяется среди современных ученых-экономистов в области труда, оценка персонала это — «определение соответствия количества и качества труда работника установленной технологии выполнения работы».
Основными задачами оценки работы персонала являются:
- Определение потенциала работника и оценка фактического его использования.
- Установление требований к результативности труда для каждого рабочего места и критериев их оценки.
- Разработка политики проведения оценок результативности труда.
- Сбор информации и оценка результативности труда.
- Обсуждение результатов оценки с работником.
- Принятие решения о дальнейшем использовании работника.
Оценка работы персонала осуществляется по показателям, которые отражают характер выполняемой работы на конкретном рабочем месте. Чаще всего применяются такие показатели, как выполнение норм выработки, нормированных заданий, норм обслуживания, производительность (эффективность, рентабельность) труда, трудозатраты по количеству отработанных человеко-часов. Также, на отдельном предприятии могут быть применены дополнительные показатели для оценки, применение которых не должно тянуть нарушения норм трудового законодательства в части защиты прав работников на справедливое вознаграждение, условия труда, режим труда и отдыха и т.п.
В любом случае, качество оценки всех категорий работников не может быть обеспечена вне отлаженного механизма нормирования труда, которое представляет собой «меры по оценке количества труда, которая должна быть реализована в рамках заданной технологии». Деятельность по нормированию труда в управление персоналом является комплексной и дает возможность решать вопросы оценки работы персоналом. При условии эффективности организации нормирования труда на предприятии (в организации) необходимо для каждого работника разработать нормированные задания, выполнение (невыполнение) которых является объективным элементом оценки персонала.
Наиболее важным инструментарием при оценке персонала являются критерии оценки. Понятно, что для всех категорий должностей не может быть применено единых критериев, единой системы оценки. Но все критерии, применяемые в современной практике условно подразделяются на 4 группы:
- профессиональные;
- деловые;
- морально-психологические;
Профессиональные критерии — это характеристики профессиональных знаний, умений, навыков, профессионального опыта работника, его квалификации, результативности и эффективности труда.
Деловые критерии — характеризуют организованность, ответственность, инициативность, предприимчивость и т.п.
Морально-психологические критерии — развивают такие особенности работника, как способность к самооценке, честность, справедливость, психологическая устойчивость.
Интегральные критерии — это характеристики, которые получают на основе многих других присущих работнику качеств и показывают на его авторитет, состояние здоровья, общую культуру, культуру мышления и языка и т.
Определены группы условно можно разделить на субъективные и объективные.
К субъективным относятся те критерии, которые нельзя измерить в количественном (денежном) выражении с помощью расчетов, характеризующих изменение количественных и качественных показателей работы предприятия (организации) в целом.
К объективным относятся те критерии, которые непосредственно влияют на результативность труда работника и измеряются в непосредственной зависимости с изменением качественных показателей работы предприятия (организации) в целом.
В таблице 1. проведено разделение этих критериев на соответствующие группы.
Таблица 1 Классификация критериев оценки персонала на субъективные и объективные
Субъективные критерии | Объективные критерии и их зависимость с показателями |
1. Деловые — все, кроме ответственности и организованности. | 1.![]() |
2. Морально-психологические — все. | 2. Деловые (организованность, ответственность) — влияют на дисциплину труда и, соответственно — выработка продукции. |
3. Интегральные — все, кроме состояния здоровья. | 3. Интегральные (состояние здоровья) — влияет на производительность и количественные и качественные показатели работы предприятия. |
Исходя из выбранных критериев, при оценке деятельности работника используются следующие методы:
- метод аналитической оценки, при котором аттестационная комиссия рассматривает письменную характеристику — отзыв на работника, и проводит с ним собеседование;
- метод системы оценок, при которой проходит ранжирование персонала, в результате которого руководитель (аттестационная комиссия) в состоянии сравнить работников между собой с последовательными выводами;
- метод ситуационной оценки — в качестве шкалы для оценки используется описание поведения работника в конкретной производственной ситуации, для чего разрабатывается описание эффективных и неэффективных примеров поведения во времени;
- метод оценки по достижению целей — ориентация на достижение конкретных целей, стоящих перед предприятием (организацией) и выполнении задач, стоящих перед работником в соответствии с занимаемого им рабочего места.
На практике, наиболее эффективными методами, которые не имеют субъективизма и непосредственно дают возможность связать результаты работы сотрудника с изменением количественных и качественных показателей работы предприятия (организации) в целом является метод аналитической оценки (при проведении аттестации каждого работника) и метод оценки по достижению целей (при применении нормативных заданий).
Методы системы оценок и ситуационной оценки достаточно трудоемки и могут быть применены: во-первых — в непроизводственной сфере, во-вторых — на малых предприятиях с числом до 50 человек.
При использовании метода аналитической оценки при проведении аттестации основными задачами являются:
- Определение служебного соответствия работника занимаемой должности.
- Выявление перспективы использования потенциальных способностей работника и его возможностей.
- Стимулирование роста профессиональной компетенции работника.
- Определение направлений повышения квалификации, профессиональной подготовки и переподготовки работника.
- Внесение предложений о перемещении кадров, высвобождении работника от должности (увольнения), а также перевод на более (менее) квалифицированную работу — в зависимости от выводов аттестации.
Количественная оценка — Энциклопедия по экономике
Внедрение НОТ связано с необходимостью оценить уровень организации труда на предприятиях и в их подразделениях. Количественная оценка уровня организации труда дает возможность сравнить результаты работы цехов, служб и участков по ее совершенствованию, а также определить состояние отдельных ее элементов. [c.72]![](/800/600/https/konspekta.net/poisk-ruru/baza10/5436680902665.files/image002.jpg)
Субъективная вероятность численное значение вероятности, полученное на основе заключения эксперта полезно для количественной оценки риска принятия решения в отношении конкретного действия. [c.36]
Для управления процессами повышения эффективности производства за счет совершенствования его организации важно на основе количественной оценки уровня организации правильно выбрать основные направления его повышения. В первую очередь [c.28]
Прогноз позволяет заглянуть в будущее дальше, чем план, но, конечно, и он имеет свои границы во времени чем отдаленнее период, тем меньше точность прогноза. Долгосрочные прогнозы в социалистическом производстве разрабатываются на 15—20 лет, а по ряду проблем и на более длительные сроки. На их основе можно дать качественную и количественную оценку объектов прогноза. Эта возможность зависит от устойчивости тех или иных процессов, от тщательности изучения явлений, от степени разработки методов прогнозирования (экстраполяции, экспертных оценок, нормативного метода, методов гипотез, моделирования).
[c.80]
Другие мероприятия социального характера оказывают на эффективность производственно-хозяйственной деятельности косвенное влияние, которое к тому же проявляется не сразу, а постепенно, например влияние повышения квалификации работников на рост производительности труда. Экономическую эффективность этих мероприятий можно учесть и оценить лишь косвенно. Экономическую эффективность большей части мероприятий социального характера, например влияния улучшения психологического климата в коллективе на качество труда, совершенствования политико-воспитательной и культурно-массовой работы рассчитать нельзя, так как нет методов количественной оценки. Но надо иметь [c.279]
Для количественной оценки технологичности конструкторских разработок в приложении 3 к ГОСТ 14.202—73 ЕСТПП приведена рекомендуемая номенклатура основных и дополнительных технико-экономических показателей, а в ГОСТ 14.201—73 ЕСТПП — таблица выбора показателей технологичности для деталей, сборочных единиц, комплексов и комплектов в зависимости от стадии разработки конструкторской документации. Но, к сожалению, отраслевые методики расчета показателей и оценки уровня технологичности изделий настолько сложны и громоздки, что в настоящее время вряд ли представляется экономически целесообразным их применение.
[c.39]
КТУ представляет собой обобщенную количественную оценку трудового вклада каждого члена бригады в зависимости от индивидуальной производительности труда и качества работы, производственной и социальной активности рабочего. [c.217]
Показатели повышения КТУ Количественная оценка Показатели понижения КТУ Количественная оценка [c.89]
Для количественной оценки роста эффективности производства используют систему соответствующих технико-экономических показателей, приведенных в табл. 32. [c.232]
Коллективный заработок между членами бригады во многих случаях распределяют с помощью КТУ. Это позволяет учесть личный вклад каждого члена бригады в общие результаты. Размер КТУ обычно колеблется от 0 до 1,5. Он устанавливается каждому члену бригады советом бригады либо общим собранием бригады и утверждается руководителем предприятия (цеха) по согласованию с соответствующим профсоюзным комитетом. Минимальный размер заработка (КТУ = 0) не может быть ниже заработной платы по тарифу за отработанное время (кроме случаев, предусмотренных трудовым законодательством). Таким образом, КТУ — это количественная оценка трудового вклада каждого члена бригады, на него влияют повышающие факторы выполнение производственных заданий, соблюдение трудовой дисциплины, совмещение профессий, повышение профессионального мастерства и др. понижающие опоздание, прогулы, выпуск бракованной продукции, нарушения правил техники безопасности, низкая интенсивность труда.
[c.314]
Проведено немало количественных оценок этой тенденции, одна из которых принадлежит американскому специалисту Дж. Т. Абеду. Средний уровень перепроизводства нефти шестью арабскими участниками ОПЕК (четырьмя аравийскими монархиями, Ираком и Ливией) он определил в 300 млн. т в год на протяжении семилетнего периода (1974—1980) (имеется в виду количество жидкого топлива, стоимость которого превысила текущие финансовые потребности этих государств) [197, с. 59]. Если бы добытые за это время 2,1 млрд. т нефти были законсервированы до начала 80-х годов, то перечисленные страны с учетом фактического повышения цен смогли бы реализовать такие топливные ресурсы не менее чем на 150 млрд. долл. дороже (рассчитано по [197, с. 59, 69]). Однако Дж. Т. Абед полагает, что действительные потери шести арабских нефтеэкспортеров гораздо существеннее, так как его расчеты не отражают неизбежного ускорения роста нефтяных цен в результате сокращенного предложения углеводородного сырья.
[c.199]
Необходимой основой для количественной оценки рисков в является комплексный анализ данных о [c.41]
Мы старались, насколько это возможно, использовать в качестве меры риска величину, определяемую формулой (1). Однако, практически апробированные методики количественной оценки различных рисков в настоящее время отсутствуют. Это относится и к процедуре оценки вероятности возникновения опасного события, и к процедуре оценки величины ущерба. Как правило, отсутствуют надежные базы данных по частоте отказов оборудования, частоте тех или иных аварий, частоте опасных ных событий и явлений. Это не позволяет использовать результаты них многолетних наблюдений, что дало бы возможность не только более достоверно определять средние величины рисков, но и диапазоны их колебаний.
[c.42]
Результаты количественной оценки риска по всем составляющим све-в [c.43]
Количественную оценку разбухания проводили экспериментально по коэффициента разбухания К. [c.114]
Установление этих основных переменных, в особенности в области лидерства и поведения организационных структур и количественных оценок явилось наиболее важным вкладом ситуационного подхода в управление. В данной книге сделан значительный упор на ситуационный подход потому, что он представляет собой наиболее широкую и удовлетворительную систему, разработанную до настоящего времени, для того, чтобы сделать управление эффективным, [c.84]
Количественная оценка сильных и слабых сторон Финансовые данные подвержены субъективной ин- [c.275]
Курс представляет собой одно из направлений маркетинговых исследований. Актуальность анализа.поведения потребителей следует непосредственно из концепции маркетинга, в соответствии с которой предпринимательская деятельность на рынке основывается на удовлетворении потребностей потребителей лучше, чем конкуренты. В настоящем курсе основное внимание уделяется формированию спроса, основным классификациям потребителей, сегментации, анализу вероятности покупки и интенсивности потребления, характеристике свойств товара, получению информации от потребителей, количественной оценке товара потребителями.
[c.325]
Использование экономической теории при прогнозировании важно как для менеджеров фирм, так и для государственных деятелей. Предположим, рассматривается новый федеральный налог на бензин. С введением нового налога изменится цена на бензин, что должно изменить спрос на малолитражные автомобили, а также их использование в повседневной жизни и т. д. Для разумного планирования своей деятельности нефтяным и автомобилестроительным компаниям, производителям запасных частей к автомобилям и фирмам, занимающимся туризмом, потребуется определить, какими будут различные последствия изменения налоговой политики государства. Правительственным ведомствам и политическим деятелям также потребуются количественные оценки последствий введения нового федерального налога. Они должны будут определить дополнительные расходы потребителей (сгруппированных по категориям доходов), связь нового налога с получаемой дополнительной прибылью в нефтяной, автомобильной промышленности и сфере туризма, а также размер ежегодных поступлений в государственный бюджет.
[c.16]
В число новых районов, получивших количественную оценку, вошли Тунгусская впадина, Магаданская область и ряд других. Прогнозные запасы газа по континентальной части страны до глубины 5 тыс. м и внутренних морей акваторий СССР оценены величиной 92,5 трлн. м3. Кроме того, для большинства районов, где предполагается развитие формаций осадочных пород, перспективных в нефтегазоносном отношении, дана оценка прогнозных запасов газа в интервале 5—7 тыс. м. Прогнозные запасы газа для этого интервала глубин приняты в размере 10 трлн. м3, из них 2 трлн. м3 по Дх, а остальные отнесены к Д2.
[c.111]
ДЕРЕВО РЕШЕНИЙ» — структурная модель процесса принятия решений, включающая его элементы по уровням (цели, задачи, рабочие мероприятия) и связи между ними (включение или подчиненность). Является инструментом программно-целевого управления. Формирование Д.р. включает выбор главной цели и ее декомпозицию до уровня рабочих мероприятий, с решения которых можно начинать работу по достижению поставленной цели. Количественная оценка элементов Д.р. с использованием коэффициентов значимости (весомости) позволяет рационально распределить ресурсы, выделяемые для достижения заданной цели. [c.67]
Организации могут снизить К.т.к. с помощью следующих мер улучшение организации труда и производства, сокращение монотонного, малоквалифицированного труда, оздоровление условий труда, устранение несоответствия содержания труда на рабочем месте квалификации, индивидуальным способностям и интересам работников, организация профессионального продвижения кадров и развитой системы повышения квалификации, улучшение жилищных и др. бытовых условий, совершенствование оплаты и стимулирования труда, специальные меры по адаптации молодых работников. КОЭФФИЦИЕНТ ТРУДОВОГО ВКЛАДА -обобщенная количественная оценка конкретного трудового коллектива, производственного подразделения (цеха, участка, смены, бригады) в общие результаты работы предприятия. При расчете К.т.в. учитывается значимость производственной деятельности данного подразделения для всего технологического процесса предприятия, численность работающих, объем выпускаемой продукции и работ, а также выполнение им установленных заданий и программ, качество изготовляемой продукции, состояние трудовой дисциплины и т.д. По значению К.т.в. может осуществляться долевое распределение общего объема средств предприятия, предназначенных для оплаты труда работников, между трудовыми коллективами производственных подразделений. КОЭФФИЦИЕНТ ТРУДОВОГО УЧАСТИЯ РАБОТНИКОВ (КТУ) — обобщающая количественная оценка личного трудового вклада каждого работника в конечные результаты, используемая при коллективных формах оплаты (см.
Методы распре-
[c.145]
КОЭФФИЦИЕНТЫ ВОСПРОИЗВОДСТВА НАСЕЛЕНИЯ — показатели, дающие обобщенную количественную оценку интенсивности процесса замещения поколений. Исчисляются, как правило, отдельно для мужчин и женщин. Цель применения К.в.н. — дать представление о росте населения независимо от возрастной структуры населения, изменяющейся под влиянием различных факторов. [c.146]
РЕЖИМ ТРУДА И ОТДЫХА — установленный в организации, учреждении распорядок, регламентирующий определенное чередование времени работы и отдыха на протяжении рабочей смены, недели, месяца и года. Основная цель разработки и внедрения оптимальных Р.т. и о. заключается как в обеспечении наиболее полного использования средств производства, так и в сохранении высокой и длительной работоспособности людей, наиболее полном восстановлении способности к труду во время отдыха, создании благоприятных условий для всестороннего развития человека. Учеными на основе психофизиологических исследований разработаны и рекомендованы к внедрению в производство более 10 типовых Р. т. и о. Выбор типового режима в каждом конкретном случае следует производить либо по показателю утомления, определенному на основе данных физиологического исследования, либо по показателям количественной оценки условий труда, (см. Оценка условий труда).
[c.306]
СТАБИЛИЗАЦИЯ КАДРОВ — постоянство состава работников организации, достигаемое на базе единства согласованных организационных и персональных интересов. С.к. предполагает длительную совместную работу членов коллектива (к числу стабильных кадров принято относить работников, которые трудятся в организации свыше трех лет). Относительность стабилизации проявляется в том, что постоянство работников относительно организации сочетается с их подвижностью в др. направлениях (квалификационный рост, повышение в должности, улучшение соц.-бытовых условий и т.д.), а также с естественной сменяемостью кадров (прием молодых взамен ушедших на пенсию). В стабильных трудовых коллективах возникают устойчивые внутрипроизводственные связи, формируются высококвалифицированные кадры. Стабильность способствует развитию творческой активности, росту производительности труда, соответственно, требует развития и поддержания на высоком уровне системы повышения квалификации персонала и профессионального образования, управления внутрипроизводственным движением персонала, карьерой персонала, оценки потенциала работников. С.к. может рассматриваться как важная характеристика трудового потенциала организации, а направленность на ее обеспечение в условиях все большей ограниченности источников готовой квалифицированной рабочей силы и ее растущей стоимости — как одна из составляющих активной кадровой политики, совокупный результат процессов формирования и использования рабочей силы. Под оптимальной С.к. понимается закрепление работников на определенный срок в той мере, в какой это обусловлено потребностями производства и интересами личности. Мера оптимальной стабилизации будет определяться той постоянной частью среднегодовых работников определенного качественного уровня, который позволяет добиться наибольшей экон.
и соц. эффективности при максимальной согласованности личных и общественных интересов. Количественную оценку меры стабилизации можно рассчитать как отношение разницы между среднегодовой численностью работников и численностью уволившихся по причинам, вызванным общественно необходимыми формами подвижности, к среднегодовой численности работников.
[c.357]
СТАТИСТИЧЕСКИЕ МЕТОДЫ РАСЧЕТА ЧИСЛЕННОСТИ ПЕРСОНАЛА — группа методов определения численности персонала основываются на анализе взаимосвязи между потребностью в персонале и др. переменными величинами (стохастические методы), а также на количественной оценке потребности в персонале, исходя из мнения специалистов, если непосредственное количественное измерение потребности затруднено (методы экспертных оценок). Наиболее применимым на практике из стохастических методов является расчет числовых характеристик (см. Методы расчета потребности в персонале). К стохастическим методам относятся регрессионный и корреляционный анализы. Регрессионный анализ предполагает установление линейной зависимости между численностью персонала и влияющими на нее факторами. Общая формула выглядит следующим образом
[c.359]
Вместе с тем экономико-математическая модель (как и любая модель) действенна лишь тогда, когда она отражает только важнейшие черты изучаемого процесса, без учета других сторон реального явления, имеющих второстепенное значение для дайной конкретной задачи моделирования. В задачах планирования и управления, многие из которых характеризуются большой размерностью и многофакторным влиянием, квалифицированная оценка элементов, имеющих второстепенное значение, является существенным обстоятельством и зачастую далеко не простым делом. Например, на производительность труда влияют различные факторы, в том числе и цвет окраски оборудования. Но отражать этот фактор в модели наряду с уровнем механизации и автоматизации, конструкцией изделий, квалификацией работников вряд ли целесообразно. А если и отражать, то возникает проблема объективной количественной оценки его. [c.405]
При расчете потребности в материалах прочие направления расхода могут быть учтены не только с помощью укрупненных норм, но и введением в расчет поправочных коэффициентов. Значения этих коэффициентов определяют по количественной оценке объемов потребления материалов при разработке перечня норм.
[c.133]
Экономический эффект характеризует различные преимущества внедрения новой техники — увеличение объема производства, улучшение условий и изменение характера труда, выигрыш времени и т. п. Одни из этих видов экономического эффекта могут получить качественную и количественную оценки, другие — только количественную. Многостороннее влияние новой техники вызывает необходимость оценки ее экономической эффективности. [c.39]
Отраслевая структура электротехнической промышленности характеризуется количественным соотношением между отраслями и производственными взаимосвязями между ними. Она отражает степень общественного разделения труда. Для целей анализа и перспективного планирования отраслевой дифференциации и структуры электротехнической промышленности необходима их количественная оценка с помощью ряда показателей. [c.13]
Обобщенная количественная оценка результатов деятельности бригады и ее членов дается коэффициентом трудового вклада бригады (К. ТВ) и коэффициентом трудового участия работника (КТУ). К.ТВ бригады представляет собой обобщенную количественную оценку степени выполнения планового задания по хозрасчетным показателям. Принцип распределения коллективного заработка (с использованием КТУ) между членами бригады выбирается решением коллектива.
[c.191]
Количественная оценка влияния перечисленных факторов позволяет определить дальнейшие шаги в аналитической работе. Если невыполнение плана является следствием отклонения фактических дебитов скважин от плановых, то анализ должен быть направлен на выяснение соответствующих причин, т. е. установить эффективность работ по поддержанию пластового давления, гидроразрыву пласта, химическим обработкам забоев скважин, внедрению рациональных для данных условий методов откачки и т. д. [c.397]
Анализ затрат по комплексной статье расходы по технологической подготовке нефти начинают с сопоставления фактических и плановых сумм на заработную плату, материалы, электроэнергию и другие элементы затрат, определяющие эти расходы. Затем дают количественную оценку факторов, вызвавших отклонение фактических сумм от плановых. Например, при анализе затрат на деэмульсацию нефти выявляют влияние изменения норм расхода деэмульгаторов, энергии, топлива, пара и [c.416]
Обобщив многочисленные методики, действующие в различных отраслях народного хозяйства, НИИтруда разработал в 1973 г. Методические основы количественной оценки уровня организации труда, производства и управления на предприятии. Этот документ призван обеспечить единство принципов и научную обоснованность методов оценки уровня НОТ. В нем изложены основные принципы и методические решения, позволяющие не только оценивать уровень организации труда на предприятии или в производственном подразделении, но и планировать его повышение с учетом внедряемых мероприятий, сопоставлять результаты проделанной работы по НОТ, определять, как влияют эти мероприятия на результаты работы производственных коллективов. Оценка уровня организации труда путем расчета объективных показателей дает возможность выявить и использовать производственные резервы. [c.72]
Излагается широкий круг вопросов, связанных с решением важнейшей зйдачи 10-й пятилетки — повышения качества работы. Приводятся классификация признаков качества продукции, методика их количественной оценки, описан процесс формирования качества изделий при проектировании и методы обеспечения необходимого уровня качества на этапе их изготовления. На основе обобщения опыта предприятий проанализированы основные рычаги управления качеством бездефектный труд, контроль технологических процессов, разработка и внедрение стандартов, анализ дефектов и др. Рассмотрено взаимодействие системы управления качеством с другими системами управления предприятием. [c.103]
Для правильного понимания сущности вопроса необходимо знать причины перерасхода топлива и способы их устранения. При этом большую часть причин водитель машины обнаруживает визуально, а их количественную оценку производит разными методами и техническими соедствами (приборами контроля). Выявление и своевременное [c.152]
Для определения трудового вклада каждого члена бригады в общие результаты работы коллектиьа в зависимости от индивидуальной производительности и качества работы используют коэффициент трудового участия (КТУ). В зависимости от условий производства определяют ту часть заработка бригады, которую распределяют с учетом КТУ, устанавливают показатели повышения и понижения КТУ, а также количественную оценку каждого показателя. Пример п эиведеи в табл. 9. [c.90]
При сопоставлении следует обеспечить сравнимость показателей. В частности, должны быть единые количественная оценка, методика исчисления показателей, качественная характеристика качество перерабатываемого сырья и вырабатываемой продукции), одинаковые периоды работы и т. д. При сравнении взаимозаменяемых видов затрат должны быть приняты условные од-нокачественные величины. Так, расход пара и электроэнергии следует анализировать совместно либо в пересчете на условное топливо, либо приведя к расходу пара или электроэнергии. [c.140]
Вспомогательные подразделения могут предъявлять претензии подразделениям основного производства или друг другу при нарушении договорных отношений. Так, цех водоснабжения и канализации предъявляет претензии технологическим цехам за загрязнение сточных вод выше нормы. При этом претензии должны иметь количественную оценку, а размер ущерба легш рассчитываться. Претензии предъявляются ежемесячно. Сумму ущерба исключают из фактических затрат цеха, которому он причинен, и включают в фактические затраты цеха, по вине которого произошло нарушение. [c.312]
Уровень нефтедобычи в королевстве подвергался на относительно короткие периоды сокращениям, притом весьма значительным, если за точку отсчета принять длительно поддерживавшийся его максимум — свыше 525 млн. т в год. В феврале 1983 г. он опускался до 200 млн. т в годовом исчислении, т. е. почти на 62% (рассчитано по [55 231, с. 25]). Однако в связи с этим важно подчеркнуть три момента. Во-первых, не только кратковременные, но даже гораздо более длительные периоды консервации 50—60% саудовских нефтедобывающих мощностей не создают никакой реальной угрозы для финансовой стабильности этого государства, сохраняя достаточным валютное покрытие как его весьма высоких текущих и капитальных ассигнований, так и львиной доли непомерно раздутых военных расходов. Правда, существуют различные количественные оценки соотношения между собственными инвалютными потребностями Саудовской Аравии и достаточным для их удовлетворения уровнем производства жидкого топлива. Но большинство экспертов оценивают последний ниже 250 млн. т в год, по состоянию на начало 80-х годов [230, с. 44 298, с. 142—143 371, 1981, № 80, с. 60]. Следовательно, анализ сырьевой политики королевства не дает повода говорить всерьез о каких-либо жертвах, принесенных им на алтарь солидарности нефтеэкспортирующих государств. [c.121]
Анализ результатов исследований свидетельствует о возможности ис-предложенного уравнения для количественной оценки разбу-струи расплава полимеров на выходе из каналов сложных сечений в широком диапазоне давлений и температур, что позволит использовать уравнение для расчета при проектировании элементов формующих каналов и исключить образование отходов после изготовления готовых лий из полимерных материалов. [c.115]
Успехи групп качества правомерно связывать и с такой традиционной нормой японской культуры, как склонность к ранжированию элементов социальной структуры. В данном конкретном случае склонность эта выступает в форме качественных и количественных оценок деятельности групп. В автомобильной корпорации Судзуки , например, применяется специальная оценочная шкала, которая дает представление о работе групп качества по восьми критериям 1) Количество рационализаторских предложений — 2 балла за каждое предложение. 2) Продолжительность заседаний группы в месяц— 3—13 баллов. 3) Посещаемость — 2—5 баллов. [c.135]
Для количественной оценки использования оборудования (технологических ниток) приняты оценочные единицы измерения число нитко-дней, характеризующее суммарное время для ниток по видам использования (в работе, резерве, в ППР, простое и среднесписочных, числящихся на балансе основной деятельности), определяемые суммированием их числа по каждому дню отчетного периода среднее число ниток по видам использования и среднесписочное, приходящееся на календарный день отчетного (планового) периода. [c.188]
1.2 Методы деловой оценки. Совершенствование системы оценки и аттестации персонала на предприятии (на примере ООО «ПромСтройТорг»)
Похожие главы из других работ:
Анализ проведения деловой оценки персонала на ООО «Ювелир-Карат»
1.3 Процедуры и методы деловой оценки персонала
Организационная процедура деловой оценки предполагает выполнение следующих обязательных мероприятий: 1. Подготовительный этап (Сбор предварительной информации по оценке сотрудников)…
Анализ проведения деловой оценки персонала на ООО «Ювелир-Карат»
1.4 Современные методы использования результатов проведения деловой оценки персонала
Для того чтобы данные, полученные в ходе оценки персонала, могли быть использованы в дальнейшем, необходимо обеспечить их соответствие определенным параметрам. Оценка имеет высокое качество…
Анализ процессов управления и оценка результатов работы персонала ООО «Промышленное оборудование ТД»
1.3 Методы деловой оценки персонала
Одним из важнейших вопросов при проведении деловой оценки персонала является выбор способов (или методов), с помощью которых оцениваются те или иные показатели. В любом случае выбранный способ, или метод…
Аттестация персонала на примере цеха ПАСС ОАО Алтай кокс
1.2 Методы деловой оценки персонала
Одним из важнейших вопросов при проведении деловой оценки персонала является выбор способов (или методов), с помощью которых оцениваются те или иные показатели. В любом случае выбранный способ, или метод…
Деловая оценка качества персонала организации
1. Критерии деловой оценки
Оценка труда персонала представляет собой сложную структуру, состоящую из отдельно взятых элементов и методов, осуществляющих регулирующую функцию в отношении персонала и руководства. Во многих организациях сегодня одним из требований…
Деловая репутация как фактор конкурентоспособности предприятия
2.1 Методы оценки деловой репутации
Одной из важнейших причин, по которой требуется оценить стоимость деловой репутации, является подготовка сделки купли-продажи или слияния-поглощения компании. Если приобретаемая организация генерирует доходы…
Оценка персонала
Системы деловой оценки персонала
труд персонал должность управленческий -Этапы деловой оценки персонала Разработка системы оценки персонала включает в себя три основных этапа: 1)определение критериев оценки и составление методики их измерения; 2) разработка…
Роль и место деловой оценки персонала
1. Роль и место деловой оценки персонала
Смысл оценки работы персонала становится понятен лишь в контексте кадровой политики, реализуемой организацией. Очень сложно оторвать какую-то отдельную функцию или направление работы от всего комплекса задач…
Совершенствование деловой оценки персонала в МОУ «Детский сад «Незабудка»
1.1 Система деловой оценки персонала
Эффективная оценка персонала является одним из важнейшим элементов управления любой организацией. Оценка персонала выступает основой множества управленческих и кадровых процедур: отбора сотрудников, внутриорганизационных перемещений…
Совершенствование деловой оценки персонала в МОУ «Детский сад «Незабудка»
1.4 Современные методы и технологии деловой оценки персонала
Определение стратегии проведения деловой оценки заканчивается этапом выбора технологии (системы взаимосвязанных методов). Анализ наиболее часто применяемых методов деловой оценки представлен в табл. 1…
Совершенствование деловой оценки персонала на предприятии ЗАО «Ангарская птицефабрика» Ангарского района Иркутской области
1.3 Традиционные и нетрадиционные методы деловой оценки персонала
При оценке можно использовать несколько методов, которые определяют особенности выделения конкретных значений показателей…
Совершенствование системы деловой оценки персонала в ЗАО «Банк Русский Стандарт»
1.4 Методы деловой оценки персонала
Методы оценки, при которых сотрудников оценивает непосредственный руководитель, являются традиционными для большинства современных компаний. Они эффективны в крупных иерархических организациях…
Теоретико-практический анализ системы оценивания личностно-деловых качеств персонала
1. Теоретические аспекты деловой оценки
…
Теоретико-практический анализ системы оценивания личностно-деловых качеств персонала
1.2 Целеполагание и методология деловой оценки
Деловая оценка кадров — достаточно сложная в методическом и организационном плане работа. Прежде всего нужно отметить, что единой универсальной методики, пригодной для решения всего комплекса задач, стоящих перед оценкой кадров…
Управление деловой репутацией автосервисного предприятия
1.2 Методы оценки и управление деловой репутацией
Управление деловой репутацией становится ценнейшим стратегическим орудием конкурентной борьбы, поскольку дает эффект приобретения организацией определенной рыночной силы. Управление деловой репутацией предполагает её оценку…
Количественная оценка — обзор
Процесс управления рисками
Пять компонентов процесса управления рисками, которые ведут к комплексной стратегии защиты активов, изображены на прилагаемой диаграмме (рис. 27-1). Процесс начинается с определения реалистичных целей защиты активов и затем проведения всесторонней оценки рисков (описанной ниже). Это может быть сделано на уровне всего предприятия и / или на уровне конкретного процесса или проекта.В зависимости от характера бизнеса может быть целесообразно делать это на нескольких уровнях.
Рисунок 27-1. Цикл управления рисками.
Активы. Первым шагом в оценке рисков является идентификация и оценка активов. Как утверждает Гарднер, «первый шаг в создании [любой] эффективной программы [защиты активов] включает идентификацию активов предприятий» (Gardner, 1995). Хотя этот шаг часто упускается из виду, эффективная программа безопасности не может быть реализована без полного понимания (как со стороны владельца актива , так и со стороны специалиста по безопасности ) того, что защищается, или , если должен быть защищен.Все три типа активов — материальные, нематериальные и смешанные — должны быть рассмотрены и включены в процесс оценки рисков. Слишком часто владельцы активов и специалисты по безопасности сосредотачиваются исключительно на материальных активах или тех, которые фигурируют на балансе бухгалтера.
Каждый компонент процесса управления рисками должен быть оценен (измерен или оценен), и это может быть сделано либо качественно, либо количественно. Стоимость активов часто выражается в долларовых суммах, но присвоение такого числа не всегда возможно, особенно в случае нематериальных и смешанных активов.
Это обеспечивает естественное начало дискуссии о качественных против количественных подходов к оценке. У каждого подхода есть свои плюсы и минусы.
Качественный анализ — это любой подход, который не использует числа или числовые значения для описания компонентов риска. Как правило, сравнительные термины, такие как «критический», «высокий», «средний», «низкий» и «незначительный», могут использоваться для оценки стоимости активов и уровней компонентов риска и самого риска.
Количественный анализ — это любой подход, который использует числовые меры для описания стоимости активов или уровня (серьезности или вероятности) угроз, уязвимостей, воздействий или событий убытков. Он может варьироваться от простой шкалы оценок (например, от 1 до 5) до сложных статистических методов и математических формул.
Многие руководители предпочитают резюмировать информацию в виде диаграмм и диаграмм, которые могут отображать большой объем данных в сжатой форме.(Один из примеров показан на рис. 27-2.) Это самый веский аргумент в пользу количественного подхода. Другое важное преимущество — это возможность автоматически манипулировать данными с помощью компьютерных программ и алгоритмов. Качественные методы, напротив, обычно проще и быстрее в использовании, и часто дают результаты, столь же значимые, как и числовые вычисления.
Рисунок 27-2. Наиболее распространенные риски по степени серьезности.
Среди факторов, которые следует учитывать при определении стоимости актива, — затраты на немедленное реагирование и восстановление, затраты на расследование и затраты на замену, а также косвенные затраты (которые часто не учитываются при общей оценке).Косвенные затраты могут включать в себя такие вещи, как:
✓ временные арендованные помещения | ✓ расходы на набор / персонал для постоянной рабочей силы |
✓ аренда / покупка оборудования | ✓ повышенные затраты на безопасность (временные или постоянные) |
✓ альтернативные поставщики / продавцы | ✓ расширенные возможности связи |
✓ альтернативные грузоотправители / логистическая поддержка | ✓ восстановление данных / ИТ-система (информационные технологии) |
✓ временные склады | ✓ административная поддержка |
✓ специальные выплаты сотрудникам | ✓ увеличенные командировки |
✓ консультации / помощь сотрудникам | ✓ усилия по маркетингу / связям с общественностью |
✓ потеря доли рынка (временная или постоянная) | ✓ изменение плана действий в чрезвычайных ситуациях / непрерывности деятельности |
✓ уменьшен empl oyee продуктивность | |
✓ увеличенные страховые взносы | |
✓ временная рабочая сила / укомплектование персоналом |
Кроме того, необходимо учитывать нематериальные и смешанные активы, даже если их обычно очень трудно оценить.Руководители, принимающие решения, должны быть осведомлены о нематериальных и смешанных активах. Хотя часто бывает трудно или невозможно определить определенную долларовую стоимость нематериальных активов, они, безусловно, подвержены убыткам и могут оказать значительное влияние на жизнеспособность организации и выполнение миссии.
Угроза . Предприятия — независимо от размера, местоположения или миссии — сталкиваются с широким спектром угроз, которые делятся на три категории: преднамеренных, естественных и непреднамеренных .Комплексная и, следовательно, более значимая оценка угроз будет учитывать все три категории угроз. С 11 сентября 2001 г. при проведении анализа корпоративных или организационных рисков принято уделять большое внимание (иногда почти исключительно) террористической угрозе. Однако терроризм — это только один из аспектов одной категории угроз, которую следует учитывать. Эта тенденция не уникальна. Например, в середине 80-х годов чрезмерное внимание уделялось воровству передовых технологий. В других случаях сообщество специалистов по безопасности уделяло слишком много внимания преступности «белых воротничков», кибератакам, стихийным бедствиям или другим бедствиям.
Необходим сбалансированный подход к оценке угроз. Конечно, некоторые типы угроз будут более распространенными в определенное время и в определенных местах. Однако долгосрочные стратегии защиты активов должны основываться на реалистичной, полной и сбалансированной оценке угроз. По словам эксперта по безопасности и автора Айры Винклер, «точная оценка уровня угрозы вашей организации имеет решающее значение для успеха вашего… плана безопасности». «Угроза является важным фактором в вашей формуле снижения риска, и вы должны тщательно ее учитывать.Если вы этого не сделаете, вы просто будете слепым, когда дело дойдет до определения приоритетов контрмер… »(Винклер, 1997, стр. 37).
С точки зрения оценки уровней угрозы рассмотрите следующие три основные категории:
Преднамеренные угрозы — Оценка преднамеренных угроз основана на идентификации и изучении потенциальных противников. При составлении списка потенциальных противников оценщики должны мыслить нестандартно. Например, наиболее очевидными противниками в конкретном случае могут быть международные террористические организации, организованная преступность или агрессивные бизнес-конкуренты.Однако другими важными потенциальными противниками могут быть группы активистов (например, активисты за права окружающей среды или другие группы с особыми интересами), и их угрозы можно легко не заметить. Сегодня выявление и оценка противников становятся все более серьезными проблемами, основанными на обстановке после окончания холодной войны, глобальном характере нашей экономики, глобальных демографических сдвигах и появлении гораздо более асимметричного (менее традиционного и более трудного для определения) характера современные угрозы.
В большинстве случаев злоумышленники могут быть оценены в соответствии с их способностями вызвать событие потери (или атаки) и их намерениями сделать это.К источникам информации о возможностях и намерениях злоумышленников относятся прошлая история, организационная риторика, публичные заявления, другие открытые источники, внутренние коммуникации (информационные бюллетени, веб-сайты и т. Д.), Отчеты правоохранительных органов, автоматизированные базы данных и специалисты по оценке угроз.
Естественные угрозы — Естественные угрозы обычно оцениваются с использованием исторических тенденций и статистики, а не возможностей и намерений противника. Обычно собираются долгосрочные данные о погоде и других стихийных бедствиях для конкретных географических областей, местности и окружающей среды.В некоторых случаях собирались данные о воздействии опасных природных явлений для конкретных секторов промышленности или типов объектов. Хотя эти данные предоставляют чрезвычайно полезную информацию для планирования, оценщики должны осознавать, что неожиданное может произойти и обычно случается. Поэтому большинство профессионалов настоятельно рекомендуют комплексное планирование на случай непредвиденных обстоятельств и, по крайней мере, некоторую степень готовности к любым опасностям.
Непреднамеренные угрозы — Возможно, самые упускаемые из виду или игнорируемые угрозы — это непреднамеренные угрозы.К ним относятся несчастные случаи, ошибки и упущения. Эксперт по безопасности и писатель Ира Винклер сформулировал это лучше всего, когда написал, что «… самая большая угроза для американских корпораций — это человеческий фактор» и «Люди совершают ошибки, и эти ошибки, скорее всего, причинят вам вред» (Winkler, 1997, p. 39).
Еще одним ключевым соображением, которое является подмножеством непреднамеренной угрозы, являются периферийные угрозы — например, угроза, нацеленная на соседний объект, но которая может иметь большое влияние на почтовую операцию.Последствия периферийных угроз могут включать в себя перебои в работе коммунальных служб, необходимые эвакуации, закрытие путей доступа к объекту, нежелательное внимание или движение на объекте, полное или частичное отключение работы, нарушение производительности и воздействие на окружающую среду (например, дым, мусор, вода, или химический сток и т. д.).
Непредвиденные угрозы труднее всего предсказать и к ним подготовиться. Хотя в некоторой степени характер персонала, операций или другие факторы окружающей среды могут влиять на уровень непреднамеренной угрозы, обычно имеется мало или совсем нет исторических данных, которые можно было бы использовать в целях планирования.Лучшая защита — это подготовка, просвещение и осведомленность, а также осознание того, что угроза существует.
Уязвимость . Наиболее распространенный вид «уязвимости» — это уязвимость безопасности или проблема . Хотя это может быть так, мы также должны признать, что некоторые уязвимости — это просто существующие условия или деловая практика, которые поддерживают выполнение миссии. Например, участие в продажах через электронную торговлю можно рассматривать как уязвимость, но это также может быть важным способом ведения бизнеса для конкретной компании.Одно из кратких определений «уязвимости» — это «слабость или организационная практика, которая может способствовать реализации или допускать реализацию угрозы или увеличивать масштаб убытков» (ASIS International, 2007, стр. 8).
Одно из важных различий между угрозой и уязвимостью состоит в том, что уязвимость является характеристикой организации или объекта. Таким образом, это обычно то, над чем организация может осуществлять, по крайней мере, некоторую степень контроля.Угрозы, напротив, обычно находятся вне контроля организации.
Уязвимости можно оценивать по-разному, но один из распространенных подходов состоит в их измерении с точки зрения наблюдаемости и возможности использования .
- •
Наблюдаемость — это способность злоумышленника увидеть и идентифицировать уязвимость. Например, дыра в сетчатом ограждении периметра, вероятно, может быть замечена потенциальным противником, а неработающая камера видеонаблюдения — нет.
- •
Возможность использования — это способность злоумышленника воспользоваться уязвимостью, как только он узнает о ней.
При оценке естественных угроз мы по-прежнему можем использовать концепции наблюдаемости и возможности использования, хотя и с несколько иной точки зрения. Фактор наблюдаемости по существу будет обратным и будет относиться к нашей способности наблюдать — или осознавать, отслеживать и т. Д. — надвигающуюся угрозу (e.г., шторм). Это включает механизмы раннего предупреждения и уведомления о надвигающейся угрозе. Напротив, возможность использования может быть выражена в терминах способности конкретной угрозы причинить ущерб, характерный для объекта, миссии или организации.
Используя этот подход с возможностью наблюдения / использования, специалисты AP (защиты активов) могут оценивать и разрабатывать планы по снижению уязвимостей как в долгосрочных (стратегических), так и в ближайших (тактических) временных рамках.
Для непреднамеренных угроз подход наблюдаемости / возможности использования снова немного отличается.В этом случае мы измеряем наши уязвимости с помощью двух вопросов:
- •
Знаем ли мы об уязвимостях?
- •
Подвержены ли определенные уязвимости соответствующим непреднамеренным угрозам?
Опять же, как непреднамеренные угрозы, так и связанные с ними уязвимости, как правило, труднее всего выявить и измерить. Однако это не должно использоваться как предлог для пренебрежения этим аспектом общей позиции риска.
Анализ рисков . На этом этапе оценщик собирает всю информацию об активах, угрозах и уязвимостях, а затем рассматривает потенциальное воздействие или последствия события убытка. Во всех анализах рисков, особенно в количественных, рекомендуется определять уровни оценки (для угрозы, уязвимости и воздействия) комитетом. Другими словами, оценки должны выполняться многопрофильной группой экспертов в предметной области 2 , чтобы получить достоверные и обоснованные цифры в качестве исходных данных для анализа.Обоснование цифр — это та область, с которой оценщики чаще всего сталкиваются при сообщении результатов анализа рисков клиентам, руководителям и лицам, принимающим решения.
Существует множество эффективных и проверенных временем подходов к вычислению результатов риска после определения цифр (уровней оценки).
Результаты анализа риска должны быть представлены клиенту или лицу, принимающему решение, таким образом, чтобы помочь им в понимании данных и принятии решений. Это включает в себя размещение выявленных рисков в порядке приоритета или по приоритетным категориям, чтобы помочь показать, с точки зрения оценщика, какие риски следует рассматривать в первую очередь.
Последнее замечание об анализе рисков, как обсуждалось в статье 2000 Security Management , озаглавленной «Истина и последствия», мы должны учитывать риски с низкой вероятностью / высокой степенью последствий, а также те, которые наиболее вероятны в нашей рабочее место (Гарсия, 2000). Многие руководители корпораций и лица, принимающие решения, хотят слышать только о рисках, которые представляют наибольшую вероятность возникновения — именно на это они хотят потратить свои ресурсы. Однако мы также должны серьезно учитывать потенциальные потери, которые, хотя вероятность их возникновения маловероятна, приведут к очень серьезным последствиям (влияние миссии), если они все же произойдут.Примерами таких рисков являются террористические атаки и катастрофические инциденты с насилием на рабочем месте. Опять же, цель комплексной стратегии защиты активов — это рациональный баланс между акцентом на риски с высокой вероятностью возникновения и риски с низкой вероятностью / высокими последствиями.
Часть II: Глава 4: Анализ количественных данных
Часть II: Глава 4: Анализ количественных данныхЧто такое качественный анализ?
Качественные режимы анализа данных предоставляют способы различения, изучения, сравнения и противопоставления, а также интерпретации значимых закономерностей или тем.Осмысленность определяется конкретными целями и задачами текущего проекта: одни и те же данные могут быть проанализированы и синтезированы с разных точек зрения в зависимости от конкретного исследуемого исследования или вопросов оценки. Разновидности подходов, включая этнографию, нарративный анализ, анализ дискурса и текстуальный анализ, соответствуют различным типам данных, дисциплинарным традициям, целям и философским ориентациям. Однако все они имеют несколько общих характеристик, которые отличают их от количественных аналитических подходов.
В количественном анализе числа и то, что они обозначают, являются материалом анализа. В отличие от этого качественный анализ имеет дело с словами и руководствуется меньшим количеством универсальных правил и стандартизированных процедур, чем статистический анализ.
У нас есть несколько согласованных канонов для качественного анализа данных в смысле общих основных правил для составления выводов и проверки их надежности (Miles and Huberman, 1984).
Это относительное отсутствие стандартизации является одновременно источником универсальности и предметом значительного недоразумения.То, что качественные аналитики не будут указывать единые процедуры, которым следует следовать во всех случаях, вызывает критику со стороны исследователей, которые сомневаются, может ли анализ быть действительно строгим в отсутствие таких универсальных критериев; на самом деле, эти аналитики, возможно, помогли вызвать эту критику, не сумев адекватно сформулировать свои стандарты для оценки качественного анализа или даже отрицая, что такие стандарты возможны. Их позиция питала фундаментально ошибочное, но относительно распространенное представление о качественном анализе как о бессистемном, недисциплинированном и «чисто субъективном».«
Хотя качественный анализ явно отличается от количественного статистического анализа как по процедурам, так и по целям, он является систематическим и строго дисциплинированным. Если не «объективный» в строгом позитивистском смысле, качественный анализ, вероятно, воспроизводим, поскольку другие могут быть «пройдены» через мыслительные процессы и предположения аналитика. Сроки также работают совершенно иначе при качественной оценке. Количественную оценку легче разделить на отдельные этапы разработки инструмента, сбора данных, обработки данных и анализа данных.Напротив, при качественной оценке сбор данных и анализ данных не являются дискретными во времени этапами: как только собраны первые фрагменты данных, оценщик начинает процесс осмысления информации. Более того, различные процессы качественного анализа также накладываются друг на друга во времени. Частью того, что отличает качественный анализ, является петлеобразная модель многократного пересмотра данных по мере появления дополнительных вопросов, выявления новых связей и разработки более сложных формулировок по мере углубления понимания материала.Качественный анализ — это, по сути, итерационный набор процессов.
На простейшем уровне качественный анализ включает изучение собранных релевантных данных, чтобы определить, как они отвечают на поставленный вопрос (ы) оценки. Однако данные могут иметь формат, непривычный для специалистов по количественной оценке, что усложняет эту задачу. Например, при количественном анализе результатов опроса частотные распределения ответов на конкретные вопросы анкеты часто структурируют обсуждение и анализ результатов.Напротив, качественные данные чаще всего встречаются в более встроенных и менее легко восстанавливаемых или дистиллируемых формах, чем количественные данные. Например, релевантная «часть» качественных данных может перемежаться частями стенограммы интервью, множественными выдержками из набора полевых заметок или комментарием или группой комментариев от фокус-группы.
В ходе качественного анализа аналитик должен задавать и повторно задавать следующие вопросы:
- Какие закономерности и общие темы возникают в ответах на конкретные вопросы? Как эти модели (или их отсутствие) помогают пролить свет на более широкий вопрос (ы) исследования?
- Есть ли отклонения от этих шаблонов? Если да, то есть ли какие-либо факторы, которые могли бы объяснить эти нетипичные реакции?
- Какие интересные истории возникают из ответов? Как эти истории могут помочь пролить свет на более широкий вопрос (ы) исследования?
- Указывают ли какие-либо из этих закономерностей или результатов на необходимость сбора дополнительных данных? Нужно ли пересмотреть какие-либо вопросы исследования?
- Подтверждают ли возникающие закономерности выводы любого проведенного соответствующего качественного анализа? Если нет, то чем можно объяснить эти расхождения?
Будут обсуждены две основные формы качественного анализа, по существу одинаковые по своей основной логике: анализ внутри случая и перекрестный анализ .Случай может быть по-разному определен для разных аналитических целей. В зависимости от ситуации, случай может быть отдельным человеком, сессией фокус-группы или участком программы (Berkowitz, 1996). С точки зрения гипотетического проекта, описанного в главе 2, кейс будет представлять собой единый кампус. Внутрикейсовый анализ будет исследовать один проектный объект, а кросс-кейс-анализ будет систематически сравнивать и противопоставлять восемь кампусов.
Процессы в качественном анализеКачественные аналитики справедливо опасаются создания чрезмерно редукционистской или механистической картины бесспорно сложного итеративного набора процессов.Тем не менее, оценщики выявили несколько общих черт в процессе понимания качественных данных. В этой главе мы приняли структуру, разработанную Майлзом и Хуберманом (1994) для описания основных этапов анализа данных: обработки данных, отображения данных, а также составления и проверки выводов.
Сокращение данныхВо-первых, необходимо организовать массив данных и как-то осмысленно сократить или перенастроить . Майлз и Хуберман (1994) описывают этот первый из трех элементов качественного анализа данных как редукцию данных. «Сокращение данных относится к процессу выбора, фокусировки, упрощения, абстрагирования и преобразования данных, которые появляются в записанных полевых заметках или транскрипциях». Данные необходимо не только сжимать для удобства управления, но и преобразовывать, чтобы их можно было сделать понятными с точки зрения решаемых проблем.
Сокращение данных часто вынуждает выбирать, какие аспекты собранных данных следует выделить, свести к минимуму или полностью отложить для целей текущего проекта.Новички часто не понимают, что даже на этом этапе данные не говорят сами за себя. Распространенная ошибка, которую делают многие люди в количественном и качественном анализе, тщетно пытаясь оставаться «совершенно объективными», — это предоставлять читателю большой объем неассимилированных и неклассифицированных данных.
При качественном анализе аналитик решает, какие данные следует выделить для описания в соответствии с принципами избирательности. Обычно это включает некоторую комбинацию дедуктивного и индуктивного анализа.В то время как первоначальная категоризация формируется заранее заданными вопросами исследования, качественный аналитик должен оставаться открытым для получения новых значений из имеющихся данных.
При оценке, такой как проект гипотетической оценки в этом справочнике, при обработке данных следует руководствоваться, прежде всего, необходимостью решения основных вопросов оценки. Такое выборочное рассеяние затруднено как потому, что качественные данные могут быть очень богатыми, так и потому, что человек, анализирующий данные, также часто играет прямую личную роль в их сборе.Слова, составляющие качественный анализ, представляют реальных людей, места и события гораздо более конкретно, чем числа в наборах количественных данных, — реальность, которая может сделать сокращение любого из них довольно болезненным. Но кислотным тестом должна быть релевантность конкретных данных для ответа на конкретные вопросы. Например, формирующий вопрос оценки гипотетического исследования может заключаться в том, подходят ли презентации для всех участников. Участники фокус-группы могли сказать много интересного о презентациях, но замечания, которые имеют лишь косвенное отношение к вопросу о пригодности, возможно, придется заключить в квадратные скобки или проигнорировать.Аналогичным образом, комментарии участника о своем заведующем отделом, не связанные с вопросами реализации или воздействия программы, какими бы интересными они ни были, не должны включаться в окончательный отчет. Подход к сокращению данных одинаков для анализа внутри и между случаями.
Имея в виду гипотетический проект главы 2, показательно рассмотреть способы сокращения данных, собранных для ответа на вопрос «что участвующие преподаватели сделали, чтобы поделиться знаниями с не участвующими преподавателями?» Первым шагом во внутреннем анализе проблемы является изучение всех соответствующих источников данных для извлечения описания того, что они говорят об обмене знаниями между участвующими и не участвующими преподавателями в одном кампусе.Включенная может быть информация из фокус-групп, наблюдений и подробных интервью с ключевыми информантами, такими как заведующий отделом. Наиболее важные части данных, вероятно, будут сосредоточены в определенных разделах стенограмм фокус-групп (или описаний) и подробных интервью с заведующим отделом. Однако лучше также быстро просмотреть все заметки на предмет релевантных данных, которые могут быть разбросаны повсюду.
При запуске процесса обработки данных основное внимание уделяется тому, что различные группы респондентов предложили относительно действий, используемых для обмена знаниями между преподавателями, которые участвовали в проекте, и теми, кто не участвовал.Как то, что говорят участвующие преподаватели, по сравнению с тем, что не участвующие преподаватели и заведующий кафедры сообщают об обмене знаниями и внедрении новых практик? Излагая эти различия и сходства, важно не «сглаживать» или сокращать данные так, чтобы они казались ответами закрытого опроса. Тенденция к такому обращению с качественными данными не редкость среди аналитиков, обученных количественным подходам. Неудивительно, что в результате качественный анализ выглядит как упрощенное исследование с крошечной выборкой.Такой подход к качественному анализу несправедливо и излишне размывает объем данных и, таким образом, непреднамеренно подрывает одну из самых сильных сторон качественного подхода.
Ответ на вопрос об обмене знаниями действительно качественным образом должен выходить за рамки перечисления списка мероприятий по обмену знаниями, чтобы также проверить оценки респондентами относительной эффективности этих мероприятий, а также их причины, по которым они считают одни более эффективными, чем другие. .Помимо изучения конкретного содержания мнений респондентов, неплохо также отметить относительную частоту, с которой поднимаются различные вопросы, а также интенсивность, с которой они выражаются.
Отображение данныхОтображение данных — второй элемент или уровень в модели качественного анализа данных Майлза и Хубермана (1994). Отображение данных выходит за рамки сокращения данных и обеспечивает «организованный, сжатый набор информации, позволяющий делать выводы… «Отображение может быть расширенным фрагментом текста или диаграммой, диаграммой или матрицей, которая обеспечивает новый способ упорядочивания и осмысления более встроенных в текст данных. Отображение данных, будь то в словесной или схематической форме, позволяет аналитику достаточно экстраполировать данные, чтобы начать различать систематические закономерности и взаимосвязи.На этапе отображения из данных могут появиться дополнительные категории или темы более высокого порядка, которые выходят за рамки тех, которые были впервые обнаружены во время начального процесса обработки данных.
С точки зрения оценки программы отображение данных может быть чрезвычайно полезным для определения того, почему система (например, данная программа или проект) работает или не работает, и что можно сделать для ее изменения. Общий вопрос о том, почему одни проекты работают лучше или успешнее других, почти всегда движет аналитическим процессом при любой оценке. В нашем гипотетическом примере оценки преподаватели из всех восьми кампусов собираются в центральном кампусе для участия в семинарах.В этом отношении всем участникам предлагается одинаковая программа. Однако реализация методов обучения, представленных на семинаре, скорее всего, будет варьироваться от кампуса к кампусу в зависимости от таких факторов, как личные характеристики участников, разная демография студентов и различия в характеристиках университета и факультета (например, размер количество студентов, организация предварительных курсов, поддержка заведующим кафедрой целей программы, восприимчивость кафедры к изменениям и инновациям).Качественный аналитик должен будет различать закономерности взаимоотношений, чтобы предположить, почему проект способствовал большему количеству изменений в одних университетских городках, чем в других.
Один из методов отображения повествовательных данных — разработать серию блок-схем, на которых показаны все критические пути, точки принятия решений и подтверждающие доказательства, которые появляются в результате создания данных для одного объекта. После разработки первой блок-схемы процесс можно повторить для всех оставшихся участков. Аналитики могут (1) использовать данные с последующих сайтов для изменения исходной блок-схемы; (2) подготовить независимую блок-схему для каждого сайта ; и / или (3) подготовить единую блок-схему для некоторых событий (если на большинстве сайтов принят общий подход) и несколько блок-схем для других.Изучение отображения данных по восьми кампусам могло бы привести к выводу, что внедрение шло быстрее и эффективнее в тех кампусах, где заведующий кафедрой активно поддерживал опробование новых подходов к обучению, но был заблокирован и откладывался, когда у заведующих кафедрами были опасения по поводу внесения изменений в проверенная система.
Отображение данных для анализа внутри случая. Приложение 10 представляет матрицу отображения данных для анализа моделей реакции, касающихся восприятия и оценки деятельности по обмену знаниями для одного университетского городка.Мы предположили, что трем респондентам — участвующим преподавателям, не участвующим преподавателям и заведующим кафедрами — задавались аналогичные вопросы. Глядя на столбец (а), интересно, что три группы респондентов не достигли полного согласия даже в отношении того, какие виды деятельности они назвали. Только участники считали электронную почту средством поделиться тем, что они узнали в программе, со своими коллегами. Коллеги, не участвовавшие в опросе, видимо, иначе смотрели на ситуацию, потому что не включили электронную почту в свой список.Заведующая отделением — возможно, потому, что она не знала, что это происходит — не упомянула электронную почту или неформальный обмен информацией как действия по обмену знаниями.
Колонка (b) показывает, какие действия каждая группа считала наиболее эффективными как способ обмена знаниями, в порядке их важности; В столбце (c) приведены причины, по которым респонденты считают эти конкретные действия наиболее эффективными. Посмотрев вниз в столбец (b), мы увидим, что группы частично пересекаются — например, и участники, и руководитель отдела считали структурированные семинары наиболее эффективным мероприятием по обмену знаниями.Неучастники считали структурированные семинары лучше, чем обеденные встречи, но не такими эффективными, как неформальные обмены.
Приложение 10. Матрица данных для кампуса A: что было сделано для обмена знаниями | |||
Группа респондентов | (а) Деятельность под названием | б) Какой самый эффективный | (в) Почему |
Участники |
|
|
|
Неучастники |
|
|
|
Заведующий кафедрой |
|
|
Простое знание того, что каждая группа респондентов считает наиболее эффективным, не зная почему, не учитывает важную часть аналитической головоломки.Это лишило бы качественного аналитика возможности исследовать потенциально значимые вариации в лежащих в основе концепциях того, что определяет эффективность в образовательном обмене. Например, хотя и участвующие преподаватели, и заведующий кафедрой согласились с тем, что структурированные семинары являются наиболее эффективным мероприятием по обмену знаниями, они привели несколько разные причины для этого утверждения. Участники рассматривали семинары как наиболее эффективный способ лаконичной передачи большого объема информации.Заведующая кафедрой использовала косвенные показатели — посещаемость семинаров неучастниками, а также положительные отзывы о семинарах, которые ей были предложены, — чтобы сформулировать свое мнение об эффективности. Важно понимать, что респонденты пришли к одним и тем же выводам на разных основаниях.
Несколько моментов, касающихся качественного анализа, вытекают из этого относительно простого и предварительного упражнения. Во-первых, образец межгрупповых различий можно выявить еще до того, как мы проанализируем ответы относительно видов деятельности, которые считаются наиболее эффективными, и почему.Открытый формат вопроса позволил каждой группе дать собственное определение «деятельности по обмену знаниями». Смысл анализа не в том, чтобы в первую очередь определить, какие действия использовались и как часто; если бы это было основной целью задать этот вопрос, были бы гораздо более эффективные способы (например, контрольный список или рейтинговая шкала), чтобы найти ответ. С аналитической точки зрения более важно начать обнаруживать соответствующие групповые различия в восприятии.
Различия в причинах того, что одно мероприятие считается более эффективным, чем другое, также могут указывать на разные концепции основных целей деятельности по обмену знаниями.Некоторые из этих вариаций можно объяснить тем фактом, что группы респондентов занимают разные структурные позиции в жизни и разные роли в данной конкретной ситуации. В то время как участвующие и не участвующие преподаватели преподают на одном факультете, в этой ситуации участвующие преподаватели играют роль преподавателя по отношению к своим коллегам. Данные в столбце (c) указывают на то, что участники видят свою главную цель как можно более кратко передать большой объем информации. Напротив, неучастники — в роли студентов — полагают, что они усваивают материал лучше, когда им предоставляют меньшее количество информации в неформальной обстановке.Их разные подходы к вопросу могут отражать разные восприятия, основанные на этой временной перестановке их ролей. Заведующий кафедрой занимает в университете иное структурное положение, чем участвующие или не участвующие преподаватели. Она может быть слишком удалена от повседневных обменов между преподавателями, чтобы видеть большую часть того, что происходит на этом более неформальном уровне. Точно так же ее отстранение от рядовых может дать ей более широкий взгляд на предмет.
Отображение данных в кросс-регистровом анализе. Принципы, применяемые при анализе различных дел, по существу совпадают с принципами, применяемыми при анализе внутри дела. На рисунке 11 показан пример матрицы отображения гипотетических данных, которую можно использовать для анализа ответов участников программы на вопрос об обмене знаниями во всех восьми университетских городках. Просматривая столбец (а), можно увидеть различия в количестве и разнообразии мероприятий по обмену знаниями, названных участвующими преподавателями в восьми школах.Обеды в коричневых сумках, информационные бюллетени отделов, семинары и распространение письменных (печатных) материалов были добавлены в список, который для филиала А включал только структурированные семинары, электронную почту, неформальные обмены и встречи в обеденное время. Этот расширенный список, вероятно, охватывает большинство, если не все, подобные мероприятия в восьми кампусах. Кроме того, где это применимо, мы указали, было ли участие неучаствующих преподавателей в мероприятии обязательным или добровольным.
В Приложении 11 мы сравниваем одну и ту же группу в разных университетских городках, а не разные группы в одном и том же кампусе, как в Приложении 10.Столбец (b) показывает некоторое совпадение участников в том, какие мероприятия считались наиболее эффективными: структурированные семинары были названы участниками в кампусах A и C, обеды из коричневых пакетов
Приложение 11. Мнения участников об обмене информацией в восьми кампусах | |||
Филиал в кампусе | (а) Деятельность под названием | б) Какой самый эффективный | (в) Почему |
А |
| Структурированный семинар Электронная почта | Лаконичный способ передачи большого количества информации |
B |
| Коричневые сумки | Самый интерактивный |
C |
| Структурированный семинар | Обязательно Хорошо работает структурированный формат |
D |
| Комбинация двух | Распространение важно, но недостаточно без «личного контакта» |
E |
| Мастерские | Добровольный практический подход работает лучше всего |
F |
| Распространение материалов | Не все регулярно пользуются электронной почтой Принудительные мастерские воспротивились как принудительные |
грамм |
| Обеденные встречи | Лучшее время |
ЧАС |
| Коричневые сумки | Спокойная обстановка |
студентами кампусов B и H.Однако, как и в Приложении 10, основные причины для обозначения этих видов деятельности не всегда были одинаковыми. Обеды из коричневых пакетов были признаны наиболее эффективными из-за их интерактивного характера (кампус B) и непринужденной обстановки, в которой они проводились (кампус H), что свидетельствует о предпочтении менее формальных учебных ситуаций. Однако, в то время как участники кампуса А считали добровольные структурированные семинары наиболее эффективным способом передачи большого объема информации, участникам кампуса С также понравилось, что структурированные семинары в их кампусе были обязательными.Похоже, что участники обоих кампусов предпочитают структуру, но могут расстаться в вопросе о том, является ли обязательное присутствие хорошей идеей. Различие между добровольным и обязательным было добавлено, чтобы проиллюстрировать различные аспекты эффективного обмена знаниями, которые могут оказаться актуальными с аналитической точки зрения.
Также было бы целесообразно изучить причины, по которым участники считали одно мероприятие более эффективным, чем другое, независимо от вида деятельности. Данные в столбце (c) показывают, что участники кампусов B, D, E, F и H предпочитают добровольные, неформальные, практические и личные подходы.Напротив, студенты из кампусов A и C, по-видимому, предпочитают более структурированный подход (хотя они могут не согласиться с добровольным и обязательным подходами). Ответ, предоставленный для кампуса G («лучшее время»), неоднозначен и требует возврата к стенограммам, чтобы увидеть, можно ли найти дополнительные материалы, чтобы прояснить этот ответ.
Включить всю информацию по обмену знаниями от четырех разных групп респондентов из всех восьми кампусов в единую матрицу было бы довольно сложно. Поэтому для ясности мы представляем только ответы участвующих преподавателей.Однако для завершения кросс-кейс-анализа этого оценочного вопроса необходимо следовать той же процедуре — если не в матричном формате, то концептуально — для неучаствующих преподавателей и заведующих кафедрами. Для каждой группы анализ будет смоделирован на примере выше. Он будет направлен на выявление важных сходств и различий в том, что респонденты говорят или наблюдают, и на изучение возможных оснований для этих моделей в разных университетских городках. Большая часть качественного анализа, как внутри случая, так и между случаями, структурирована тем, что Глейзер и Штраус (1967) назвали «методом постоянного сравнения», интеллектуально дисциплинированным процессом сравнения и противопоставления различных примеров для установления значимых закономерностей, а затем и дальнейшего анализа. изучение и уточнение этих паттернов в рамках продолжающегося аналитического процесса.
Заключительный чертеж и проверкаЭта деятельность является третьим элементом качественного анализа. Составление вывода включает в себя отступление, чтобы рассмотреть, что означают проанализированные данные, и оценить их значение для рассматриваемых вопросов. 6 Проверка , , неразрывно связанная с выводом, влечет за собой повторный просмотр данных столько раз, сколько необходимо для перекрестной проверки или подтверждения этих возникающих выводов.«Значения, возникающие из данных, должны быть проверены на их правдоподобие, их надежность, их« подтверждаемость », то есть их достоверность» (Майлз и Хуберман, 1994, стр. 11). Валидность в этом контексте означает нечто иное, чем при количественной оценке, где это технический термин, который совершенно конкретно относится к тому, измеряет ли данная конструкция то, что она предназначена для измерения. Здесь валидность включает в себя гораздо более широкую озабоченность по поводу того, являются ли выводы, сделанные на основе данных, достоверными, оправданными, обоснованными и способными выдержать альтернативные объяснения.
6 Когда качественные данные используются в качестве прекурсора для разработки / разработки количественных инструментов, этот этап может быть отложен. Сокращение объема данных и поиск взаимосвязей предоставят адекватную информацию для разработки других инструментов.
Для многих оценщиков именно этот третий этап придает качественному анализу особую привлекательность. В то же время, вероятно, именно этот аспект вызывает наибольшее беспокойство у специалистов по количественной оценке и других специалистов, владеющих традиционными количественными методами.Как только качественные аналитики начинают выходить за рамки осторожного анализа фактических данных, критики спрашивают, что может гарантировать, что они не будут участвовать в чисто спекулятивных полетах фантазии? Действительно, их опасения не совсем безосновательны. Если необработанная «куча данных» является результатом того, что вы не берете на себя ответственность за формирование «сюжетной линии» анализа, противоположная тенденция состоит в том, чтобы делать выводы, выходящие далеко за рамки того, что разумно оправдывают данные, или преждевременно делать выводы и делать выводы без тщательная проверка данных.
Хороший пример — вопрос об обмене знаниями. Основное ожидание или надежда заключается в распространении, в котором участвующие преподаватели стимулируют инновации в преподавании математики среди своих коллег. Перекрестный случай может заключаться в том, что участвующие преподаватели в трех из восьми кампусов прилагали активные, постоянные усилия, чтобы поделиться своими новыми знаниями со своими коллегами в различных формальных и неформальных условиях. В двух других кампусах начальные усилия по обмену опытом начались активно, но вскоре сошли на нет и не были продолжены.В остальных трех случаях один или два преподавателя делились отрывками из того, что они узнали, с несколькими избранными коллегами на разовой основе, но в остальном не предприняли никаких шагов для более широкого распространения своих новых знаний и навыков.
Принятие этих результатов за чистую монету может привести к выводу, что проект в значительной степени потерпел неудачу в поощрении распространения новых педагогических знаний и навыков среди неучаствующих преподавателей. В конце концов, такое совместное использование произошло желаемым образом только в трех из восьми университетских городков.Однако, прежде чем забегать вперед, чтобы сделать вывод о том, что проект разочаровал в этом отношении, или распространить помимо этого случая на другие аналогичные усилия по распространению педагогических инноваций среди преподавателей, важно более внимательно изучить вероятные причины, по которым совместное использование участвующими и не участвующими преподавателями произошло, и где и как это произошло. Аналитики сначала будут искать факторы, отличающие три университетских городка, где продолжающиеся организованные усилия по обмену действительно имели место, от тех, где такие усилия либо не были устойчивыми, либо осуществлялись в значительной степени по частям.Однако также будет важно различать менее успешные сайты, чтобы выявить факторы, связанные как со степенью обмена, так и со степенью устойчивости деятельности.
Одна из возможных гипотез заключается в том, что для успешной поддержки организованных усилий по совместному использованию на постоянной основе требуется структурная поддержка на уровне департаментов и / или благоприятные условия окружающей среды в домашнем кампусе. При отсутствии такой поддержки большой прилив энергии и энтузиазма в начале учебного года быстро уступит место давлению бесчисленных требований, как это случилось со второй группой из двух кампусов.Точно так же в большинстве случаев индивидуальная добрая воля одного или двух участвующих преподавателей в университетском городке сама по себе будет недостаточной для создания такого типа и уровня обмена, которые повлияли бы на неучаствующий преподавательский состав (третья группа университетских городков).
На трех «успешных» сайтах, например, расписания преподавателей могут позволять коллегам регулярно планироваться общие периоды для обмена идеями и информацией. Кроме того, участие в таких мероприятиях может поощряться заведующим кафедрой и, возможно, даже рассматриваться как фактор при принятии решений о продвижении по службе и о сроках пребывания в должности.Департамент также может внести несколько долларов на прохладительные напитки, чтобы создать на этих мероприятиях более неформальную и непринужденную атмосферу. Другими словами, в университетских городках, где совместное использование происходило по желанию, условия были благоприятными одним или несколькими способами: новый временной интервал не нужно было выделять из и без того переполненных расписаний преподавателей, заведующий кафедрой делал больше, чем просто «на словах» «о важности обмена (преподаватели обычно довольно проницательны в понимании того, что действительно важно в ведомственной культуре), и были предприняты усилия для создания непринужденной атмосферы для передачи знаний.
В некоторых других университетских городках структурные условия могут быть неблагоприятными, поскольку занятия ведутся непрерывно с 8 утра до 8 вечера, преподаватели приходят и уходят в разное время и в разные дни. В другом кампусе планирование может не представлять таких серьезных препятствий. Однако заведующая кафедрой может быть настолько занята, что, несмотря на философское согласие с важностью распространения недавно приобретенных навыков, она мало что может сделать для активного поощрения обмена между участвующими и не участвующими преподавателями.В данном случае на пути стояли не структурные условия или вялая поддержка, а конкурирующие приоритеты и неспособность руководителя отдела действовать конкретно в соответствии со своими обязательствами. Напротив, в другом кампусе председатель отдела может публично признать цели проекта, но на самом деле считает это пустой тратой времени и ресурсов. Его неспособность поддержать совместную деятельность среди его преподавателей проистекает из более глубоко укоренившихся опасений по поводу ценности и жизнеспособности проекта.Это различие может показаться неважным, учитывая, что результат был одинаковым в обоих кампусах (совместное использование не произошло, как хотелось бы). Однако, с точки зрения исследователя в области оценки, то, верит ли заведующий кафедрой в проект, может иметь большое значение для того, что нужно сделать, чтобы изменить результат.
Мы начали разработку достаточно связного объяснения межсайтовых различий в степени и характере обмена между участвующими и не участвующими преподавателями.Чтобы прийти к этому моменту, потребовалось отступить назад и систематически исследовать и повторно исследовать данные, используя различные методы, которые Майлз и Хуберман (1994, стр. 245-262) называют «тактиками создания смысла». Они описывают 13 таких тактик, включая выявление закономерностей и тем, кластеризацию случаев, проведение контрастов и сравнений, разделение переменных и включение частных деталей в общее. Качественные аналитики обычно используют некоторые или все из них одновременно и итеративно, чтобы делать выводы.
Одним из факторов, который может помешать составлению выводов в оценочных исследованиях, является то, что теоретические или логические предположения, лежащие в основе исследования, часто остаются неустановленными. В этом примере, как обсуждалось выше, это предположения или ожидания относительно обмена знаниями и распространения инновационных практик от участвующих преподавателей к неучаствующим и, соответственно, к их студентам. Чтобы аналитик мог воспользоваться возможностями для вывода результатов, он или она должны уметь распознавать и учитывать эти предположения, которые часто неявно присутствуют в оценочных вопросах.С этой целью может быть полезно подробно изложить «логическую модель» или набор предположений относительно того, как программа должна достичь желаемого результата (ов). Признание этих предположений становится еще более важным, когда возникает необходимость или желание поместить результаты одной оценки в более широкий сравнительный контекст по сравнению с оценками других программ.
После создания явно заслуживающего доверия объяснения различий в степени и виде обмена, который происходит между участвующими и не участвующими преподавателями в восьми университетских городках, как аналитик может проверить достоверность — или истинность — этой интерпретации данных? Майлз и Хуберман (1994, стр.262–277) описывают 13 тактик для проверки или подтверждения результатов, каждая из которых направлена на необходимость создания систематических «мер предосторожности против самообмана» (стр. 265) в процессе анализа. Мы обсудим только некоторые из них, которые имеют особое отношение к рассматриваемому примеру и подчеркнем критические различия между количественными и качественными аналитическими подходами. Однако с самого начала очень важно подчеркнуть два момента: несколько наиболее важных гарантий достоверности — например, использование нескольких источников и способов доказательства — должны быть заложены в дизайн с самого начала; и аналитическая цель состоит в том, чтобы создать правдоподобное, эмпирически обоснованное мнение, максимально отвечающее на поставленные вопросы оценки.Как отмечают авторы: «Вы ищете не одну учетную запись, отказавшись от всех остальных, а лучшую из нескольких альтернативных учетных записей» (стр. 274).
Одна проблема аналитической достоверности, которая часто возникает, касается необходимости взвешивать доказательства, полученные из нескольких источников и основанные на различных способах сбора данных, таких как ответы на собеседование и данные наблюдений. Триангуляция источников данных и режимов имеет решающее значение, но результаты могут не обязательно подтверждать друг друга и даже могут противоречить друг другу.Например, еще один из вопросов итоговой оценки, предложенных в главе 2, касается степени, в которой неучаствующие преподаватели принимают новые концепции и практики в своем преподавании. Ответ на этот вопрос основан на сочетании наблюдений, данных, полученных от участников фокус-групп, и подробных интервью с руководителями кафедр и неучаствующими преподавателями. В этом случае существует вероятность того, что данные наблюдений могут противоречить данным, предоставленным самими респондентами одной или нескольких групп респондентов.Например, во время интервью подавляющее большинство неучаствующих преподавателей могут сказать и действительно поверить в то, что они применяют в своем обучении инновационные принципы, связанные с проектами. Однако наблюдатели могут увидеть очень мало поведенческих свидетельств того, что эти принципы действительно влияют на практику преподавания в классах этих преподавателей. Было бы легко отмахнуться от этого вывода, сделав вывод, что неучастники спасают лицо, повторяя то, что, по их мнению, от них ожидают сказать о своем обучении.Но есть и другие, более интересные с аналитической точки зрения возможности. Возможно, у неучастников есть неполное понимание этих принципов, или они не были должным образом обучены тому, как эффективно применять их на практике в классе.
Важным моментом является то, что анализ с точки зрения нескольких групп и разных типов данных — это не простой вопрос, чтобы решить, кто прав или какие данные наиболее точны. Взвешивание доказательств — более тонкий и деликатный вопрос, заключающийся в том, чтобы выслушать точку зрения каждой группы, в то же время признавая, что любая отдельная точка зрения является частичной и зависит от опыта и социального положения респондента.Более того, как отмечалось выше, представления респондентов не более и менее реальны, чем наблюдения. Фактически, расхождения между данными самооценки и данными наблюдений могут выявить полезные темы или области для дальнейшего анализа. Задача аналитика — связать различные голоса и источники вместе в повествовании, которое отвечает на соответствующий вопрос (ы) оценки. Чем искуснее это сделано, тем проще, естественнее это кажется читателю. Собирать различные типы данных и прислушиваться к разным голосам только для того, чтобы превратить информацию в плоскую картинку, — значит оказать медвежью услугу качественному анализу.Однако, если есть основания полагать, что одни данные более достоверны, чем другие (некоторые респонденты хорошо осведомлены по этому вопросу, а другие нет), целесообразно придать этим ответам больший вес в анализе.
Качественные аналитики также должны быть внимательны к шаблонам взаимосвязей в своих данных, которые отличаются от того, что можно было ожидать. Майлз и Хуберман определяют это как «последующие сюрпризы» (1994, с. 270). Например, в одном кампусе систематическое сравнение ответов участвующих и не участвующих преподавателей на вопрос о деятельности по обмену знаниями (см. Таблицу 10) может выявить несколько явных межгрупповых различий.Однако более тщательное изучение двух наборов стенограмм может показать значимые различия в восприятии, разделяя их по другим, менее ожидаемым линиям. Для целей этой оценки неявно предполагалось, что существенные различия между преподавателями, скорее всего, будут между теми, кто участвовал и не участвовал в проекте. Тем не менее, обе группы имеют общую историю преподавания на одном факультете. Следовательно, другие факторы, такие как предыдущие личные связи, могли перекрыть различие между участниками и неучастниками.Одной из сильных сторон качественного анализа является его способность обнаруживать и манипулировать такими неожиданными моделями, которые часто могут быть очень информативными. Для этого требуется способность прислушиваться к неожиданностям и быть восприимчивыми к ним.
В отличие от количественных исследователей, которым необходимо объяснять отклоняющиеся от нормы или исключительные случаи, качественные аналитики также обычно рады, когда они сталкиваются с искажениями в своих данных, которые представляют свежие аналитические идеи или проблемы. Майлз и Хуберман (1994, стр.269, 270) говорят о «проверке значения выбросов» и «использовании крайних случаев». В качественном анализе случаи отклонения или случаи, которые не соответствуют шаблону или тенденции, не рассматриваются как выбросы, как это было бы в статистическом анализе, основанном на вероятности. Скорее, отклоняющиеся от нормы или исключительные случаи следует рассматривать как вызов для дальнейшей разработки и проверки эволюционирующего заключения. Например, если председатель отдела решительно поддерживает цели и задачи проекта для всех успешных проектов, кроме одного, возможно, другой набор факторов выполняет ту же функцию (и) на «отклоняющемся» сайте.Выявление этих факторов, в свою очередь, поможет более точно прояснить, что такое сильное лидерство и вера в проект, который имеет значение. Или, чтобы развить другой расширенный пример, предположим, что в одном кампусе, где структурные условия не способствуют совместному использованию участвующих и не участвующих преподавателей, такое разделение происходит, тем не менее, под руководством одного очень преданного участвующего преподавателя. Этот пример может свидетельствовать о том, что преданный своему делу человек, который является естественным лидером среди своих коллег по факультету, способен преодолеть структурные ограничения для совместного использования.В некотором смысле этот «девиантный» анализ случая усилит общий вывод, показывая, что необходимы исключительные обстоятельства, чтобы преодолеть ограничения ситуации.
В другом месте в этом справочнике мы отметили, что итоговая и формирующая оценки часто связаны посылкой о том, что вариации в реализации проекта, в свою очередь, будут влиять на различия в результатах проекта. В гипотетическом примере, представленном в этом справочнике, все участники подвергались одинаковым действиям в центральном кампусе, что исключает возможность анализа влияния различий в особенностях реализации.Однако использование другой модели и сравнение реализации и результатов в трех разных университетах с участием трех кампусов от каждого университета дало бы некоторое представление о том, как может выглядеть такой анализ.
Матрица отображения для межсайтовой оценки этого типа представлена на Приложении 12. Верхняя часть матрицы показывает, как три университетских городка различались по ключевым характеристикам реализации. В нижней части суммируются результаты по каждому университетскому городку. Хотя мы не обязательно ожидаем однозначной связи, матрица слабо связывает функции реализации с результатами, с которыми они могут быть связаны.Например, укомплектование семинара персоналом и его проведение сочетаются с мероприятиями по обмену знаниями, точностью содержания семинара и изменением учебного плана. Однако ничто не препятствует поиску взаимосвязи между использованием соответствующих методов на семинарах (формирующих) и изменениями учебных программ в университетских городках (итоговые). Использование матрицы по существу приведет к анализу в том же направлении, что и в примерах, приведенных ранее.
Приложение 12. Матрица перекрестного анализа, связывающая реализацию и факторов результата | |||||
Особенности реализации | |||||
Филиал в кампусе | Мастерские проведены и укомплектованы как запланировано? | Точный контент / своевременно? | Используемые подходящие методы? | Материалы в наличии? | Подходящая презентация? |
Кампус A | да | да | Для большинства участников | Да, но с опозданием | В основном |
Кампус B | Нет | да | да | Нет | Очень смешанные отзывы |
Кампус C | В основном | да | Для нескольких участников | да | Некоторые |
Характеристики результатов — участвующие кампусы | |||||
Филиал в кампусе | Обмен знаниями с неучастниками? | Изменения в учебной программе? | Изменения в экзаменах и требованиях? | Расходы? | Студенты более заинтересованы / активны в классе? |
Кампус A | Высокий уровень | Много | Некоторые | Нет | Некоторые кампусы |
Кампус B | Низкий уровень | Много | Много | да | В основном студенты участников |
Кампус C | Умеренный уровень | Только несколько | Немного | да | Только незначительное улучшение |
В этом межсайтовом анализе общий вопрос будет касаться сходства и различий между этими тремя сайтами — с точки зрения реализации проекта, результатов и связи между ними — и исследовать основы этих различий.Был ли один из проектов заметно более успешным, чем другие, в целом или в конкретных областях — и если да, то какие факторы или комбинации факторов, по-видимому, способствовали этим успехам? Затем анализ будет продолжаться через несколько итераций до тех пор, пока не будет достигнуто удовлетворительное разрешение.
Резюме: Оценка качества качественного анализа
Проблемы, связанные с ценностью и использованием вывода и проверки в качественном анализе, возвращают нас к более крупным вопросам, поднятым в самом начале, о том, как судить о достоверности и качестве качественного исследования.По этим и связанным с ними вопросам ведутся оживленные дискуссии. Подробное обсуждение этого вопроса выходит за рамки данной главы, но стоит резюмировать возникающие области согласия.
Во-первых, хотя и сформулировано по-разному, существует широкий консенсус относительно потребности качественного аналитика в том, чтобы осознавать себя, честно и размышлять о аналитическом процессе. Анализ — это не только конечный продукт, это также набор процессов, используемых для достижения этого конкретного места.При качественном анализе нет необходимости или даже желательно, чтобы кто-либо другой, проводивший подобное исследование, обнаружил точно то же самое или точно так же интерпретировал свои выводы. Однако, как только понятие анализа как набора единообразных, безличных, универсально применимых процедур отбрасывается, качественные аналитики обязаны описывать и обсуждать, как они выполняли свою работу, способами, которые, по крайней мере, доступны другим исследователям. Открытое и честное изложение аналитических процессов обеспечивает важную проверку склонности отдельного аналитика к увлечению, позволяя другим судить сами, насколько достоверны анализ и интерпретация в свете данных.
Во-вторых, качественный анализ, как и все качественные исследования, в некотором роде является профессиональным мастерством (Kvale, 1995). — это такая вещь, как плохо продуманный или плохой качественный анализ, и, несмотря на их нежелание выдавать универсальные критерии, опытные качественные исследователи с разными взглядами обычно могут согласиться, когда видят такой пример. Отчасти об аналитиках следует судить с точки зрения того, насколько умело, искусно и убедительно они создают аргументы или рассказывают историю.Хорошо ли протекает анализ и имеет ли смысл в отношении целей исследования и представленных данных? Сюжетная линия ясна и убедительна? Анализ интересен, информативен, провокационен? Объясняет ли аналитик, как и почему он или она пришли к определенным выводам, или на каких основаниях он или она исключили другие возможные интерпретации? Это вопросы, которые можно и нужно задавать при оценке качества качественного анализа. В оценочных исследованиях аналитиков часто призывают перейти от выводов к рекомендациям по улучшению программ и политики.Рекомендации должны соответствовать результатам и пониманию аналитиков контекста или среды исследования. Часто бывает полезно привлечь заинтересованные стороны на этапе «преобразования» аналитических выводов в последствия для действий.
Как уже должно быть очевидно, ошибочно полагать, что качественный анализ прост или может быть выполнен неподготовленными новичками. Как отмечает Паттон (1990):
Применение руководящих принципов требует рассудительности и творческого подхода.Поскольку каждое качественное исследование уникально, используемый аналитический подход будет уникальным. Поскольку качественное исследование на каждом этапе зависит от навыков, подготовки, понимания и возможностей исследователя, качественный анализ в конечном итоге зависит от аналитического интеллекта и стиля аналитика. Человеческий фактор — это величайшая сила и основная слабость качественного исследования и анализа.
Практические советы по проведению качественного анализаНачните анализ сразу и ведите постоянный учет этого в своих заметках: Нельзя переоценить тот факт, что анализ должен начинаться почти одновременно со сбором данных, и что это итеративный набор процессов, который продолжается в течение полевые работы и не только.Обычно полезно для полевых заметок, фокус-групп или резюме интервью включать раздел, содержащий комментарии, предварительные интерпретации или возникающие гипотезы. В конечном итоге они могут быть отменены или отклонены и почти наверняка будут уточняться по мере сбора дополнительных данных. Но они предоставляют важный отчет о развертывании анализа и внутреннего диалога, сопровождавшего этот процесс.
Привлекайте более одного человека: Две головы лучше, чем одна, а три могут быть еще лучше.Качественный анализ не обязательно и во многих случаях, вероятно, не должен быть изолированным процессом. Разумно привлечь к аналитическому процессу более одного человека, чтобы они служили перекрестной проверкой, звуковой доской и источником новых идей и взаимного обогащения. Лучше всего, если все аналитики будут знать что-то о качественном анализе, а также о существенных вопросах. Если второму или третьему лицу невозможно или нецелесообразно играть центральную роль, его или ее навыки могут быть задействованы в более ограниченном виде.Например, кто-то может просмотреть только определенные части набора стенограмм.
Оставьте достаточно времени и денег для анализа и написания: Анализ и запись качественных данных почти всегда требует больше времени, размышлений и усилий, чем предполагалось. Бюджет, который предполагает неделю анализа и неделю написания для проекта, который требует годовой полевой работы, крайне нереалистичен. Наряду с выявлением непонимания природы качественного анализа, отсутствие достаточного количества времени и денег для адекватного завершения этого процесса, вероятно, является основной причиной того, что отчеты об оценке, включающие качественные данные, могут разочаровывать.
Будьте избирательны при использовании компьютерных программных пакетов для качественного анализа: В последние годы появилось большое количество программных пакетов, которые могут быть использованы для анализа качественных данных. Большинство из этих пакетов были рассмотрены Вейцманом и Майлзом (1995), которые сгруппировали их по шести типам: текстовые процессоры, средства поиска слов, менеджеры текстовых баз, программы кодирования и извлечения, построители теории на основе кода и построители концептуальных сетей. У всех есть сильные и слабые стороны.Вайцман и Майлз предположили, что при выборе данного пакета исследователи должны подумать о количестве, типах и источниках данных для анализа, а также о типах анализов, которые будут выполняться.
Два предостережения. Во-первых, пакеты компьютерного программного обеспечения для качественного анализа данных существенно помогают в манипулировании соответствующими сегментами текста. Хотя программное обеспечение помогает маркировать, кодировать и перемещать сегменты данных быстрее и эффективнее, чем это можно сделать вручную, программное обеспечение не может определять значимые категории для кодирования и анализа или определять основные темы или факторы.В качественном анализе, как показано выше, концепции должны иметь приоритет над механикой: аналитические основы процедур должны по-прежнему предоставляться аналитиком. Программные пакеты не могут и не должны использоваться как способ избежать тяжелого интеллектуального труда качественного анализа. Во-вторых, поскольку требуется время и ресурсы, чтобы научиться использовать конкретный программный пакет и изучить его особенности, исследователи могут захотеть подумать, действительно ли объем их проекта или их текущие потребности оправдывают инвестиции.
Список литературы
Берковиц, С. (1996). Использование качественного и смешанного подходов. Глава 4 в Needs Assessment: Творческое и практическое руководство для социологов, R. Reviere, S. Berkowitz, C.C. Картер и К. Грейвс-Фергюсон, ред. Вашингтон, округ Колумбия: Тейлор и Фрэнсис.
Глейзер Б. и Штраус А. (1967). Открытие Обоснованная теория. Чикаго: Алдин.
Квале, С. (1995). Социальное конструирование действительности. Качественный запрос, (1): 19-40.
Майлз, М.Б., и Хуберман, А. (1984). Качественный анализ данных , 16. Ньюбери Парк, Калифорния: Sage.
Майлз, М.Б., и Хуберман, А.М. (1994). Качественный анализ данных, 2-е изд., Стр. 10-12. Ньюбери-Парк, Калифорния: Сейдж.
Паттон, M.Q. (1990). Качественная оценка и методы исследования , 2-е изд.Ньюбери-Парк: Калифорния, Сейдж.
Вайцман, Э.А., Майлз, М. (1995). Справочник по программному обеспечению: Компьютер Программы для качественного анализа данных Анализ данных. Thousand Oaks, CA: Sage.
Другая рекомендуемая литература
Коффи, А., Аткинсон, П. (1996). Осмысление качественных данных: дополнительные исследовательские стратегии. Thousand Oaks, CA: Sage.
Хау, К., и Эйзенхарт, М. (1990). Стандарты качественных (и количественных) исследований: прологомен. Исследователь в области образования , 19 (4): 2-9.
Уолкотт, Х.Ф. (1994). T ransforming Качественные данные: описание, анализ и интерпретация , Thousand Oaks: CA, Sage.
Предыдущая глава | В начало | Следующая Глава
Содержание
Количественное исследование рынка: полное руководство
Что такое количественное исследование рынка?
Количественное исследование рынка — это метод, позволяющий задавать вопросы целевой аудитории в организованной форме с помощью опросов, опросов или анкет.Полученные ответы можно анализировать для принятия продуманных решений по улучшению продуктов и услуг, что, в свою очередь, поможет повысить уровень удовлетворенности респондентов. Обоснованные результаты могут быть достигнуты в случае обследования большого размера выборки, представляющей совокупность.
Век информации изменил как покупательские, так и покупательские привычки и нормы. «Информация» или «данные» сейчас дороже золота. Компании растут и падают в зависимости от того, насколько хорошо они могут собирать и анализировать данные и принимать обоснованные решения на основе собранной информации.
Любой развитый клиент, совершающий покупку в Интернете, может сказать, насколько быстро компании стали «клиентоориентированными». И первый шаг к тому, чтобы стать бизнесом, ориентированным на клиента, — это отзывы и исследования клиентов.
Например: «Исходя из вашего общего опыта работы с нами, насколько вероятно, что вы порекомендуете нас другу или коллеге?» — Этот единственный вопрос, вопрос о рейтинге Net Promoter Score, изменил правила игры для компаний по всему миру. С помощью всего одного вопроса компании теперь могут собирать реальные данные от реальных клиентов о том, насколько хорошо их органические рефералы из уст в уста могут способствовать развитию их бизнеса и насколько меньше / больше они должны тратить на платную рекламу и рекламные акции или в какой области их деятельности. качество продукта или услуги требует улучшений.
Это лишь 1 из сотен таких вопросов для количественного исследования рынка, которые фундаментально и экспоненциально помогли организациям, включая некоммерческие, благотворительные, образовательные учреждения и бизнес, принимать решения, основанные на реальных данных!
Организации зависят от количественного анализа при статистической оценке данных, поскольку он дает систематическую и подробную информацию о проблеме или целевой аудитории. Этот метод исследования рынка основан на опросах, анкетах и опросах, а собранные данные оцениваются численно, статистически и математически для формирования более эффективных стратегий и маркетинговых планов.
Но прежде чем мы углубимся в шаги, необходимые для успешного проведения количественного исследования рынка, давайте рассмотрим еще несколько важных причин, по которым вам это нужно.
Причины проведения количественного исследования рынка- Исследование — это первый шаг к успешной маркетинговой кампании, будь то запуск нового продукта, позиционирование продаж или проведение статистического анализа, ориентированного на данные.
- Проведя количественное исследование рынка в Интернете, можно также получить информацию о маркетинговой деятельности, такой как обновление веб-сайта, управление страницами в социальных сетях или информационные бюллетени.
- При проведении количественного исследования рынка ответы на такие вопросы, как «Кто в настоящее время покупает мои продукты / услуги?», «Почему другие не покупают мой продукт?», «Как связаться с моей потенциальной клиентурой?» отвечают.
- Количественное исследование начинается с создания, разработки и распространения опросов. После того, как опрос будет разослан нужным людям, необходимо провести сбор и анализ данных, чтобы получить желаемое.
Как следует из названия, количественное исследование рынка фокусируется на количестве и структурированном сборе данных.Он начался с личных приемов, а теперь превратился в онлайн-опросы, подобные тем, которые предоставляет QuestionPro. Он часто используется для сбора таких данных, как поведение клиентов, размер рынка, определения причин для обратной покупки продукта. Этот тип исследования рынка обычно основан на большом количестве образцов.
Характеристики количественного исследования рынкаОсновные характеристики количественного исследования рынка:
- Предпосылка, на которой оперируют количественные исследования рынка, состоит в подтверждении гипотезы о феномене количества.
- Собранные данные представлены исключительно в форме чисел, и к этим данным можно применить статистические формулы, чтобы получить количественные практические выводы.
- Собранные данные и способ сбора очень структурированы. Это смесь анкет, опросов и т. Д.
- Исследование разработано таким образом, что вопросы структурированы, и возможные ответы на эти вопросы также структурированы. Это закладывается задолго до исследования.
- Поскольку вопросы не являются открытыми, они указывают на определенные ответы, поэтому возможности для неопределенности ограничены.
Количественное исследование рынка — это высоконаучный метод исследования рынка. Он использует дедуктивное рассуждение, чтобы прийти к заключению и создать действенную информацию на основе собранных данных. Этот метод исследования работает по принципу разработки гипотезы, сбора данных и последующего анализа этих данных для дальнейшего подтверждения или опровержения гипотезы. Процедура количественного дизайна, основанная на вехах:
- Наблюдайте за чем-то, что вам неизвестно.Изучите теорию, связанную с вашей проблемой, или область, требующую проверки.
- Создайте всестороннюю гипотезу, чтобы подтвердить свои исследования, выводы и конечную цель.
- Спланируйте, как доказать или опровергнуть эту гипотезу, и создайте структуру для достижения этой цели.
- Соберите и проанализируйте свои данные. Если ваши данные подтверждают вашу гипотезу, подготовьтесь к окончательной проверке и представьте результаты. Если данные опровергают вашу гипотезу, вы можете либо начать заново с новой гипотезой, либо отказаться от текущего исследования.
Вышеупомянутые вехи относятся к 5 количественным типам дизайна, а именно; обзорное исследование, описательное исследование, корреляционное исследование, причинно-сравнительное / квазиэкспериментальное исследование и экспериментальное исследование.
Каковы общие методы проведения количественного исследования рынка?Количественное исследование рынка может проводиться по типам первичного и вторичного исследования. Некоторые из наиболее распространенных способов проведения количественного исследования рынка:
Методы первичного количественного исследования рынкаПервичные методы — наиболее распространенные формы проведения количественных исследований рынка.Вот некоторые из наиболее распространенных и широко используемых форм:
- Опросы: Традиционно опросы проводились с использованием бумажных методов и постепенно превратились в онлайн-среду. Закрытые вопросы составляют основную часть этих опросов, поскольку они более эффективны при сборе количественных данных. Опрос включает варианты ответов, которые, по их мнению, являются наиболее подходящими для конкретного вопроса. Опросы являются неотъемлемой частью сбора отзывов от аудитории, размер которой превышает общепринятый.Важнейшим фактором опросов является то, что собранные ответы должны быть такими, чтобы их можно было обобщить для всего населения без значительных расхождений. Количественные исследования рынка проводятся по двум широким группам периодичности, с которой они проводятся:
- Поперечное исследование: Поперечное исследование рынка — это метод количественного исследования рынка, который анализирует данные переменных, собранные в определенный момент времени по выборке.население или заранее определенное подмножество. В этом методе исследования участвуют люди, которые похожи по всем демографическим группам, кроме той, которая находится в стадии исследования.
- Лонгитюдное исследование: Лонгитюдное исследование рынка — это метод количественного исследования рынка, при котором исследование проводится в течение многих лет или десятилетий на целевых демографических рынках или определенных лицах для сбора статистических данных.
- Опросы: Традиционно опросы проводились с использованием бумажных методов и постепенно превратились в онлайн-среду. Закрытые вопросы составляют основную часть этих опросов, поскольку они более эффективны при сборе количественных данных. Опрос включает варианты ответов, которые, по их мнению, являются наиболее подходящими для конкретного вопроса. Опросы являются неотъемлемой частью сбора отзывов от аудитории, размер которой превышает общепринятый.Важнейшим фактором опросов является то, что собранные ответы должны быть такими, чтобы их можно было обобщить для всего населения без значительных расхождений. Количественные исследования рынка проводятся по двум широким группам периодичности, с которой они проводятся:
- Индивидуальные собеседования: Этот метод сбора количественных данных также традиционно проводился при личной встрече, но теперь он перешел на телефонные и онлайн-платформы.Интервью предлагают маркетологу возможность собрать обширные данные от участников. Количественные интервью чрезвычайно структурированы и играют ключевую роль в сборе информации. Онлайн-интервью состоят из двух основных частей:
- Личное интервью: Интервьюер может подготовить список важных вопросов в дополнение к уже заданным вопросам анкеты. Таким образом, собеседники предоставляют исчерпывающие сведения по обсуждаемой теме.Интервьюер может установить связь с интервьюируемым на личном уровне, что поможет ему / ей собрать больше деталей по теме, благодаря чему ответы также улучшатся. Интервьюеры также могут попросить интервьюируемых объяснить нечеткие ответы.
- Онлайн / телефонные интервью: Телефонные интервью больше не в новинку, но эти количественные интервью также переместились в онлайн-среду, такую как Skype или Zoom. Независимо от расстояния между интервьюером и респондентом и их соответствующих часовых поясов, общение становится одним щелчком мыши с онлайн-интервью.В случае телефонных интервью интервью — это просто телефонный звонок.
- Персональное интервью с помощью компьютера: Это метод индивидуального интервью, при котором интервьюер вводит все собранные данные непосредственно в портативный компьютер или другое подобное устройство. Время обработки сокращается, а интервьюерам не нужно носить с собой физические анкеты, а просто вводить ответы на портативном компьютере.
Вторичные методы проведения количественного исследования рынка — это средство проверки гипотез или выводов на основе эмпирических данных и первичных данных.Этот метод исследования представляет собой форму наблюдательного исследования рынка, при котором исторические данные помогают подтвердить статистические наблюдения первичных данных. Например: сопоставление покупки снегоуборочных машин с месяцами, когда наблюдается всплеск продаж, с историческими данными о ненастной погоде, помогает управлять спросом и предложением, а также обученным персоналом в течение этих месяцев.
5 шагов, необходимых для создания успешного количественного исследования рынка:- Укажите цель: Почему вы хотите провести это исследование рынка? На этот вопрос должен быть четкий ответ, чтобы последующие шаги выполнялись без проблем.
- Составьте набросок плана: Каждый шаг, который необходимо выполнить, должен быть изложен на бумаге, например, инструменты, необходимые для проведения исследования, шаблоны опросов, целевая аудитория и т. Д. Это может варьироваться от проекта к проекту.
- Собрать данные: Это наиболее важный шаг в этом исследовании рынка. Данные собираются с помощью 3 основных средств: онлайн-опросы, телефонные интервью или опросы по электронной почте.
- Анализ собранных данных: После сбора данных их необходимо проанализировать.Для получения наилучших результатов можно использовать различные методы анализа, такие как SWOT-анализ, совместный анализ, TURF-анализ.
- Составление отчетов: Отчет, состоящий из графиков, диаграмм и таблиц, должен быть создан так, чтобы лицо, ответственное за отчет, могло учесть наблюдаемые изменения.
Подробнее о количественных данных
Предположения или ограниченная осведомленность о числах никогда не могут привести к успеху организации. Количественное исследование рынка предлагает исследователям идеальную среду для анализа поведения клиентов и их адаптируемости, чтобы не препятствовать росту организации.
Количественные вопросы исследования рынка — использование и типыВ соответствии с целью исследования создатель опроса может выбрать тип вопросов, которые будут использоваться. Короче говоря:
- Вопросы количественного исследования рынка дают ответы на вопросы «Кто» и «Что».
- Вопросы качественного исследования рынка дают ответы на вопрос «Почему?».
Количественные вопросы обычно являются закрытыми и их проще анализировать по сравнению с качественными аналогами, которые являются открытыми и намного сложнее анализировать.Если вы хотите получить статистику и результаты, поддающиеся количественной оценке, вы можете задать вопросы для количественного исследования рынка.
Респондентам легко ответить на эти вопросы. Из-за их закрытого характера можно задать значительное количество вопросов, не беспокоясь о том, будут ли они раздражены респондентами или нет. Количественные вопросы могут начинаться с «как» или «что» и могут использоваться в таких вопросах, как «как часто», или «сколько», или «что», или «каков объем».
Наиболее часто используемые вопросы количественного исследования рынка:
Чистая оценка промоутера : этот вопрос можно задать для оценки удовлетворенности клиентов и узнаваемости бренда. Обычно это шкала от 0 до 10, которая дает очень отфильтрованный, но эффективный взгляд на рекомендацию бренда. Респонденты разделены на основе предоставленных материалов.
Шкала Лайкерта: Это психометрический вопрос для оценки мнения потребителей о конкретной ситуации с двумя полярностями на каждом конце шкалы.Вопрос по шкале Лайкерта имеет формулировку и 5, 7 или 9 вариантов ответа, из которых респонденты могут выбирать. Эти вопросы используются для опросов об удовлетворенности клиентов и сотрудников, а также для академических опросов.
Семантическая шкала: Рейтинговая шкала семантического дифференциала используется для того, чтобы задавать количественные вопросы об идеологиях, продуктах или событиях с грамматически противоположными вариантами в полярных положениях шкалы для измерения их имплицитного значения.
Множественный выбор: Эти фундаментальные компоненты опроса могут иметь жизненно важное значение для получения наилучших ответов при количественном исследовании, поскольку они предоставляют точные варианты, из которых организация хотела бы, чтобы их респонденты могли выбирать.
Матричные вопросы: Это вопросы с несколькими вариантами ответов, собранные в виде матрицы. Они чрезвычайно удобны для составителей опросов для создания и анализа таких вопросов, а для респондентов — для толкования и ответа.
Подробнее: Вопросы для опроса и примеры вопросов для опроса
Статистический анализ в количественном исследовании рынкаКоличественное исследование рынка использует множество методов статистического анализа для обработки данных ответов и получения содержательной и ясной информации.Эти выводы, полученные в результате статистического анализа, позволяют исследователям сделать окончательный вывод количественного исследования.
Вот 5 наиболее часто используемых методов статистического анализа:
Конджойнт-анализ — это метод, используемый для определения ценности различных атрибутов, таких как стоимость, характеристики, преимущества, для клиентов, которые приводят к покупке определенного продукта или услуги. С увеличением количества функций внедрения технологий в устройствах и гаджетах этот метод анализа получил широкое распространение для ценообразования продуктов, их размещения на рынке и вывода на рынок продуктов.
АнализTURF (Total Unduplicated Reach and Frequency) позволяет организации получить представление о комбинации продуктов / услуг, которая привлечет наибольшее количество клиентов. Это достигается путем получения данных из полученных ответов об охвате и частоте повторения данных.
АнализGAP используется для расчета разницы между желаемой и фактической эффективностью конкретного продукта / услуги. Измеряя это, организация может внести улучшения, чтобы исправить разрыв и сделать свои атрибуты более привлекательными, чтобы сократить разрыв.
Также известное как масштабирование «наилучшего-наихудшего», MaxDiff — это модель выбора, используемая для получения предпочтений клиентов по множеству характеристик, таких как характеристики продукта, изображения бренда и предпочтения, действия, связанные с брендингом и т. Д. Она имеет некоторое сходство с анализом Conjoint, но намного проще реализовать и проанализировать.
Cross-tabulation — это инструмент статистического анализа, который позволяет сравнивать две или более категорий в кратком табличном формате для удобного анализа данных.
Преимущества количественного исследования рынка:- Создает численно рациональные теории: Результат количественного исследования основан на числах, поэтому результаты чрезвычайно важны для организации при принятии продуманных решений по более эффективному продвижению продукта / услуги на рынок.Проанализированные здесь числа можно затем поместить в диаграммы и графики для лучшего представления и обзора.
- Данные, легко поддающиеся расчету и анализу: Из-за точности ответов, полученных на количественные вопросы, очень удобно для исследования оценивать данные.
- Повышенная готовность респондентов: Количественное исследование в основном состоит из закрытых вопросов, на которые респонденты могут ответить быстро и с меньшими затратами времени.Это важная причина большого количества откликов на это исследование рынка.
- Меньше инвестиций на повышение узнаваемости бренда: В наши дни количественные исследования используются для узнаваемости бренда, которые обычно проводятся через Интернет. Таким образом снижаются затраты на исследования, чтобы повысить осведомленность о бренде.
- Статистические данные не всегда полны: Данные могут быть собраны у огромного количества людей, но нет возможности углубиться в «почему» ответа.Данные нельзя использовать только с цифрами и без конкретных объяснений, подтверждающих эти данные.
- Структурированные интервью и анкеты: Самая большая сила, но также и недостаток вопросов количественного исследования рынка — это ограниченные возможности для отклонения от структурированного ответа. Хотя это дает действенные цифры, вопросы не позволяют проверить эти цифры из-за характера организации опроса.
- Размер выборки не свидетельствует о большей совокупности: Если респонденты исследования рынка имеют атрибуты, не совпадающие с атрибутами более широкой демографической группы, собранные данные не могут быть приравнены к большей выборке, поскольку собранные данные не являются t обязательно представление более широкой аудитории.
- Самоотчет не всегда заслуживает доверия: Люди, получившие право отвечать в опросе, скептически относятся к раскрытию слишком большого количества информации, и если какая-либо предоставленная информация неверна или случайна, это снижает полную достоверность опроса.
QuestionPro предлагает ряд стандартных и расширенных типов вопросов, таких как одиночный выбор, множественный выбор, шкала Net Promoter Scale или Van Westendorp и т. Д.которые можно выбрать для создания мощного опроса. Опрос должен быть брендированным и персонализированным в соответствии с политикой вашей компании, а также включать логику и разветвление.
Распространение опросов с использованием подходящих средств массовой информации является неотъемлемой частью сбора данных. Вы можете связаться с любым количеством людей, используя такие источники, как электронные письма, которые также можно запланировать, QR-код, мобильное приложение, позволяющее собирать данные в автономном режиме, опросы с автоматическим IVR и опросы с перехватом информации в Интернете.
Ответы обновляются на панели управления по мере прохождения респондентами опроса. Как составитель опроса, вы можете следить за обновлениями клиентов, которые начали опрос, но еще не закончили его, или которые прошли его, или только что начали, на панели инструментов.
Используя такие методы, как совместный анализ, SWOT-анализ, TURF-анализ, можно получить твердое статистическое представление о собранных данных для организаций и академиков. Обновления в аналитике выполняются в режиме реального времени с использованием расширенных аналитических программ.
Этот метод маркетингового исследования используется, чтобы узнать, как люди думают об определенном продукте, и получить результаты для принятия решений, ориентированных на данные. Когда запускается новый продукт или продукт обновляется, можно использовать количественное исследование рынка, чтобы узнать, что целевая аудитория думает об изменении и будет ли оно хорошо адаптировано.
4 Выявление и анализ рисков | Роль собственника в управлении рисками проекта
требует наибольшего внимания.Более тонкие градации воздействия и вероятности — например, очень высокое, высокое, среднее, низкое и очень низкое (матрица пять на пять) — позволят более детально рассмотреть необходимое внимание.
Низкое воздействие, низкая вероятностьРиски, которые можно охарактеризовать как низкое воздействие и низкую вероятность возникновения, по существу незначительны и обычно могут быть исключены из активного рассмотрения. Основная задача директора проекта собственника заключается в том, чтобы в достаточной мере отслеживать эти факторы, чтобы определить, что влияние или вероятность не увеличиваются.
Высокая ударная вязкость, высокая вероятностьРиски, которые характеризуются как высоким воздействием, так и высокой вероятностью возникновения, часто приводят к прекращению проекта или провалу, если он продолжается, несмотря на риски. В этой ситуации руководство собственника должно определить, следует ли прекратить проект, или проект настолько критически важен, или потенциальные выгоды настолько велики, что принятие на себя рисков оправдано. Управление рисками не подразумевает отсутствие рисков; это означает, что принятые риски должны быть рассчитаны на риски.Например, владелец может решить продолжить, если есть разумные основания полагать, что достаточные инженерные или управленческие усилия могут снизить либо воздействие, либо вероятность событий, так что риск может стать либо низким, либо высокой вероятностью, либо низкой вероятностью, высоким влияние. Часто такое решение зависит от достижения необходимого снижения риска к определенному сроку.
Низкое воздействие, высокая вероятностьРиски с низкой степенью воздействия и высокой вероятностью — это риски, в значительной степени связанные с неопределенностью в отношении ряда элементов, которые по отдельности могут быть незначительными рисками, но в совокупности могут составлять значительный риск.К ним относятся неопределенности, касающиеся фактических затрат на рабочую силу и материалы (например, сталь), фактической продолжительности деятельности, поставок оборудования, производительности рабочей силы, изменений, связанных с разработкой проекта или предпочтениями владельца, а также другие неопределенности, которые обычно рассматриваются как лежат в пределах естественной изменчивости планирования, проектирования, строительства и запуска проекта (они не включают катастрофические события или радикальные изменения конструкции). Каждая из этих неопределенностей, взятая сама по себе, мало повлияет на проект.Однако, вместе взятые, существует вероятность того, что многие оценки этих факторов окажутся слишком оптимистичными, что приведет к
% PDF-1.5 % 1 0 объект > >> эндобдж 4 0 obj / CreationDate (D: 201094938 + 01’00 ‘) / ModDate (D: 201094938 + 01’00 ‘) /Режиссер >> эндобдж 2 0 obj > эндобдж 3 0 obj > эндобдж 5 0 obj > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] / XObject> >> / Аннотации [27 0 R 28 0 R] / MediaBox [0 0 595.32 841,92] / Содержание [29 0 R 30 0 R 31 0 R] / Группа> / Вкладки / S / StructParents 0 >> эндобдж 6 0 obj > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595,32 841,92] / Содержание 34 0 руб. / Группа> / Вкладки / S / StructParents 2 >> эндобдж 7 0 объект > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595,32 841,92] / Содержание 36 0 руб. / Группа> / Вкладки / S / StructParents 3 >> эндобдж 8 0 объект > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595.32 841,92] / Содержание 37 0 руб. / Группа> / Вкладки / S / StructParents 4 >> эндобдж 9 0 объект > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595,32 841,92] / Содержание 38 0 руб. / Группа> / Вкладки / S / StructParents 5 >> эндобдж 10 0 obj > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595,32 841,92] / Содержание 40 0 руб. / Группа> / Вкладки / S / StructParents 6 >> эндобдж 11 0 объект > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595.32 841,92] / Содержание 41 0 руб. / Группа> / Вкладки / S / StructParents 7 >> эндобдж 12 0 объект > / ExtGState> / XObject> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595,32 841,92] / Содержание 43 0 руб. / Группа> / Вкладки / S / StructParents 8 >> эндобдж 13 0 объект > / ExtGState> / ProcSet [/ PDF / Text / ImageB / ImageC / ImageI] >> / MediaBox [0 0 595,32 841,92] / Содержание 44 0 руб. / Группа> / Вкладки / S / StructParents 9 >> эндобдж 14 0 объект > эндобдж 15 0 объект > эндобдж 16 0 объект > эндобдж 17 0 объект > эндобдж 18 0 объект > эндобдж 19 0 объект > эндобдж 20 0 объект > эндобдж 21 0 объект > эндобдж 22 0 объект > эндобдж 23 0 объект > эндобдж 24 0 объект > эндобдж 25 0 объект > эндобдж 26 0 объект > транслировать x
Возможность обобщения и передачи — Информационная служба WAC
В этой главе мы обсуждаем обобщаемость, переносимость и взаимосвязь между ними.Мы также объясняем, как эти два аспекта исследования работают в разных методологиях, демонстрируя, как исследователи могут применять эти концепции на протяжении всего исследовательского процесса.
Обзор универсальности
Обобщаемость применяется исследователями в академической среде. Его можно определить как распространение результатов исследования и выводов исследования, проведенного на выборочной совокупности, на популяцию в целом. Хотя надежность этого расширения не является абсолютной, это статистически вероятно.Поскольку для обоснованного обобщения требуются данные о больших популяциях, количественные исследования — например, экспериментальные — обеспечивают лучшую основу для получения широких обобщений. Чем больше выборка, тем лучше можно обобщить результаты. Например, всестороннее исследование роли компьютеров в процессе письма может выявить статистическую вероятность того, что студенты, которые большую часть сочиняют на компьютере, будут перемещать фрагменты текста больше, чем студенты, которые не пишут на компьютере.
Обзор переносимости
Переносимость применяется читателями исследования. Хотя обобщение обычно применимо только к определенным типам количественных методов, переносимость может применяться в той или иной степени к большинству типов исследований. В отличие от обобщения, переносимость не предполагает широких заявлений, но предлагает читателям исследования установить связи между элементами исследования и их собственным опытом. Например, учителя старшей школы могут выборочно применять к своим классам результаты исследования, демонстрирующего, что эвристические упражнения по письму помогают учащимся на уровне колледжа.
Взаимоотношения
Обобщаемость и переносимость являются важными элементами любой методологии исследования, но они не исключают друг друга: возможность обобщения в той или иной степени зависит от переносимости результатов исследования. Для исследователей важно понять значение этих двойных аспектов исследования, прежде чем приступить к разработке исследования. Исследователи, которые хотят сделать обобщающее утверждение, должны тщательно изучить переменные, участвующие в исследовании. Среди них — использованная выборка совокупности и механизмы, лежащие в основе формулировки причинно-следственной модели.Кроме того, если исследователи желают перенести результаты своего исследования в другой контекст, они должны вести подробный отчет о среде, окружающей их исследование, и включать подробное описание этой среды в свой окончательный отчет. Вооруженные знанием того, что выборка была большой и разнообразной, а также подробной информацией о самом исследовании, читатели исследования могут более уверенно обобщать и переносить результаты на другие ситуации.
Обобщаемость
Обобщаемость присуща не только исследованиям, но и повседневной жизни.В этом разделе мы устанавливаем практическое рабочее определение обобщаемости, которое применяется в академических исследованиях и за их пределами. Мы также определяем и рассматриваем три различных типа обобщаемости и некоторые из их возможных приложений. Наконец, мы обсуждаем некоторые из возможных недостатков и ограничений обобщаемости, о которых исследователи должны знать при построении исследования, которое, как они надеются, даст потенциально обобщаемые результаты.
Определение
Во многих отношениях обобщаемость сводится к не более чем предсказаниям, основанным на повторяющемся опыте.Если что-то происходит часто, мы ожидаем, что это будет продолжаться и в будущем. Исследователи используют тот же тип рассуждений, когда обобщают результаты своих исследований. После того, как исследователи собрали достаточно данных для подтверждения гипотезы, можно сформулировать предпосылку относительно поведения этих данных, сделав ее обобщенной на аналогичные обстоятельства. Однако такое обобщение, поскольку оно основано на вероятности, не может считаться окончательным или исчерпывающим.
Хотя обобщение может иметь место в неформальной, неакадемической обстановке, обычно оно применяется только к определенным исследовательским методам в академических исследованиях.Количественные методы допускают некоторую обобщаемость. Например, экспериментальные исследования часто дают обобщающие результаты. Однако такие эксперименты должны быть строгими, чтобы можно было получить обобщаемые результаты.
Пример
Пример универсальности в повседневной жизни связан с вождением. Управление автомобилем в условиях дорожного движения требует, чтобы водители делали предположения о вероятном результате определенных действий. При приближении к перекрестку, где один водитель готовится повернуть налево, водитель, идущий прямо через перекресток, предполагает, что водитель, поворачивающий налево, уступит право проезда перед поворотом.Водитель, проезжающий перекресток, осторожно применяет это предположение, учитывая возможность того, что другой водитель может преждевременно повернуть.
Американские водители также делают вывод, что все будут ездить по правой стороне дороги. Тем не менее, если мы попытаемся обобщить это предположение на другие условия, такие как Англия, мы сделаем потенциально катастрофическую ошибку. Таким образом, очевидно, что обобщение необходимо для формирования согласованных интерпретаций во многих различных ситуациях, но мы не ожидаем, что наши обобщения будут действовать одинаково во всех обстоятельствах.Имея достаточно доказательств, мы можем делать прогнозы о человеческом поведении, но в то же время должны осознавать, что наши предположения основаны на статистической вероятности.
Рассмотрим этот пример обобщающего исследования в области изучения английского языка. Изучение оценок преподавателей по композиции старшекурсниками может показать, что существует сильная корреляция между тем, сколько учащиеся ожидают заработать на курсе, и тем, дают ли они высокие оценки своему преподавателю. Исследование может обнаружить, что 95% студентов, которые ожидают получить в своем классе оценку «С» или ниже, дают своему преподавателю оценку «средний» или ниже.Следовательно, велика вероятность того, что будущие студенты, ожидающие оценки «С» или ниже, не поставят своему преподавателю высокие оценки. Однако результаты не обязательно будут окончательными. Некоторые студенты могут бросить вызов этой тенденции. Кроме того, на оценку студентами преподавателя может влиять ряд различных переменных, включая опыт преподавателя, размер класса и относительный интерес к конкретному предмету. Эти и другие переменные должны быть рассмотрены, чтобы исследование дало потенциально достоверные результаты.Однако даже если бы практически все переменные были изолированы, результаты исследования не были бы окончательными на 100%. В лучшем случае исследователи могут делать обоснованные прогнозы будущих событий или поведения, а не гарантировать предсказание в каждом случае. Таким образом, перед обобщением результаты должны быть проверены путем тщательного экспериментирования, которое позволяет исследователям подтвердить или опровергнуть предпосылки, управляющие их набором данных.
Соображения
Есть три типа обобщаемости, которые взаимодействуют для создания вероятностных моделей.Все они включают обобщение лечения или измерения на популяции за пределами исходного исследования. Исследователи, желающие обобщить свои утверждения, должны попытаться применить все три формы в своих исследованиях, иначе сила их утверждений будет ослаблена (Runkel & McGrath, 1972).
В одном типе обобщения исследователи определяют, приведет ли конкретное лечение к одинаковым результатам в разных обстоятельствах. Для этого они должны решить, привел ли какой-либо аспект в исходной среде, помимо лечения, к конкретному результату.Это позволит установить, насколько гибко лечение адаптируется к новым ситуациям. Более высокая адаптивность означает, что лечение можно распространить на большее количество ситуаций. Например, представьте, что новый набор эвристических вопросов для предварительного написания, призванный побудить первокурсников колледжа более полно рассмотреть аудиторию, работает настолько хорошо, что студенты проводят тщательно продуманный риторический анализ своей целевой аудитории. Чтобы ответственно сделать вывод о том, что эта эвристика эффективна, исследователю потребуется протестировать одно и то же упражнение по подготовке к написанию в различных учебных заведениях на уровне колледжа, используя разных учителей, учащихся и разные среды.Если будут получены такие же положительные результаты, лечение можно обобщить.
Вторая форма обобщения фокусируется на измерениях, а не на лечении. Чтобы результат считался обобщаемым за пределами тестовой группы, он должен давать одинаковые результаты с разными формами измерения. Что касается приведенного выше эвристического примера, результаты будут более обобщаемыми, если те же результаты будут получены при оценке «с вопросами, имеющими несколько другую формулировку, или когда мы используем шестибалльную шкалу вместо девятибалльной» (Runkel И МакГрат, 1972, стр.46).
Третий тип обобщения касается субъектов тестовой ситуации. Хотя результаты эксперимента могут быть внутренне достоверными, то есть применимыми к тестируемой группе, во многих ситуациях результаты не могут быть обобщены за пределами этой конкретной группы. Исследователи, которые надеются обобщить свои результаты на более широкую популяцию, должны убедиться, что их тестовая группа является относительно большой и выбирается случайным образом. Тем не менее, исследователи должны учитывать тот факт, что тестируемые группы из более чем 10 000 субъектов существенно не увеличивают возможность обобщения (Firestone, 1993).
Возможные ограничения
Независимо от того, насколько тщательно применяются эти три формы обобщения, нет абсолютной гарантии, что результаты, полученные в исследовании, будут иметь место в каждой ситуации за пределами исследования. Для определения причинно-следственных связей в тестовой среде первостепенное значение имеет точность. Тем не менее, если исследователи хотят обобщить свои выводы, необходимо сделать упор на масштабе и вариативность, а не на точность. Следовательно, становится трудно одновременно проверять точность и обобщаемость, поскольку сосредоточение внимания на одном снижает надежность другого.Одним из решений этой проблемы является выполнение большего количества наблюдений, что имеет двойной эффект: во-первых, это увеличивает совокупность выборки, что повышает возможность обобщения; во-вторых, точность может быть разумно поддержана, поскольку случайные ошибки между наблюдениями будут усреднены (Runkel and McGrath, 1972).
Передача
Переносимость описывает процесс применения результатов исследования в одной ситуации к другим аналогичным ситуациям. В этом разделе мы устанавливаем практическое рабочее определение переносимости в том виде, в каком оно применяется в академических исследованиях и за их пределами.Мы также обрисовываем важные соображения, о которых должны знать исследователи, чтобы их результаты потенциально могли быть переданы, а также критическую роль, которую играет читатель в этом процессе. Наконец, мы обсуждаем возможные недостатки и ограничения переносимости, о которых исследователи должны знать при планировании и проведении исследования, которое даст потенциально переносимые результаты.
Определение
Возможность переноса — это процесс, выполняемый читателями исследований.Читатели отмечают специфику исследовательской ситуации и сравнивают ее со спецификой среды или ситуации, с которой они знакомы. Если между двумя ситуациями достаточно общего, читатели могут сделать вывод, что результаты исследования будут одинаковыми или похожими в их собственной ситуации. Другими словами, они «переносят» результаты исследования в другой контекст. Чтобы сделать это эффективно, читатели должны знать как можно больше об исходной исследовательской ситуации, чтобы определить, похожа ли она на их собственную.Следовательно, исследователи должны предоставить очень подробное описание своей исследовательской ситуации и методов.
Результаты любого типа исследовательского метода могут быть применены к другим ситуациям, но переносимость наиболее актуальна для качественных методов исследования, таких как этнография и тематические исследования. Отчеты, основанные на этих методах исследования, подробны и конкретны. Однако, поскольку они часто рассматривают только один предмет или одну группу, исследователи, проводящие такие исследования, редко обобщают результаты на другие группы населения.Однако подробный характер результатов делает их идеальными для передачи.
Пример
Переносимость легко понять, если учесть, что мы постоянно применяем эту концепцию к аспектам нашей повседневной жизни. Если, например, вы неопытный преподаватель композиции и читаете исследование, в котором опытный преподаватель письма обнаружил, что обширные предварительные упражнения по написанию текста помогли учащимся в ее классах придумать гораздо более узко определенные бумажные темы, вы можете спросить себя, насколько преподаватель класс напоминал ваш собственный.Если бы было много общего, вы могли бы попытаться сделать выводы о том, как увеличение объема подготовительной работы, которую делают ваши ученики, повлияет на их способность подходить к достаточно узким бумажным темам. Поступая таким образом, вы попытаетесь перенести техник исследователя композиции в свой собственный класс.
Примером переносимого исследования в области изучения английского языка является исследование Беркенкоттера, Хакина и Акермана (1988), посвященное аспиранту, доктор философии по риторике.D. программа. В этом тематическом исследовании исследователи подробно описывают вступление аспиранта в языковое сообщество его академической программы и, в частности, его трудности с изучением письменных традиций этого сообщества. Они делают выводы относительно того, почему определенные вещи могли определенным образом повлиять на аспиранта «Нейта», но они не могут обобщить свои выводы на всех аспирантов по риторике Ph.D. программы. Это просто одно исследование одного человека в одной программе. Однако, исходя из уровня детализации, предоставляемого исследователями, читатели могут взять определенные аспекты опыта Нейта и применить их к другим контекстам и ситуациям.Это переносимость. Студенты первого курса, прочитавшие исследование Беркенхоттера, Хакина и Акермана, могут распознать сходство в своей собственной ситуации, в то время как профессора могут признать трудности, с которыми сталкиваются их студенты, и немного лучше понять эти трудности. Исследователи не утверждают, что их результаты применимы к другим ситуациям. Вместо этого они сообщают о своих выводах и вносят предложения о возможных причинах трудностей и возможного успеха Нейта. Затем читатели смотрят на свою ситуацию и решают, могут ли эти причины иметь значение или нет.
Соображения
При разработке исследования исследователи должны учитывать свои цели: хотят ли они предоставить ограниченную информацию о широкой группе, чтобы указать тенденции или закономерности? Или они хотят предоставить подробную информацию об одном человеке или небольшой группе, которая может указывать на причины определенного поведения? Выбранный ими метод будет определять степень, в которой их результаты могут быть перенесены, поскольку переносимость более применима к одним видам методов исследования, чем к другим.
Толстый Описание: При записи результатов исследования важно, чтобы исследователь предоставил конкретную информацию и подробное описание своего предмета (ов), места, методов, роли в исследовании и т. Д. именуется «толстым описанием» методов и результатов; это важно, потому что позволяет читателям сделать осознанное суждение о том, могут ли они перенести полученные данные на свою собственную ситуацию. Например, если педагог проводит этнографию своего письменного класса и обнаруживает, что письменная речь ее учеников резко улучшилась после серии письменных конференций ученик-учитель, он должен подробно описать обстановку в классе, учеников, которых она наблюдала, и свои собственные. участие.Если исследователь не предоставит достаточно подробностей, читателям будет сложно опробовать ту же стратегию в своих классных комнатах. Если исследователь не упоминает, что она проводила это исследование в небольшой частной школе для представителей высшего класса, читатели могут передать результаты в крупную городскую государственную школу, ожидая аналогичного результата.
Роль читателя: Роль читателя в переносимости заключается в применении методов или результатов исследования к своей собственной ситуации. При этом читатели должны учитывать различия между ситуацией, описанной исследователем, и их собственной.Если читатели исследования Беркенхоттера, Хакина и Аккермана знают, что исследование проводилось в небольшой частной школе для представителей высшего класса, но решают протестировать метод в крупной городской государственной школе, они должны внести поправки для различных настройки и будьте готовы к разным результатам.
Точно так же читатели могут решить, что результаты исследования нельзя переносить на их собственную ситуацию. Например, если исследование показало, что просмотр телевизора более 30 часов в неделю привел к ухудшению среднего успеваемости для аспирантов по физике, аспиранты, специализирующиеся на тележурналистике, могут сделать вывод, что эти результаты к ним не применимы.
Читатели также могут передавать только определенные аспекты исследования, а не весь вывод. Например, в исследовании Беркенхоттера, Хакина и Аккермана исследователи предлагают ряд причин, по которым изучаемый аспирант испытывал трудности при адаптации к своей докторской степени. программа. Хотя преподаватели композиции не могут сравнивать «Нейта» со студентами первого курса колледжа в своем классе композиции, они могут задать некоторые из тех же вопросов о своем собственном классе, предлагая им понимание некоторых трудностей с письмом, с которыми сталкиваются первокурсники.Читатели сами решают, какие выводы важны, а какие могут быть применимы к их собственной ситуации; если исследователи выполнят свою обязанность по предоставлению «подробного описания», это решение будет намного проще.
Возможные ограничения
Понимание результатов исследования может помочь нам понять, почему и как что-то происходит. Однако многие исследователи считают, что такого понимания трудно достичь в отношении человеческого поведения, которое, по их мнению, слишком сложно понять и часто невозможно предсказать.»Из-за того, что люди отличаются друг от друга по-разному, а также из-за того, что эти различия меняются с течением времени, всеобъемлющие и окончательные эксперименты в социальных науках невозможны … самое большее, на что мы можем реально надеяться в исследованиях в области образования, — это не предсказание и контроль, а скорее лишь временное понимание »(Cziko, 1993, p. 10).
Точка зрения Чико важна, потому что переносимость допускает «временное понимание». Вместо того, чтобы применять результаты исследования к каждой ситуации, которая может произойти в будущем, мы можем применить аналогичный метод к другой, аналогичной ситуации, наблюдать новые результаты, применить измененную версию к другой ситуации и т. Д.Переносимость учитывает тот факт, что нет однозначных ответов на данные ситуации; скорее, каждый человек должен определить свои собственные передовые методы. Передача результатов исследований, выполненных другими, может помочь нам в развитии и изменении этих методов. Однако читателям исследований важно осознавать, что результаты не всегда могут быть переданы; результат, который происходит в одной ситуации, не обязательно будет иметь место в аналогичной ситуации. Поэтому очень важно учитывать различия между ситуациями и соответствующим образом изменять процесс исследования.
Хотя переносимость кажется очевидным, естественным и важным методом применения результатов и выводов исследований, в некоторых академических кругах она не воспринимается как действенный исследовательский подход. Возможно, частично в ответ на критику, во многих современных исследовательских статьях исследователи называют свои результаты обобщаемыми или внешне достоверными. Таким образом, кажется, что они не говорят о переносимости. Однако во многих случаях те же самые исследователи указывают, какие моменты читатели могут захотеть рассмотреть, но не решаются делать какие-либо общие выводы или заявления.Это характеристики передаваемых результатов.
На самом деле, как мы видели, обобщаемость сильно отличается от переносимости. К сожалению, путаница вокруг этих двух терминов может привести к неправильной интерпретации результатов исследования. Акцент на ценности передаваемых результатов, а также четкое понимание исследователями в области английского языка критических различий между условиями, при которых исследования могут быть обобщены, перенесены или, в некоторых случаях, и обобщены, и перенесены, могут помочь качественным исследователям избежать критики со стороны скептиков, ставящих под сомнение ценность качественных методов исследования.
Обобщаемость и переносимость: синтез
Обобщаемость позволяет нам формировать последовательные интерпретации в любой ситуации и действовать целенаправленно и эффективно в повседневной жизни. Возможность переноса дает нам возможность отсортировать данные методы и выводы, чтобы решить, что применить к нашим собственным обстоятельствам. Таким образом, по сути, как обобщение, так и переносимость позволяют нам проводить сравнения между ситуациями. Например, мы можем обобщить, что большинство людей в Соединенных Штатах будет ездить по правой стороне дороги, но мы не можем перенести этот вывод на Англию или Австралию, не оказавшись в опасной ситуации.Поэтому важно всегда учитывать контекст при обобщении или передаче результатов.
Делает ли исследование акцент на переносимости или обобщаемости, тесно связано с целями исследователя и потребностями аудитории. Исследования, проведенные для журнала, такого как Time или ежедневной газеты, имеют тенденцию к обобщению, поскольку издатели хотят предоставить информацию, актуальную для значительной части населения. Исследовательский проект, ориентированный на небольшую группу специалистов, изучающих аналогичную проблему, может подчеркивать переносимость, поскольку специалисты в этой области имеют возможность переносить аспекты результатов исследования в свои собственные ситуации без явных обобщений, предоставляемых исследователем.В конечном итоге, предмет, аудитория и цели исследователя будут определять метод, который исследователь использует для проведения исследования, которое затем определит переносимость или обобщаемость результатов.
Сравнение обобщаемости и переносимости
Хотя обобщение было предпочтительным методом исследования в течение некоторого времени, переносимость — относительно новая идея. Теоретически, однако, он всегда сопровождал исследовательские задачи. Важно отметить, что обобщаемость и переносимость не обязательно исключают друг друга; они могут перекрываться.
Из экспериментального исследования в тематическое исследование читатели переносят методы, результаты и идеи из исследования в свой собственный контекст. Следовательно, обобщающее исследование также может быть перенесено. Например, исследователь может обобщить результаты опроса 350 человек в университете на население университета в целом; Читатели результатов могут применять или переносить результаты в свою собственную ситуацию. В основном они спросят себя, попадают ли они в большинство или нет.Однако переносимое исследование не всегда поддается обобщению. Например, в тематических исследованиях переносимость дает читателям возможность применять результаты к внешним контекстам, тогда как обобщение в принципе невозможно, потому что один человек или небольшая группа людей не обязательно являются репрезентативными для большей популяции.
Противоречие, ценность и функция
Исследования в области естественных наук имеют давнюю традицию ценить эмпирические исследования; Экспериментальное исследование считается «методом» проведения исследования.Поскольку социологи адаптировали методы естественнонаучных исследований к своим потребностям, они переняли это предпочтение в пользу эмпирических исследований. Следовательно, исследования, которые можно обобщить, долгое время считались более полезными; Ценность исследования часто определялась тем, можно ли было обобщить его на популяцию в целом. Однако все больше и больше социологов осознают ценность использования различных методов исследования, и признается ценность переносимости.
Важно понимать, что обобщение и переносимость не сами по себе определяют ценность исследования.Они выполняют разные функции в исследовании, в зависимости от темы и целей исследователя. В тех случаях, когда обобщаемые исследования часто указывают на явления, применимые к широким категориям, таким как пол или возраст, переносимость может дать некоторые сведения о том, как и почему эти результаты лежат в основе.
Однако есть недостатки, которые необходимо учитывать. Исследователи могут изучать небольшую группу, которая является репрезентативной для большей группы, и утверждать, что их результаты, вероятно, применимы к большей группе, но они не могут проверить каждого человека в большей группе.Таким образом, их выводы действительны только в отношении их собственных исследований. Другая проблема заключается в том, что непредставительная группа может привести к ошибочному обобщению. Например, исследование композиции студентов; Возможности пересмотра, которые сравнивают успеваемость студентов за семестр в компьютерном классе с успеваемостью, демонстрируемой студентами в традиционном классе, могут показать, что компьютеры действительно помогают студентам в общем процессе сочинения. Однако, если бы позже было обнаружено, что необычно большое количество студентов в традиционных классах страдали от проблем со злоупотреблением психоактивными веществами за пределами классной комнаты, изучаемое население не считалось бы репрезентативным для всего студенческого населения в целом.Следовательно, было бы проблематично обобщить результаты исследования на более широкую группу студентов.
В случае переносимости, читатели должны знать как можно больше подробностей о исследовательской ситуации, чтобы точно перенести результаты на свои собственные. Однако невозможно дать абсолютно полное описание ситуации, а отсутствие деталей может привести к тому, что читатель перенесет результаты в ситуацию, не совсем похожую на исходную.
Приложения к методам исследования
Степень применимости обобщаемости и переносимости различается от методологии к методологии, а также от исследования к исследованию.Исследователи должны знать об этих степенях, чтобы результаты не были подорваны чрезмерными обобщениями, а читатели должны убедиться, что они не читают исследованные результаты таким образом, чтобы результаты были неправильно применены или неверно истолкованы.
Приложения переносимости и обобщения: пример
Исследования и разработки
В тематических исследованиях изучаются отдельные лица или небольшие группы в определенном контексте. Исследования обычно собираются с помощью качественных средств: интервью, наблюдения и т. Д.Данные обычно анализируются либо комплексно, либо методами кодирования.
Допущения
В исследованиях, включающих тематические исследования, исследователь обычно предполагает, что результаты можно будет передать другим лицам. Обобщение сложно или невозможно, потому что один человек или небольшая группа не может представлять все похожие группы или ситуации. Например, одна группа начинающих писателей в конкретном классе не может представлять всех начинающих писателей. Кроме того, выводы, сделанные в тематических исследованиях, касаются только наблюдаемых участников.За редкими исключениями, тематические исследования не предназначены для установления причинно-следственных связей между переменными. Результаты тематического исследования могут быть перенесены, поскольку исследователи «предлагают дальнейшие вопросы, гипотезы и будущие последствия» и представляют результаты как «направления и вопросы» (Lauer & Asher 32).
Пример
Чтобы проиллюстрировать письменные навыки начинающих писателей из колледжа, исследователь, завершающий тематическое исследование, может выделить одного или нескольких студентов в классе композиции и начать говорить с ними о том, как они оценивают свое собственное письмо, а также о чтении реальных работ, обстановке. повышение критериев для суждения и анализ оценок за работу / интерпретации учителей.
Результаты исследования
Представляя результаты предыдущего примера, исследователь должен определить критерии, которые были установлены для определения того, что исследователь имел в виду под «навыками письма», предоставить заслуживающие внимания цитаты из интервью со студентами, предоставить другую информацию в зависимости от видов используемых методов исследования. (например, опросы, наблюдение в классе, собранные образцы письменных работ) и включают возможности для дальнейшего исследования этого типа. Затем читатели могут сами оценить, как наблюдения исследователя могут быть перенесены в другие классы письма.
Приложения переносимости и обобщения: этнография
Исследования и разработки
Этнографии изучают группы и / или культуры в течение определенного периода времени. Цель этого типа исследования — понять конкретную группу / культуру посредством погружения наблюдателя в культуру или группу. Исследование проводится с помощью различных методов, которые аналогичны методам изучения конкретных случаев, но, поскольку исследователь погружен в группу на длительный период времени, в ходе исследования обычно собирается более подробная информация.(«Здесь нет детей» Джонатона Козола — хороший тому пример.)
Допущения
Как и в случае с тематическими исследованиями, результаты этнографии также считаются передаваемыми. Основные цели этнографии — «идентифицировать, оперативно определять и связывать переменные» в конкретном контексте, что в конечном итоге дает подробные отчеты или «толстые описания» (Lauer & Asher 39). В отличие от тематического исследования, здесь исследователь обнаруживает гораздо больше деталей.Результаты этнографии должны «предлагать переменные для дальнейшего исследования», а не обобщать за пределами участников исследования (Lauer & Asher 43). Кроме того, поскольку аналитики, выполняющие этот тип исследования, склонны полагаться на несколько методов сбора информации (практика, также называемая триангуляцией), их результаты обычно помогают создать подробное описание поведения человека в конкретной среде.
Пример
Программа письма Айовы имеет широко распространенную репутацию в области подготовки прекрасных писателей.Чтобы понять, как они обучаются, этнограф может наблюдать за студентами на протяжении всей программы обучения. За это время этнограф мог изучить учебную программу, проследить процесс письма отдельных писателей и познакомиться с писателями и их работами. К концу двухлетнего исследования исследователь будет иметь гораздо более глубокое понимание уникальных и эффективных функций программы.
Результаты исследования
Очевидно, что программа письма Айовы уникальна, поэтому обобщение любых результатов на другую программу письма было бы проблематичным.Однако этнография предоставит читателям представление о программе. Читатели могут задавать такие вопросы, как: какие качества делают его сильным и что уникального в писателях, прошедших обучение в рамках программы? На этом этапе читатели могут попытаться «перенести» применимые знания и наблюдения в другую среду письма.
Приложения переносимости и обобщения: экспериментальные исследования
Исследования и разработки
Исследователь, работающий в рамках этой методологии, создает среду, в которой можно наблюдать и интерпретировать результаты вопроса исследования.Ключевым элементом экспериментального исследования является то, что участники исследования случайным образом распределяются по группам. В попытке создать причинно-следственную модель (т. Е. Обнаружить причинное происхождение конкретного явления) группы обрабатываются по-разному, и проводятся измерения, чтобы определить, приводит ли разные методы лечения к разным эффектам.
Допущения
Обычно считается, что экспериментальные исследования можно обобщить. Эта методология исследует причинно-следственные связи посредством сравнения между группами (Lauer & Asher 152).Поскольку участники распределяются по группам случайным образом, и поскольку в большинстве экспериментов задействовано достаточное количество людей для разумного приближения к совокупности, из которой отбираются отдельные участники, обобщение оправдано, поскольку «при большом количестве распределений ожидается, что все группы субъектов будут идентичными. по всем переменным »(155).
Пример
Упрощенный пример: случайным образом выбираются шесть составных классов (как и студенты и преподаватели), в которых три преподавателя включают использование электронной почты в качестве классной деятельности, а три — нет.Когда учащиеся первых трех классов начинают обсуждать свои работы по электронной почте и, как следствие, вносят в свои работы лучшие исправления, чем учащиеся трех других классов, исследователь, скорее всего, придет к выводу, что использование электронной почты в письменном классе улучшает качество письменной речи студентов.
Результаты исследования
Хотя экспериментальные исследования основаны на причинно-следственных связях, «уверенность» никогда не может быть получена, а скорее результаты являются «вероятностными» (Lauer and Asher 161).В зависимости от того, как исследователь представил результаты, их можно обобщить, так как студенты были выбраны случайным образом. Поскольку качество письма улучшилось с использованием электронной почты во всех трех классах, вполне вероятно, что электронная почта является причиной улучшения. Читатели этого исследования передадут результаты, разобравшись в деталях: являются ли эти студенты представителями группы студентов, с которой читатель знаком? Какие типы предыдущего письменного опыта были у этих студентов? Какого письма ожидали от этих студентов? Исследователь должен предоставить эти данные, чтобы результаты можно было передать другим лицам.
Приложения переносимости и обобщения: обзор
Исследования и разработки
Цель опроса — получить конкретную информацию либо о конкретной группе, либо о репрезентативной выборке определенной группы. Респондентов опроса просят ответить на один или несколько из следующих типов вопросов: открытые вопросы, вопросы «верно-неверно», «согласен-не согласен» (или вопросы Лайкерта), рейтинги, рейтинги и т. Д. Результаты обычно используются для понимания отношения, убеждений или знаний определенной группы.
Допущения
Предполагая, что при разработке элементов обследования и отборе выборки для обследования была проявлена осторожность и были достигнуты адекватные показатели отклика, результаты обследований можно обобщить. Обратите внимание, однако, что результаты опросов следует обобщать только для населения, из которого были получены результаты опросов.
Пример
Например, опрос английских аспирантов Государственного университета Колорадо, проведенный для определения того, насколько хорошо французского философа / критика Жака Деррида понимают до и после прохождения студентами курса критической теории литературы, может проинформировать профессоров о том, что в целом концепции Деррида понятны и что CSU Класс теории литературы E615 помог студентам усвоить идеи Деррида.
Результаты исследования
Возможность обобщения опросов зависит от нескольких факторов. Независимо от того, распространяются ли опросы среди множества людей или избранных, они носят «личный характер и подвержены искажениям». Респонденты опроса могут понимать, а могут и не понимать задаваемые им вопросы. В зависимости от того, находится ли разработчик опроса поблизости или нет, респонденты могут иметь или не иметь возможность разъяснить свое недопонимание.
Также важно помнить, что ошибки могут возникать на уровнях разработки и обработки.Исследователь может неадекватно задавать вопросы (то есть не задавать правильные вопросы для искомой информации), нарушать сбор данных (опрашивая определенных людей, а не других) и искажать результаты во время обработки (неправильное прочтение ответов и невозможность вопрос участника и т. д.). Один из способов избежать ошибок такого рода — изучить другие исследования аналогичного характера и сравнить их результаты с результатами, полученными в предыдущих исследованиях. Таким образом будут выявлены любые большие расхождения.В зависимости от того, насколько велики эти расхождения и каков контекст опроса, результаты могут или не могут быть обобщаемыми. Например, если улучшенное понимание Деррида становится очевидным после того, как студентов завершили E615, можно предположить, что E615 эффективно обучает студентов концепциям Деррида. Проблемы переносимости могут быть видны в самих вопросах опроса; то есть они могут предоставить важную справочную информацию, которая может понадобиться читателям, чтобы перенести результаты в другой контекст.
Споры между качественными и количественными аспектами
В книге Майлза и Хубермана « Качественный анализ данных » (1994) цитируется фраза Фреда Керлингера, исследователя количественного анализа: «Качественных данных не существует. Все равно 1 или 0» (стр. 40). Другой исследователь, Д. Т. Кэмпбелл, утверждает, что «все исследования в конечном итоге имеют качественное обоснование» (стр. 40). По мнению Майлза и Хубермана, подобные разговоры между качественными и количественными исследователями «по существу непродуктивны».Они и многие другие исследователи согласны с тем, что эти два метода исследования чаще всего нужны друг другу. Однако, поскольку качественные данные обычно включают слова, а количественные — числа, некоторые исследователи считают, что одни лучше (или более научны), чем другие. Еще одно важное различие между ними заключается в том, что качественное исследование является индуктивным, а количественное — дедуктивным. В качественном исследовании для начала исследования не требуется гипотезы. Однако любое количественное исследование требует гипотезы, прежде чем можно будет начать исследование.
Еще одно важное различие между качественным и количественным исследованиями — это исходные предположения о роли исследователя. В количественном исследовании исследователь в идеале является объективным наблюдателем, который не участвует и не влияет на то, что изучается. Однако в качественном исследовании считается, что исследователь может больше всего узнать о ситуации, участвуя в ней и / или погружаясь в нее. Эти базовые допущения обеих методологий определяют и упорядочивают типы используемых методов сбора данных.
Хотя есть явные различия между качественным и количественным подходами, некоторые исследователи утверждают, что выбор между использованием качественного или количественного подходов на самом деле имеет меньше отношения к методологиям, чем к позиционированию себя в рамках определенной дисциплины или исследовательской традиции. Сложность выбора метода усугубляется тем фактом, что исследования часто связаны с университетами и другими учреждениями. На основании результатов исследовательских проектов часто принимаются важные решения относительно конкретных практик и политик.Выбор того, какой подход использовать, может отражать интересы тех, кто проводит исследование или извлекает из него пользу, а также цели, для которых результаты будут применены. Решения о том, какой метод исследования использовать, также могут быть основаны на собственном опыте и предпочтениях исследователя, исследуемой популяции, предлагаемой аудитории для результатов, времени, деньгах и других доступных ресурсах (Hathaway, 1995).
Некоторые исследователи считают, что качественные и количественные методологии нельзя комбинировать, потому что допущения, лежащие в основе каждой традиции, очень сильно различаются.Другие исследователи считают, что их можно использовать в комбинации, только чередуя методы: качественные исследования подходят для ответа на одни виды вопросов в определенных условиях, а количественные подходят для других. Некоторые исследователи считают, что для ответа на исследовательский вопрос можно одновременно использовать как качественные, так и количественные методы.
В определенной степени правы исследователи всех сторон дискуссии: у каждого подхода есть свои недостатки. Количественные исследования часто «вынуждают» отклики или людей разделять на категории, которые могут не «соответствовать», чтобы придать смысл.С другой стороны, качественное исследование иногда слишком сильно фокусируется на индивидуальных результатах и не может установить связь с более крупными ситуациями или возможными причинами результатов. Однако вместо того, чтобы сбрасывать со счетов любой из подходов из-за его недостатков, исследователи должны найти наиболее эффективные способы включения элементов обоих, чтобы их исследования были максимально точными и тщательными.
Исследователям важно понимать, что качественные и количественные методы могут использоваться в сочетании друг с другом.В исследовании кабинетов компьютерного письма Снайдер (1995) использовал как качественный, так и количественный подходы. Исследование было построено в соответствии с руководящими принципами количественных исследований: компьютерный класс был «лечебной» группой, а традиционный класс ручки и бумаги был «контрольной» группой. Оба класса содержали предметы с одинаковыми характеристиками из выборки. Оба класса следовали одному и тому же плану уроков и велись одним и тем же учителем в одном семестре.Единственная использованная переменная — это компьютеры. Хотя Снайдер провозгласила это исследование «экспериментом», она использовала множество качественных подходов, чтобы дополнить свои выводы. Она регулярно наблюдала за обеими классами в качестве участника-наблюдателя и провела несколько интервью с учителем как во время, так и после семестра. Однако при использовании этого подхода возникло несколько проблем: строгое соблюдение одной и той же учебной программы и планов уроков для обоих классов и ограниченный доступ контрольной группы к компьютерам, возможно, поставили некоторых учеников в невыгодное положение.Снайдер также отмечает, что в ретроспективе ей следовало использовать тематические исследования студентов для дальнейшего развития своих выводов. Хотя ее исследование имело определенные недостатки, Снайдер настаивает на том, что исследователи могут одновременно использовать качественные и количественные методы, если исследования тщательно спланированы и проводятся добросовестно.
Аннотированная библиография
Бэбби, Эрл Р. (1979). Практика социальных исследований . Бельмонт: Wadsworth Publishing Company, Inc.
Комплексный обзор исследований в области социальных наук, включая методы исследования.Обсуждается логика социальных научных исследований.
Беркенкоттер, К., Хакин, Т.Н., и Акерман, Дж. (1988). Условные обозначения, беседы и писатель: пример студента по риторике Ph.D. программа. Исследования в области преподавания английского языка 22 (1), 9-44.
Описывает тематическое исследование начинающего студента со степенью доктора философии. программа. Рассматривает процесс своего вступления в академическое дискурсивное сообщество.
Черный, Сьюзен. (1996).Новое определение роли учителя. Исполнительный педагог, 18 (8), 23-26.
Обсуждает ценность хорошо подготовленных учителей-исследователей, проводящих исследования в своих классах. Отмечает, что исследования учителей сосредоточены на частном; он не ищет общих, обобщаемых принципов.
Бланк, Стивен К. (1984). Практические методы исследования бизнеса . Вестпорт: AVI Publishing Company, Inc.
Подробная книга о том, как создать исследовательский проект, собрать данные, прийти к заключениям и сообщить о них.
Бланк, Стивен К. (1984). Практические методы исследования бизнеса . Вестпорт: AVI Publishing Company, Inc.
Подробная книга о том, как создать исследовательский проект, собрать данные, прийти к заключениям и сообщить о них.
Мосты, Давид. (1993). Передаваемые навыки: философская перспектива. Высшее образование 18 (1), 43-51.
Обсуждается возможность передачи навыков в обучении, уделяя особое внимание понятиям междисциплинарных, общих, основных и передаваемых навыков и их роли в учебной программе колледжа.
Брукхарт, Сьюзан М. и Руснак, Тимоти Г. (1993). Педагогика обогащения, а не бедности: успешные уроки образцовых городских учителей. Журнал педагогического образования, 44 (1), 17-27.
Сообщает о результатах исследования, в котором изучались характеристики эффективных городских учителей в Питтсбурге. Предполагает, что результаты могут быть переданы городским педагогам в другом контексте.
Брайман, Алан. (1988). Количество и качество социальных исследований .Бостон: Unwin Hyman Ltd.
Мясник, Джуд. (1994, июль). Компоненты когорт и тематических исследований в исследованиях педагогического образования. Документ, представленный на ежегодной конференции Австралийской ассоциации педагогического образования, Брисбен, Квинсленд, Австралия.
Утверждает, что исследования развития учителей будут более обобщаемыми, если для сбора данных будет использоваться широкий набор методов, если собранные данные будут как обширными, так и интенсивными, и если используемые методы будут учитывать различия в людях и изучаемых ситуациях.
Картер, Дункан. (1993). Критическое мышление для писателей: передаваемые навыки или специальные дисциплинарные стратегии? Composition Studies / Freshman English News, 21 (1), 86-93.
Спрашивает, зависит ли критическое мышление от контекста и можно ли перенести навыки критического мышления на письменные задания.
Картер, Кэти. (1993). Место рассказа в изучении педагогики и педагогического образования. Исследователь в области образования, 22 (1), 5-12.
Обсуждает преимущества рассказывания историй в обучении и педагогическом образовании, но предостерегает преподавателей, которые в настоящее время не знакомы с рассказыванием историй в существующих педагогических структурах, быть осторожными при применении этого метода в своем обучении.
Clonts, Жан Г. (1992, январь). Понятие надежности применительно к данным качественных исследований. Документ, представленный на ежегодном собрании Юго-западной ассоциации образовательных исследований, Хьюстон, Техас.
Представляет обзор литературы по надежности качественных исследований и определяет надежность как степень, в которой исследования могут быть воспроизведены с использованием тех же методов и получения тех же результатов. Предлагаются стратегии повышения надежности за счет дизайна исследования, сбора и анализа данных. Также исследуется возможность обобщения как оценка надежности.
Коннелли, Майкл Ф. и Кландинин Д. Жан. (1990). Истории опыта и повествовательные запросы. Педагогический исследователь, 19. (5), 2-14.
Описывает повествование как место исследования и качественную методологию исследования, в которой взаимодействуют переживания наблюдателя и наблюдаемого. Эта форма исследования требует разработки новых критериев, которые могут включать в себя очевидность, правдоподобие и переносимость (7).
Крокер, Линда и Альгина, Джеймс. (1986). Введение в классическую и современную теорию тестирования. Нью-Йорк: Холт, Райнхарт и Уинстон.
Обсуждает теорию тестов и ее применение к психометрии. Главы варьируются от общего обзора основных вопросов до статистических методов и приложений.
Cronbach, Lee J. et al. (1967). Надежность поведенческих измерений: многогранные исследования обобщаемости. Стэнфорд: Стэнфорд UP.
Отчет о техническом исследовании, который включает статистическую методологию, чтобы противопоставить многогранную обобщаемость классической надежности.
Чико, Гэри А. (1992). Целенаправленное поведение как контроль восприятия: значение для образовательных исследований. Исследователь в области образования, 21 (9), 10-18. Эль-Хасан, Карма. (1995). Рейтинг студентов: Обобщаемость результатов. Исследования в области образования 21 (4), 411-29.
Вопросы размерности, достоверности, надежности и обобщаемости оценок обучения студентов обсуждаются в связи с исследованием, в котором участвовали 610 студентов колледжей, которые оценивали своих преподавателей по шкале эффективности учителей.
Фейнгольд, Алан. (1994). Гендерные различия в вариабельности интеллектуальных способностей: кросс-культурная перспектива. Половые роли: журнал исследований 20 (1-2), 81-93.
Фейнгольд проводит кросс-культурный количественный обзор современных результатов гендерных различий в вариабельности вербальных, математических и пространственных способностей, чтобы оценить обобщаемость результатов США о том, что мужчины более изменчивы, чем женщины, по математическим и пространственным способностям, а полы одинаковы. переменная вербальная способность.
Файерстоун, Уильям А. (1993). Альтернативные аргументы в пользу обобщения данных применительно к качественным исследованиям. Исследователь в области образования, 22 (4), 16-22.
Делает упор на обобщение в трех областях качественных исследований: экстраполяция от выборки к совокупности, аналитическое обобщение и передача от случая к случаю (16). Объясняет основные принципы, связанные теории и критерии для каждого подхода.
Фянс, Лесли Дж. (Ред.). (1983).Теория обобщаемости: выводы и практические приложения. В Новые направления испытаний и измерений: Vol. 18. Сан-Франциско: Джосси-Басс.
Сборник статей по теории обобщаемости. Цель книги — представить различные аспекты и приложения теории обобщаемости таким образом, чтобы читатель мог применять теорию.
Хаммерсли, Мартин. (Ред.). (1993). Социальные исследования: философия, политика и практика. Ньюбери Парк, Калифорния: Sage Publications.
Сборник статей, дающих обзор позитивизма; включает статью Джанет Уорд Скофилд о повышении обобщаемости качественных исследований.
Хэтэуэй Р. (1995). Предположения, лежащие в основе количественного и качественного исследования: значение для институциональных исследований. Исследования в области высшего образования, 36 (5), 535-562.
Хэтэуэй говорит, что выбор между использованием качественного или количественного подходов связан не столько с методологией, сколько с привязкой к определенным теоретическим и академическим традициям.Он пришел к выводу, что эти два подхода решают вопросы по-разному, каждый из которых имеет свои преимущества и недостатки.
Хек, Рональд Х., Маркулидес, Джордж А. (1996). . Исследования в области преподавания английского языка 22 (1), 9-44.
Описывает тематическое исследование начинающего студента со степенью доктора философии. программа. Рассматривает процесс своего вступления в академическое дискурсивное сообщество.
Хиппс, Джером А. (1993). Надежность и подлинность: альтернативные способы оценки достоверных оценок. Документ, представленный на ежегодном собрании Американской ассоциации исследований в области образования, Атланта, Джорджия.
Противостоит основополагающим предпосылкам конструктивистского подхода к традиционным исследованиям и позитивистского подхода к аутентичной оценке в отношении обобщаемости и других исследовательских проблем.
Хау, Кеннет и Эйзенхарт, Маргарет. (1990). Стандарты качественного (и количественного) исследования: Пролегомен. Исследователь в области образования, 19 (4), 2-9.
Хуанг, Чи-ю и др. (1995, апрель). Теория обобщения, подход к изучению инструментов оценки преподавания, заполненных студентами. Документ, представленный на ежегодном собрании Американской ассоциации исследований в области образования, Сан-Франциско, Калифорния.
Представлены результаты исследования, в котором использовалась теория обобщаемости для изучения причин изменчивости в механизме оценки учителей и курсов.
Хангерфорд, Гарольд Р.и другие. (1992). Исследование и оценка экологических проблем и действий: модули развития навыков .
Руководство, предназначенное для обучения студентов тому, как исследовать и оценивать экологические проблемы и действия. Руководство состоит из шести модулей, включая сбор информации и опросы, анкеты и анкеты мнений.
Джексон, Филип В. (1990). Функции педагогического исследования. Исследователь в области образования 19 (7), 3-9. Джонсон, Рэнделл Г.(1993, апрель). Обобщающее исследование валидности теста множественной оценки и программных услуг. Документ, представленный на ежегодном собрании Американской ассоциации исследований в области образования, Атланта, Джорджия.
Представляет результаты изучения отчетов о достоверности множественной оценки и тестирования программных сервисов с использованием количественного анализа для определения возможности обобщения результатов.
Джонс, Элизабет А. и Рэтклифф, Гэри. (1993). Навыки критического мышления для студентов колледжей. (Национальный центр высшего образования, обучения и оценки). Университетский парк, Пенсильвания.
Обзоры исследовательской литературы, посвященной изучению природы критического мышления; обсуждает степень обобщения критического мышления по дисциплинам.
Карпински, Якуб. (1990). Причинность в социологических исследованиях . Бостон: Kluwer Academic Publishers.
Обсуждает причинность и причинный анализ с точки зрения социологических исследований.Предоставляет уравнения и пояснения.
Kirsch, Irwin S. & Jungeblut, Ann. (1995). Использование результатов крупномасштабной оценки для выявления и оценки обобщаемых показателей грамотности. (Национальный центр грамотности взрослых, публикация № TR94-19). Филадельфия, Пенсильвания.
Сообщает об анализе данных, собранных в ходе обширного исследования грамотности, чтобы помочь понять различные переменные, влияющие на уровень грамотности. Выявлено, что навыки грамотности можно прогнозировать для больших разнородных групп населения, но не так эффективно для однородных групп населения.
Лауэр, Дженис М. и Ашер, Дж. Уильям. (1988). Исследование композиции: эмпирические планы. Нью-Йорк: Oxford Press.
Объясняет выбор субъектов, формулирование гипотез или вопросов, сбор данных, анализ данных и идентификацию переменных посредством обсуждения каждого дизайна.
LeCompte, Margaret & Goetz, Judith Preissle. (1982). Проблемы достоверности и достоверности в этнографических исследованиях. Обзор исследований в области образования, 52 (1), 31-60.
Концентрируется на образовательных исследованиях и этнографии и показывает, как лучше учитывать надежность и достоверность при проведении этнографических исследований.
Маркулид, Джордж; Симкин, Марк Г. (1991). Оценка студенческих работ: аргументы в пользу экспертной оценки. Журнал образования для бизнеса 67 (2), 80-83.
Предварительно распечатанная форма оценки и теория обобщаемости используются для оценки надежности оценки студентами своих работ.
Максвелл, Джозеф А. (1992). Понимание и обоснованность качественного исследования. Harvard Educational Review, 62 (3), 279-300.
Исследует пять типов валидности, используемых в качественных исследованиях, включая обобщаемую валидность, и исследует возможные угрозы валидности исследования.
Маккарти, Кристин Л. (1996, весна). Что такое «критическое мышление»? Можно ли обобщить? Теория образования, 46 217-239.
Обзоры, сравнения и противопоставления избранных эссе Стивена П.Книга Норриса Обобщаемость критического мышления: различные точки зрения на образовательный идеал, чтобы исследовать разнообразие темы критического мышления.
Майлз, Мэтью Б. и Хуберман, А. Майкл. (1994). Качественный анализ данных. Thousand Oaks: Sage Publications.
Комплексный обзор анализа данных. Предметы варьируются от сбора данных до создания фактического отчета.
Миниум, Эдвард В. и Кинг, М.Брюс и Медведь Гордон. (1993). Статистические рассуждения в психологии и образовании . Нью-Йорк: John Wiley & Sons, Inc.
Учебник, предназначенный для обучения студентов статистическим данным и теории.
Мосс, Памела А. (1992). Сдвиг представлений о валидности в образовательных измерениях: последствия для оценки успеваемости. Обзор исследований в области образования, 62 (3), 229-258. Начмиас, Давид и Начмиас, Хава. (1981). Методы исследования в социальных науках. Нью-Йорк: Издательство Св. Мартина.
Обсуждает основы эмпирических исследований, сбора данных, обработки и анализа данных, методов вывода и этики исследований в области социальных наук.
Надь, Филипп; Джарчоу, Элейн МакНелли. (1981). Оценка компонентов дисперсии рейтингов эссе в сложном дизайне. Доклад для выступления / конференции .
В этой статье обсуждаются переменные, влияющие на качество письменного сочинения, и способы их наилучшего управления для улучшения оценки надежности письменных навыков.
Надь, Уильям Э., Герман, Патриция А. и Андерсон, Ричард К. (1985). Изучение значений слов из контекста: насколько широко можно обобщить? (Университет штата Иллинойс в Урбане-Шампейн. Центр изучения чтения, Технический отчет № 347). Кембридж, Массачусетс: Болт, Беранек и Ньюман.
Сообщает о результатах исследования, посвященного изучению того, как учащиеся узнают значения слов при чтении из контекста. Утверждает, что исследование было разработано для обобщения.
Найзер, Гилберт. (1992, январь). Основные концепции теории обобщаемости: более мощный подход к оценке надежности. Представлено на ежегодном собрании Юго-западной ассоциации образовательных исследований, Хьюстон, Техас.
Обсуждает, как метод измерения, называемый теорией обобщения (G-теория), является важной альтернативой более классической теории измерения, которая дает менее полезные коэффициенты. G-теория касается надежности поведенческих измерений, что позволяет одновременно оценивать несколько источников дисперсии ошибок.
Ньюман, Айседор и Макдональд, Сюзанна. (1993, май). Интерпретация качественных данных: методическое исследование. Документ, представленный на ежегодном собрании Академии наук Огайо, Янгстаун, Огайо.
Вопросы согласованности, триангуляции и обобщаемости обсуждаются в связи с качественным исследованием с участием аспирантов. Авторы опровергают взгляды Полкингхорна на обобщаемость качественных исследований, утверждая, что количественные исследования больше подходят для обобщения.
Норрис, Стивен П. (Ред.). (1992). Обобщаемость критического мышления: несколько точек зрения на образовательный идеал. Нью-Йорк: издательство Teachers College Press. Набор эссе по различным дисциплинам, представляющих различные точки зрения на тему обобщаемости критического мышления. Авторы ссылаются друг на друга и отвечают друг другу. Пешкин, Алан. (1993). Качество качественного исследования. Исследователь в области образования, 22 (2), 23-29.
Обсуждается, насколько эффективным может быть качественное исследование для получения желаемых результатов, и делается вывод о том, что это важный инструмент, который ученые могут использовать в своих исследованиях. Исследуются четыре категории качественного исследования — описание, интерпретация, проверка и оценка.
Рафилсон, Фред. (1991, июль). Доводы в пользу обобщения действительности.
Описывает обобщение как количественный процесс. Кратко обсуждает теорию, метод, примеры и приложения обобщения валидности, подчеркивая невидимые локальные методологические проблемы.
Родебек, Лори А. Структура феминистских ориентаций мужчин и женщин: феминистская идентичность и феминистское мнение. Гендер и общество 10 (4), 386-404.
Это исследование рассматривает две проблемы: степень, в которой феминистские мнения отличаются от феминистской идентичности, и возможность обобщения этих отдельных конструкций в зависимости от пола и времени.
Рункель, Филип Дж. И МакГрат, Э. Джозеф. (1972). Исследование человеческого поведения: систематическое руководство по методу. Нью-Йорк: Holt, Rinehart and Winston, Inc.
Обсуждает, как исследователи могут использовать свой опыт человеческого поведения и применять его в исследованиях систематическим и явным образом.
Саломон, Гавриил. (1991). Преодолевая качественно-количественные дебаты: аналитический и системный подходы к исследованиям в области образования. Исследователь в области образования, 20 (6), 10-18.
Исследует сложные вопросы / переменные, участвующие в исследованиях.Исследуются два типа подходов: аналитический подход, который предполагает внутренние и внешние проблемы, и систематический подход, в котором каждый компонент влияет на целое. Также обсуждается, как исследование никогда не может полностью измерить, насколько x влияет на y, потому что существует так много взаимосвязей. Знания применяются по-разному в рамках каждого подхода.
Шраг, Фрэнсис. (1992). В защиту позитивистских исследовательских парадигм. Исследователь в области образования, 21 (5), 5-8.
Критики-позитивисты Эллиот Эйснер, Фредерик Эриксон, Генри Жиру и Томас Попкевиц логически привержены утверждениям, которые можно проверить только с помощью позитивистских исследовательских парадигм.Определение позитивизма собрано на примере. В целом можно сделать вывод, что исследования в области образования не обязательно должны быть практическими.
Секаран, Ума. (1984). Методы исследования для менеджеров: подход к развитию навыков. Нью-Йорк: Джон Вили и сыновья.
Обсуждает управленческие подходы к проведению исследований в организациях. Предоставляет понятные определения и объяснения таких методов, как выборка, анализ и интерпретация данных.
Шадиш, Уильям Р.(1995). Логика обобщения: пять принципов, общих для экспериментов и этнографий. Американский журнал общественной психологии 23 (3), 419-29.
И эксперименты, и этнография сильно локализованы, поэтому их часто критикуют за отсутствие обобщения. В этой статье описывается логика обобщения, которая может помочь в решении таких проблем.
Шавелсон, Ричард Дж. И Уэбб, Норин М. (1991). Теория обобщаемости: Учебник. Ньюбери Парк, Калифорния: Sage Publications.
Снайдер И. (1995). Множественные перспективы в исследовании грамотности: объединение количественного и качественного. Язык и образование, 9 (1), 45-59.
В этой статье объясняется исследование, в котором автор использовал количественные и качественные методы одновременно для сравнения компьютерных классов и классных комнат. Несмотря на то, что при интеграции обоих подходов возникли некоторые проблемы, Снайдер говорит, что их можно использовать вместе, если исследователи тщательно планируют и осознанно используют свои методы.
Столлингс, Уильям М. (1995). Признания количественного исследователя образования, пытающегося научить качественному исследованию. Исследователь в области образования, 24 (3), 31-32.
Обсуждает испытания и невзгоды преподавания качественного исследовательского курса аспирантам. Автор описывает успехи и неудачи, с которыми он сталкивается, и просит коллег дать предложения по чтению его учебной программы.
Вагнер, Эллен Д. (1993, январь). Оценка проектов дистанционного обучения: подход к межпроектным сравнениям. Документ, представленный на ежегодном собрании Ассоциации образовательных коммуникаций и технологий, Новый Орлеан, Луизиана.
Описывает методологию, разработанную для оценки проектов дистанционного обучения таким образом, чтобы учитывать конкретные институциональные проблемы, получая при этом обобщаемые, достоверные и надежные результаты, которые позволяют обсуждать между различными учреждениями.
Инь, Роберт К.(1989). Пример исследования: дизайн и методы. Лондон: Sage Publications.
Небольшой раздел о применении обобщаемости в тематических исследованиях.
Информация о цитировании
Джеффри Барнс, Керри Конрад, Кристоф Демонт-Генрих, Мэри Грациано, Дон Ковальски, Джейми Нойфельд, Джен Замора и Майк Палмквист. (1994-2021). Обобщаемость и переносимость. Информационный центр WAC. Государственный университет Колорадо. Доступно по адресу https: // wac.colostate.edu/resources/writing/guides/.
Информация об авторских правах
Авторские права © 1994-2021 Государственный университет Колорадо и / или авторы, разработчики и участники этого сайта. Некоторые материалы, представленные на этом сайте, используются с разрешения.
Глава 3. Оценка потребностей и ресурсов сообщества | Раздел 15. Качественные методы оценки проблем сообщества | Основной раздел
Узнайте, как использовать качественные методы, такие как фокус-группы и интервью, для поддержки и усиления оценки вашего сообщества. |
Какие бывают качественные методы оценки?
Зачем нужны качественные методы оценки?
Когда бы вы использовали качественные методы оценки?
Как вы используете качественные методы оценки?
Использование качественных методов оценки, а не только информации, основанной на данных, имеет решающее значение для понимания многих проблем и потребностей сообщества.Числа хорошо подходят для отображения сравнений, прогресса, статистики усилий сообщества, но они не могут выражать мотивы, мнения, чувства или отношения. В этом разделе обсуждается, как использовать методы качественной оценки и когда применять их в планировании общины.
Какие бывают качественные методы оценки?
Качественные методы оценки — это способы сбора информации, которые дают результаты, которые нелегко измерить или перевести в числа. Они часто используются, когда вам нужны тонкости, стоящие за числами — чувства, небольшие действия или фрагменты истории сообщества, которые влияют на текущую ситуацию.Они признают тот факт, что опыт субъективен, что он фильтруется через восприятие и мировоззрение людей, переживающих его, и что важно понимать эти восприятия и мировоззрения.
Есть два основных научных способа сбора информации: количественные методы и качественные методы. Количественные методы — это методы, результаты которых выражаются в числах. Они обычно отвечают на такие вопросы, как «Сколько?» или «Сколько?» или «Как часто?» Когда они используются для сравнения вещей — результатов общественных программ, результатов усилий по экономическому развитию или отношения к проблеме сообщества — они делают это, подвергая все вещи или людей, которых они сравнивают, точно таким же тестам. или на те же вопросы, ответы на которые можно перевести в числа.Таким образом, они могут сравнивать яблоки с яблоками — все или все измеряются по одному стандарту. Политики часто требуют количественных мер; они считаются заслуживающими доверия, потому что их результаты можно сравнивать друг с другом, и потому, что они оставляют меньше места для предвзятости.
Качественные методы сами по себе не дают численных результатов. Они могут включать в себя просьбу дать людям «эссе» ответы на часто сложные вопросы или наблюдение за взаимодействиями в сложных ситуациях.Когда вы спрашиваете многих людей об их реакции или объяснениях проблемы сообщества, вы, скорее всего, получите много разных ответов. Наблюдая за сложной ситуацией, вы можете увидеть несколько ее аспектов и несколько способов ее интерпретации. Вы не только не сравниваете яблоки с яблоками, вы можете сравнивать яблоки с бульдозерами или водопадами. В результате исследователи и политики иногда считают качественные методы менее точными и менее законными, чем количественные.Это может быть правдой, но, как мы увидим, при осторожном использовании качественных методов они также могут дать надежную информацию.
Качественные и количественные методы, по сути, дополняют друг друга. У каждого из них есть сильные и слабые стороны, которых нет у другого, и вместе они могут представить более четкую картину ситуации, чем каждый из них по отдельности. Часто наиболее точная информация получается при использовании нескольких разновидностей каждого метода. Это не всегда возможно, но когда это возможно, это может дать наилучшие результаты.
Существует ряд качественных методов, которые можно использовать для оценки проблем или потребностей сообщества. Мы перечислим основные из них и рассмотрим их более подробно позже в этом разделе.
Сюда входят:
- Индивидуальные интервью . Это могут быть структурированные интервью, в которых вопросы определяются заранее, или неструктурированные беседы, которые могут проходить в любом месте, где интервьюируемый хочет пойти по общей теме.Даже в структурированных интервью и интервьюерам, и респондентам может быть место для обсуждения тем, которые не имеют прямого отношения к ответам на исходные вопросы. Однако разница в том, что в структурированном интервью все эти вопросы задаются формально, и интервьюер делает все возможное, чтобы на них был дан ответ.
- Групповые интервью . Они похожи на индивидуальные интервью, но в них участвуют два или более интервьюируемых одновременно, а не один. (Иногда это бывает неожиданно — мать и сестра интервьюируемого присутствуют и настаивают на том, чтобы участвовать в разговоре.) Групповые интервью имеют некоторые преимущества, так как собеседники могут проверять друг друга (я помню, что это происходит по-другому…) и стимулировать мышление друг друга. В то же время интервьюер должен быть своего рода фасилитатором, следящим за тем, чтобы ни один человек не доминировал, и чтобы у каждого был разумный шанс высказаться.
Частным случаем группового интервью является фокус-группа. Это группа из 6-10 человек под руководством обученного фасилитатора, собранная, чтобы ответить на конкретный вопрос или вопросы.Иногда стараются убедиться, что члены группы не знают друг друга, чтобы социальное давление не повлияло на них. При наличии подготовленных фасилитаторов фокус-группы могут стать хорошим способом получить точную информацию о проблеме.
- Наблюдение . Здесь кто-то действительно идет и смотрит на место или событие, наблюдает за ситуациями или взаимодействиями, или принимает участие в жизни сообщества или населения, записывая то, что он в результате обнаруживает.
- Общинные или другие большие собрания .Эти встречи позволяют широкому кругу людей выразить свое мнение и отреагировать на мнение других. Они могут одновременно использовать большой пул мнений и знаний и выявить разногласия или разногласия, которые затем можно будет обсудить.
- Интерпретация записей, стенограмм и т. Д. Это может варьироваться от качественного анализа количественных данных (например, предположение исследователя во введении к этому разделу, что люди, которые преуспевают, не будут заинтересованы в программе обучения взрослых) , к использованию количественных данных в качестве отправной точки для качественной оценки, к тематическим исследованиям (подробное изучение отдельных случаев).Последние не всегда полезны при оценке проблем или потребностей сообщества, но они могут быть очень эффективными для убеждения политиков или спонсоров в важности этих вопросов и потребностей.
Многие типы качественной информации превращаются в числовые результаты, хотя и не всегда точно. Преобразование может упустить важные детали, или информация может быть слишком сложной, чтобы легко вписаться в числовые ограничения, если вы не можете создать компьютерную модель или аналогичную числовую структуру, которая способна принять огромное количество разнообразия.Существует много программ — NVivo и Atlas.ti довольно хорошо известны, но есть много других, в том числе некоторые бесплатные, которые предназначены специально для анализа качественных данных.
Поскольку качественные методы дают результаты, которые не всегда легко сравнить или даже проверить на точность, люди, которым нужны надежные и быстрые доказательства, часто считают их подозрительными. На самом деле, количественные и качественные измерения важны и необходимы в зависимости от ситуации. Как мы уже обсуждали, когда вы оцениваете проблемы сообщества, вы часто будете ближе всего к полной картине, используя и то, и другое.Проблема в том, чтобы убедить тех, кого нужно убедить — политиков, спонсоров и т. Д. — в надежности ваших качественных показателей.
В исследовательском сообществе ведутся споры о том, как судить о качественных методах. Некоторые говорят, что их следует оценивать по тем же стандартам, что и количественные методы. Другие утверждают, что, поскольку они по своей сути отличаются от количественных методов, качественные методы требуют набора стандартов, учитывающих их философскую основу и вид информации, которую они дают.
Британское правительство, например, разработало структуру для демонстрации качественной надежности, которая включает набор из 18 вопросов, которым следует подвергнуть качественную оценку или исследование (см. Инструмент № 1).
Рекомендации, которые помогут вам обосновать надежность вашей качественной оценки, включают:
- Отчитывайтесь точно и полностью . Независимо от того, проводите ли вы собеседование, наблюдаете ли вы или занимаетесь какой-либо другой техникой, вы должны точно записывать такие детали, как время и место вашей деятельности, кто участвовал, какова была ситуация и т. Д.Таким образом вы сможете увидеть сходства и различия и провести сравнения там, где они уместны. Запись интервью, наблюдений и другой информации должна быть максимально точной и почти полной (например, дословная запись интервью).
- Составьте правильные вопросы и дайте им правильные ответы . Иногда бывает полезно отправиться на поиски информации, то есть начать, не имея представления о том, что вы хотите узнать. Однако в большинстве случаев вы должны знать, какие важные вопросы и где нужно искать ответы.Чем яснее вы можете быть — и чем яснее будет то, что вопросы, которые вы задаете, приведут к реальному пониманию и эффективным действиям, — тем больше доверия будет к вашему запросу.
- Используйте качественные методы специально для получения информации, которую нелегко получить с помощью количественных методов . Вы можете количественно определить, сколько представителей определенного меньшинства проживает в определенном районе. Гораздо сложнее дать количественное представление о том, насколько хорошо они ладят со своими соседями и почему.
- Используйте методы, которые лучше всего помогут вам ответить на вопросы, которые вы задаете . Если вы хотите узнать состояние свободных участков в городе, вы с меньшей вероятностью сможете определить его, задавая вопросы людям, чем просто подойдя к ним и посмотрев на сами участки. С другой стороны, вы обычно можете получить больше информации о мнениях людей, разговаривая с ними, чем при наблюдении.
- Отделите свои собственные и чужие субъективные чувства и комментарии от объективной реальности и постарайтесь убедиться, что ваши выводы объективны. .Легко увлечься мнениями собеседников или вашей собственной реакцией на определенные условия. Если вы хотите, чтобы ваши результаты были надежными, вы должны исключить как можно больше субъективного из того, что вы находите и записываете. (Один из способов подойти к этому вопросу — попросить нескольких человек записывать и анализировать каждое интервью или наблюдение, а затем проверять, насколько хорошо они согласны как в записи данных, так и в их интерпретации.)
Что-то, что является целью — наблюдение, утверждение, мнение, результаты исследования и т. Д.- основан на реальности, как она есть на самом деле. Ученые, например, стремятся быть объективными и понимать, как обстоят дела на самом деле, а не такими, какими их хотят видеть или думают ученые или другие люди. С другой стороны, субъективное наблюдение, утверждение, мнение или результат исследования основано на мыслях и предположениях автора. Исследователь может быть настолько потрясен условиями в районах, где процветает насилие, что он может начать чувствовать, что насилие на самом деле является единственной рациональной реакцией, и склонять свои исследования в этом направлении.
Объективность жизненно важна, особенно в оценке сообщества. Объективный взгляд на сообщество поможет вам понять, как наиболее эффективно решать проблемы, максимально использовать и использовать активы и решать проблемы. Понимание ваших собственных субъективных реакций — на сложные условия, на конкретных людей, на культурные обычаи — поможет вам отсеивать их, тем самым повышая надежность ваших выводов.
Зачем нужны качественные методы оценки?
Основная причина использования качественных методов заключается в том, что есть некоторые виды вопросов и некоторые аспекты оценки сообщества, которые могут быть лучше решены с их помощью, чем с помощью количественных методов.Методы, которые вы используете, должны определяться вопросами, которые вы задаете. Однако, поскольку может быть трудно убедить разработчиков политики и других в полезности качественных методов, зачем вообще их использовать? Некоторые из основных причин:
- Они отвечают на некоторые вопросы, которые не могут дать количественные измерения. Количественные методы могут сказать вам, сколько людей делают то или иное действие, но вряд ли они скажут вам, как и почему они это делают. Качественные методы могут лучше ответить на вопросы, как и почему, а также предоставить другую информацию в процессе.
- Они напрямую связаны с населением и сообществом, которое вас интересует. При оценке лучшими источниками информации являются те, которые наиболее близки к тому, что оценивается: они испытывают это больше, чем кто-либо другой. Качественные методы обычно напрямую связаны с источниками с более сложными вопросами, чем количественные.
- Они могут понять некоторые основные реалии ситуации. И снова количественные методы часто не отвечают «почему?» вопросы, в то время как качественные методы могут рассказать вам об истории сообщества или проблемы, кто являются значительными сторонниками и противниками различных идей, кого слушают люди в сообществе и т. д.В ситуации оценки это может быть важная информация.
- Они могут привлечь интересующее население или сообщество в целом, чтобы помочь оценить проблемы и потребности сообщества. Это участие способствует развитию чувства сопричастности и поддержки усилий.
- Они часто позволяют глубже изучить ситуацию или сообщество, чем количественные методы. Количественные методы, хотя и полезны, могут иметь тенденцию помещать людей или события в определенные категории, требовать ответов «да-нет» или ответов с несколькими вариантами ответов, часто устраняя сложность.Качественные методы позволяют следовать многообещающим направлениям («Почему вы так говорите?») И могут привести к обнаружению важной информации, которую не коснулись бы количественные результаты.
- Они учитывают человеческий фактор. Хотя информация, полученная с помощью качественных методов, часто является субъективной, она также часто идентифицируется как таковая и может быть соответствующим образом проанализирована.
Когда бы вы использовали качественные методы оценки?
Ясно, что бывают случаи, когда количественное исследование дает вам нужную информацию.Итак, когда использовать качественные методы? Это во многом зависит от вопроса, который вы задаете. (Первые четыре ситуации, представленные ниже, основаны на руководстве USAID по использованию методов быстрой оценки, Советах по мониторингу и оценке эффективности.)
- Когда вам нужна качественная описательная информация . В частности, в ситуации оценки вы часто ищете описательную или аналитическую информацию, которая имеет мало общего с количественными показателями. Информация, предоставляемая качественными методами, часто является именно тем, что вам нужно при оценке сообщества, чтобы принять решение о дальнейших шагах.
- Когда вы пытаетесь понять причины и мотивы поведения людей или то, как они действуют в определенных ситуациях . Почему люди не пользуются программами социальных услуг, на которые они имеют право? Каковы различия в том, как люди с разным культурным происхождением реагируют на услуги? Это те вопросы, на которые вы, вероятно, захотите ответить при оценке сообщества, и на них часто невозможно дать количественный ответ.
- Когда вы анализируете количественные данные. Как упоминалось выше, многие количественные данные можно проанализировать с помощью качественных методов.
Странный набор чисел — сообщество с явно низким доходом, но где подавляющее большинство людей, например, владеют собственными домами, — может стать трамплином для качественного исследования того, почему это так. Возможен ряд причин:
- Сообщество в основном состоит из пожилых людей, и люди живут в давно оплаченных домах, которые они купили 40 или более лет назад, когда их доход был выше, а жилье было дешевле.
- Один или несколько местных банков сделали своей приоритетной задачей оказание помощи людям в покупке домов и предоставление ипотечных кредитов под низкие проценты и других программ субсидирования для достижения этой цели.
- Хотя члены общины могут иметь низкий доход, тем не менее они экономят на всем остальном, чтобы откладывать деньги на дом. Это часто случается с иммигрантами из определенных культур, где люди готовы жить очень просто в течение многих лет, чтобы копить на собственность и образование.
- Сообщество «списано» из-за некачественного жилья, опасных улиц и отсутствия услуг, в результате чего дома смехотворно дешевы.
- Комбинация факторов, некоторые из которых могут не быть здесь перечислены.
По большому счету, количественные методы нелегко расскажут вам о причинах этой необычной ситуации, а качественные — это.
- Когда вы пытаетесь разработать предложения и рекомендации . Опять же, это часто является основной целью оценки сообщества. Как вы должны разработать программу или инициативу для достижения главной цели сообщества или решения проблемы? На что люди ответят? Качественные данные могут дать здесь наилучшую информацию или могут быть использованы в дополнение к качественной информации, чтобы предоставить полную картину, на которой основывается ваша стратегия.
- Если вы хотите максимально напрямую привлечь сообщество к оценке . Вовлечение членов сообщества напрямую ведет к заинтересованности и поддержке инициатив, а также может генерировать лучшие и наиболее эффективные решения. Методы качественной оценки, по большей части, собирают информацию непосредственно от самих членов сообщества и позволяют им заполнять детали в максимально возможной степени. По большому счету, собеседование с большей вероятностью заставит кого-то почувствовать себя частью процесса, чем заполнение анкеты.
- Когда вы проводите совместное исследование на уровне сообщества (т. Е. Напрямую вовлекаете сообщество в планирование и проведение оценки). Совместные исследования на уровне сообществ часто в значительной степени полагаются на методы качественной оценки.
- Когда количественные данные недоступны или недоступны.
- Когда у вас нет возможности использовать количественные методы . У вас может не быть надлежащего обучения, программного или аппаратного обеспечения, которое сделало бы количественную оценку полезной для вас, или времени для правильного использования количественных методов.
Как вы используете качественные методы оценки?
Теперь, когда вы убедились в важности использования качественных методов оценки, как вы собираетесь это делать? Редко есть один правильный способ сделать что-либо, но мы предложим некоторые шаги, которые нужно предпринять при использовании качественных методов, включая некоторые рекомендации по проведению интервью и наблюдений, двух наиболее распространенных методов. (Большинство этих рекомендаций одинаково справедливы и для использования количественных методов.)
Начните с определения того, что вы хотите знать.
Возможно, вы помните, что это также один из критериев качественной надежности. Это может показаться элементарным, но это не происходит так часто, как следовало бы. Важность решения о том, что вы хотите знать, заключается в том, что он определяет характер вашей оценки — какие вопросы вы задаете, кому вы их задаете, как вы будете это делать и т. Д. Без этой минимальной структуры вы скорее всего, в итоге получится беспорядочная и неорганизованная масса информации.
Есть много способов подойти к оценке сообщества, и, следовательно, есть много вопросов, с которых вы можете выбрать, чтобы начать свою оценку.Вы можете даже использовать более одного, но важно четко понимать, что вы ищете.
Некоторые возможности:
- Какая наиболее серьезная проблема — общая или конкретная — стоит перед сообществом (т.е. на что мы должны обратить внимание?
- Какие услуги больше всего нужны в сообществе? Кому они больше всего нужны?
- Пользуются ли люди существующими в настоящее время услугами?
- Каковы важные активы сообщества? Как их можно укрепить?
- Есть ли силы, работающие против блага общества, которым следует противостоять? (Вы, вероятно, не задали бы этот вопрос, если бы не думали, что он есть, и не представляли, кто или что они могут быть.)
- Кто должен участвовать в предполагаемой коалиции или инициативе?
Выберите метод, наиболее подходящий для поиска нужной информации.
Если вы хотите узнать о поведении людей в обществе, вы, вероятно, воспользуетесь прямым наблюдением. Например, наблюдение за матерями и детьми в приемной клиники может дать вам информацию об уровне тревожности матерей или методах воспитания детей.
Если вы хотите узнать мнение людей или их отношение к проблемам, вам подойдет какой-нибудь тип интервью.
После того, как вы выбрали правильный метод, важно правильно его применять. Знайте, что вы можете сделать с имеющимися у вас ресурсами. Например, в большом городе невозможно провести тысячи собеседований без значительных денег. Если вы некоммерческая организация с ограниченными деньгами, вы можете искать грант для финансирования собеседований или ограничивать оценку одним районом. Возможно, вы бы мобилизовали добровольцев для проведения интервью или опроса групп, а не отдельных лиц.Лучше провести ограниченную оценку сообщества хорошо, чем большую — плохо.
При выборе метода имейте в виду, что в некоторых случаях количественные методы могут быть более подходящими и с большей вероятностью сообщат вам то, что вы хотите знать.
Выберите людей, которые будут собирать информацию, и при необходимости обучите их.
При использовании качественных методов, когда контакты часто носят личный характер, вопрос о том, кто их применяет, может быть очень важным. Ученым или другим людям, которые воспринимаются членами сообщества как «другие», будь то из-за их поведения, их речи или просто потому, что они посторонние, может быть трудно собрать точную и полную информацию от населения, которое очень хорошо осознает свой класс. или культурные различия.Часто имеет смысл обучать представителей населения или других лиц, которых знают и которым доверяют — или, по крайней мере, знают по своему поведению, одежде и речи — тех, кого просят поделиться своим мнением и наблюдениями.
Сборщики данных должны свободно владеть языком и культурой тех, кого они опрашивают. Если вы оцениваете коммерческую деятельность в латиноамериканском районе, вы упускаете большую часть того, что происходит на самом деле, если не понимаете и испанский язык, и обычные способы, которыми латиноамериканские (или доминиканские, мексиканские или пуэрториканские) покупатели и продавцы относятся к одному из них. Другая.
Если вы нанимаете членов сообщества или определенного населения для сбора качественной информации — потому что они лучше относятся к населению, потому что они говорят на этом языке, потому что вы участвуете в совместных усилиях, или просто потому, что вы думаете, что они ‘ у вас это получится — вы должны обучить их, чтобы убедиться, что результаты, которые они получают, надежны. В зависимости от того, какие методы они будут использовать, некоторые элементы обучения могут быть такими:
- Что и как записывать : Может быть неочевидно, насколько важно записывать время, место, детали и обстоятельства собеседования, наблюдения, фокус-группы или более широкого собрания. Это также может быть необходимо, в зависимости от опыт стажера, чтобы научиться пользоваться записывающим устройством или видеокамерой и / или научиться делать эффективные заметки, не теряя нити разговора или упуская важные моменты в наблюдении.
- Методы интервью , а также точно, для какой цели служит интервью и как оно вписывается в общую картину оценивания. Чем яснее интервьюер понимает не только то, что и как делать, но и зачем он это делает, тем лучше он сможет извлечь информацию, которую ищет.
- Методы наблюдения : Как и в случае с интервью, наблюдение будет гораздо более полезным, если наблюдатель понимает не только, что и как делать, но и точно, почему он это делает и как это будет использоваться.
- Обучение другим методам : Например, для фокус-групп требуются определенные навыки и методы.
- Обучение тому, как думать о себе как об исследователях : Подобно тем, кто занимается исследованиями с участием местных сообществ, сборщики информации должны понимать, как работают исследователи. Объективность, внимание к деталям, любопытство и непрерывная обработка информации для создания следующего вопроса или наблюдения — все это часть исследовательского мышления, которое следует поощрять к развитию.
Определите, у кого или откуда вам нужно собирать информацию.
Может быть, вы хотите услышать мнение всех слоев общества, но некоторые вопросы или обстоятельства требуют более конкретных информаторов. Некоторыми возможными субъектами интервью могут быть государственные должностные лица, представители определенного населения или культурной группы, люди из определенного географического региона или люди с определенными характеристиками (родители маленьких детей, люди с ограниченными возможностями, мужчины 18-24 лет, люди с высоким кровяным давлением. ).
Знание того, кого вам нужно спросить, распространяется на любой метод, в котором вы разговариваете напрямую с людьми — фокус-группы, большие собрания сообщества и т. Д. Фокус-группы, используемые маркетологами, выбираются чрезвычайно тщательно, например, с учетом возраста, пола, дохода, места жительства. места жительства, и даже такие факторы, как предпочтительный досуг.
В наблюдении могут участвовать или не участвовать люди. Если это так, вопрос может заключаться не в том, за кем вы хотите наблюдать, а в том, за какой деятельностью или ситуацией вы хотите наблюдать.Если говорить в общем — какие виды уличной активности имеют место в разных районах, как люди используют общественный парк, — то не обязательно сосредотачиваться на конкретном населении, а скорее на месте. Если быть более конкретным — вернемся к коммерческой деятельности в этом латиноамериканском районе — вам нужно будет оказаться в нужном месте в нужное время.
Соберите информацию.
Пришло время вам или вашим избранным людям собраться и собрать нужную вам качественную информацию.
Интервью
Как упоминалось выше, интервью могут быть структурированными или неструктурированными.В строго структурированном интервью всем задаются одни и те же вопросы в одном и том же порядке, с относительно небольшим пространством для отхода от конкретной темы. Полуструктурированные интервью также могут быть основаны на списке конкретных вопросов, но, пытаясь убедиться, что респондент отвечает на все из них, интервьюер может искать интересные пути или побуждать собеседника говорить о других связанных проблемах. Неструктурированное интервью, скорее всего, будет более расслабленным — больше похоже на беседу, чем на формальное собеседование.
У каждого подхода есть свои преимущества и недостатки. Структурированное интервью может заставить собеседника сосредоточиться на вопросах и процессе собеседования, отнестись к нему более серьезно и, таким образом, предоставить отличную информацию. Поскольку всех опрашивают одинаково, структурированное интервью может быть — или, по крайней мере, может выглядеть — надежным. Это также может нервировать интервьюируемого, подчеркивать различия между ним и интервьюером и приводить к неполным или менее чем правдивым ответам.
Полу- или неструктурированное интервью может позволить интервьюируемому быть более расслабленным и, следовательно, более откровенным. Это также оставляет место для обсуждения темы, которая не имеет прямого отношения к формальному списку вопросов, но может быть важной или даже решающей. В то же время, поскольку это может быть далеко идущее интервью, полу- или неструктурированное интервью — особенно такое, которое не начинается со списка вопросов — является или кажется менее надежным, чем структурированное. Кроме того, в руках неопытного или нерешительного интервьюера это может позволить собеседнику отвлечься и никогда не вернуться к исходным вопросам.
Какой вид собеседования вы используете, зависит от характера информации, которую вы ищете, потребностей людей, с которыми вы проводите собеседование (например, важнее ли комфорт, чем структура), и вашего собственного комфорта. Автор провел все три типа интервью и обнаружил, что полуструктурированные интервью — с четкими вопросами и целями для собеседования, но с проведением их в неформальной обстановке, с пространством для обсуждения и простой дружеской беседы — в целом продуктивны. .Следующие рекомендации по проведению собеседований отражают эту точку зрения.
- Попросите интервьюируемого выбрать место . Вы можете дать ему ряд предложений — его дом или рабочее место, офис агентства социальных услуг, нейтральное пространство, такое как кафе или парк, — и согласиться с его выбором. Чем он удобнее, тем лучше и информативнее будет интервью.
- Выбери одежду, удобную для собеседника . В общем, ваша одежда и ее одежда должны быть похожи: если она в джинсах и футболке, вы не должны быть в костюме; если вы собеседуете в ее офисе собеседование с руководителем компании, вы должны быть в костюме.Одежда посылает мощные сообщения, и сообщение, которое вы должны отправить сюда, звучит так: «Мы с одной планеты; ты можешь со мной поговорить.»
- Заранее поговорите с интервьюируемым, если вы планируете записать или сфотографировать интервью . Получите разрешение, прежде чем появиться с оборудованием. Это обычная вежливость, и меньше шансов начать интервью неловко.
Если результаты интервью, вероятно, будут опубликованы, даже если интервьюируемый будет анонимным, вы можете получить подписанную форму «информированного согласия», в которой указывается, что интервьюируемый понимает цель интервью и дает разрешение для материалов, которые будут опубликованы или использованы иным образом.
- Тщательно запишите время, место, обстоятельства и детали интервью . Это включает в себя описание места (окрестности, а также пространство, если вы интервьюируете члена сообщества), других присутствующих людей, любых отвлекающих факторов (дети, домашние животные, телевизор), других факторов, влияющих на интервью или ситуацию. Включите общее описание интервьюируемого (замужняя латиноамериканка, 25 лет, трое детей в возрасте 6, 4 и 1 года).
- Тщательно продумайте и сформулируйте свои вопросы и напрямую запрашивайте информацию, которую вы ищете .Запомните свои основные вопросы (не обязательно дословно, но знайте, какие они есть), чтобы как можно меньше обращаться к заметкам. Делайте вопросы ясными и недвусмысленными, чтобы вопросы не были расплывчатыми или трудными для понимания.
- Задавайте открытые вопросы . Это вопросы, на которые требуется ответ «эссе», а не «да-нет». Например, вместо того, чтобы спрашивать «Вам понравилось участвовать в программе?» Вы можете спросить: «Каково было участие в программе?» Постарайтесь дать людям возможность ответить как можно более полно и вдумчиво.
- Зонд . Задавайте уточняющие вопросы, чтобы понять, что люди на самом деле говорят, или чтобы они продолжали говорить на определенную тему. («Почему вам понравилось, когда учитель спросил ваше мнение?») Не бойтесь идти вразрез с тем, что может показаться второстепенным. Иногда лучшая или самая важная информация оказывается в стороне от проторенных дорог.
Некоторые собеседники могут ответить одним словом практически на любой вопрос. Они могли ответить: «Каково было участие в программе?» с «Хорошо.«Не бойтесь исследовать эти ответы. «Что это обозначает?» или «Как это было хорошо?» может дать вам массу информации. Если он даст вам еще один ответ из одного слова, продолжайте зондирование, если только вы не почувствуете, что человек злится или разочаровывается. Тогда, вероятно, пора перейти к следующему вопросу и надеяться, что появится возможность вернуться к нему для более полного объяснения. Но имейте в виду, что некоторые люди просто тише или менее рефлексивны, чем другие. Возможно, вы никогда не получите от них ответов, состоящих из одного слова.
- Не отрезайте людей слишком быстро . Их истории или то, что вы можете прочитать между строк, может дать вам такую же важную информацию, как и то, что они рассказывают вам напрямую.
В то же время помните, когда они слишком далеко ушли от темы. Есть история Марка Твена, которая состоит из голоса человека, рассказывающего анекдот о трехногой собаке. Каждое второе слово напоминает ему о чем-то другом — о другой истории, — и он постоянно отвлекается, никогда не заканчивая рассказ о собаке или о ком-либо еще.Остерегайтесь проклятия трехногой собаки: мягко, но твердо верните людей к теме, если они зайдут слишком далеко.
- Подтвердите то, что вам говорят, посоветовавшись с другими, насколько это возможно . Помните, что вы получаете представления людей, которые не всегда совпадают с объективной реальностью. В фильме великого японского режиссера Акиры Куросавы «Расомон» инцидент описывается с точки зрения четырех участников, каждый из которых видит его совершенно по-своему.Фактически, феномен Расёмон таится повсюду; узнайте все стороны истории.
Групповые интервью похожи на индивидуальные и отличаются от них. Основные принципы — ясность, о чем вы спрашиваете, открытые вопросы, зондирование и т. Д. — все еще остаются в силе, но группа привносит в ситуацию свою собственную динамику. Интервью превращается в групповое обсуждение, и интервьюера должны волновать вопросы о том, чтобы все были услышаны, обуздать тех, кто доминирует в дискуссии, и сосредоточить внимание на идеях и информации, а не на личностях.
Как и другие методы, у групповых интервью есть преимущества и недостатки. Первые включают использование энергии группы для генерации большего количества информации, чем могло бы быть получено в противном случае. Члены могут побуждать друг друга придумывать все больше и больше полезного материала, поскольку их мышление определяется воспоминаниями и выводами других. Они также могут выступать в качестве проверки точности предоставленной информации. Кроме того, присутствие других, часто знакомых, собеседников может помочь преодолеть застенчивость или нервозность и создать непринужденную атмосферу, в которой каждый чувствует себя комфортно при разговоре.(Здесь важны навыки интервьюера по созданию комфортных условий для людей — по крайней мере, частично за счет того, что она сама будет чувствовать себя комфортно.)
Вместе с этими потенциальными положительными моментами возникают возможные отрицательные стороны конфликта, антагонизма или неприязни между членами группы, а также другие отрицательные чувства или история, которые могут нарушить или исказить дискуссию и сделать интервью практически бесполезным. Есть также проблемы, которые могут возникнуть из-за того, что члены группы слишком дружелюбны: они могут проводить слишком много времени в болтовне и иметь проблемы с сосредоточением внимания на текущих вопросах.
Групповые интервью могут быть полезны, когда ресурсы — и, как следствие, интервьюеры — ограничены или когда есть большое количество людей, которые должны быть или хотели бы быть опрошенными. Группы, вероятно, не должны быть намного больше пяти или шести, и интервьюеры должны иметь или обучаться базовым навыкам групповой фасилитации.
Наблюдение
Что мы подразумеваем под «наблюдением»? Для наших целей существует два основных вида: прямое и включенное наблюдение.
Прямое наблюдение — это практика осмотра или наблюдения за местами, людьми или деятельностью без вмешательства или участия в происходящем. Наблюдатель — это пресловутая муха на стене, часто неопознанная, которая ничего не делает, кроме как наблюдает и записывает то, что она видит и / или слышит. Например, прямое наблюдение, чтобы увидеть, как люди используют общественный парк, может состоять из одного или нескольких наблюдателей, которые просто сидят в одном месте или гуляют по парку в течение нескольких часов или даже нескольких дней.Наблюдатели могут возвращаться в разное время дня, в разные дни или в разное время года, чтобы как можно больше понять, что происходит в парке. Иногда они могут задавать вопросы людям, пользующимся парком, но максимально сдержанно и ненавязчиво, не называя себя исследователями.
Некоторые виды прямого наблюдения — те, когда за людьми наблюдают в ситуациях, которые они считают конфиденциальными — могут нарушить конфиденциальность.В этих случаях этика обычно требует, чтобы наблюдатель получил разрешение наблюдаемых.
Например, в лабораторных школах, где проходят подготовку учителей и апробируются новые образовательные идеи, классы часто наблюдаются из-за односторонних зеркал. В таких случаях как учителя, так и родители учеников обычно информируются о том, что такое наблюдение может произойти, и их просят подписать формы согласия. Они не знают точно, когда происходит наблюдение, но они понимают, что это часть лабораторной школьной среды, и готовы позволить это как для улучшения навыков отдельных учителей, так и для содействия разработке более эффективных методов обучения.
Совместное наблюдение включает в себя в какой-то мере стать частью жизни людей, за которыми вы наблюдаете, — изучать и принимать участие в их культуре, их праздниках и ритуалах, а также их повседневной деятельности. Наблюдатель-участник в парке наверху может познакомиться с наблюдаемыми им занятиями — обычным волейбольным матчем, зимними беговыми лыжами, выгуливанием собак, катанием на роликовых коньках — и хорошо узнать людей, которые занимаются этими видами деятельности. Он также будет следить за своими собственными ощущениями и реакциями на использование парка, чтобы лучше понять, что к нему относятся пользователи.Он, вероятно, задаст много вопросов и вполне может назвать себя исследователем.
Эффективному участнику-наблюдателю может потребоваться много времени (в некоторых случаях, годы), чтобы утвердиться на этом пути. Конечно, из этого правила есть исключения. Некоторые маркетинговые фирмы и корпорации нанимают наблюдателей за тенденциями в качестве наблюдателей. Сами молодые, модные и стильные, эти наблюдатели могут идентифицировать и общаться с подростками и молодыми взрослыми-законодателями моды в коротких взаимодействиях и определять, какие продукты, стили и модели поведения могут вскоре завоевать популярность у молодых людей в целом.Вы можете сделать что-то подобное, но это очень помогает, если вы уже являетесь частью группы, за которой хотите наблюдать, или если группа, как и пользователи общественного парка, может включать кого угодно.
Как прямое, так и активное наблюдение могут быть полезны при оценке сообщества. Участник-наблюдатель в этой ситуации, скорее всего, будет членом наблюдаемой группы из-за продолжительности времени, которое может потребоваться, чтобы установить постороннего наблюдателя в качестве участника-наблюдателя. Прямое наблюдение, вероятно, более распространено в качестве инструмента оценки.
Независимо от типа, ваше наблюдение должно быть надежным.
Некоторые рекомендации для достижения этой цели:
- Тщательно обдумайте вопросы, на которые ваше наблюдение должно дать ответ . Вы можете следить за поведением или взаимодействием людей в данном месте или ситуации, либо за характером социальных, физических или внешних условий в определенном месте или обстоятельствах. Если вы четко представляете, что хотите узнать, вы можете структурировать свое наблюдение, чтобы получить наилучшую информацию.
- Где и кого следует наблюдать, чтобы ответить на эти вопросы ? Обычно вы не будете искать доказательства бездомности в богатейшем районе города, а также не будете наблюдать за жителями азиатского квартала, чтобы узнать что-нибудь о латиноамериканском населении.
- Когда и как долго должно проводиться наблюдение ? Наблюдение за коммерческой деятельностью в центре города в воскресенье утром не даст вам точного представления о том, что это на самом деле.Вам нужно будет наблюдать как в загруженное, так и в медленное время, а также в течение определенного периода времени, чтобы получить реальное представление об объеме, интенсивности и характере коммерческой деятельности.
Что вы должны наблюдать и записывать? Это зависит от вопросов, на которые вы пытаетесь ответить, но некоторые основы включают:
- Физические характеристики помещения, включая погоду, на открытом воздухе.
- Время дня, недели и года.
- Описание (возраст, раса / этническая принадлежность, пол, стиль одежды и т. Д.) любых вовлеченных людей.
Одежда отражает то, как люди представляют себя миру. Стрижка ирокез, пирсинг и черная одежда представляют собой отношение и, в некоторой степени, мировоззрение, а не просто модное заявление. То же самое и с дорогим костюмом, и с джинсами, шерстяной рубашкой и походными ботинками. Обращение внимания на такие детали может улучшить как ваше понимание, так и надежность ваших наблюдений.
- Виды деятельности, события и / или наблюдаемые места или обстоятельства и их описание.
- Характер взаимодействия между людьми.
- Очевидное отношение людей к месту, ситуации, деятельности или событию — положительное или отрицательное, счастливое, смущенное, злое, разочарованное и т. Д.
- Физическое и социальное положение наблюдателя (ненаблюдаемое, отстраненное, участник и т. Д.).
Например, на местном фестивале наблюдатель может наблюдать из окна высоко над улицей, с позиции на краю толпы, изнутри толпы и происходящего на фестивале, как участник фестивальной деятельности, или даже в качестве волонтера или организатора фестиваля.То, что она увидит и услышит, что она испытает, и информация, которую она получит, будет отличаться от каждой из этих точек зрения.
- Собственные реакции и отношения наблюдателя, включая физический и психологический комфорт наблюдения. Это должно быть отделено от записи самого наблюдения и, в идеале, не должно влиять на объективную запись наблюдаемого.
Как записывать наблюдения? Это зависит от характера наблюдения и ваших ресурсов.Видеозапись, если она не производится из скрытого места или в ситуации, когда такая запись ожидается (например, на туристическом объекте или на уличном фестивале), может изменить поведение людей или вызвать у наблюдателя подозрения. Аудиозаписи гораздо менее очевидны, но и предоставляют меньше информации, если только это не конкретная звуковая информация, которую вы ищете. В большинстве случаев запись будет производиться с помощью ноутбука и карандаша или портативного компьютера. Если запись во время наблюдения будет мешающей или неуместной, вам, вероятно, придется подождать, пока вы не выйдете из ситуации, но как можно скорее, чтобы не забыть и не спутать детали.
Проанализируйте информацию.
После того, как вы собрали информацию каким-либо качественным методом, вы должны выяснить, что она вам говорит. Отчасти это будет очевидно: если вам интересно, кто пользуется этим общественным парком, о котором мы говорили ранее, и ваше наблюдение говорит вам, что это в основном молодые люди, у вас есть ответ на свой первоначальный вопрос. Ваши следующие вопросы могут заключаться в том, почему другие группы не так часто используют парк и удерживает ли тот факт, что он в основном используется молодыми людьми, других.Когда вы ответили на эти вопросы, возможно, вы создали другие или у вас есть основа для планирования кампании по привлечению большего числа людей в парк.
Составьте и выполните план решения проблемы или проблемы, которую вы определили или беспокоили.
Последний шаг здесь — использовать информацию и анализ, полученные в результате использования вами качественных методов, для изменения сообщества к лучшему. Всякая оценка в мире бесполезна, если она не приводит к какому-либо действию, которое призвано вызвать положительные изменения.
Резюме
Качественные методы сбора информации — такие методы, как интервью, наблюдение, фокус-группы и собрания сообщества, которые не всегда дают результаты, которые можно свести к цифрам, или которые используются для сбора информации, которую трудно получить с помощью количественных методов. — часто чрезвычайно полезны при оценке сообщества, особенно когда используются вместе с количественными методами, которые действительно дают числовые результаты.