Валидность психологического эксперимента

Тип закономерностей, устанавливаемых в социально-психологических исследованиях, обычно задан формулировками популяционных гипотез, заведомо утверждающих связи последующих обобщений с анализом реальных условий жизнедеятельности людей и реальной принадлежностью испытуемых к определенным социальным группам. В таких исследованиях может подразумеваться сочетание динамических, детерминистских и собственно вероятностных закономерностей.

Путь от защищаемого теоретического понимания каузальной зависимости к эмпирически наполненным утверждениям (как экспериментальной и контргипотезам) и означает реализацию этапов содержательного планирования. Это верно, если не рассматриваются еще две проблемы: конкурирующих объяснений зависимости при тех же компонентах методического воплощения эксперимента и повышения уровня обобщения зависимости на основе проведения разных экспериментов, отличающихся именно по компонентам методического воплощения переменных.

Обе указанные проблемы могут, в свою очередь, включать решение вопросов о представленности в той или иной методической процедуре возможности измерения не только психологической переменной, но и соответствующего ей психологического конструкта. Эти решения будут также учитывать элементы формального планирования, поскольку психологические измерения всегда будут иметь приближенный характер. Ошибка измерений должна учитываться как основание установления разных зависимостей при некотором разбросе данных. Вероятностный характер оценки вида эмпирически установленной зависимости определяет ту проблему, что всегда будет оставаться открытым вопрос о возможности переинтерпретации того гипотетического конструкта, который связывался с базисным процессом, реконструируемым по значениям ЗП.

Какое бы психологическое понятие ни использовал экспериментатор при формулировке каузальной зависимости, он обязательно оказывается перед необходимостью выбора из ряда возможных методических средств, уже разработанных для эмпирической репрезентации изучаемых базисных процессов (психического отражения, психической регуляции, психических свойств и т.д.), или создания новых методик, если для представления интересующих его переменных таковые пока отсутствуют. Разработка методического арсенала, в свою очередь, предполагает возникновение и возможность проверки новых психологических гипотез. Поэтому этапы содержательного планирования могут быть представлены как обоснования тех или иных специальных методик, т.е. могут быть вынесены в другие работы, результаты которых уже будут использоваться при реализации экспериментальных планов.

Под формальным планированием также имеется в виду выбор плана исследования, или экспериментальной схемы. Однако при выделении этапа содержательного планирования выбор планов как форм экспериментального контроля нельзя представить только на уровне сравнения их преимуществ между собой и с точки зрения возможностей последующих обобщений.

Например, как показал X. Хекхаузен, реконструкция базисного процесса, стоящего за изменениями ЗП, в экспериментальных исследованиях мотивации определяет разные соотношения между понятиями «мотив» и «мотивация» в построении схем, реализующих разные предположения о причинном характере действия побудительных факторов. Если «мотив» связывается с факторами ситуации, то исследовательский план будет предполагать реализацию соответствующих воздействий для актуализации мотивационных состояний. В случае если отличия в мотивации связываются с присущими личности диспозициями, то способом планирования исследования станет подбор групп, предполагающих функциональный контроль этих скрытых (латентных) мотивационных диспозиций.

При использовании одних и тех же интраиндивидуальных схем в рамках психофизического эксперимента переход от пороговых к надпороговым диапазонам изменения стимуляции, т.е. от фехнеровских к стивенсовским методикам построения субъективных шкал ощущений, означал содержательное изменение понимания получаемых количественных зависимостей. Одновременно изменился и процедурный способ установления психофизических зависимостей. «Фехнеровский» испытуемый должен был доверяться своим ощущениям, и классические методики измерения пороговой чувствительности включали предположения об одинаковых «отрезках» прироста ощущений на субъективной шкале. Стивенсовские методики построения психологических шкал предполагали возможность опосредствования субъективного ряда прямыми оценками его величин, и «стивенсовский» испытуемый выносил количественные суждения об отношениях между ощущениями.

Аналогично в любой области психологических знаний можно проследить взаимосвязи изменений исследовательских подходов и стоящих за ними способов реконструкции психологической реальности, с одной стороны, и относительную автономность использования экспериментальных схем - с другой. Содержательное планирование не заменяет собой, а предполагает переход к этапу формального планирования. Формальное планирование обычно выносится за скобки содержательного планирования только в той его части, где методические тонкости обоснования схемы не влияют принципиально на понимание изучаемых явлений или процессов. Даже решение о том, проводить ли межгрупповой или интраиндивидуальный эксперимент, включает оценку возможности последующих обобщений представленной в гипотезе зависимости.

Для измерения порогов ощущений выбор индивидуальной схемы адекватен, поскольку речь идет о чувствительности конкретного человека. Однако уже гипотеза о возможности распределения внимания (она предполагает отсутствие снижения продуктивности выполнения первой задачи при одновременном выполнении второй) может предполагать как сугубо индивидуальную направленность обобщения, так и «среднегрупповую» закономерность, допускающую использование межгрупповых схем проведения эксперимента.


2.3 Зависимость обобщения от типа проводимого эксперимента

Итак, выбор экспериментальных планов как схем задания уровней НП связан с содержанием гипотезы и предполагаемыми возможностями обобщения исследуемой зависимости. Оценке возможностей обобщения с точки зрения достижения в эксперименте хорошей внешней или операциональной валидности (этот вид валидности рассматривается как аналог внешней валидности для лабораторного эксперимента) в этом подходе уделяется серьезное внимание. Поэтому чисто формальным такой подход к планированию назвать нельзя. Содержательные аспекты обсуждения каузальной зависимости, постулируемой в психологической гипотезе, становятся как бы неважными при проводимом анализе преимуществ и недостатков экспериментальных схем как планов контроля угроз валидности.

Полученная при использовании интраиндивидуальных схем зависимость характеризует в первую очередь конкретного испытуемого. Она может оказаться нерепрезентативной для группы испытуемых.

Экскурс 3

Так, изменение показателей продуктивности выполнения первого вида экспериментальной деятельности при использовании методики «тест Бурдона», наблюдавшееся в результате сравнения их с аналогичными показателями в ситуации распределения внимания (тот же тест выполняется при наличии второй задачи - подсчете испытуемым низких и высоких звуков), могло трактоваться как индивидуально представленная зависимость. Эта индивидуальность означает в данном случае тот факт, что существуют межиндивидуальные различия по способности к распределению внимания. Усреднение результатов для группы интраиндивидуальных экспериментов здесь возможно только в одном случае: первоначальное выделение всех тех индивидуальных результатов, которые характеризуются общей (и в этом смысле типичной) для них тенденцией. Тогда все те испытуемые, которые не ухудшили показателей по тесту Бурдона при подсчете звуков, считались бы людьми с хорошим распределением внимания, а те, кто ухудшил свои данные по тесту Бурдона при выполнении второй задачи, - людьми с менее выраженной способностью к распределению внимания.

Усреднять данные можно было бы только в отдельности для этих подгрупп испытуемых, характеризующихся в пределах подгруппы одним и тем же типом изменений ЗП.

Психология знает и другие пути обобщения на основе интраиндивидуальных экспериментов. Исследования Г. Эббингаузом закономерностей запоминания бессмысленных слогов, психофизические эксперименты Л. Фехнера или С. Стивенса и многие другие схемы индивидуальных опытов составляли основу обобщений, которые потом повторялись в качестве общих закономерностей для большинства людей, если выполнялись условия идентичности процедурных компонентов проведения опытов и сами испытуемые не отклонялись по своим индивидуальным особенностям так, чтобы их данные служили основой анализа единичного случая.

Последнее, например, имело место в известном исследовании А. Р. Лурией уникальной памяти испытуемого Ш, описанном в «Маленькой книжке о большой памяти».

Перенос полученной в интраиндивидуальном эксперименте зависимости на максимально широкую популяцию (например, на всех людей, обладающих здоровой психикой) возможен при создании таких лабораторных условий, которые предполагают репрезентацию в компонентах методик заданного теорией принципа психологического объяснения. Построение самой экспериментальной модели взаимосвязи НП и ЗП (при очищении условий и контроле ПП) осуществляется при этом таким образом, что обобщение относительно эмпирически устанавливаемого вида зависимости позволяет распространять объяснительную теоретическую модель на все другие случаи актуализации аналогичных базисных процессов. При выполнении требований к оценке внутренней и операциональной валидности соответствующего лабораторного эксперимента широта переноса постулируемой каузальной зависимости определяется предполагаемой степенью адекватности, или соответствия, теоретической модели той психологической реальности, объяснению которой она служит. Таким образом, на основе результатов интраиндивидуального лабораторного эксперимента возможен следующий путь обобщения: сначала на «мир теории», а затем на все те случаи «психологической реальности», которые имеются в виду в представленной теоретической модели.


2.4 Статистические решения и формальное планирование


Формальное планирование как выбор схем сочетается с обоснованием достоверности или значимости получаемых эмпирических результатов. Выделяют следующие задачи формального планирования исследования: обеспечение валидности эксперимента, обеспечение условий для принятия решений об экспериментальном эффекте, или эффекте действия НП, и применение схем обработки данных, адекватных метрике использованных шкал и способу сбора данных. В узком смысле к «планированию эксперимента» относятся два момента, связанные с учетом последующих статистических решений.

Во-первых, обсуждение вопроса о том, как будет оцениваться экспериментальный эффект. Решение может касаться выбора между мерами связи и мерами различий. Статистические меры связи могут быть использованы для установления ковариации между НП и ЗП, а меры различий могут свидетельствовать об отсутствии различий в значениях ЗП между разными экспериментальными условиями. Соответствующие статистические гипотезы уже не включают предположений о за-конообразном действии НП, а формируются только как гипотезы о сравнении выборочных показателей ЗП (средних, дисперсий и т.д.). При одном и том же экспериментальном плане возможно использование разных планов обработки данных. Вид экспериментальной гипотезы иногда подсказывает, какой способ установления экспериментального факта по выборочным значениям ЗП следует предпочесть. Часто одни и те же данные можно обрабатывать разными способами, чтобы убедиться в преимуществах того или иного способа представления полученных зависимостей.

Во-вторых, установление минимального эффекта, достаточного для вынесения суждения о полученных различиях в экспериментальном и контрольном условиях или наблюдаемой связи между изменениями НП и ЗП. Установление минимального эффекта включает также определение вероятности ошибок первого и второго рода (α- и β-уровень). Для β-ошибки принимается общее правило указания процента или возможной вероятности отвергнуть нуль-гипотезу как гипотезу об отсутствии различий или отсутствии связи, когда она верна. Для β-ошибки в силу ее связи с величиной устанавливаемого эффекта такого общего правила нет.

Для установления экспериментального эффекта не всегда требуются статистические решения. Есть эффекты, о которых говорят, что «они бьют в глаза». Иными словами, изменения в значениях ЗП при сравнении разных экспериментальных условий столь велики, что в силу их «очевидности» отпадает необходимость в использовании статистических критериев для оценки их значимости. Есть и другие эффекты, которые обнаруживаются как неочевидные, но статистически значимые сдвиги в значениях ЗП. Здравый смысл или теоретически обоснованные ожидания позволяют принять решение о том, какие изменения в значениях ЗП можно считать достаточными для вывода о результате действия НП.

Величина минимального эффекта связана с количеством опытных данных, т.е. с числом выборочных значений показателей ЗП. Увеличение выборки (числа испытуемых или числа опытов) может существенно снизить величину эффекта, достаточного для принятия решения о действии НП. Однако величина выборки связана и с решением задач содержательного планирования (контроль фактора времени в связи с утомляемостью испытуемых, контроль репрезентативности выборки по отношению к популяции и т.д.). Поэтому ссылка на статистические таблицы, в которых представлены связи величины минимального различия (значений ЗП) и α-уровней значимости применительно к использованию конкретных статистических критериев, не может служить достаточным основанием для определения необходимого числа проб или испытуемых.

Содержательные аспекты, связанные с выбором схем, предполагающих последовательные изменения базисных процессов (применительно к тем же самым субъектам) или возможные одновременные измерения переменных в разных группах испытуемых, определяют выбор планов «параллельного» или «последовательного» экспериментирования. Обсуждение типов распределения выходит за пределы психологических знаний, но психолог так или иначе обосновывает применимость их для установления статистических закономерностей в полученных экспериментальных данных.

Последнее касается практически всех видов использования количественной оценки психологических эффектов. Психолог, переходя на уровень проверки статистических гипотез, начинает работать с выборочными значениями переменных и вероятностными моделями для оценки статистических гипотез, обсуждая или как бы вынося за скобки вопрос о применимости соответствующих моделей с точки зрения содержания переменных.

Например, вопрос о приемлемости использования модели случайного распределения применительно к показателям измерения познавательной потребности человека, измеренной с помощью той или иной психологической методики, решается положительно только для того исследователя, который считает соответствующую базисную переменную познавательной мотивации случайно варьирующей в выборке. Если выборка испытуемых такова, что можно «подозревать» более высокий уровень выраженности познавательной мотивации у всех испытуемых, то модель случайного распределения оказывается неадекватной. Психолог может не иметь предварительных данных о виде распределения измеряемых показателей, но в рамках решения вопросов о применимости тех или иных методов статистической обработки данных он становится на определенные позиции выбора статистических критериев. Формальное планирование и здесь включает оценку содержательной интерпретации данных.

Наконец, под планированием эксперимента могут понимать математическое планирование. Оно начинается с выбора математической модели, описывающей события и взаимосвязи между ними, а также включает указанные ранее моменты определения минимальных эффектов и α-, β-ошибок при отвержении нуль-гипотез.



2.5 Валидность как цель экспериментального контроля


В самом общем случае под валидностью эксперимента подразумевают все формы экспериментального контроля, обеспечивающие валидный, или достоверный, вывод. Однако контроль за выводами осуществляется и за пределами экспериментального контроля. Результаты валидного эксперимента могут служить основанием достоверного вывода, если в целом реализована логически обоснованная система умозаключений, включающая взаимопереходы между разными уровнями гипотез, проверяемых в эксперименте, учтена проблема асимметрии вывода, обоснованы широта и уровень обобщений данных (как переноса выводов за пределы проведенного эксперимента).

Чтобы обсуждать адекватность и обоснованность обобщений, исследователь, во-первых, должен быть уверен, что полученная в проведенном эксперименте зависимость действительно представляет (репрезентирует) подразумеваемое в гипотезе отношение между независимой и зависимой переменными, что не произошло - вольной или невольной - подмены изучаемой закономерности. Любое несоответствие означает угрозу правильности, или валидности, последующих выводов.

Во-вторых, установление экспериментальной зависимости подразумевает, что были устранены все конкурирующие угрозы валидному выводу со стороны смешений НП с побочными или сопутствующими переменными. Если какое-либо условие НП неслучайным образом оказалось связанным с активным уровнем смешивающейся переменной, то неизвестным остается, какой из них - независимой или смешивающейся с ней переменной - следует приписать полученный сдвиг в значениях ЗП (случай, когда при возможности отвергнуть нуль-гипотезу, или при достоверности различий выборочных значений ЗП на выбранном уровне значимости, валидность является плохой и экспериментальный эффект может быть рассмотрен как артефакт).

Если обобщения оказались неправильными, они называются артефактными. Плохой экспериментальный контроль может выступать одним из источников неправильных выводов. Другими словами, невалидный эксперимент приводит к неправильным обобщениям.

Пока не рассматривается, в какой степени выбор конкретной формы эксперимента - экспериментального плана - связан с разработкой системы контроля всех возможных угроз выводу об устанавливаемой зависимости. Отметим только, что экспериментальный план как схема сбора данных, а именно: фиксации ЗП при разных условиях НП, включает и указание других направлений экспериментального контроля (выбор типа переменных, осуществление «первичного» контроля, устранение побочных или стабилизация дополнительных переменных, введение расширенной переменной и т.д.). Более подробное описание этих средств планирования станет возможным в связи с представлением оснований классификаций типов экспериментов и экспериментальных схем (см. далее).

Следует учесть, что формулирование системы гипотез, оценка валидности эксперимента и реализация выводов входят как составляющие общего норматива - избежать угроз валидному выводу.

 


Список использованных источников


1.   Фресс П. Экспериментальный метод: Пер. с франц. Вып. I-II // Экспериментальная психология / Под ред. П. Фресса, Ж. Пиаже. - М.: Прогресс, 2007.

2.       Налимов В.В. Логика принятия гипотез в развитии научного познания // Наука в социальных, гносеологических и ценностных аспектах. - М., 2008.

3.       46. Общий практикум по психологии. Психологический эксперимент. Ч. 1 / Под ред. М.Б. Михалевской, Т.В. Корниловой. - М.: Изд-во МГУ, 2008.

4.       Кэмпбелл Дж. Модели экспериментов в социальной психологии и прикладных исследованиях: Пер. с англ. - М.: Прогресс, 2007. - 390 с.


Страницы: 1, 2, 3



Реклама
В соцсетях
бесплатно скачать рефераты бесплатно скачать рефераты бесплатно скачать рефераты бесплатно скачать рефераты бесплатно скачать рефераты бесплатно скачать рефераты бесплатно скачать рефераты