Дорогие коллеги!

I. Для начинающих исследователей предлагаю подборку материалов в PDF-формате по курсу «Педагогическое исследование»

1. Замысел педагогического исследования
2. Системный подход в педагогическом исследовании
3. Моделирование педагогического процесса
4. Моделирование в педагогическом исследовании
5. Опытно-экспериментальная работа в педагогическом исследовании
6. Педагогические технологии

II. В связи с многочисленными замечаниями ВАК РФ по использованию эмпирических материалов в диссертационных исследованиях, предлагаю свои заметки на эту тему.

Эмпирические данные
в педагогическом исследовании

Николай Михайлович БОРЫТКО,
доктор педагогических наук, профессор

Источники эмпирических данных

§  Опыт (наблюдения и деятельности).

§  Эксперимент (диагностический и формирующий).

Различие опыта и эксперимента

Оба способа направлены на получение знания, т.е. объективной, систематизированной и инструментальной информации о педагогической действительности, помогающей рационально организовывать педагогическую деятельность и решать различные проблемы, возникающие в ее процессе. Научному знанию присущи логическая обоснованность, доказательность, воспроизводимость познавательных результатов.

Эмпирические знания получают в результате применения эмпирических методов познания — наблюдения, измерения, эксперимента. Это знания о видимых взаимосвязях между отдельными событиями и фактами в предметной области. Они, как правило, констатируют качественные и количественные характеристики объектов и явлений [Википедия].

Опытное знание получается в результате наблюдения реальной практики. В процессе наблюдения мы изучаем явления в естественном виде. Опыт субъективен, он «привязан» к конкретным условиям и особенностям педагога.

В эксперименте проверяется справедливость той или иной предварительно выдвинутой гипотезы. При этом происходит апробация модели, т.е. ее проверка, испытание с целью объективной оценки достоверности и выявление условий эффективности. Эксперимент выявляет технологические условия.

Моделирование и опытно-экспериментальная работа

В педагогическом исследовании интегрируются его теоретическая и эмпирическая составляющие: теоретическое моделирование предшествует и завершает получение эмпирического материала. Однако модель по-разному используется в опыте и эксперименте:

§  в опыте модель используется для анализа, интерпретации и оценки данных (данные сопоставляются с моделью);

§  в эксперименте модель является также основой для отбора исходных условий, постановки цели, отбора средств и управления процессом.

Опытные данные

1)     Опыт наблюдения за обучаемыми/воспитанниками.

2)     Наблюдения опыта педагогической деятельности.

Представление опыта наблюдений

§  На основании ранее выделенных сущностных характеристик исследуемого свойства.

§  Для иллюстрации его функций и/или структурных компонентов.

§  Включает в себя: время, место, условия наблюдения, критерии выбора наблюдаемого, описание процедуры наблюдения, наблюдаемых проявлений, их интерпретацию.

§  Могут быть использованы данные, полученные другими авторами (из рукописей, диссертационных исследований, отчетов, СМИ, научной и методической литературы, художественных произведений).
При этом следует указать источник.

Опытная работа

§  Эмпирический (путем «проб и ошибок») поиск эффективного содержания, методов и организационных форм педагогической деятельности.

§  Известно начальное состояние системы и ее желаемое конечное состояние, но не известны заранее способы получения результата.

§  В отсутствие теоретической модели является единственным способом поиска эффективных путей достижения результата.

Представление наблюдения опыта педагогической деятельности

§  На основании разработанной модели формирования/развития/становления исследуемого свойства.

§  Для выделения эффективных педагогических средств и условий, которые могут быть использованы при проектировании экспериментальной методики.

§  Включает в себя: время, место, условия наблюдения, критерии выбора наблюдаемого педагога, описание процедуры наблюдения, наблюдаемых действий педагога, реакции на эти действия обучаемых/воспитанников, их интерпретацию и оценку.

§  Могут быть использованы материалы квалификационных работ педагогов, публикации с описанием педагогического опыта. Ссылка на источник получения данных обязательна.

Описание эмпирических наблюдений в американских исследованиях

Кто присутствует? Как бы вы охарактеризовали их? Какую роль они играют в группе? Как они вошли в группу? Чем объяснеяеся их членство в этой группе? Кто организует или руководит группой?

Что происходит? Что люди делают и говорят, и как они ведут себя? Как начиналось это взаимодействие/деятельность? Что привычно? В какой степени включены различные участники? Каков тон их общения? Какой невербальный язык используется?

Когда происходит эта деятельность? Как она соотносится с другой деятельностью или событиями? Как долго длиться событие? Что делает его своевременным (несвоевременным)?

Где же это происходит? Как обстановка влияет на происходящее? Может и это произойти в иной обстановке? Используют ли участники пространство или физические объекты по-разному?

Почему это происходит? Что вызвало это событие? Очевидны ли различные точки зрения на то, что происходит? Что способствует протеканию события таким образом?

Как организована эта деятельность? Каким образом фрагменты происходящего связаны друг с другом? Какие правила или нормы очевидны? Как эта деятельность соотносится с другими аспектами установление такой деятельности или группа?

[Grabtree, B. F. & Miller, W. L. (1999). Doing qualitative research.
Thousand Oaks: Sage Publications]

Экспериментальные данные

1)     Диагностический эксперимент.

2)     Формирующий эксперимент.

Диагностический эксперимент

На основании структурно-динамической (уровневой/стадийной) модели исследуемого свойства.

С целью отбора минимально необходимого пакета диагностических критериев, показателей и методик для проведения формирующего эксперимента; для выявления факторов и педагогических/дидактических условий развития исследуемого свойства.

Отвечает на вопросы: Кто? Что? Когда? Где? Как? И почему?

Включает в себя:

1)     планирование диагностики: выделение диагностических критериев (не менее трех на каждый диагностируемый компонент), показателей (не менее трех на каждый показатель) и методик, обоснование последовательности проведения диагностических методик;

2)     описание диагностических процедур: время, место, обстоятельства, выборка и способы ее отбора, корректировка последовательности и процедуры диагностирования в зависимости от получаемых данных;

3)     обработку данных: полученные «сырые» данные, их классификация, статистическая обработка, табличное и/или графическое представление, интерпретация, выводы.

Планирование диагностики

Нередко удобнее за основу отбора методик удобнее взять структурно-функ­цио­нальную модель исследуемого свойства. В этом случае таблица будет выглядеть следующим образом:

Отбор диагностических методик

§  Одна методика может диагностировать несколько показателей и показатели могут перепроверяться разными методиками.

§  Диагностические методики берутся в готовом виде с указанием на источник (автора методики), корректируются или разрабатываются свои.

§  В случае корректировки или разработки собственной методики (теста) должно быть представлено обоснование вносимых корректив, а также доказательства сохранения ее валидности, надежности, репрезентативности и достоверности.

Валидность  – это устойчивость результатов теста к систематическим искажениям со стороны посторонних свойств. Высокая валидность свидетельствует о соответствии методики измеряемому свойству. Для определения степени валидности необходимо сравнить результаты теста с некоторым критерием, который является источником заведомо более валидной информации об измеряемом свойстве.

Надежность теста – это устойчивость тестовых показателей относительно случайных, «шумовых» факторов или относительно объекта измерения.

Репрезентативность (представительность) данных – это устойчивость распределения при переходе от выборки стандартизации к выборке популяции. Признаком такой устойчивости является нормальное распределение данных.

Достоверность – это устойчивость результатов теста по отношению к фальсификации, т.е. сознательным или бессознательным мотивационным искажениям результатов со стороны испытуемого. К таким искажениям относится склонность давать социально одобряемые ответы.

Материалы диагностического эксперимента

1.     Перечень заимствованных диагностических методик с указанием их авторов и источников, где они описаны. В  тексте диссертации достаточно указать цели и специфику применения таких методик.

2.     Описания модифицированных и авторских методик. По модифицированным методикам указать источник, откуда получена взятая за основу методика.

3.     По каждой проведенной методике должны быть собраны все материалы (например, опросник и заполненные анкеты, протоколы наблюдений или тестовые материалы или указание на место их хранения), а также их обработка (сводные таблицы, классификация данных, их статистическая обработка).

4.     В диссертации или приложении к ней приводится лишь обработка данных. В приложениях могут быть приведены и «сырые» данные. В этом случае фамилии испытуемых шифруются так, чтобы они не могли быть понятны тем, кто с ними знаком.

5.     В автореферате дается указание на наличие соответствующих материалов в диссертационном тексте и выводы из анализа этих данных (если сами процедуры диагностики и анализа не являются предметом исследования).

Выводы диагностического эксперимента

§  Обобщение данных может быть в монографических характеристиках.

§  Монографические характеристики содержат описание уровневых проявлений исследуемого свойства, внутренних факторов и внешних (педагогических/дидактических) условий его формирования.

§  Обобщение монографических характеристик может быть проведено представлено в следующей таблице:

Вариант получения диагностических данных

Вместо проведения диагностического эксперимента можно проанализировать статистические и диагностические данные, полученные другими авторами.

При этом должны быть гарантированы их валидность, надежность, репрезентативность и достоверность.

Диагностика может быть проведена психологическими или социологическими службами или лабораториями (например, в рамках комплексного исследования). Этот факт отражается в тексте диссертации и автореферата. В этом случае вместо экспериментальных данных используются результаты такой диагностики.

Анализ данных проводится на основании авторской концепции диссертанта, в соответствии с предметом его исследования. Если анализ проведен не самим автором, его выводы на защиту не выносятся.

Формирующий эксперимент

§  Фрагментарный — проверка отдельных средств, их сочетания, принципов деятельности.

§  Системный — проверка экспериментальной методики.

Те же, что и при диагностике, вопросы: Кто? Что? Когда? Где? Как? И почему?

Фрагментарный формирующий эксперимент

На основании предварительного анализа педагогического/формирующего потенциала проверяемого средства или выявленной закономерности, положенной в основу проверяемого принципа.

С целью проверки эффективности проверяемого средства или принципа.

Включает в себя:

1)     планирование: разработка и обоснование последовательности действий или применения отдельных педагогических средств, выделение показателей и методов оценки эффективности этих действий, разработка способов корректировки педагогического процесса;

2)     описание процедур: время, место, продолжительность эксперимента, значимые обстоятельства его проведения, критерии выбора экспериментальной и контрольной групп, экспериментальные действия, их результативность (реакция обучаемых/воспитанников), корректировка деятельности педагога;

3)     обработку результатов: оценка эффективности проверяемого средства/принципа в формировании исследуемого свойства и места в системе других средств/принципов.

Замена формирующего эксперимента

Вместо формирующего эксперимента можно использовать концептуальный анализ эффективного педагогического опыта.

В этом случае выборка должна быть достаточной для того, чтобы обосновать выявленные причинно-следственные связи между применяемыми средствами и получаемыми результатами на уровне закономерности.

Системный формирующий эксперимент

На основании модели экспериментальной методики.

С целью проверки эффективности экспериментальной методики и отработки ее технологических основ.

Устойчивая повторяемость связей между эмпирическими характеристиками выражается с помощью эмпирических законов, часто носящих вероятностный характер. Поэтому статистический анализ экспериментальных (эмпирических) данных позволяет оценить степень достоверности выявленных закономерностей.

Включает в себя:

1)     планирование: выделение и обоснование логики этапов деятельности, целевых установок каждого этапа, определение применяемых на каждом этапе средств, диагностируемых результатов каждого этапа и методики в целом, способов диагностики и мониторинга педагогического процесса;

2)     описание процедур: время, место, продолжительность эксперимента и каждого его этапа, значимые обстоятельства его проведения, критерии и процедуры выбора экспериментальной и контрольной групп, последовательное описание применяемых на каждом этапе средств, их результативности, коррекции деятельности педагога;

3)     обработку данных: выделение наиболее результативных средств и логики их применения, а также условий технологичности экспериментальной методики.

Материалы формирующего эксперимента

§  Списки экспериментальной и контрольной групп (фамилии шифруются) с указанием изменения уровней исследуемого свойства.

§  Табличные данные диагностики исследуемого свойства по этапам эксперимента.

§  Графическое представление динамики формируемого свойства.

§  Статистический анализ данных (может быть проведен специалистами по заявке диссертанта).

§  Описание фрагментов экспериментальной работы с указанием места, времени, продолжительности, состава участников и значения в экспериментальной методике.

§  Сценарии педагогических ситуаций; программы; планы; разработки уроков и иных мероприятий, реализованных в процессе эксперимента, с указанием даты и места их проведения, состава участников.

§  Акты, справки, фотоматериалы, ксерокопии публикаций газет и журналов (с указанием выходных данных), распечатки web-страниц (с указанием адреса), описывающих экспериментальную работу.

Часть этих материалов включается в диссертационный текст. Остальные даются в приложениях.

В автореферат входят лишь итоговые таблицы и графики/диаграммы, перечень применяемых методов статистического анализа и его результаты, а также указание на наличие остальных материалов в тексте диссертации или в приложениях к ней.

Место опытно-экспериментальной работы в педагогическом исследовании

1. Структурно-содержательная модель исследуемого свойства.

2. Анализ опыта наблюдений за обучающимися /воспитанниками.

3. Построение динамической модели исследуемого свойства.

4. Диагностический эксперимент.

5. Отбор содержания образования.

6. Анализ опыта педагогической деятельности.

7. Построение нормативной модели педагогической деятельности.

8. Формирующий эксперимент.

9. Технологическая модель педагогической деятельности.

Благодарности за помощь

Проф. Н.К. Сергееву (Волгоградский государственный педагогический университет)

Проф. И.А. Соловцовой (Волгоградский государственный педагогический университет)

Доц. И.Ф. Бережной (Воронежский государственный университет)

Доц. И. Горловой (Восточно-Мичиганский университет)