Данные, анализ и границы вывода
Что мои данные действительно позволяют утверждать, а чего они пока не доказывают?
Собираем материал по одной процедуре
До сбора определи единицу наблюдения: участника, попытку, документ или событие. Укажи, кого и что удалось включить, как выбирались случаи и какие условия соблюдались. Доступная группа не обязательно представляет всех возможных пользователей. Записывай пропуски, отказы и изменения процедуры, иначе картина может оказаться удобнее, чем действительность.
Сохраняй исходные записи отдельно от исправленной таблицы. При очистке данных объясняй каждое исключение: повтор, невозможное значение, неполную запись. Не удаляй неудобный результат только потому, что он портит ожидаемый вывод. Для текстовых ответов создай понятные категории и проверь, одинаково ли применяются их определения к разным случаям.
Числа и качественные наблюдения
Описательные показатели кратко представляют полученный материал: количество случаев, долю, среднее, медиану, диапазон. Указывай исходное число наблюдений, единицы и правило расчёта. Процент без размера группы легко создаёт ложное впечатление масштаба. График должен иметь подписи и понятную шкалу; выразительное оформление не заменяет корректного представления данных.
Числа стоит сопоставлять с содержанием наблюдений. Одинаковое время выполнения может сопровождаться разными затруднениями, а среднее скрывает отдельную очень долгую попытку. Короткие обезличенные описания помогают понять механизм ошибки. Разделяй сообщение участника, своё наблюдение и интерпретацию: они дополняют друг друга, но не являются одним и тем же свидетельством.
Связь не равна доказанной причине
Если после изменения инструкции результат улучшился, возможны разные объяснения: повторная попытка, иной состав участников, помощь наблюдателя или новое расположение материалов. Одно сравнение не устанавливает причинность автоматически. Для сильного причинного вывода нужен подходящий дизайн проверки; при его отсутствии честно сообщай наблюдаемое различие и рассматривай альтернативные объяснения.
Вывод должен отвечать на исходный вопрос и оставаться в границах материала. Отдели подтверждённое, предположительное и неизвестное. Маленькая учебная проверка полезна для исправления продукта, но не доказывает универсальную эффективность. Не требуй подтверждения гипотезы любой ценой: неподтверждённое предположение тоже даёт содержательный результат, если метод и ограничения показаны открыто.
Условный пример: четыре попытки и осторожный вывод
В вымышленной пробной проверке четыре участника выполняли задание 40, 50, 60 и 90 секунд. Среднее равно 60 секундам, медиана — 55. Трое выполнили задание без подсказки: это 3 из 4, или 75%. Запись «3 из 4» сразу показывает небольшой масштаб проверки.
Автор дополнительно описывает, на каком шаге потребовалась помощь. Он может сказать: «В этой пробной группе один участник затруднился на втором шаге». Нельзя утверждать, что схема подходит 75% всех школьников или что именно схема вызвала улучшение без соответствующего сравнения. Все числа здесь учебные, не результаты реального опроса.
На что обратить внимание
- Показывать процент без числа случаев и выдавать удобную группу за всех пользователей.
- Удалять необычные ответы без объяснения или менять правила наблюдения незаметно для читателя.
- Объявлять причиной любое различие между группами или улучшение после изменения продукта.
Сделай проверяемый анализ своего материала
Запишите своё решение, затем сравните его с разбором. Развёрнутые ответы автоматически не оцениваются.
Открываем задания…
Проверь решение
Закрепление материала
Мини-тест
Выберите ответ на каждый вопрос. Объяснения откроются после проверки.
Открываем мини-тест…
Словарь урока
- Единица наблюдения
- Один случай, о котором собирается запись: например, участник, попытка или документ.
- Выборка
- Набор случаев, фактически включённых в работу; его состав ограничивает возможные обобщения.
- Медиана
- Серединное значение упорядоченного числового ряда; при чётном числе значений — среднее двух серединных.
- Причинность
- Отношение, при котором изменение одного условия вызывает изменение другого; простое совпадение или последовательность событий этого не доказывает.