Исправление и доработка готовой работы
Содержание статьи:
Перед анализом данных для диссертации сохраните исходную выгрузку и сделайте рабочую копию. Присвойте каждой исходной строке постоянный идентификатор или сохраните её номер вместе с именем файла. После сортировки по дате или участнику по этому идентификатору можно будет найти запись, которую вы исправили или исключили.
Запишите в словаре данных, что означает каждый столбец, в каких единицах хранится показатель и какие значения допустимы. Укажите, как обозначаются пропуски. Эти правила помогут проверить, где нарушен формат, где нужно обратиться к первичному документу и какие строки можно использовать в расчёте.
Отличите ноль от пропуска
В учебной таблице исследователь фиксирует посещения участников в каждом месяце. Если журнал посещений за апрель доступен и подтверждает, что участник не пришёл ни разу, в ячейке стоит 0. Если журнал за апрель отсутствует и число посещений неизвестно, это пропуск. В одном месяце было 4 посещения, в другом — 0. Среднее равно 2. При 4 посещениях за один месяц и пропуске за другой среднее по имеющемуся значению равно 4 и описывает только один месяц.
Проверьте, какие коды использованы в выгрузке. Пустая ячейка, прочерк и специальный код могут обозначать разные ситуации. Если причины известны, запишите их в отдельном поле, например «журнал недоступен». При импорте проверьте, что программа распознаёт выбранное обозначение пропуска. Для каждого показателя посчитайте число пропусков и укажите, какие наблюдения вошли в расчёт. Если по плану анализа пропуски заполняются расчётными значениями, опишите этот метод и отметьте, какие значения получены таким способом.
Задайте правило для повторных строк
Сначала определите, что представляет одна строка. В учебной таблице это число посещений одного участника за один месяц. Поэтому ищите повторы по паре «код участника + месяц». Записи P07 за апрель и май сохраняются обе, даже если число посещений одинаково.
Если две строки относятся к одному участнику и месяцу, сравните их с журналом посещений. Когда совпадение подтверждено и вторую строку создал повторный импорт, оставьте одну запись по заранее выбранному правилу, например строку с меньшим исходным номером. Если показатели различаются, сверка с журналом нужна, чтобы установить верное значение. Пока расхождение не разрешено, пометьте пару для проверки и зафиксируйте решение о её включении в соответствующий расчёт.
Проверьте даты и значения
Для дат проверьте, существует ли день в календаре и согласуется ли дата с другими полями. Сверяйте дату с периодом сбора только там, где это предусмотрено планом исследования: например, если в анализ включают визиты только в пределах периода наблюдения. В учебном примере дата 2025-02-29 невозможна, а завершение наблюдения раньше его начала нарушает порядок событий. Запись 03/04/2025 прочитайте по правилам исходной выгрузки. Если в ней принят порядок «день, месяц, год», это 3 апреля. После проверки приведите даты к единому виду ГГГГ-ММ-ДД и пересмотрите несколько значений после импорта в программу анализа.
У числовых полей проверьте тип, единицы и допустимый диапазон. Например, отрицательное число посещений требует сверки, а необычно высокое может оказаться верным. Исправляйте значение, когда его подтверждает первичная запись. Если выяснить верное значение не удалось, отметьте проблему и опишите способ её обработки.
Ведите журнал изменений
Записывайте правки сразу. Для пакетной операции укажите правило, версию рабочей копии и количество затронутых строк. Для отдельной правки сохраните дату, идентификатор строки, поле, прежнее и новое значение, а также основание.
| Дата правки | Строка и поле | Было | Стало | Основание |
|---|---|---|---|---|
| 2025-06-02 | 018, дата начала | 03/04/2025 | 2025-04-03 | Формат выгрузки подтверждён по журналу наблюдений |
| 2025-06-02 | 042, P07 за апрель | Повтор строки 018 | Исключена из рабочей таблицы | Повторный импорт одной записи, сохранена строка 018 |
Перед расчётами повторите проверки на рабочей копии. Сравните число строк и пропусков по каждому полю до и после правок. Если число строк уменьшилось на одну после исключения подтверждённого дубля, журнал должен объяснять это изменение. В методике диссертации укажите версию набора, правила обработки ошибок и пропусков и число записей, вошедших в анализ.
Если нужно уточнить описание обработки данных или доработать таблицы практической главы, обсудите задачу на консультации по доработке готовой работы в «ДисСдал».