Ошибки статистического наблюдения схема

2.4. Точность статистического наблюдения

Под точностью статистического наблюдения понимают степень соответствия значения наблюдаемого показателя, вычисленного по материалам обследования, его действительной величине. Расхождение, или разница, между ними называется ошибкой статистического наблюдения.

Различают две группы ошибок:

1. ошибки регистрации;
2. ошибки репрезентативности.

Ошибки регистрации присущи любому статистическому наблюдению, как сплошному, так и несплошному. Они делятся на случайные ошибки регистрации и систематические ошибки регистрации.

Случайными ошибками регистрации называют ошибки, возникающие вследствие действия случайных факторов. К ним можно отнести различного рода непреднамеренные описки: например, вместо возраста человека «15 лет» указано «5 лет», у Ивановой Марии Петровны в графе пол отмечен «Мужской» и т. п. Такие ошибки легко выявляются методом логического анализа, например, если человеку 8 лет, но имеется высшее образование, а в графе «Семейное положение» указано «Состоит в браке», то, естественно, следует исправить возраст. Если объем исследуемой совокупности велик или велика доля отбора при выборочном наблюдении, случайные ошибки регистрации имеют тенденцию взаимопогашаться вследствие действия закона больших чисел, поскольку ошибки, как правило, разнонаправлены и искажают статистический показатель как в большую, так и в меньшую сторону. При небольшом объеме наблюдения требуется тщательная выверка его результатов — логический анализ данных.

Систематические ошибки регистрации чаще всего имеют однонаправленные искажения: они либо увеличивают, либо уменьшают статистический показатель, и, что характерно, подобная ситуация повторяется от обследования к обследованию. Так, по результатам переписей (практически всех!) число замужних женщин превышает число женатых мужчин — мужчинам приятнее ощущать себя неженатыми, а для женщины как бы «стыдно» быть не замужем. Другой пример, когда человек округляет свой возраст — вместо 32 лет говорит 30, вместо 79-80 и т. п. (это явление широко известно и даже получило свое название — «аккумуляция возрастов»). Систематические ошибки регистрации могут возникать и из-за неточностей измерительных приборов, если сбор информации проводят путем непосредственного наблюдения.

Ошибки репрезентативности присущи только несплошному обследованию. Они также делятся на случайные и систематические ошибки.

Случайные ошибки репрезентативности возникают из-за того, что обследованию подвергается не вся совокупность в целом, а только ее часть, и, следовательно, при несплошном наблюдении они присутствуют всегда. В теории статистики разработаны специальные методы для оценки величин таких ошибок, на их основе для наблюдаемых показателей строят доверительные интервалы, т.д. эти ошибки вычисляются и находятся как бы «под контролем».

Хуже обстоит дело, если наряду со случайными ошибками имеются и ошибки систематические.

Систематические ошибки репрезентативности возникают, если при несплошном наблюдении кардинально нарушаются технологии отбора единиц из генеральной совокупности объектов, но чаще — если в ходе обследования не удается получить информацию обо всех отобранных для наблюдения единицах, например, вследствие отказа отвечать на вопросы анкеты, или если человека не удалось застать дома и т. п.

Ошибки статистического наблюдения для наглядности можно изобразить в виде схемы (рис. 2.1).

Для повышения точности наблюдения необходимо:

1. правильно разработать формуляр статистического наблюдения: вопросы должны быть четкими, однозначными, не допускающими двойного толкования;
2. иметь хорошо обученный персонал для проведения обследования;
3. строго придерживаться выбранной технологии обследования (если проводится несплошное наблюдение) и помнить, что если не удается опросить какую-то конкретную единицу, отобранную для наблюдения, замена ее на другую единицу может привести к возникновению систематической ошибки репрезентативности;
4. провести логический анализ данных, основанный на логических взаимосвязях показателей, после сбора всей совокупности анкет или формуляров;
5. целесообразно провести и арифметический контроль данных, т.д. заново пересчитать расчетные величины, если какие-либо показатели получаются в результате определенных арифметических действий;
6. предпринять определенные меры по восстановлению данных при наличии незаполненных анкет или формуляров либо при получении результатов обследования сделать поправку на неответы респондентов.

Как уже отмечалось выше, одним из критериев качества статистических данных является их достоверность. Уровень достоверности связан с количеством ошибок, которые могут возникнуть в процессе статистического производства; чем больше количество ошибок, тем ниже достоверность.

Оценка ошибки измеряемого параметра совокупности включает в себя как ошибку выборки, которая возникает из-за того, что наблюдается только часть, а не вся генеральная совокупность, так и ошибки, не связанные с выборкой, и представляет собой разницу между оценкой и истинным значением параметра.

Для всех типов статистического наблюдения ошибки, не связанные с выборкой, возникают при планировании, сборе и обработке данных, расчете конечных оценок. Ошибки, не связанные с выборкой, могут возникнуть из-за целого комплекса проблем, например, ошибок, которые допустил исследователь или интервьюер, неточностей ответов респондентов, концептуальных или логических ошибок, отклонений в процессе редактирования, кодирования, классификации и анализа данных.

Классификация ошибок при планировании наблюдения, сборе и обработке статистических данных представлена на схеме ниже.

Ошибки, возникающие при планировании статистического наблюдения, прежде всего, вызваны плохим качеством основы выборки. Ошибки, возникающие при сборе статистических данных, делятся на ошибки измерения и ошибки, связанные с отсутствием ответов. Ошибки измерения возникают в данных статистического наблюдения из-за: метода сбора статистических данных, умышленных или неумышленных ошибок респондента или интервьюера, инструментария статистического наблюдения, информационной системы, хода проведения интервью. Данная ошибка включает:

ошибку в ответе наблюдения — как результат затруднения, незнания, небрежности или нечестности респондента;

ошибку (присущую интервьюерам), являющуюся следствием плохого или неадекватного обучения, предварительно ожидаемой оценки ответа респондента или преднамеренных ошибок;

ошибку, относящуюся к формулировке и контексту вопросов формы, порядку, в котором они представлены, или методу, используемому для получения ответа.

Ошибки, связанные с отсутствием ответов, возникают вследствие невозможности получить ответ на вопрос статистического наблюдения.

Неответы являются причиной увеличения дисперсии оценки из-за уменьшения объема выборки и/или применения методов замещения данных. При этом существуют как полные, так и частичные неответы. Полный неответ представляет собой полное отсутствие в файле с первичными данными результатов обследования по единице наблюдения. Частичный неответ — отсутствие данных не в целом по единице наблюдения, а лишь по конкретным пунктам вопросника.

Ошибки, возникающие при обработке статистических данных, могут возникать на всех стадиях обработки: кодировании, редактировании, взвешивании, агрегировании и т.д.