Статистическое наблюдение
Статисти́ческое наблюде́ние, системно организованный процесс получения (сбора) искомых массовых данных для последующей работы с ними – обработки, публикации и анализа. В наиболее широком смысле различают первичные и вторичные статистические наблюдения. В ходе первичного наблюдения данные собирают по специально организуемым программам и регистрам проведения единовременных (переписи) и текущих (отчётность) обследований, осуществляемых, как правило, по официально утверждённым формам. К данным такого наблюдения относятся, например, показатели бухгалтерского, налогового, таможенного, финансового учёта.
Первичные данные собираются непосредственно наблюдателями на единовременной, периодической или регулярной (непрерывной) основе. Статистические наблюдения обычно проводятся уполномоченными органами государственной статистики, а полученные данные (в большинстве стран мира) квалифицируются как данные административной статистики.
В процессе вторичного наблюдения данные собирают путём проведения опосредованных обследований и приближённых расчётов, как правило, на разовой, прерывной или нерегулярной основе с ограниченным (выборочным или эксклюзивным) охватом наблюдаемых объектов и признаков по частным программам или индивидуальным заказам отдельно взятых компаний, неправительственных, научно-исследовательских, религиозных и других организаций. Данные такого статистического наблюдения характеризуются как данные корпоративной статистики. Традиционно данные административной статистики, как контролируемые и универсальные, котируются выше, чем данные корпоративной статистики, так как отвечают известным (установленным) требованиям (критериям) полноты, достоверности и надёжности.
Для обеспечения полноты, достоверности и своевременности сбора данных статистические наблюдения должны быть научно организованными, что обеспечивается с помощью рациональных методологических программ и организационного плана их проведения. Кроме организационных вопросов, связанных с учётом данных, охватом и составом единиц, сроков и моментов наблюдения, порядком регистрации и хранения собранных данных, программы сбора последних предусматривают решение следующих трёх групп методологических вопросов, которое предшествует самой работе по сбору данных: определение целей и задач наблюдения; выбор адекватных инструментальных методов наблюдения; формализация данных статистического наблюдения по происхождению, единицам учёта, отчётности и единицам хранения, классификаторам и системам показателей данных, их контроля и анализа по критериям получения.
Типология
По степени охвата наблюдаемых данных различаются сплошные и несплошные статистические наблюдения. В рамках первых выделяют и чаще всего используют следующие формы: отчётность как наиболее распространённая форма непрерывного сплошного наблюдения (в большинстве стран мира обязательная форма сбора, идентификации и представления данных); переписи и другие специально организуемые статистические обследования, проводимые одновременно или на периодической основе (как, например, переписи населения 1 раз в 10 лет или переписи отдельных видов деятельности 1 раз в 5 лет).
Несплошные наблюдения (все они относятся к опосредованным и прерывным) подразделяются на подвиды: наблюдения основного массива; выборочные; монографические. Выборочные обследования в зависимости от порядка отбора единиц и признаков наблюдения, по которым даётся характеристика генеральной совокупности, подразделяются на следующие виды:
собственно-случайные, основанные на принципах лотереи, жеребьёвки или других началах случайного отбора;
интервальные, основанные на принципах механического отбора наблюдаемых единиц;
типологические, основанные на распознавании образов или содержательной классификации необходимых объектов;
серийные, предполагающие отбор не отдельно взятых единиц, а их совокупности (серий).
Предельным случаем выборочных наблюдений является наблюдение основного массива.
В зависимости от того, как отбираются единицы наблюдения и их признаки, в составе отдельно взятых выборочных наблюдений различают: повторные наблюдения, при которых отбираемые единицы и их признаки после их идентификации возвращаются в исходный массив генеральной совокупности данных; бесповторные наблюдения, при которых отобранные единицы не возвращаются в исходный массив.
Среди специальных форм статистического наблюдения, кроме широко распространённых анкетных обследований, наиболее важными являются непараметрические наблюдения, неформальные наблюдения и наблюдения виртуальных явлений. Наблюдения непараметрических явлений выражаются, как правило, не в натуральных, а в условных (нарицательных) цифрах, оценках, баллах и т. д. Пример неформальных статистических наблюдений – наблюдения неидентифицируемых или скрываемых объектов и процессов теневой, незаконной или неучитываемой экономики. Такие наблюдения представляют предмет отдельного анализа, связанного с комбинированным применением косвенных методов как параметрической, так и непараметрической статистики, в результате которых получают приближённые оценки, требующие, как правило, непрерывного уточнения и критического подхода.
Наблюдения виртуальных явлений – предмет компьютерного моделирования, основанного на использовании разного рода эвристических алгоритмов теорий игр и массового обслуживания, требующих применения многомерных методов иерархических, гибридных, робастных и нечётких систем высокого разрешения, недоступных для других методов.
Недостатки метода
Статистические наблюдения сопровождаются ошибками, которые объясняются множеством причин, в том числе случайностью или умыслом. Эти ошибки подразделяются на случайные, совершаемые непредумышленно и распределяемые, как правило, равномерно по всей совокупности наблюдаемых данных, и неслучайные, совершаемые умышленно в целях искажения данных путём их фальсификации, подтасовки, подлога, приписки и множества других форм их сокрытия, преувеличения или преуменьшения.
Априори данные сплошных наблюдений являются более полными и востребованными, чем данные несплошных наблюдений. Однако не доказано, что и данные сплошных наблюдений, как наиболее достоверные, не искажаются, в том числе умышленно. Не является фактом и то, что данные сплошных наблюдений всегда более достоверны, чем данные, которые получены в результате выборочных обследований.
Идеально приемлемых форм статистического наблюдения нет; каждая из них имеет свои преимущества и недостатки, и выбор конкретной формы определяется целями и условиями наблюдения. Отчётность и сплошные наблюдения при прочих равных условиях обеспечивают высокую точность и полноту данных, но требуют при сопоставимых условиях в расчёте на единицу полезной информации намного больше затрат сил и средств, чем несплошные наблюдения.