Математика/3.Теория вероятности и математическая статистика

Овсянникова А.Г., Щитинина Е.К.

Донецкий национальный университет экономики и торговли имени Михаила Туган- Барановского, Украина

Изучение критериев Колмогорова и омега-квадрат

Решение статистических задач обычно содержит два этапа: предположение о распределении исследуемой случайной величины и изучение этой величины в рамках сделанного предположения. При этом, естественно, необходимо установить, насколько предположения о распределении случайных величин соответствуют экспериментальным данным. Принято ставить вопрос в форме: не вступает ли принятая статистическая модель в противоречие с имеющимися данными. Критерии, решающие такую задачу, называют критериями согласия.

Критериями согласия называют статистические критерии, предназначенные для обнаружения расхождений между гипотетической статистической моделью и реальными данными, которые эта модель призвана описать.

Рассмотрим ситуацию, когда измеряемые данные являются числами, то есть, одномерными случайными величинами, распределение которых может быть полностью описано указанием их функции распределения G(x). Требуется проверить близость теоретической и эмпирической (выборочной) функций распределения.

Пусть имеем выборку размера n. Обозначим истинную функцию распределения, которой подчиняются наблюдения, G(x), эмпирическую (выборочную) функцию распределения – (x), а гипотетическую функцию распределения – F(x). Тогда гипотеза Н₀, что истинная функция распределения есть F(x), записывается в виде:: G(x) = F(x), x. Если верна, то и F должны проявлять определенное сходство, и различие между ними должно убывать с увеличением n (теорема Бернулли). Для выражения сходства функций можно использовать то или иное расстояние между этими функциями. Например, можно определить максимальное различие: = sup │ (x) - F(x)│. Статистику D_n называют статистикой Колмогорова.– случайная величина, поскольку ее значение зависит от случайного объекта . Если гипотеза Н₀ справедлива и n → ∞, то F_n(x) → F(x) при всяком х. Поэтому естественно, что при этих условиях D_n → 0. Если же гипотеза неверна, то F_n → G и G ≠ F, а потому sup │F_n(x) - F(x)│→sup │G(x) - F(x)│. Последняя величина положительна, так как G не совпадает с F. Такое различие в поведении в зависимости от того, верна или нет, позволяет использовать как статистику для проверки.

Как всегда при проверке гипотезы, рассуждаем так, как если бы гипотеза была верна. Ясно, что должна быть отвергнута, если полученное в эксперименте значение статистики D_n кажется неправдоподобно большим. Но для этого надо знать, как распределена статистика D_n при гипотезе Н₀ при заданных n и G. Замечательное свойство D_n состоит в том, что если G = F, т.е. если гипотетическое распределение указано правильно, то закон распределения статистики D_n оказывается одним и тем же для всех непрерывных функций G. Он зависит только от объема выборки n. Доказательство этого факта основано на том, что статистика не изменяет своего значения при монотонных преобразованиях оси х. Таким преобразованием любое непрерывное распределение G можно превратить в равномерное на отрезке [0, 1]. При этом F_n(x) перейдет в функцию распределения выборки из этого равномерного распределения.

При малых п для статистики D_n при гипотезе составлены таблицы процентных точек. При больших п распределение D_n (при гипотезе Н₀) указывает найденная в 1933 г. А.Н.Колмогоровым предельная теорема. Она говорит о статистике (поскольку сама величина D_n→0 при Н₀, приходится умножать ее на неограниченно растущую величину, чтобы распределение стабилизировалось). Теорема Колмогорова утверждает, что при справедливости Н₀ и если G непрерывна:

Эта сумма очень легко считается в Maple. Для проверки простой гипотезы Н₀: G = F требуется по исходной выборке вычислить значение статистики D_n. Для этого годится простая формула:

- элементы вариационного ряда, построенного по исходной выборке. Полученную величину D_n затем надо сравнить с извлеченными из таблиц или рассчитанными по асимптотической формуле критическими значениями. Гипотезу Н₀ приходится отвергать (на выбранном уровне значимости), если полученное в опыте значение D_n превосходит выбранное критическое значение, соответствующее принятому уровню значимости.

Другой популярный критерий согласия получим, измеряя расстояние между F_n и F в интегральной метрике. Он основан на так называемой статистике омега-квадрат:

Для его вычисления по реальным данным можно использовать формулу:

При справедливости гипотезы Н₀ и непрерывности функции G распределение статистики омега-квадрат, так же, как распределение статистики D_n, зависит только от n и не зависит от G. Так же, как для D_n, при малых n имеются таблицы процентных точек, а для больших значений n следует использовать предельное (при n → ∞) распределение статистики n. Здесь снова приходится умножать на неограниченно растущий множитель. Предельное распределение было найдено Н.В.Смирновым в 1939 г. Для него составлены подробные таблицы и вычислительные программы. Важное с теоретической точки зрения свойство критериев, основанных на D_n и : они состоятельны против любой альтернативы G ≠ F.

Статистический критерий для проверки гипотезы Н называют состоятельным против альтернативы Н', если вероятность с его помощью отвергнуть Н, когда на самом деле верна Н', стремится к 1 при неограниченном увеличении объема наблюдений.

Состоятельный против всех альтернатив критерий, в принципе, при большом числе наблюдений, способен обнаружить любое отступление от гипотезы. Таким образом, состоятельность критериев Колмогорова и омега-квадрат означает, что любое отличие распределения выборки от теоретического будет с их помощью обнаружено, если наблюдения будут продолжаться достаточно долго. Практическую значимость свойства состоятельности не велика, так как трудно рассчитывать на получение большого числа наблюдений в неизменных условиях, а теоретическое представление о законе распределения, которому должна подчиняться выборка, всегда приближённое. Поэтому точность статистических проверок не должна превышать точность выбранной модели. Свойство состоятельности является желательным.

Литература:

1. Кармелюк Г.І. теорія ймовірності та математична статистика. Посібник з розв’язання задач: Навч. Посібник. – К.: центр учбової літератури, 2007 – 576 с. ISBN 978 – 966 – 364 – 495 – 0.

2. Медведев М.Г., Пащенко І.О. Теорія ймовірності та математична статистика. Підручник. – К.: Вид – во «Ліра – К».2008. – 536 с. ISBN 978 – 966 – 96938 – 3 – 9.

3. Справочник по теории вероятности и математической статистике/ В.В. Королюк, Н.Н. Портенко А.В. Скороход, А.Ф. Трубин. – М.: Наука. Главная редакция физико – математической литературы, 1985. – 640 с.