Характеристики и критерии качества эконометрических моделей

Вместе с тем очевидно, что среди нескольких различных вариантов функционала f( a, x _t), примерно одинаково отражающих общие тенденции процесса у_t, более предпочтительным является тот из них, который обеспечивает и лучшую аппроксимацию (в математическом понимании этого термина).

В общем случае “качество” эконометрической модели оценивается по двум группам характеристик, хотя, как это будет показано далее, предполагаемая группировка не вполне однозначна, поскольку, во-первых, характеристики каждой из групп часто имеют двойное назначение, а, во-вторых, многие из них взаимосвязаны друг с другом. В первую из групп включим показатели, критерии, выражающие “степень” соответствия построенной модели основным закономерностям описываемого ею процесса. Во вторую – показатели и критерии, в большей степени оценивающие точность ее аппроксимации наблюдаемых значений процесса у_t .

В этой связи следует отметить, что к критериям первой группы могут быть отнесен и критерий Стьюдента, используемый для оценки значимости влияния каждого из факторов х_i, i=1, 2,..., n, на зависимую переменную у_t (см. раздел 1.3).

Соответствие эконометрической модели описываемому ею процессу у_t в значительной степени может быть установлено на основе анализа свойств рассчитанного ряда ошибки e_t, t=1, 2,..., Т*. Если вариант модели “верно” отражает основные тенденции процесса у_t , то можно ожидать, что значения ошибки в определенной степени случайны, их свойства близки к свойствам процесса “белого шума”. Если же тенденция, закономерности процесса у_t учитываются моделью не в полной мере (в модель не включены какие-либо существенные с содержательной точки зрения факторы, выбрана форма функционала f( a, x _t), не адекватная характеру взаимосвязей между рассматриваемыми переменными и т. п.), то в ряду ошибки обычно появляется некоторая закономерность, свидетельствующая об утрате свойства ее “случайности”. Заметим, что “неслучайный” характер фактической ошибки модели e_t может быть предопределен и неверно выбранным методом оценки параметров модели.

Забегая вперед, отметим, что среди методов оценки параметров линейных эконометрических моделей наибольшее распространение получили метод максимального правдоподобия, метод наименьших квадратов и метод моментов. Каждый из них используется при вполне определенных исходных предпосылках относительно свойств ошибки модели e_t. Например, классические варианты этих методов используются в предположении, что ошибки совпадают со свойствами процесса “белого шума” (нулевое среднее, конечная дисперсия, отсутствие автокорреляционных связей). При этом “метод максимального правдоподобия” предполагает известным закон распределения ошибки. Чаще всего используется предположение о “нормальности” ее распределения. В этой связи построенная с использованием метода максимального правдоподобия модель будет считаться адекватной рассматриваемому процессу, если свойства фактической ошибки e_t, определенной согласно выражению (1.27), будут не слишком сильно отличаться от предполагаемых свойств ошибки e_t (“белого шума” с нормальным распределением).

Метод наименьших квадратов не выдвигает столь жестких требований к закону распределения ошибки. Согласно ему оценки параметров моделей определяются исходя из критерия минимума суммы квадратов ошибки. В такой ситуации модель, построенная с использованием данного метода, будет считаться адекватной рассматриваемым процессам, если ее ошибка по своим свойствам идентична “белому шуму”.

Если в отношении ошибки эконометрической модели e_t выдвигаются предположения, что ее свойства отличны от свойств “белого шума”, то для оценки параметров модели обычно используются так называемые обобщенные модификации данных методов.

Отличие ошибки модели от “белого шума” может выражаться, например, непостоянством ее дисперсии на различных участках интервала t=1, 2,..., Т; наличием взаимосвязи между ее соседними значениями, выражаемыми, например, уравнением следующего вида e_t =b× e_t–1+x_t, где x_t – новая ошибка, по своим свойствам близкая к процессу “белого шума” и т. п.

Однако на практике для моделей многих типов такие свойства ошибки модели априорно предвидеть обычно не представляется возможным. Их можно установить, только анализируя свойства фактической ошибки e_t, полученной для моделей, оценки коэффициентов которых определены с использованием “классических” методов оценивания.

Таким образом, наличие или отсутствие свойства “случайности” в ряду выборочной ошибки модели e_t, t =1, 2,..., Т; в определенной мереуказывает на “соответствие” или “несоответствие” модели описываемому ею процессу у. В том случае, когда ошибка модели “неслучайна”, может быть рекомендовано уточнить рассматриваемый вариант модели, выбрать более подходящий для данной ситуации метод оценки ее параметров.

Как было отмечено выше, “неслучайность” ошибки может иметь различный характер. Наиболее часто она выражается наличием автокорреляционной связи между соседними ее значениями, тенденциями, характеризующими изменения их квадратов, т. е. тенденциями в ряду e_t², t=1, 2,..., Т и других ее производных. Для выявления “неслучайности” в ряду ошибки модели обычно используют специфические тесты, многие из которых будут рассмотрены в последующих главах учебника применительно к моделям соответствующих типов. Здесь же в качестве примера опишем особенности использования для этих целей достаточно универсального теста (критерия) Дарбина-Уотсона. Он наиболее широко применяется в эконометрических исследованиях вследствие своей простоты, хотя и не обладает существенной эффективностью (достоверностью). Тест Дарбина-Уотсона обычно используется для установления факта наличия автокорреляционной зависимости первого порядка в ряду ошибки e_t, т. е. между соседними ее значениями, e_t и e_t+1, t=1, 2,..., Т. Обычно соседние значения ошибки связаны более сильной зависимостью, чем значения e_t и e_t+2, e_t и e_t+3 и т. д. Вследствие этого отсутствие автокорреляционной связи между рядами значений выборочной ошибки e_t и e_t–1, t=1, 2,..., Т–1; позволяет с большой степенью уверенности утверждать, что в ряду истинной ошибки модели e_t отсутствуют вообще какие-либо автокорреляционные взаимосвязи.

Значение критерия Дарбина-Уотсона рассчитывается по следующей формуле

Раскрывая квадрат в числители выражения (1.29), получим:

где r₁– коэффициент автокорреляции первого порядка ошибки e_t, т. е. корреляции между рядами e_t и e_t+1.

Из выражения (1.30) непосредственно вытекает, что

0 £ d £ 4. (1.31)

Значение d=0 соответствует случаю, когда между рядами e_t и e_t+1существует строгая положительная линейная зависимость, т. е. r₁=+1, и значение d=4 соответствует строгой отрицательной связи, r₁=–1. Если ряды e_t и e_{t +1}независимы, то r₁=0 и d=2.

Точки d=0; 2; 4 и определяют границы критерия Дарбина-Уотсона, в пределах которых гипотеза о наличии автокорреляции первого порядка в последовательности ошибок либо принимается (в областях близких к 0 или 4), либо отвергается (в области d=2), либо решение по данному критерию остается неопределенным (в промежутках между отмеченными областями). Иными словами, на отрезке [0, 4] выделяются четыре промежуточные точки, таким образом, что 0£ d₁£ d₂£ 2£ d₃£ d₄£ 4. Если расчетное значение критерия Дарбина-Уотсона находится на отрезках [0, d₁], [d₄, 4], то гипотеза о наличии автокорреляции первого порядка в ряду ошибок модели принимается, если расчетное значение d находится в интервале [d₂, d₃], – то отвергается. Значения d, приходящиеся на полуинтервалы [d₁, d₂] и [d₃, d₄], не позволяют сделать однозначного суждения по данной гипотезе. В последнем случае необходимо проводить более глубокий анализ зависимостей между значениями ошибки e_t, t=1, 2,..., Т.

Другую группу критериев, в большей степени направленных на выявление степени точности аппроксимации функционалом f( a, x _t ) наблюдаемых значений зависимой переменной у_t, образуют широко используемые в статистике и эконометрике коэффициент множественной корреляции R, коэффициент детерминации D, критерий Фишера F.

Здесь следует отметить, что общепринятой в статистике мерой точности “аппроксимации” является дисперсия (в нашем случае дисперсия модели). Ее значение на практике обычно определяется на основании следующей формулы:

где =f ( a, x _t) – рассчитанные на основании уравнения модели f( a, x _t) значения зависимой переменной, Т– количество измерений, п+1 – число параметров модели.

Однако значение дисперсии не отражает многих существенных аспектов качества модели и, кроме того, оно не очень пригодно для целей содержательного анализа.

Несложно заметить, что величина ошибки тесно связана с уровнем зависимой переменной у, и в этой связи она имеет “абсолютное” содержание. В то же время “точность” в большей степени относительна. Поэтому меньшее значение дисперсии еще не свидетельствует о более высоком “качестве” модели, ее аппроксимирующих возможностях. Большая дисперсия может выражать лишь более высокие уровни независимой переменной, а не ухудшение точности ее аппроксимации построенной моделью.

Здесь следует отметить, что и “относительность” ошибки может рассматриваться в двух аспектах. Во-первых, по отношению к уровню переменной у, а, во-вторых, – к некоторому уже установленному “эталону” точности. Как раз эти аспекты в большей степени и учитывают указанные критерии и коэффициенты.

Коэффициент множественной корреляции показывает степень приближения расчетных (по построенной модели) значений зависимой переменной ( a, x _t) к действительным ее значениям у_t . Величина коэффициента множественной корреляции меняется в пределах от нуля до единицы (0£ R£ 1). Значения R, близкие к нулю, свидетельствуют о том, что расчетные значения плохо аппроксимируют значения у_t. Если R близок к единице, то это означает, что модель хорошо аппроксимирует исходный ряд значений у_t, t=1, 2,..., T.

Значения коэффициента детерминации также находятся на отрезке [0, 1], 0£ D£ 1. Его конкретная величина показывает долю изменчивости переменной у, объясняемую включенными в модель факторами х_i, i=1, 2,..., n. Например, если D=0, 81, то это означает, что включенные в модель переменные объясняют 81% изменчивости переменной у_t, а остальная ее изменчивость объясняется неучтенными в модели причинами.

Значения коэффициентов множественной корреляции и детерминации рассчитываются на основании следующего выражения*:

Обоснование целесообразности использования коэффициента детерминации при определении качества построенной эконометрической модели заключается в следующем. “Удачная“ модель должна “объяснять” основные закономерности изменчивости зависимой переменной у_t. Количественной мерой этой изменчивости в статистике принято считать показатель, рассчитываемый на основании следующей формулы:

Заметим, что разница представляет собой отклонение значения у_t от среднего уровня этой переменной, а общая изменчивость, таким образом, выражается в виде суммы квадратов всех таких отклонений. После построения модели и определения на ее основании “расчетных” значений , каждое из таких отклонений можно представить в виде суммы двух составляющих

Первое из слагаемых правой части выражения (1.35) представляет собой расчетное значение ошибки модели в момент t, т. е. . Второе слагаемое выражает отклонение этого расчетного значения от среднего уровня переменной у_t. С учетом (1.35) выражение (1.34) можно записать в следующем виде:

Как будет показано во II главе, ошибка e_t обладает рядом свойств , используя которые можно доказать, что последняя сумма в правой части выражения (1.36) равна нулю. Отсюда вытекает, что общая изменчивость переменной у_t также может быть представлена в виде двух составляющих

При этом первая из них

выражает сумму квадратов ошибки модели, т. е. часть изменчивости переменной у_t, необъясненную построенной моделью, а второе слагаемое – часть изменчивости переменной у_t , которую построенная модель объяснила.

Разделив левую и правую части выражения (1.36) на , получим

Из последнего выражения непосредственно следует (1.33), т. е.

Таким образом, если модель абсолютно точно соответствует исходному ряду зависимой переменной у_t, т. е. расчетные значения f( a, x _t) равны у_t для всех t =1, 2,..., T, то D=R=1.

В тех случаях, когда модель не может ни в какой мере объяснить изменчивость переменной у_t, имеем R=D=0. При линейной форме зависимости f( a, x _t) это происходит, например, в тех случаях, когда значения у_t равномерно распределяются вокруг линии параллельной оси Х (см. рис. 1.4 (а, б)), что влечет за собой равенство , t=1, 2,..., T.

Из изложенного выше следует, что высокие значения переменных D и R ассоциируются с хорошей степенью аппроксимации построенной эконометрической моделью f( a, x _t) исходного (заданного) ряда значений зависимой переменной у_t, t=1, 2,..., T, а низкие значения – с плохой аппроксимацией. Вместе с тем следует иметь в виду, что причины плохой аппроксимации могут быть разные. В одних случаях это происходит из-за неверного выбора объясняющих (независимых) переменных, в других – из-за неправильно подобранной формы уравнения модели.

у у

а) б)

Так, например, если для переменной у_t, фактические значения которой обозначены прерывистой линией на рис. 1.4(а) в качестве эконометрической модели использовать уравнение эллипса а для переменной у_t на рис. 1.4(б) – уравнение синусоиды то точность описания рассматриваемых процессов была бы значительно выше и характеристики D и R были бы близкими к единице.

Критерий Фишера (F-критерий) также используется для определения надежности всей модели путем сопоставления ее меры ошибки с величиной меры рассеяния переменной у_t относительно Величина этого критерия определяется по формуле

Целесообразность использования критерия Фишера можно обосновать, заменив в выражении (1.39) показатель R² на его модификацию – скорректированный квадрат коэффициента множественной детерминации , рассчитываемый с учетом замены суммы квадратов ошибки и изменчивости переменной у_t на соответствующие дисперсии. Значение рассчитывается согласно следующей формулы:

При этом представляет собой дисперсию ошибки e_t (см. (1.32)), где Т–п–1 – число степеней свободы, учитываемое при ее определении (Т– число измерений, п+1 – количество связанных параметров-коэффициентов модели); – дисперсия переменной у_t, Т–1 – число степеней свободы при одном связанном параметре .

На основании (1.33) и (1.40) взаимосвязь между квадратами коэффициентов множественной корреляции R² и можно представить в виде следующего соотношения:

Скорректированный коэффициент как мера качества построенной модели имеет определенные преимущества по сравнению с его предшественником – коэффициентом R². В частности, из выражения (1.40) вытекает, что включение в модель независимых факторов, малозначащих с точки зрения объяснения изменчивости переменной у_t, может вести к уменьшению значения (см. числитель дробной части (1.40)). В то же время показатель R² не чувствителен к изменению количества таких переменных.

Здесь необходимо отметить, что критерий Фишера может рассматриваться и в качестве “меры” обоснованности включения в эконометрическую модель всей совокупности независимых переменных. В этом случае его можно отнести и к критериям первой группы, характеризующим степень соответствия построенной модели исследуемому процессу у_t.

Критерий Фишера в такой ситуации рассматривается как своего рода тест при проверке гипотезы, что ни один из независимых факторов не играет никакой роли в объяснении изменчивости переменной у_t или, что то же самое, все коэффициенты при независимых факторах модели равны нулю (a₁=0, a₂=0,..., a_п =0) (см. раздел (2.2)). В соответствии с этим отношение R²/п в выражении (1.39) представляет собой среднюю долю объясненной изменчивости переменной у_t, приходящуюся на один независимый фактор, а (1–R²)/(Т–п–1) – среднюю долю необъясненной изменчивости переменной у_t, в расчете на одну степень свободы.

При слабом влиянии независимых факторов на переменную у_t (т. е. при a_i ®0, i=1, 2,..., n) значение R², как и величина критерия F стремится к нулю, и, наоборот, с увеличением R² численное значение F также возрастает. Заметим, что показатель F является случайной величиной, представляющей собой отношение двух дисперсий. Эта величина распределена по закону Фишера с п и Т–п–1 степенями свободы (F(п, Т–п–1)). Вследствие этого на практике проверка значимости коэффициентов модели с использованием критерия Фишера состоит в сопоставлении его расчетного значения, определенного для построенного варианта модели по формуле (1.34), с табличным значением F_*(п, Т–п–1), соответствующим заданному уровню доверительной вероятности р_* (вероятности ошибки первого рода 1–р_*) и известным степеням свободы п и Т–п–1.

Если оказывается, что

F< F_*(п, Т–п–1),

то гипотезу о незначимости совокупного влияния независимых факторов на переменную у_t целесообразно принять (вероятность ее осуществления равна р_*). В противном случае роль факторов в объяснении изменчивости переменной у_t следует признать существенной. С ростом F эта роль признается все более значимой.

Критерий Фишера можно использовать и при сравнении качества (точности описания исходного процесса у_t) двух различных альтернативных вариантов модели. В данном случае его величина рассчитывается по формуле

где =f¹( a ₁ , x _t¹), =f ²( a ₂ , x _t²) – расчетные значения переменной у, полученные на основе первого и второго вариантов моделей соответственно, различающиеся, быть может, формой зависимости f и количеством факторов х; n₁ и n₂ – количества факторов в первом и втором вариантах соответственно.

Критерий (1.42) является двухсторонним. Особенности его использования состоят в следующем. Если выполняется соотношение

то рассматриваемые альтернативные варианты модели признаются равнозначными с точки зрения точности описания процесса у_t.

Если

то выбор следует сделать в пользу первого варианта модели, а если

то – в пользу второго.

F_*(n₁, n₂) – табличное значение критерия Фишера, выбранное для заданного уровня доверительной вероятности р_* и числе степеней свободы n₁=Т–n₁–1 и n₂=Т–n₂–1.

В заключение данного раздела еще раз обратим внимание на определенные содержательные и количественные взаимосвязи между критериями и показателями качества эконометрической модели различных групп. Например, отметим, что появление автокорреляционных взаимосвязей у значений ошибки, вообще говоря, делает приведенные выше выражения критериев Фишера, коэффициента детерминации, множественных коэффициентов корреляции и т. п. некорректными. Это обусловлено тем, что используемая при расчете их значений сумма квадратов ошибки не может рассматриваться как “мера точности аппроксимации” заданного ряда значений у_t, поскольку не учитывает, например, автокорреляционные связи между разновременными ошибками e_t и e_t+i, i=1, 2,...* Критерии Стьюдента и Фишера, коэффициенты детерминации и множественной корреляции, отнесенные к разным группам, часто используются совместно при обосновании выбора варианта эконометрической модели. Это связано с тем, что каждый из включенных в модель факторов, как правило, объясняет некоторую долю изменчивости зависимой переменной у_t, пусть даже и небольшую. Вследствие этого, когда независимых факторов не слишком много и между ними не наблюдается сильных взаимосвязей, то исключение из их состава даже малозначимого с точки зрения критерия Стьюдента фактора объективно уменьшает количество информации, объясняющей изменчивость у_t. Это, в свою очередь, влечет за собой уменьшение значений характеристик D, R и F. Может возникнуть такая ситуация, когда, удалив на очередном шаге незначимый фактор, исследователь получает менее удачный по этим показателям вариант модели. Если нет других альтернативных ее вариантов, то возникает проблема выбора между “ненадежным” вариантом модели со значимыми факторами и более надежным вариантом, у которого некоторые из независимых переменных незначимы. На практике обычно выбор делается в пользу более “удачной” модели, поскольку более точное описание процесса у_t в эконометрике является и более предпочтительным по сравнению с решением задачи установления перечня значимых по степени влияния на переменную у_t факторов.

Таким образом, этапы формирования модели (обоснование формы функционала, состава независимых переменных) и оценки ее качества в значительной степени взаимосвязаны между собой. Для них, как правило, нельзя установить жесткую очередность. Часто информация, полученная на “более поздних этапах” заставляет пересматривать итоги предыдущих. Заметим также, что важную роль на всех этих этапах играет содержательная сторона проблемы. Не подкрепленные результатами содержательного анализа и основанные только на “хороших” количественных критериях варианты эконометрических моделей часто являются с практической точки зрения бесполезными, бессодержательными “аппроксимациями”.

Вместе с тем качество модели в значительной степени зависит от того, насколько “удачны” оценки коэффициентов модели a_i , i=0, 1,... п. Они играют, пожалуй, основную роль при обосновании ее “качества”, поскольку на основе их значений непосредственно определяется одна из важнейших составляющих модели, характеризующих ее качество, – выборочная ошибка.

Основные подходы к обоснованию “качества” оценок параметров эконометрической модели рассмотрены в следующем параграфе учебника.