Методические указания и решение типовых задач. Причинность, регрессия, корреляция.Исследование объективно существующих связей между явлениями – важнейшая задача теории статистики
Причинность, регрессия, корреляция. Исследование объективно существующих связей между явлениями – важнейшая задача теории статистики. Социально-экономические явления представляют собой результат одновременного воздействия большого числа причин. При изучении этих явлений необходимо выявлять главные, основные причины, абстрагируясь от второстепенных. В основе первого этапа статистического изучения связей лежит качественный анализ явления, связанный с анализом его природы методами экономической теории, социологии, конкретной экономики. Второй этап – построение модели связи. Он базируется на методах статистики: группировки, средних величин, таблиц и т.д. Третий последний этап – интерпретация результатов, вновь связан с качественными особенностями изучаемого явления. Статистика разработала множество методов изучения связей, выбор конкретного из которых зависит от цели исследования и от поставленной задачи. Связи между признаками и явлениями, ввиду их большого разнообразия, классифицируются по ряду оснований. Признаки по их значению для изучения взаимосвязи делятся на два класса. Признаки, обусловливающие изменение других, связанных с ними признаков, называют факторными, или просто факторами. Признаки, изменяющиеся под действием факторных признаков, называют результативными. Связи между явлениями и их признаками классифицируются по степени тесноты, по направлению и по аналитическому выражению. В статистике различают функциональную связь, и стохастическую зависимость. Функциональной называют такую связь, при которой определенному значению факторного признака соответствует одно и только одно значение результативного признака. Если причинная зависимость проявляется не в каждом отдельном случае, а в общем, среднем при большом числе наблюдений, то такая зависимость называется стохастической. Частным случаем стохастической связи является корреляционная связь, при которой изменение среднего значения результативного признака обусловлено изменением факторных признаков. По степени тесноты связи различают количественные критерии оценки тесноты связи (табл. 9.1). Таблица 9.1 Количественные критерии оценки тесноты связи
По направлению выделяют связь прямую и обратную. При прямой связи с увеличением или уменьшением значений факторного признака происходит увеличение или уменьшение значений результативного. Например, увеличение степени механизации труда способствует росту рентабельности строительного производства. В случае обратной связи значения результативного признака изменяются в противоположном направлении по сравнению с изменением факторного признака. Так, с увеличением уровня фондоотдачи снижается себестоимость единицы производимой продукции. По аналитическому выражению выделяют связи прямолинейные (или просто линейные) и нелинейные (криволинейные). Если статистическая связь между явлениями приближенно выражена уравнением прямой линии, то ее называют линейной связью; если же она выражена уравнением какой-либо кривой линии (параболы, гиперболы: степенной, показательной, экспоненциальной и т.д.), то такую связь называют нелинейной или криволинейной. Для выявления наличия связи, ее характера и направления в статистике используются методы: приведения параллельных данных, аналитических группировок, графический, корреляции и регрессии. Метод приведения параллельных данных основан на сопоставлении двух или нескольких рядов статистических величин. Такое сопоставление позволяет установить наличие связи и получить представление о ее характере. Сравним изменения двух величин:
Мы видим, что с увеличением величины х величина у также возрастает. Можно сделать предположение, что связь между ними прямая и что ее можно описать или уравнением прямой, или уравнением параболы второго порядка. Статистическую связь между двумя признаками можно изобразить графически и по графику судить о наличии, направлении и форме связи. На оси абсцисс откладываются значения факторного признака, на оси ординат – результативного. На графике откладываются все единицы, обладающие определенными значениями х и у. Соединив полученные точки нанесенных на график значений х и у прямыми линиями, получается ломаная, называемая «Ломаная регрессии». Число точек ломаной регрессии строго должно соответствовать числу единиц наблюдения, по которым даны значения обоих признаков. Кривая позволит судить о форме связи, об аналитическом ее выражении. Парная регрессия характеризует связь между двумя признаками: результативным и факторным. Аналитически связь между ними описывается уравнениями: прямой ; параболы ; (9.1) гиперболы и т.д. Определить тип уравнения можно, исследуя зависимость графически. Однако существуют более общие указания, позволяющие выявить уравнение связи, не прибегая к графическому изображению. Если результативный и факторный признаки возрастают одинаково, примерно в арифметической прогрессии, то это свидетельствует о наличии линейной связи между ними, а при обратной связи – гиперболической. Если результативный признак увеличивается в арифметической прогрессии, а факторный значительно быстрее, то используется параболическая или степенная функции. Оценка параметров уравнения регрессии а0, а1 (а2 – в уравнении параболы второго порядка) осуществляется методом наименьших квадратов, в основе которого лежит предположение о независимости наблюдений исследуемой совокупности и нахождении параметров модели (а0 и а1), при котором минимизируется сумма квадратов отклонений эмпирических (фактических) значений результативного признака от теоретических, полученных по уравнению регрессии: . Система нормальных уравнений для нахождения параметров линейной парной регрессии методом наименьших квадратов имеет следующий вид: (9.2) где n – объем исследуемой совокупности (число единиц наблюдения). В уравнениях регрессии параметр а0 показывает усредненное влияние на результативный признак неучтенных (не выделенных для исследования) факторов; параметр а1(а в уравнении параболы и а2) – коэффициент регрессии показывает, насколько изменяется в среднем значение результативного признака при изменении факторного на единицу его собственного измерения. Пример. По данным о сумме активов и кредитных вложений коммерческих банков Белоруссии необходимо определить направление и тесноту связи между признаками. Данные в табл. 9.2 представлены после предварительной их обработки методом приведения параллельных данных. Сопоставив полученные ряды данных х и у, можно наблюдать наличие прямой зависимости между признаками, когда увеличение кредитных вложений увеличивает сумму активов коммерческих банков. Исходя из этого можно сделать предположение, что связь между признаками прямая и ее можно описать уравнением прямой. Этот же вывод подтверждается и на основе графического анализа (рис.9.1). Рис. 9.1.Зависимость суммы активов коммерческих банков от кредитных вложений
Анализ рис. 9.1 показывает наличие близкой к прямолинейной зависимости, так как точки расположены практически по прямой линии. Определим параметры уравнения прямой на основе метода наименьших квадратов, решив систему нормальных уравнений (9.2). Исходные данные и расчетные показатели представим в табл. 9.2. . Отсюда: . Таблица 9.2 Расчетная таблица для определения параметров уравнения регрессии зависимости суммы активов и кредитных вложений коммерческих банков Белоруссии
Следовательно, с увеличением кредитных вложений на 1 млрд. нац. руб. сумма активов возрастет в среднем на 1, 0429 млрд. нац. руб. Модель регрессии может быть построена как по индивидуальным значениям признака (табл. 9.2), так и по сгруппированным данным (табл. 9.3). Для выявления связи между признаками по достаточно большому числу наблюдений используется корреляционная таблица. В корреляционной таблице можно отобразить только парную связь, т.е. связь результативного признака с одним фактором, и на ее основе построить уравнение регрессии и определить показатели тесноты связи. Само уравнение регрессии может иметь линейную, параболическую и другие формы. При определении параметров модели регрессии и коэффициентов связи по корреляционной таблице не теряется информация о связи, обусловленная усреднением данных. Для составления корреляционной таблицы парной связи статистические данные необходимо предварительно сгруппировать по обоим признакам (х и у), затем построить таблицу, по строкам в которой отложить группы результативного, а по столбцам - группы факторного признаков. Корреляционная таблица (пример табл. 9.3) дает общее представление о направлении связи. Если оба признака (х и у) располагаются в возрастающем порядке, а частоты (fxу) сосредоточены по диагонали сверху вниз направо, то можно судить о прямой связи между признаками. В противном случае – об обратной. О тесноте связи между признаками х и у по корреляционной таблице можно судить по кучности расположения частот вокруг диагонали (насколько заполнены клетки таблицы в стороне от нее). Если клетки заполнены большими цифрами, то связь слабая. Чем ближе частоты (fxу) располагаются к одной из диагоналей, тем теснее связь. Если в расположении частот (fxу) нет системности, то можно судить об отсутствии связи. Рассмотрим анализ статистических данных по корреляционной таблице на следующем примере. Пример. По данным группировки 40 предприятий легкой промышленности по величине балансовой прибыли и объему произведенной продукции построим уравнение связи (см. табл. 9.3). Решение. Анализ таблицы показывает, что частоты (fxу) расположены по диагонали сверху вниз, что свидетельствует о наличии прямой связи между объемом произведенной продукции и балансовой прибылью. Также наблюдаются концентрация частот (fxy) вокруг главной диагонали и незаполненность оставшихся клеток, поэтому можно предположить достаточно тесную связь между рассматриваемыми признаками. Расчет и анализ средних значений у, по группам факторных признаков х подтверждает наличие прямолинейной зависимости между х и у. Считая, что зависимость описывается уравнением прямой, коэффициенты а0 и а1 определим из системы нормальных уравнений вида: Таблица 9.3 Расчетная таблица для определения параметров уравнения регрессии по данным группировки предприятий легкой промышленности по величине балансовой прибыли в I квартале 1998 г. (цифры условные)
Так как значения признаков у и х заданы в определенных интервалах, то для каждого интервала сначала необходимо определить середину интервала (х и у), а затем уже по ним строить Уравнение регрессии. Покажем промежуточные расчеты: по первой группе ; yfy = 15 · 2 = 30; xfx = 350 · 8 = 2800; xyfy = 350 · 15 · 2 = 10500; x2fx = 3502 · 8 = 980000. по второй группе ; yfy = 25 · 5 = 125; xfx = 450 · 9 = 4050; xyfy = 350 · 25 · 4 + 450 · 25 · 1 = 46250; x2fx = 4502 · 9 = 1822500. Аналогичным образом получены все остальные расчетные значения в таблице. Таким образом, подставив в систему уравнений итоговые значения из табл. 9.3, получим: Отсюда: а0 = -0, 9; а1 = 0, 08. Следовательно: = -0, 9 + 0, 08х. Параметр уравнения регрессии а, = 0, 08 показывает, что с увеличением объема выпускаемой продукции на 1 млн. руб. балансовая прибыль возрастает на 80 тыс. руб. Если связь между признаками у и х криволинейная и описывается уравнением параболы второго порядка: , то система нормальных уравнений имеет вид: (9.3) Оценка обратной зависимости между х и у, когда с увеличением (уменьшением) х уменьшается (увеличивается) значение результативного признака у, может быть осуществлена на основе равнения гиперболы вида: . Система нормальных уравнений для нахождения параметров гиперболы следующая: (9.4) Множественная (многофакторная) регрессия. Изучение связи между тремя и более связанными между собой признаками носит название множественной (многофакторной) регрессии, описываемой функцией вида: . Построение моделей множественной регрессии включает этапы: 1) выбор формы связи (уравнения регрессии); 2) отбор факторных признаков; 3) обеспечение достаточного объема совокупности для получения несмещенных оценок. Выбор типа уравнения затрудняется тем, что для любой формы зависимости можно выбрать целый ряд уравнений, которые в определенной степени будут описывать эти связи. Поскольку уравнение регрессии строится главным образом для объяснения и количественного выражения взаимосвязей, оно должно хорошо отражать сложившиеся между исследуемыми факторами фактические связи. Практика построения многофакторных моделей взаимосвязи показывает, что все реально существующие зависимости между социально-экономическими явлениями можно описать, используя пять типов моделей: 1) линейная: ; 2) степенная: ; 3) показательная: ; (9.5) 4) параболическая: ; 5) гиперболическая: . Основное значение имеют линейные модели в силу простоты и логичности их экономической интерпретации. Нелинейные формы зависимости приводятся к линейным путем линеаризации. Важным этапом построения уже выбранного уравнения множественной регрессии являются отбор и последующее включение факторных признаков. Проблема отбора факторных признаков для построения моделей взаимосвязи может быть решена на основе эвристических (интуитивно-логических) или многомерных статистических методов анализа. Наиболее приемлемым способом отбора факторных признаков является шаговая регрессия (шаговый регрессионный анализ). Сущность метода шаговой регрессии заключается в последовательном включении факторов в уравнение регрессии и последующей проверке их значимости. Факторы поочередно вводятся в уравнение так называемым «прямым методом». При проверке значимости введенного фактора определяется, насколько уменьшается сумма квадратов остатков и увеличивается величина множественного коэффициента корреляции (R2). Одновременно используется и обратный метод, т.е. исключение факторов, ставших незначимыми на основе t-критерия Стьюдента. При построении моделей регрессии студент может столкнуться и с проблемой мультиколлинеарности, под которой понимается тесная зависимость между факторными признаками, включенными в модель. Мультиколлинеарность существенно искажает результаты исследования. Одним из индикаторов определения наличия мультиколлинеарности между факторными признаками является превышение величины парного коэффициента корреляции 0, 8 (). Устранение мультиколлинеарности может реализовываться через исключение из корреляционной модели одного или нескольких линейно-связанных факторных признаков или преобразованием исходных факторных признаков в новые, укрупненные факторы. Пример. По данным о сумме активов (у), кредитных вложений (х1) и величине собственного капитала (х2) коммерческих банков Белоруссии построить множественное уравнение связи. Связь предполагается линейной. Расчетная таблица для определения параметров уравнения регрессии представлена в табл. 9.4. Таблица 9.4 Расчетная таблица для определения параметров уравнения регрессии
Решение . Система нормальных уравнений имеет вид: (9.6) Отсюда: a0 = -443, 4; a1 = 0, 0368; a2 = 16, 77; . Расчеты показали, что с увеличением кредитных вложений на 1 млрд. нац. руб. и собственного капитала коммерческих банков Белоруссии на 1 млрд. нац. руб. стоимость их активов возрастает соответственно на 0, 0368 и 16, 77 млрд. нац. руб. Оценка существенности связи. Принятие решений на основе уравнения регрессии. Проверка адекватности моделей, построенных на основе уравнений регрессии, начинается с проверки значимости каждого коэффициента регрессии. Значимость коэффициента регрессии осуществляется с помощью t-критерия Стьюдента: , (9.7) где – дисперсия коэффициента регрессии. Параметр модели признается статистически значимым, если t > tkp (α; v = n – k – 1), где α – уровень значимости, v = n – k – 1 – число степеней свободы. Величина может быть определена по выражению , (9.8) где – дисперсия результативного признака; k – число факторных признаков в уравнении. Более точную оценку величины дисперсии можно получить по формуле , (9.9) где Ri – величина множественного коэффициента корреляции по фактору х, с остальными факторами. Проверка адекватности всей модели осуществляется с помощью расчета F-критерия и величины средней ошибки аппроксимации () Значение средней ошибки аппроксимации, определяемой по формуле , (9.10) не должно превышать 12-15%. Интерпретация моделей регрессий осуществляется методами той отрасли знаний, к которой относятся исследуемые явления. Но всякая интерпретация начинается со статистической оценки уравнения регрессии в целом и оценки зависимости входящих в модель факторных признаков, т.е. с выяснения, как они влияют на величину результативного признака. Чем больше величина коэффициента регрессии, тем значительнее влияние данного признака на моделируемый. Особое значение при этом имеет знак перед коэффициентом регрессии. Знаки коэффициентов регрессии говорят о характере влияния на результативный признак. Если факторный признак имеет знак плюс, то с увеличением данного фактора результативный признак возрастает. Если факторный признак имеет знак минус, то с его увеличением результативный признак уменьшается. Анализ модели по данным табл. 9.4. свидетельствует о том, что увеличение кредитных вложений и собственного капитала влечет рост стоимости активов коммерческих банков. С целью расширения возможностей экономического анализа используются частные коэффициенты эластичности, определяемые по формуле Частный коэффициент детерминации показывает, насколько процентов вариация результативного признака объясняется вариацией 1-го признака, входящего в множественное уравнение регрессии. Он рассчитывается по формуле , (9.11) где – среднее значение соответствующего факторного признака; – среднее значение результативного признака; аi – коэффициент регрессии при соответствующем факторном признаке. Коэффициент эластичности показывает, на сколько процентов в среднем изменится значение результативного признака при изменении факторного признака на 1%. Рассчитаем коэффициент эластичности по данным табл. 9.4: ; . Это означает, что при увеличении кредитных вложений и собственного капитала на 1% стоимость активов возрастает соответственно на 0, 02 и 1, 19%. Частный коэффициент детерминации показывает, на сколько процентов вариация результативного признака объясняется вариацией i-го признака, входящего в множественное уравнение регрессии. Он рассчитывается по формуле , (9.12) где – парный коэффициент корреляции между результативным и i-м факторным признаком; – соответствующий коэффициент уравнения множественной регрессии в стандартизованном масштабе. По данным табл. 9.4 рассчитаем частный коэффициент детерминации для фактора х1 – кредитные вложения (млрд. нац. руб.): ; ; ; ; ; ; ; ; , что свидетельствует о том, что 2% вариации стоимости активов объясняются изменением величины кредитных вложений. Для фактора х2 (собственный капитал): . На 88% изменение стоимости активов объясняется изменением собственного капитала коммерческих банков Белоруссии. Множественный коэффициент детерминации (R2), представляющий собой множественный коэффициент корреляции в квадрате, показывает, какая доля вариации результативного признака обусловлена изменением факторных признаков, входящих в многофакторную регрессионную модель. Для более точной оценки влияния каждого факторного признака на моделируемый используется Q-коэффициент, определяемый по формуле , (9.13) где – коэффициент вариации соответствующего факторного признака. По данным табл. 9.4: – для фактора х1 – кредитные вложения – ; ; . – для фактора х2 – собственный капитал – ; . Вывод: наиболее существенно влияние фактора х2. Собственно-корреляционные параметрические методы изучения связи. Оценка существенности корреляции. Изменение тесноты и направления связи является важной задачей изучения и количественного измерения взаимосвязи социально-экономических явлений. Теснота связи при линейной зависимости измеряется с помощью линейного коэффициента корреляции. В статистической теории разработаны и на практике применяются различные модификации формул расчета данного коэффициента: . Производя расчет по итоговым значениям исходных переменных, линейный коэффициент корреляции можно вычислить по формуле: . (9.14) Линейный коэффициент корреляции может быть также выражен через дисперсии слагаемых: . (9.15) Между линейным коэффициентом корреляции и коэффициентом регрессии существует определенная зависимость, которую можно математически выразить следующей формулой: , (9.16) где аi – коэффициент регрессии в уравнении связи; – среднее квадратическое отклонение соответствующего факторного признака Линейный коэффициент корреляции изменяется в пределах от -1 до 1: -1 < r < 1. Знаки коэффициентов регрессии и корреляции совпадают. При этом интерпретацию выходных значений коэффициента корреляции можно представить в табл.9.5. Таблица 9.5 Оценка линейного коэффициента корреляции
Значимость линейного коэффициента корреляции проверяется на основе t-критерия Стьюдента: . (9.17) Если расчетное значение tp > tkp (табличное), то гипотеза Н0: rух = 0 отвергается, что свидетельствует о значимости линейного коэффициента корреляции, а следовательно, и о статистической существенности зависимости между х и у. Пример. По данным табл. 9.4 оценить тесноту связи между стоимостью активов (у) и кредитными вложениями (х1), используя различные модификации расчета линейного коэффициента корреляции. Проверить его значимость. Решение. ; ; ; ; ; . Связь прямая, сильная. По формуле (9.14): Результаты идентичны. Проверим значимость : ; α = 0, 05; ν = n – 1 = 6; tkp = 2, 447. Так как tp = 3, 72 > tkp = 2, 447, то коэффициент корреляции значим. Теснота связи при криволинейной зависимости измеряется с помощью корреляционного отношения. Различают эмпирическое и теоретическое корреляционное отношение. Вычислим эмпирическое корреляционное отношение: . По данным табл. 9.3, а также рассчитав и , , можно определить эмпирическое корреляционное отношение. Для этого построим вспомогательную таблицу:
Следовательно, . Эмпирическое корреляционное отношение . Связь сильная. Множественный коэффициент корреляции вычисляется при наличии линейной связи между результативными и несколькими факторными признаками, а также между каждой парой факторных признаков. Множественный коэффициент корреляции вычисляется по формуле , где δ 2 – дисперсия теоретических значений результативного признака, рассчитанная по уравнению множественной регрессии; – остаточная дисперсия; σ 2 – общая дисперсия результативного признака. В случае оценки тесноты связи между результативным (У) и двумя факторными признаками (х1 и х2) множественный коэффициент корреляции можно определить по формуле , (9.18) где r – парные коэффициенты корреляции между признаками. Проверка значимости коэффициента множественной корреляции осуществляется на основе F-критерия Фишера: (9.19) Гипотеза Н0 о незначимости коэффициента множественной корреляции (Н0: R = 0) отвергается, если Fp > Fkp (α; v1 = 2; v2 = n – 3). Множественный коэффициент корреляции изменяется в пределах от 0 до 1 и по определению положителен: 0 > R < 1. Пример. По данным табл. 9.4 рассчитать коэффициент множественной корреляции и проверить его значимость. Решение. , где – парные коэффициенты корреляции между признаками Связь сильная, факторы х1 и х2 практически полностью обусловливают величину у. Проверим значимость коэффициента множественной корреляции. Гипотеза о незначимости коэффициента корреляции отвергается, так как Fk = 6, 94 (α = 0, 05, v1 = 2, v2 = n – 3=4). Fp= 18, 51 > Fkp = 6, 94. Частные коэффициенты корреляции характеризуют степень тесноты связи между двумя признаками х1 и х2 при фиксированном значении других факторных признаков, т.е. когда влияние х3 исключается (в этом случае оценивается связь между х1 и х2 в «чистом виде»). В случае зависимости у от двух факторных признаков х1 и х2 коэффициент частной корреляции принимает вид: (9.20) где r – парные коэффициенты корреляции между указанными в индексе переменными. В первом случае исключено влияние факторного признака х2, во втором – x1. Пример. По данным табл. 9.4 рассчитать частные коэффициенты корреляции и проверить их значимость. Решение Методы изучения связи социальных явлений. Важной задачей статистики является разработка методики статистической оценки социальных явлений, которая осложняется тем, что многие социальные явления не имеют количественной оценки. Количественная оценка связей социальных явлений осуществляется на основе расчета и анализа целого ряда коэффициентов. Коэффициент ассоциации и контингенции. Для определения тесноты связи двух качественных признаков, каждый из которых состоит только из двух групп, применяются коэффициенты ассоциации и контингенции. Для их вычисления строится таблица, которая показывает связь между двумя явлениями, каждое из которых должн
|