线性回归模型优质ppt课件.ppt

线性回归模型,学习目标,了解：经济变量之间的关系 “回归”名称的来源、逐个剔除法、逐步回归法的优缺点理解：多元线性回归模型的一般形式、随机项的来源及基本假定、回归分析的基本思想和方法、t检验、f检验、r检验的关系、判定系数、选元的标准。 掌握：线性回归模型的一般形式、误差随机项的基本假定、回归分析的主要内容、普通最小平方法、t检验、f检验、r检验的检验思想及步骤、点预测、区间预测、应用计算机软件进行线性回归分析,内 容,2.1 回归模型的一般描述2.2 一元线性回归的参数估计2.3 一元线性回归的显著性检验2.4 一元线性回归的预测2.5 多元线性回归模型及其假设2.6 多元线性回归的参数估计2.7 多元线性回归的显著性检验2.8 利用多元线性回归方程进行预测2.9 解释变量的选择2.10 残差分析与异常值检测2.11 模型的结构稳定性检验：Chow检验2.12正态性检验：JarqueBera检验,1 回归模型的一般描述,一、变量间的关系1. 函数关系：变量间却定性的对应关系2. 相关关系：变量间不确定的对应关系（1）相关关系强弱的测度相关系数：（2）相关系数的取值范围-1，1，正负号仅表示方向，不表示大小。,1 回归模型的一般描述,二、回归模型的一般形式三、一元线性回归模型,1 回归模型的一般描述,四、一元回归模型的基本假定（最小二乘假定）（1）（2） 等方差性（3） 无序列相关（4）进一步假定,1 回归模型的一般描述,五、回归分析预测的一般步骤以预测对象为因变量建立回归模型；利用样本数据对模型的参数进行估计；对参数的估计值及回归方程进行显著性检验；利用通过检验的方程进行预测。,2 一元线性回归的参数估计,一、散点图与回归直线1. 散点图：将n组相关数据在直角坐标系中描述出来即为散点，由坐标系和散点共同构成的图形称作散点图。作用：直观描述变量间的关系。例如：电的供应量与产值之间的关系,2 一元线性回归的参数估计,2. 回归直线 当散点图的数据点的走向大致趋于一条直线时，通过散点图作一条直线，使它能够拟合这些点，近似的描述变量间的关系，称这条直线为回归直线，记作,2.2 一元线性回归的参数估计,二、最小二乘法1. 基本原理：找到一条直线，使直线上的点与实际观察值之间的距离最小，即 ，其中 。3. 根据微分极值原理求解解该方程组得其中， ，,2 一元线性回归的参数估计,例 已知一个工厂的年产值与电的供应量之间存在一元线性关系，数据如右表所示，试求该回归方程。解：使用Excel实现回归于是所求的方程为 这说明，该厂电的供应量每增加一万度，年产值增加6.9712万元。,2.3 一元线性回归的显著性检验,一、经济检验二、拟合优度检验三、回归方程的显著性检验四、回归系数的显著性检验,3 一元线性回归的显著性检验,一、经济检验（逻辑检验）检验内容：参数估计值的符号和大小是否与经济理论和经济实 际相符合，是否有经济意义。二、拟合优度检验拟合优度（可决系数）：回归直线与实际数据的拟合程度 ，记作 。回归变差的分解：TSS=RSS+ESS 拟合优度经验结果，通常要求 。,3 一元线性回归的显著性检验,三、回归方程的显著性检验检验内容：检验因变量和所有自变量的线性关系。建立原假设和备择假设：构造统计量在显著性水平 条件下的临界值判断：如果采用样本数据计算的结果 ，则拒绝原假设，认为自变量和因变量之间的线性关系显著。,3 一元线性回归的显著性检验,四、回归系数的显著性检验检验内容：检验因变量和每个自变量的线性关系。建立原假设和备择假设：构造统计量 , 其中在显著性水平 条件下的临界值判断：如果采用样本数据计算的结果 ，则拒绝原假设，认为因变量和该自变量之间的线性关系显著。,3 一元线性回归的显著性检验,五、一元回归方程的显著性检验小结拟合优度通常要求 ，且与相关系数之间的关系 ，但通常不用相关系数判断拟合优度；对于一元回归，方程的显著性检验和回归系数的显著性检验是一致的，做一个即可。,3 一元线性回归的显著性检验,六、续例，给定显著性水平 ，进行统计检验解：根据运行结果（1）方程的拟合优度较高；（2）,2.4 一元线性回归的预测,一、回归预测定义：给定自变量一个特定的值，利用回归方程对因变量的值进行估计。分类：点预测、区间预测二、点预测定义：假定Y与X的回归方程为 ，对于给定的自变量 ，求得 ，称这种预测为点预测。续例，已求出该厂产值与电的供应量之间的回归方程为 ，并通过检验。如果电的供应量达到50万度，对产值进行点预测，,4 一元线性回归的预测,三、区间预测预测误差：点预测值与实际观测值之间的差异 。可以证明 ，其中给定置信水平 ，置信区间为 ，其中， 是自由度为年n-2的t分布临界值，其中4. 例置信水平95%的置信区间（464.73，509.09）。,5 多元线性回归模型及其假设,一、线性回归模型的一般形式 如果因变量（被解释变量）与各自变量（解释变量）之间有线性相关关系，那么它们之间的线性总体回归模型可以表示为： 写成矩阵形式为： 其中,2.5 多元线性回归模型及其假设,二、多元回归模型的基本假定（1）（2） 等方差性（3） 无序列相关（4）（5）进一步假定（6） 各自变量之间不存在显著相关关系,2.6 多元线性回归的参数估计,一、参数估计方法1. 基本原理：2. 根据微分极值原理，采用矩阵形式求解一元回归的参数估计是多元回归参数估计的特例。,2.6 多元线性回归的参数估计,二、利用Excel进行参数估计其操作步骤为：点击工具点击数据分析选择回归点击确定输入值输入区域输入值输入区域输入置信度在输出选项选择输出区域或新工作组表或新工作簿点击确定，即可得到输出结果,2.6 多元线性回归的参数估计,三、最小二乘估计量（OLSE)的统计性质 线性 = +最小二乘估计量B不仅是Y的线性组合，也是U的线性组合。 无偏 = + = 最优性最小二乘估计量B的最优性，又称有效性或最小方差性。 （ ）其中， 是 主对角线上的元素。可以证明， 具有最小方差的特性。（证明略）,2.6 多元线性回归的参数估计,四、随机误差项的方差的估计量 是 的无偏估计量（m=k+1，为变量个数或参数个数，k为自变量个数）。它的算术方根称为估计标准误差，记为：,2.6 多元线性回归的参数估计,此时，估计量的标准差可表示为： 是 主对角线上的元素（j=0,1,k）。,2.6 多元线性回归的参数估计,五、回归系数的置信区间由于 ； ； 故可得的置信度为 的置信区间为：Excel能够自动给出各回归系数的上下限,2.6 多元线性回归的参数估计,六、例2.2 已知某地区的相关数据如右表所示，试求该回归方程。解：使用Excel实现回归，得到的方程为 这说明，该地区收入每增加1万元，消费增加0.497万元，人口每增加1万人消费增加0.665万元。,2.7 多元线性回归的显著性检验,一、经济检验二、拟合优度检验三、回归方程的显著性检验四、回归系数的显著性检验五、序列相关检验,2.7 多元线性回归的显著性检验,一、经济检验（逻辑检验）1. 检验内容：参数估计值的符号和大小是否与经济理论和经济 实际相符合。2. 回归系数的估计值与实际相反的原因（1）某些变量的取值范围太窄；（2）模型中遗漏了某些重要因素；（3）模型中自变量之间有较强的线性关系。,2.7 多元线性回归的显著性检验,二、拟合优度检验判定系数 与修正判定系数 判定系数的大小还取决于包含在模型中的自变量的个数。2. 修正判定系数 的计算 注：（1）如果k=0，则（2）如果k0，则（3） 有可能为负值。,2.7 多元线性回归的显著性检验,三、回归方程的显著性检验检验内容：检验因变量和所有自变量的线性关系。建立原假设和备择假设：构造统计量在显著性水平 条件下的临界值判断：如果采用样本数据计算的结果 ，则拒绝原假设，认为因变量和自变量全体之间的线性关系显著。,2.7 多元线性回归的显著性检验,四、回归系数的显著性检验检验内容：检验因变量和每个自变量的线性关系。建立原假设和备择假设：构造统计量 , 在显著性水平 条件下的临界值判断：如果采用样本数据计算的结果 ， 则拒绝原假设，认为因变量和该自变量之间的线性关系显著。,2.7 多元线性回归的显著性检验,五、多元回归的显著性检验小结。拟合优度的检验需要采用修正判定系数；回归方程的显著性检验和回归系数的显著性检验不再一致，需要分别进行；,2.7 多元线性回归的显著性检验,六、续例2.2，给定显著性水平 ，进行检验解：根据运行结果（1）方程的拟合优度较高；（2）方程通过显著性检验；（3）回归系数的显著性检验 ， 均大于临界值3.201，所以回归系数均显著。,2.8 利用多元线性回归方程进行预测,一、点预测当给定自变量的某一特定值为对因变量进行点估计为用矩阵表示为 。二、区间预测 给定置信水平 ，置信区间为其中， 是自由度为年n-k-1的t分布临界值。,畅想网络,Imagination Network,感谢观看！,文章内容来源于网络，如有侵权请联系我们删除。,