1、线性组合:记x1,x2,xP为原变量指标,z1,z2,zm(mp)为新变量指标(主成分),则其线性组合为:Lij是原变量在各主成分上的载荷 无论是哪一种因子分析方法,其相应的因子解都不是唯一的,主因子解仅仅是无数因子解中之一。 zi与zj相互无关; z1是x1,x2,xp的一切线性组合中方差最大者,z2是与z1不相关的x1,x2,的所有线性组合中方差最大者。则,新变量指标z1,z2,分别称为原变量指标的第一,第二,主成分。Z为因子变量或公共因子,可以理解为在高维空间中互相垂直的m个坐标轴。主成分分析实质就是确定原来变量xj(j=1,2 ,p)在各主成分zi(i=1,2,m)上的荷载 lij。从
2、数学上容易知道,从数学上也可以证明,它们分别是相关矩阵的m个较大的特征值所对应的特征向量。5分析步骤5.1 确定待分析的原有若干变量是否适合进行因子分析(第一步)因子分析是从众多的原始变量中重构少数几个具有代表意义的因子变量的过程。其潜在的要求:原有变量之间要具有比较强的相关性。因此,因子分析需要先进行相关分析,计算原始变量之间的相关系数矩阵。如果相关系数矩阵在进行统计检验时,大部分相关系数均小于0.3且未通过检验,则这些原始变量就不太适合进行因子分析。进行原始变量的相关分析之前,需要对输入的原始数据进行标准化计算(一般采用标准差标准化方法,标准化后的数据均值为0,方差为1)。SPSS在因子分
3、析中还提供了几种判定是否适合因子分析的检验方法。主要有以下3种:巴特利特球形检验(Bartlett Test of Sphericity)反映象相关矩阵检验(Anti-image correlation matrix)KMO(Kaiser-Meyer-Olkin)检验(1)巴特利特球形检验该检验以变量的相关系数矩阵作为出发点,它的零假设H0为相关系数矩阵是一个单位阵,即相关系数矩阵对角线上的所有元素都为1,而所有非对角线上的元素都为0,也即原始变量两两之间不相关。巴特利特球形检验的统计量是根据相关系数矩阵的行列式得到。如果该值较大,且其对应的相伴概率值小于用户指定的显著性水平,那么就应拒绝零假
4、设H0,认为相关系数不可能是单位阵,也即原始变量间存在相关性。(2)反映象相关矩阵检验该检验以变量的偏相关系数矩阵作为出发点,将偏相关系数矩阵的每个元素取反,得到反映象相关矩阵。偏相关系数是在控制了其他变量影响的条件下计算出来的相关系数,如果变量之间存在较多的重叠影响,那么偏相关系数就会较小,这些变量越适合进行因子分析。(3)KMO(Kaiser-Meyer-Olkin)检验该检验的统计量用于比较变量之间的简单相关和偏相关系数。KMO值介于0-1,越接近1,表明所有变量之间简单相关系数平方和远大于偏相关系数平方和,越适合因子分析。其中,Kaiser给出一个KMO检验标准:KMO0.9,非常适合
5、;0.8KMO0.9,适合;0.70.8,一般;0.60)和相应的标准正交的特征向量li;根据相关系数矩阵的特征根,即公共因子Zj的方差贡献(等于因子载荷矩阵L中第j列各元素的平方和),计算公共因子Zj的方差贡献率与累积贡献率。主成分分析是在一个多维坐标轴中,将原始变量组成的坐标系进行平移变换,使得新的坐标原点和数据群点的重心重合。新坐标第一轴与数据变化最大方向对应。通过计算特征根(方差贡献)和方差贡献率与累积方差贡献率等指标,来判断选取公共因子的数量和公共因子(主成分)所能代表的原始变量信息。公共因子个数的确定准则:1)根据特征值的大小来确定,一般取大于1的特征值对应的几个公共因子/主成分。
6、2)根据因子的累积方差贡献率来确定,一般取累计贡献率达85-95%的特征值所对应的第一、第二、第m(mp)个主成分。也有学者认为累积方差贡献率应在80以上。5.3 因子变量的命名解释因子变量的命名解释是因子分析的另一个核心问题。经过主成分分析得到的公共因子/主成分Z1,Z2,Zm是对原有变量的综合。原有变量是有物理含义的变量,对它们进行线性变换后,得到的新的综合变量的物理含义到底是什么?在实际的应用分析中,主要通过对载荷矩阵进行分析,得到因子变量和原有变量之间的关系,从而对新的因子变量进行命名。利用因子旋转方法能使因子变量更具有可解释性。计算主成分载荷,构建载荷矩阵A。载荷矩阵A中某一行表示原
7、有变量 Xi与公共因子/因子变量的相关关系。载荷矩阵A中某一列表示某一个公共因子/因子变量能够解释的原有变量 Xi的信息量。有时因子载荷矩阵的解释性不太好,通常需要进行因子旋转,使原有因子变量更具有可解释性。因子旋转的主要方法:正交旋转、斜交旋转。正交旋转和斜交旋转是因子旋转的两类方法。前者由于保持了坐标轴的正交性,因此使用最多。正交旋转的方法很多,其中以方差最大化法最为常用。方差最大正交旋转(varimax orthogonal rotation)基本思想:使公共因子的相对负荷的方差之和最大,且保持原公共因子的正交性和公共方差总和不变。可使每个因子上的具有最大载荷的变量数最小,因此可以简化对
8、因子的解释。斜交旋转(oblique rotation)因子斜交旋转后,各因子负荷发生了变化,出现了两极分化。各因子间不再相互独立,而是彼此相关。各因子对各变量的贡献的总和也发生了改变。斜交旋转因为因子间的相关性而不受欢迎。但如果总体中各因子间存在明显的相关关系则应该考虑斜交旋转。适用于大数据集的因子分析。无论是正交旋转还是斜交旋转,因子旋转的目的:是使因子负荷两极分化,要么接近于0,要么接近于1。从而使原有因子变量更具有可解释性。5.4 计算因子变量得分因子变量确定以后,对于每一个样本数据,我们希望得到它们在不同因子上的具体数据值,即因子得分。估计因子得分的方法主要有:回归法、Bartlet
9、te法等。计算因子得分应首先将因子变量表示为原始变量的线性组合。即:回归法,即Thomson法:得分是由贝叶斯Bayes思想导出的,得到的因子得分是有偏的,但计算结果误差较小。贝叶斯(BAYES)判别思想是根据先验概率求出后验概率,并依据后验概率分布作出统计推断。Bartlett法:Bartlett因子得分是极大似然估计,也是加权最小二乘回归,得到的因子得分是无偏的,但计算结果误差较大。因子得分可用于模型诊断,也可用作进一步分析如聚类分析、回归分析等的原始资料。关于因子得分的进一步应用将在案例介绍一节分析。5.5 结果的分析解释此部分详细见案例分析二、案例分析1 研究问题石家庄18个县市14个
10、指标因子,具体来说有人均GDP(元/人)、人均全社会固定资产投资额、人均城镇固定资产投资额、人均一般预算性财政收入、第三产业占GDP比重(%)、人均社会消费品零售额、人均实际利用外资额(万美元/人)、人均城乡居民储蓄存款、农民人均纯收入、在岗职工平均工资、人才密度指数、科技支出占财政支出比重(%)、每万人拥有执业医师数量、每千人拥有病床数。要求根据这14项内容进行因子分析,得到维度较少的几个因子。2 实现步骤【1】在“Analyze”菜单“Data Reduction”中选择“Factor”命令,如下图所示。【2】在弹出的下图所示的Factor Analysis对话框中,从对话框左侧的变量列表
11、中选择这14个变量,使之添加到Variables框中。【3】点击“Descriptives”按钮,弹出“Factor Analysis:Descriptives”对话框,如图所示。Statistics框用于选择哪些相关的统计量,其中:Univariate descriptives(变量描述):输出变量均值、标准差;Initial solution (初始结果)Correlation Matrix框中提供了几种检验变量是否适合做引子分析的检验方法,其中:Coefficients (相关系数矩阵)Significance leves (显著性水平)Determinant (相关系数矩阵的行列式)I
12、nverse (相关系数矩阵的逆矩阵)Reproduced (再生相关矩阵,原始相关与再生相关的差值)Anti-image (反影像相关矩阵检验)KMO and Bartletts test of sphericity (KMO检验和巴特利特球形检验)本例中,选中该对话框中所有选项,单击Continue按钮返回Factor Analysis对话框。【4】单击“Extraction”按钮,弹出“Factor Analysis:Extraction”对话框,选择因子提取方法,如下图所示:因子提取方法在Method下拉框中选取,SPSS共提供了7种方法:Principle Components An
13、alysis (主成分分析)Unweighted least squares(未加权最小平方法)Generalized least squares (综合最小平方法)Maximum likelihood (最大似然估价法)Principal axis factoring (主轴因子法)Alpha factoring (因子)Image factoring (影像因子)Analyze框中用于选择提取变量依据,其中:Correlation matrix (相关系数矩阵)Covariance matrix (协方差矩阵)Extract框用于指定因子个数的标准,其中:Eigenvaluse over
14、(大于特征值)Number of factors (因子个数)Display框用于选择输出哪些与因子提取有关的信息,其中:Unrotated factor solution (未经旋转的因子载荷矩阵)Screen plot (特征值排列图)Maximun interations for Convergence框用于指定因子分析收敛的最大迭代次数,系统默认的最大迭代次数为25。本例选用Principal components方法,选择相关系数矩阵作为提取因子变量的依据,选中Unrotated factor solution和Scree plot项,输出未经过旋转的因子载荷矩阵与其特征值的碎石图;
15、选择Eigenvaluse over项,在该选项后面可以输入1,指定提取特征值大于1的因子。单击Continue按钮返回Factor Analysis对话框。【5】单击Factor Analysis对话框中的Rotation按钮,弹出Factor Analysis: Rotation对话框,如下图所示:该对话框用于选择因子载荷矩阵的旋转方法。旋转目的是为了简化结构,以帮助我们解释因子。SPSS默认不进行旋转(None)。Method框用于选择因子旋转方法,其中:None(不旋转)Varimax(正交旋转)Direct Oblimin(直接斜交旋转)Quanlimax(四分最大正交旋转)Equa
16、max(平均正交旋转)Promax(斜交旋转)Display框用于选择输出哪些与因子旋转有关的信息,其中:Rotated solution(输出旋转后的因子载荷矩阵)Loading plots(输出载荷散点图)本例选择方差极大法旋转Varimax,并选中Rotated solution和Loading plot项,表示输出旋转后的因子载荷矩阵和载荷散点图,单击Continue按钮返回Factor Analysis对话框。【6】单击Factor Analysis对话框中的Scores按钮,弹出Factor Analysis: Scores对话框,如下图所示:该对话框用以选择对因子得分进行设置,其
17、中:Regression(回归法):因子得分均值为0,采用多元相关平方;Bartlett (巴特利法):因子得分均值为0,采用超出变量范围各因子平方和被最小化;Anderson-Rubin (安德森-洛宾法):因子得分均值为0,标准差1,彼此不相关;Display factor score coefficient matrix:选择此项将在输出窗口中显示因子得分系数矩阵。【7】单击Factor Analysis对话框中的Options按钮,弹出Factor Analysis: Options对话框,如下图所示:该对话框可以指定其他因子分析的结果,并选择对缺失数据的处理方法,其中:Missing
18、 Values框用于选择缺失值处理方法:Exclude cases listwise:去除所有缺失值的个案Exclude cases pairwise:含有缺失值的变量,去掉该案例Replace with mean:用平均值代替缺失值Cofficient Display Format框用于选择载荷系数的显示格式:Sorted by size:载荷系数按照数值大小排列Suppress absolute values less than:不显示绝对值小于指定值的载荷量本例选中Exclude cases listwise项,单击Continue按钮返回Factor Analysis对话框,完成设置。
19、单击OK,完成计算。3 结果与讨论(1)SPSS输出的第一部分如下:第一个表格中列出了18个原始变量的统计结果,包括平均值、标准差和分析的个案数。这个是步骤3中选中Univariate descriptives项的输出结果。Descriptive StatisticsMeanStd. DeviationAnalysis N人均GDP(元/人)22600.52118410.5546418人均全社会固定资产投资额15190.95155289.14499人均城镇固定资产投资额10270.36424874.14616人均一般预算性财政收入585.1712550.45659第三产业占GDP比重(%)29
20、.06129.46858人均社会消费品零售额6567.25663068.75463人均实际利用外资额(万美元/人)23.566740.31361人均城乡居民储蓄存款12061.23847363.08659农民人均纯收入4852.55561202.52970在岗职工平均工资18110.38892374.05754人才密度指数8.15485.37552科技支出占财政支出比重(%)1.3494.50193每万人拥有执业医师数量12.68838.88691每千人拥有病床数2.36081.16077(2)SPSS输出结果文件中的第二部分如下:该表格给出的是18个原始变量的相关矩阵Correlation
21、MatrixCorrelation1.000.503.707.883.776.571.821.567.507.759.737.247.600.454.356.648.480.780.559-.073.130.789.325.544.741.470.582.378.486.434.520.733.573.565.761.830.693.646.797.822.616.907.882.839.132.278.516.736.548.609.795.745.812.729.575.490.818.844.627.911.806.629.792-.007.264.388.647.411.752.868.315.570.626.210.885-.075.784.866.000.539.421.577.477.739.519.719.769.
copyright@ 2008-2022 冰豆网网站版权所有
经营许可证编号:鄂ICP备2022015515号-1