《统计学的基础知识》由会员分享,可在线阅读,更多相关《统计学的基础知识(113页珍藏版)》请在金锄头文库上搜索。
1、预备内容:统计学基础知识2021/6/161统计学statistics统计学是收集、分析、解释与报告数据资料的一门科学。“asciencedealingwiththecollection,analysis,interpretationandpresentationofmassesofnumericaldata”.-Webster国际大辞典2021/6/162第一节 统计学的一些基本概念 1. 总体与样本2. 变量与随机变量3. 同质与变异4. 参数与统计量5. 误差与错误6. 准确性与精确性2021/6/1631.总体与样本Populationandsample样本:从总体中随机抽取的部分观察
2、单位。如某单位男士的身高总体:根据研究目的确定的同质研究对象的全体(集合)。如成年人的身高。分有限总体与无限总体2021/6/164从总体中得到样本的方法:抽样。 (抽样方法与样本量)从样本推论总体的方法:统计推断 (区间估计,假设检验等)抽样与推断2021/6/165p变量可以测量的任何特征或属性。Anycharacteristicorattributethatcanbemeasured。如热量值、蛋白质含量、碳水化合物含量。p随机变量在概率论中称变量为随机变量2、变量与随机变量Variableandrandomvariable2021/6/1663、变量(随机变量)的分类p离散型变量(di
3、scretevariable):计数资料(15,17,24,)p连续性变量(continuousvariable):计量资料(1.65,1.73,1.77,)p有序变量(ordinalvariable):等级资料(优、良、中、差)2021/6/1674.参数与统计量Parameterandstatistic参数:总体的统计指标,如总体均数、标准差,采用希腊字母分别记为、。通常是固定的常数。总体样本样本抽样 统计量 参 数 推断统计量:样本的统计指标,如样本均数、标准差,采用拉丁字母分别记为。参数附近波动的随机变量。2021/6/1685.误差与错误Errorandmistake误差:试验中不可
4、控因素所引起的实际观察值与客观真实值(真值)之差p系统误差systematicerrorp随机误差randomerror错误:试验过程中,人为作用引起的差错如药品称量错误,数据录入错误等2021/6/169误差(Error)测量值=真值+随机误差+非随机误差Xi = i + i1随机误差(抽样误差):影响因素众多,变化无方向性,不可避免,但可用统计方法进行分析。2系统误差受确定因素影响,大小变化有方向性。3非系统误差(错误)研究者偶然失误而造成的误差。偏差bias可以避免2021/6/16106. 准确性与精确性准确度(accuracy)或真实性(validity):观察值与真值的接近程度,受
5、系统误差的影响(常用指标:如灵敏度、特异性)。精密度(precision)、也称可靠度(reliability)或重复性(repeatability):重复观察时观察值与其均值的接近程度,受随机误差的影响(常用指标:一致百分率、Kappa值)。2021/6/1611系统误差使数据偏离了其理论值,影响数据的准确度准确度。随机误差使数据相互分散,影响了数据的精密度精密度。准确度和精密度都好 准确度差、精密度好 准确度?精密度差 准确度和精密度都差 2021/6/1612第二节计量资料的统计描述连续型变量(可测量的变量)1频数表与频数分布2平均指标(算术均数、几何均数、中位数、众数)3变异指标(极差
6、、百分位数与四分位间距、方差、标准差、变异系数)2021/6/1613一、频数表与频数分布(frequencytableandfrequencydistribution)2021/6/1614160名正常成年女子的血清甘油三酯(mmol/L)编号编号血清甘油三脂血清甘油三脂编号编号血清甘油三脂血清甘油三脂1 10.510.512 20.520.521531531.651.653 30.590.591541541.661.664 40.610.611551551.671.675 50.610.611561561.671.676 60.620.621571571.691.697 70.630.63
7、1581581.71.78 80.640.641591591.711.711601601.771.772021/6/1615 组段组段 (1) 划划 记记(2) 频数,频数,f(3) 组中值,组中值,X(4)0.5 30.550.6正正90.650.7正正正正120.750.8正正正正130.850.9正正正正正正170.951.0正正正正正正181.051.1正正正正正正正正201.151.2正正正正正正181.251.3正正正正正正171.351.4正正正正131.451.5正正91.551.6正正 81.651.71.8 合合计 31.751602021/6/1616男子血清总胆固醇水平
8、(mmol/L)Stem-and-LeafPlotFrequencyStem&Leaf5.002.7899913.003.011122233344434.003.555555556666666677777888899999999932.004.0000000111111122222333333444444435.004.5555555556666666667777788888889999917.005.0011222223333334410.005.55556778994.006.0022Stemwidth:1.00Eachleaf:1case(s)茎叶图2021/6/1617二.平均指标总称
9、为平均数(average)反映了资料的集中趋势(central tendency)。常用的有:1.算术均数(arithmeticmean),简称均数(mean)2.几何均数(geometricmean)3.中位数(median)4.众数(mode)5.调和均数(harmonicmean)6.截尾平均值(5%trimmedmean)2021/6/16181.均数(mean)适用条件:资料呈正态或近似正态分布的资料2021/6/16192.几何均数(geometricmean)2021/6/1620几何均数的适用条件与实例适用条件:呈倍数关系的等比资料或对数正态分布(正偏态)资料;如增长速度、抗体
10、滴度资料抗体的效价滴度的倒数分别为:10、100、1000、10000、100000,求几何均数。此例的算术均数为22222,显然不能代表滴度的平均水平。对于同一资料,几何均数中位数众数负偏态分布时:均数中位数 几何平均数 调和平均数 上述五种平均数,最常用的是算术平均数。几种平均数之间的关系2021/6/16295%trimmedmean:将一组数中去掉最小的5数值,再去掉最大的5,然后将剩余的90计算平均值得出的数值。减小了极端值的影响。截尾平均值2021/6/1630三.变异(variation)指标反映数据的离散度(Dispersion)。即个体观察值的变异程度。常用的指标有:1.极差
11、(Range)(全距)2.百分位数与四分位数间距PercentileandQuartilerange3.方差Variance4.标准差StandardDeviation5.变异系数CoefficientofVariation2021/6/16311.极差(Range)(全距)优点:简便缺点:1.只利用了两个极端值2.n大,R也会大3.不稳定2021/6/16321.6m1.8m2.百分位数与四分位数间距Percentileandquartilerange百分位数:数据从小到大排列,在百分尺度下,所占百分比对应的值。记为Px。四分位间距Quartilerange:QRP75P25四分位半间距Qu
12、artiledeviation:QDQR/2XFrequency25%75%2021/6/16333.方差方差(variance)也称均方差(meansquaredeviation),样本观察值的离均差平方和的均值。表示一组数据的平均离散情况。2021/6/16344.标准差标准差(Standarddeviation,Std,SD)即方差的正平方根;其单位与原变量X的单位相同。总体标准差2021/6/1635样本方差为什么要除以(n1)与自由度(degreesoffreedom)有关。自由度是数学名词,在统计学中,n个数据如不受任何条件的限制,则n个数据可取任意值,称为有n个自由度。若受到k个
13、条件的限制,就只有(nk)个自由度了。例如一个有5个观察值的样本,因为受到统计数的约束,在5个离均差中,只有4个数值可以在一定范围内自由变动取值,而第五个离均差必须满足这一限制条件。2021/6/1636基本概念:样本容量及样本个数 样本容量(n):指一个样本所包含的单位数。 一般将样本单位数不少于三十个(50?)的样本称为大样本,样本单位数不到三十个的样本称为小样本。 样本个数(g):又称样本可能数目,是指从一个总体中抽取了多少个样本。2021/6/1637基本概念:抽样误差 抽样误差:指按照随机原则抽样时,样本指标与总体指标之间存在的误差。 主要包括: 总体平均数和样本平均数的误差; 总体
14、标准差和样本标准差的误差。2021/6/1638基本概念:抽样平均误差 为什么要研究抽样平均误差? 未知 实际误差未知: 即使知道,由于样本均值是随机的,每次的误差也不一样。2021/6/1639均数的抽样误差与标准误例如,从总体均数=4.136mmol/L、标准差=0.817mmol/L的正态分布总体N(4.136,0.8172)中,随机抽取n人为一个样本(n=5,10,20,30),并计算该样本的均数、标准差。如此重复抽取1000次(g=1000),可得到1000份样本,可得到1000份均数和标准差S。2021/6/164010001000份样本的均数和标准差份样本的均数和标准差均数的抽样
15、误差与标准误2021/6/1641 将这1000份样本的均数看成新变量值,按频数分布方法,得到这1000份样本均数的直方图。随机抽样所得随机抽样所得10001000份样本均数的分布份样本均数的分布当n5时2021/6/1642当n10时2021/6/1643当n20时2021/6/1644当n30时2021/6/1645 1000份样本均数的抽样分布特点样本含量 均数 均数标准差 n mean sd 5 4.14030 0.36305 10 4.14039 0.25024 20 4.13859 0.17849 30 4.14173 0.14954 总体均数4.136总体标准差0.8172021
16、/6/16461000份样本均数的抽样分布特点:样本均数的抽样分布特点:1000份样本均数中,各样本均数间存在差异,但各样本均数在总体均数周围波动。样本均数的分布曲线为中间高,两边低,左右对称,近似服从正态分布。随着样本量增加,样本均数的标准差明显变小:2021/6/16474个抽样实验结果比较通过增加样本含量n来降低抽样误差。2021/6/16485.变异系数(Coefficientofvariation,CV)适用条件: 观察指标单位不同,如身高、体重 同单位资料,但均数相差悬殊均数 标准差变异系数青年男子 身高170 cm6 cm3.5体重60 kg7 kg11.72021/6/1649
17、6.数据的标准得分假定两个水平类似的班级(一班和二班)上同一门课,但是由于两个任课老师的评分标准不同,使得两个班成绩的均值和标准差都不一样(SPSS数据:grade.sav)。分数的均值标准差CV一班78.539.4312%二班70.197.0010%那么得到90分的一班的张颖是不是比得到82分的二班的刘涛成成绩绩更更好好呢呢?怎么比较才能合理呢?2021/6/1650数据的标准得分均值和标准差不同的数据不能够直接比较,但是可以把它们进行标准化,然后再比较标准化后的数据。一个标准化的方法是把原始观测值(亦称得分,score)和均值之差除以标准差;得到的度量称为标准得分(standardscor
18、e,又称为z-score)。即:2021/6/1651数据的标准得分然后可以比较来自不同样本的标准得分。这样:张颖的标准得分为刘涛的标准得分为显然如果两个班级水平差不多,刘刘涛涛的的成成绩绩应应该该优优于于张张颖颖的的成成绩绩;这是在标准化之前的数据中不易看到的。2021/6/1652p原始数据是在各自的均值附近,散布也不一样。但它们的标准得分则在0周围散布,而且散布也差不多。 p实际上,任何样本经过这样的标准化后,就都变换成均值为0、方差为1的样本。标准化后不同样本观测值的比较只有相对意义,没有绝对意义。 2021/6/1653第三节计数资料的统计描述2021/6/1654按年龄(2岁一组)
19、与职业整理年龄工人 管理人员 农民 商业服务无知识分子 总计18 2 0 0 0 3 0 520 9 2 610 18 0 452228 71024 70111502450342852153443612650432545133703662834351034 78572483011141122 39171143214 2 314 24 3 6034 4 2 5 3 12 2 2836 2 1 1 4 5 1 1438 3 1 1 0 2 1 840 0 0 2 0 0 0 2合计 207 14110220853720614012021/6/1655统计软件的种类SPSS:p这是一个很受欢迎的统计
20、软件;p容易操作,输出漂亮,功能齐全;p对于非统计工作者是很好的选择。 Excel:p作为数据表格软件,有一定统计计算功能;p对于简单分析比较方便;p对于较复杂的分析,需要使用函数,甚至根本没有相应的方法了。多数专门一些的统计推断问题还需要其他专门的统计软件来处理。2021/6/1656统计软件的种类SAS:p功能非常齐全的软件;p某些美国政府机构认可;p需要一定的训练才可以使用,对于非专业统计人员不那么方便。 S-plus:p统计学家喜爱的软件;p其功能齐全,具有强大的编程功能;p专业统计人员可以编制自己的程序来实现自己的理论和方法。2021/6/1657统计软件的种类Statistica:
21、p容易操作;p统计资料分析、图表、资料管理;p应用程序开发。Origin:p容易操作;p输出图形的清晰度高(很多杂志要求)。2021/6/1658第三节 常见的概率分布 一概率的有关概念二概率分布概述三离散型随机变量的概率分布四正态分布五常用的抽样分布2021/6/1659一概率的有关概念2021/6/1660样本的实际发生率称为频率。设在相同条件下,独立重复进行n次试验,事件A出现f 次,则事件A出现的频率为f/n。概率:随机事件发生的可能性大小,用大写的P 表示;取值0,1。样本含量n越大,频率的波动幅度越小,频率越接近概率。频率与概率 frequencyandprobability202
22、1/6/1661必然事件 P = 1随机事件 0 P 1不可能事件 P = 0 P 0.05(5)或P 0.01(1)称为小概率事件(习惯),统计学上认为不大可能发生。随机事件 RandomeventsCertainCertainImpossibleImpossible0.5012021/6/1662 概率分布:描述随机变量值xi及这些值对应概率P(X=xi)的表格、公式或图形。 离散型随机变量离散型随机变量概率分布概率分布连续型随机变量连续型随机变量概率分布概率分布二 概率分布概述2021/6/16631. 1. 离散离散型随机变量的型随机变量的概率分布概率分布2021/6/1664离散型随
23、机变量的概率分布(例一)抗体滴度人数,x比例,f(x)1:101:201:401:801:1601:3201:6401:1280合计431010111514269.058.043.145.145.159.217.203.0291.000f(x)2021/6/1665离散型随机变量的概率分布(例二)N=10,=0.2如新手上路某事件出错的概率是0.2,连续进行10次这样的事件,出现010次错误的概率分布:2021/6/16662.连续型随机变量的概率分布 与离散型变量不同的是连续型变量的取值充满整个数值区间,无法一一列出其每一个可能值。 一般将连续型随机变量整理成频数表,对频数作直方图,直方图的
24、每个矩形顶端连接的阶梯形曲线来描述连续型变量的频数分布。 2021/6/16672021/6/1668如果样本量很大,组段很多,矩形顶端组成的阶梯型曲线可变成光滑的分布曲线。大多数情况下,可采用一个函数拟合这一光滑曲线。这种函数称为概率密度函数(Probabilitydensityfunction,Pdf)。xxxfff2021/6/1669如果连续型随机变量X的概率密度函数记为:则在区间x1,x2范围内的概率可由微积分函数定义2021/6/1670三离散型随机变量的概率分布离散型随机变量的分布1、二项分布2、泊松分布连续型随机变量的分布正态分布2021/6/1671毒性试验:白鼠死亡生存临床
25、试验:病人治愈未愈临床化验:血清阳性阴性任一事件成功(A)失败(非A)这类“成功失败型”试验称为Bernoulli试验。1、二项分布Binomialdistribution2021/6/1672Bernoulli试验序列n次Bernoulli试验构成了Bernoulli试验序列。其特点(如抛硬币)如下:(1)每次试验结果,只能是两个互斥的结果之一(A或非A)。(2)每次试验的条件不变。即每次试验中,结果A发生的概率不变,均为。(3)各次试验独立。即一次试验出现什么样的结果与前面已出现的结果无关。2021/6/1673成功次数的概率分布二项分布例设某毒理试验采用白鼠共3只,它们有相同的死亡概率,
26、相应存活概率为1-。记试验后白鼠死亡的例数为X,分别求X0、1、2和3的概率2021/6/16743只白鼠各种试验结果及其发生概率2021/6/16752021/6/1676二项分布的概率计算=BINOMDIST(1,3,0.4,0)2021/6/1677=0.5,正态0.5,左偏二项分布的特点2021/6/16782、 泊松分布当二项分布中n很大,很小时,二项分布就变成为Poisson分布,所以Poisson分布实际上是二项分布的极限分布。由二项分布的概率函数可得到泊松分布的概率函数为:2021/6/1679全部右偏越大越趋于正态PPoisson分布概率的特点2021/6/1680Poiss
27、on分布与正态分布正态分布及二项分布二项分布的关系当较小时,Poisson分布呈偏态分布,随着增大,迅速接近正态分布,当20时,可以认为近似正态分布。Poisson分布是二项分布的特例,某现象的发生率很小,而样本例数n很大时,则二项分布接近于Piosson分布。n(应用:Poisson替代二项分布)2021/6/1681四正态分布 正态分布(Normaldistribution)也叫高斯分布(Gaussiandistribution),是最常见、最重要的一种连续型分布。 1、正态分布的数学形式 2、正态曲线 3、标准正态分布 4、曲线下面积2021/6/16821、数学形式2021/6/168
28、32、正态曲线(normalcurve)图形特点:1.钟型2.中间高3.两头低4.左右对称5.最高处对应于X轴的值就是均数6.曲线下面积为17.标准差决定曲线的形状X Xf f( (X X) ) 2021/6/1684N(,0.52)、N(,12)、N(,22) N(1 ,2)、)、N(2 ,2) 正态分布曲线由两个参数决定,即总体均数和总体标准差。在不变的情况下,函数曲线形状不变,若变大时,曲线位置向右移;若变小时,曲线位置向左移,故称为位置参数。在不变的情况下,函数曲线位置不变,若变大时,曲线形状变的越来越“胖”和“矮”;若变小时,曲线形状变的越来越“瘦”和“高”,故称为形态参数或变异度参
29、数。2021/6/16853、标准正态分布标准正态离差标准正态分布:N(0,1)正态分布:2021/6/1686p标准正态分布的概率密度函数实质上就是正态分布的概率密度函数中=0,=1的情形。p实质上是作了一个坐标轴的平移和尺度变换,使正态分布具有平均数为=0,标准差=1。这种变换称为标准化正态变换。p因此将这种具有平均数为=0,标准差=1的正态分布称为标准正态分布,记为N(0,1)。2021/6/16874、曲线下面积u-累计概率分布函数:2021/6/1688曲线下面积分布规律0-11-1.961.96-2.582.5868.27%95.00%99.00%-+-1.96+1.96-2.58
30、+2.5868.27%95.00%99.00%2021/6/1689正态分布的特征,归纳起来有两点:p对称性(symmetry)p正态峰(mesokurtosis)偏度系数和峰度系数skewnessandkurtosis2021/6/1690偏度skewness若分布不对称就是偏态,长尾拖向右侧(变量值较大的一侧)叫做正偏态,或右偏态;长尾拖向左侧(变量值较小的一侧)叫做负偏态,或左偏态。 正态分布时,mean、median、mode相等2021/6/1691偏度系数(skewness):若分布是以平均值对称的,则偏度=0;若分布是右偏的,则偏度系数 0;若分布是左偏的,则偏度系数 0。202
31、1/6/1692峰度系数是描述随机变量陡峭度的参数,分为:正态峰、平阔峰、尖峭峰 。峰度kurtosisa.尖峭峰 b.正态峰c.平阔峰2021/6/1693峰度系数(kurtosis):Skewness.088kurtosis-0.2215血清总胆固醇.sav2021/6/16941.正态分布在横轴上方均数处最高。2.正态分布以均数为中心,左右对称。3.正态分布由参数和确定。 是位置参数,当不变时,越大,则曲线沿横轴越向右移动;反之,越小,曲线沿横轴越向左移动 是变异度参数,当不变时,越大,表示数据越分散,曲线越平坦;越小,表示数据越集中,曲线越陡峭4.标准正态分布曲线与X轴所围成的面积为1
32、。5.在的区间内占总面积的68.27%,在1.96的区间内占总面积的95%;在2.58的区间内占总面积的99%。5、正态分布的特征2021/6/1695五常用的抽样分布2021/6/1696如果总体不是正态总体,但其均数和标准差分别为和,则当样本含量n不断增大时,样本均数的分布也趋近于正态分布,且其均数为,标准差为不论总体的分布形式如何,只要样本含量n足够大时,样本均数的分布就近似正态分布,此称为中心极限定理。1、中心极限定理2021/6/16972、常用的三种抽样分布t 分布F分布2 2分布均为连续型随机变量分布,分布只与自由度,即样本含量有关。2021/6/1698t分布根据中心极限定理,
33、当样本含量足够大时,对从均数为,标准差为的任意总体中随机抽样所得的样本均数进行标准化变换,有2021/6/1699t分布的演化由于总体标准差往往是未知的,此时往往用样本标准差s代替总体标准差,这里,为自由度,取值为n-1由W.S.Gosset以student的名义提出全国成年人身高平均值我们班身高的标准误2021/6/16100 f(t) =(标准正态曲线) =5 =10.10.2-4-3-2-1012340.3自由度分别为1、5、时的t 分布:t分布的图形2021/6/16101t分布的性质pt分布为一簇单峰分布曲线,高峰在0的位置上,说明从正态总体中随机抽样所得样本计算出的t值接近0的可能
34、性较大。pt分布以0为中心,左右对称。p分布的高峰位置比u 分布低,尾部高。pt分布与自由度有关,自由度越小,t分布的峰越低,而两侧尾部翘得越高;自由度逐渐增大时,t分布逐渐逼近标准正态分布;当自由度为无穷大时,t分布就是标准正态分布。2021/6/16102t分布曲线下的面积-tt0GAMMADIST2021/6/16103t 界值表1.8122.228-2.228tf (t)=10的t分布图2021/6/161042分布(chi-squaredistribution)2021/6/161053.847.8112.59P P0.050.05的临界值的临界值2分布(chi-squaredist
35、ribution)5.99图中列出了各种自由度的上95分位点对应的概率,如20.05(2)=5.99。2021/6/16106F 分布2021/6/16107F分布的概率密度函数F分布是由英国著名统计学家RonaldA.Fisher提出的。GAMMADIST2021/6/16108F 分布曲线2021/6/16109F 分布曲线下面积与概率2021/6/16110小结随机变量、概率分布、抽样分布是统计学推断的基础二项分布描述二项分类变量两种观察结果的出现规律。泊松分布是二项分布的特例,常用于事件发生率很小,样本含量很大的情况。正态分布是其他分布的极限分布,许多统计方法的理论基础。检验统计量分布(或抽样分布)包括:卡方分布,t分布,F分布等。这些分布是卡方检验、t检验、方差分析等假设检验的基础。 2021/6/16111谢谢大家!2021/6/16112 结束语结束语若有不当之处,请指正,谢谢!若有不当之处,请指正,谢谢!