澳大利亚的大学没有数学方面的研究生院。”一些大学为优秀学生提供奖学金,到英国继续上研究生,但是墨尔本大学没有。“当我学习4年后离开墨尔本大学时,我尚未接受过研究方面的训练,但是我想我已经学会该怎么去学习和使用数学,可以去就应付所碰到的任何问题……”然而,首要的问题是要赚钱来养活自己。
塔斯马尼亚大学正要找人教数学,皮特曼去应聘而成为了一名数学教授。整个系就两个人,一位新来的教授和一位兼职计量。该系要为所有其它系的本科生上数学课,因此新教授忙着讲课,占去了几乎所有的时间。当理事会决定招聘一位全职的数学教授时,一位理事曾听说过数学有一悠闲的的分支叫做统计学,因此问应聘者是否准备讲统计学的课程(不管统计学到底是什么东西)。
皮特曼回答:“我并不能说我具备统计学的专业理论知识,但是如果被聘用,我将稍做准备,在1927年开出这门课。”他不具备统计的专业知识,也不具备统计理论的任何其它相关知识。在墨尔本大学,他学地一门高级逻辑学的课程,老师用了几次课来介绍统计学。正如皮特曼所指出的,“当时,也就是在那里,我认定统计学并不是我所感兴趣的东西,也永远不会为它而苦恼。”
年轻的E?J?G?皮特曼在1926年秋天来到了塔斯马尼亚州的霍巴特(Hobart),只不过是一个本科生而已,却顶着教授的头衔。这是一个偏远的省级学校,根本感受不到身处伦敦和剑桥那种学术圈内的骚动。他写道,“直到1936年我没有发表过任何东西。之所以迟迟没有东西发表,主要有两个原因:一个是工作负担繁重,另一个是我所受教育背景的限制。”他的意思是说,他在数学研究方法上的训练不够。
到了1948年,当他将那篇非凡的论文投到《数理统计学年报》的时候,塔斯马尼亚大学数学系队伍有所壮大,已有一位教授(皮特曼)、一位副教授、、两位计量和两名助教。他们所开的数学课名目众多,既有应用数学方面的,也有理论数学方面的。皮特曼每周上12次课,周六也上课,同时获得了一些研究资助。从1936年开始,联邦政府为了促进澳大利亚高校的科学研究,每年拨出30000英镑进行资助。这些经费按人口在各州分配,因为塔斯马尼亚是一个较小的州,因此全校每年总共能得到2400英镑的资助。至于皮特曼能分到多少,他没有说。
慢慢地,皮特曼开展了多方面的研究,他发表的第一篇论文是关于流体力学中的一个问题。随后的3篇论文研究假设检验理论中几个特别的问题,这些论文本身倒并不怎么值得称道,但却是皮特曼的习作,探讨如何来发展自己的观点,怎样将数学的不同分支想到联系起来。
直到他开始撰写1948年那篇论文,皮特曼才建立起有关统计假设检验的性质以及过去的检验(参数方法)与新的检验(非参数方面)之间相互关系的一个清晰的逻辑框架。凭借着新方法,他解决了上述两大难题。
他的发现令人惊讶,甚至当原来的假设为真时,非参数检验也几乎与参数检验一样的棒。皮特曼成功地回答了第一个问题:当我们知道参数模型和本应使用特定的参数检验时,如果还使用非参数检验,结果会有多差呢?皮特曼的答案时,根本不差。
第二个问题的答案更让人吃惊。如果数据不适合用参数模型,得差多远时使用非参数检验才会更好呢?皮特曼的计算表明,只需稍稍偏离参数模型,则非参数检验将远远地胜过参数检验。看起来,曾经深信别人早已做出了这个简单发现的化学家弗兰克?威尔科克森,似乎也是在无意中碰到了统计学中一块真正的点金石(philosopher’s stone)。皮特曼的结论表明,所有的假设检验都应该是非参数方法的。K?皮尔逊发现了带参数的统计分布,这仅仅是第一步,现在,统计学家们在解决统计分布的问题时,无需再为参数而烦恼了。
数学这东西往往是玄而又玄。在那些看似简单的方法背后,威尔科克森、曼、惠特尼和皮特曼对数据的分布作了一系列的假设,要理解这些假设或许又得花上一个25年的时间。第一个烦人的问题是由芝加哥大学(the University of Chicago)的R?R?巴哈杜尔(R。 R。 Bahadur)和L?J?萨维奇(L。 J。 (“Jimmie”) Savage)在1956年提出来的。几年前,当我将巴哈杜尔和萨维奇的论文给我的一位来自印度的朋友看时,他拿他们两人的名字匹配当戏谑,“Bahadur”一词在印度语是“勇士”(warrior)的意思,率先质疑非参数统计检验理论的是一名勇士和一个野蛮人(savage)。
巴哈杜尔和萨维奇所提出的那些问题实际上也正是源于异常值的问题,威尔科克森正是由该问题而首次提出了非参数检验方法。如果异常值极少,并且是完全“错误”的观测值,那么非参数方法将降低它们在统计分析中的影响。但是如果异常值系统性地污染了数据,采用非参数方法可能只会使分析更糟糕。我们将在第23章讨论有瑕疵数据分布(contaminated ditributions)的问题。
第17章 当部分优于总体时
在K?皮尔逊看来,概率分布是可以通过收集有关数据来验证的。他认为,若收集足够多的数据,那么可以用来代表总体的相关数据。《生物统计》杂志的记者们从古墓中搜集到了数以百计的颅骨,灌入颗粒状物以测定颅腔的容量大小,然后将得到的几百个数据送给K?皮尔逊。一名工作人员还深入中美洲的丛林中,测量了成百上千个当地土著居民的胳膊长度,这些数据也送到了K?皮尔逊的生物统计实验室。
然而,K?皮尔逊所使用的方法存在一个根本性的缺陷。他获得的数据现在被称为“便利样本”(opportunity sample),都属于那些最容易得到的数据,并不能真正代表总体分布。他们测定的颅腔大小,都只是来自那些碰巧被他们发现而打开了墓穴,那些没有被发现的可能会与之大相径庭。
20世纪30年代的早期,印度发现了一个便利抽样的典型案例。大包大包的黄麻堆到了孟买(Bombay)的码头上,准备装船运往英国。为了估计黄麻的价值,便从每包中抽取一些,黄麻的质量就由样本来确定。抽样是将一把中空的圆形刀片插入包中,再拔出来,刀片中央的空处便带出了少量的黄麻。在包装和上船过程中,外层的黄麻开始变质,而里面的被压得越来越紧,冬天的时候常常冻得结得一块。取样员将空心刀片插入包中时,由于中央更硬而发生偏离,所取的样品更多的是外层已经变质的黄麻。这种使得样本就会产生偏差,样本的质量偏低,实际上整包黄麻的质量要高出许多。
加尔各答市(Calcutta)总统学院物理系的普拉桑塔?钱德拉?马哈拉诺比斯(Prasanta Chandra Mahalanobis)教授经常引用这个例子(这是他在铁道公司工作时发现的,该公司将黄麻运往码头),说明为什么使得样本不可信。马哈拉诺比斯生于一个富裕的商人家庭,因此能够供他上本科和研究生,并且选择学习自己感兴趣的科学和数学。20世纪20年代,他来到了英国,师从K?皮尔逊和费歇尔。他的同学如F?N?大卫只能靠奖学金生活,他却能一边上学,一边过着大地主般的生活。回国后,他担任了总统学院物理系的系主任。接着不久,他又在1931年用自己的钱,在自家的一处房产中建立了印度统计研究所(Indian Statistical Institute)。
在印度统计研究所,他培养出了一批卓越的统计学家和数学家,其中不少都在这一领域做出了重要的贡献,如S?N?罗伊(S。 N。 Roy)、C?R?拉奥(C。 R。 Rao)、R?C?博斯(R。 C。 Bose)、P?K?森(R。 K。 Sen)和马丹?普里(Madan Puri),等等。马哈拉诺比斯的研究兴趣之一在于如何生成一个合适的、有代表性的样本数据。很明显,在许多情况下,几乎不可能得到一个总体的所有数据。例如,印度的人口是如此庞大,多少年来也没有人试图在一天之内搞一次全国性的普查,而这样的人口普查在美国曾经开展过。与此不同,印度的人口普查是在一年内完成的,全国不同地区分别在不同的月份开展。这样一来,印度的人口普查数据就不可能精确,在普查过程中会有出生和死亡、人口迁移,人口的自然状况也会发生变化。因此,没有人能确切地知道在特定的一天印度到底有多少人口 。
马哈拉诺比斯推断,如果
小说推荐
- 田园茶香之一品茶娘
- 作者:月莳萝】正文 第一章 苏家“娘,二姐醒了,你快来看”苏薇醒来时,第一眼就看到一个圆头圆脑的小男孩,大大的眼睛一眨不眨地盯着自己,看见自己醒了,欢呼着往屋外跑去。男孩身材瘦小,脑袋却是又大又圆,让苏薇想起小时候看过电影里的小萝卜头。小萝卜头穿着破旧的衣裳,那衣裳似乎是大人的衣服改小的,下摆长过膝
- 最新章:第139章
- 禁忌关系 by星静·茶叶·茶茶
- 星静/茶叶/茶茶甜蜜双人行电车上我的折翼天使重返人间+番外禁忌关系forum/msg/lovehuahua/m/5546.html禁忌关系 by星静/茶叶/茶茶“老爸啊~这里舒服吗“恩“那这里呢“唔“还是这里“恩呜“我说老爸啊~你怎么这么难搞啊?我伺候你半天了,你连一句舒服都没有,根本就是在藐视我的
- 最新章:第3章
- 一品茶美人
- 作者:月光码头文案:夏浅语的毕生目的是当好夏家家主,赚数不完的钱,谁妨碍她赚钱她砍死谁!她凭实力成为皇商,研茶道,开商路,通海道,一不小心成为全国首富,坐拥天下财富!景渊的毕生目的是娶个足够凶的娘子,能镇得住死在他手下的无数亡魂,再给他生一堆孩子。于是他们第一次见面时他道“宅斗商斗江湖斗,斗得好了就
- 最新章:第217章
- 重生亡灵圣骑士 作者:茶叶蛋
- *克小林《重生亡灵圣骑士》作者:茶叶蛋文案他,原本在地球活到十八岁,上有一老妈照着,平时也算遵纪守法,最多也就在001开心网上钓钓鱼,种种菜,养养鸡鹅牛羊,偷点鸡蛋什么的,竟然就这么穿越了,还是穿越到一个周围人长的都像骷髅的地方…话说回来…我牧场里养的熊猫仔还没收呢!难道是好友里暗暗的诅咒成功了?如
- 最新章:第74章
- 爱情如茶系列之菊花茶
- 《爱情如茶系列之菊花茶(出书版》作者:梨花烟雨【完结+番外】作者 梨花 插图 莯吉 出版社 龙马文化 ISSN 9789866349737 出版日期 2011/3/8 开本 32开简介:第一眼看到柳晖,林航就莫名的喜欢他。带点冷漠疏离感的干净秀气的柳晖,很容易就让人升腾起一股征服的欲望。林航是这么认
- 最新章:第25章
- 吾皇万岁_茶茶木
- 吾皇万岁作者:茶茶木文案一朝重生,过往错失的金大腿再度回到眼前,怎能不紧紧怀抱,奔小康!谷雨(狗腿笑:小妹甘为陛下抛头颅,洒热血,万死不辞!宁笙:这些就算了,侍寝,会么?双重生,日常甜宠,偶尔虐渣复仇,女主狗腿属性、技能点够够的,后期强大。PS:本文为伪兄妹梗,全程甜宠,智商下线,么么哒~坑品保证哟
- 最新章:第88章
- [茶药]重生沏茶师.
- 书名[茶药]重生沏茶师作者:路七酱、第一章 五月梅雨季节,被褥潮湿的似乎能挤出水来,她伸出手在床头摸了几把,将一件外套拖入被中 翻个身,顺利的将外套裹在身上,拉了拉衣领,将脑袋重新埋进了被子中 咚 临近破晓的空气突然传过来一阵肃穆浑厚的钟声【勤能补拙,占着这么一个身子,你都能混到如此程度,可见你“烂
- 最新章:第149章
- [茶药]重生沏茶师
- 作者:路七酱【由文、第一章五月梅雨季节,被褥潮湿的似乎能挤出水来,她伸出手在床头摸了几把,将一件外套拖入被中。翻个身,顺利的将外套裹在身上,拉了拉衣领,将脑袋重新埋进了被子中。咚—临近破晓的空气突然传过来一阵肃穆浑厚的钟声【勤能补拙,占着这么一个身子,你都能混到如此程度,可见你“烂泥扶不上墙,智商堪
- 最新章:第145章
- 一品术士
- 141780第1章 迷人的操作)万象城背靠钟鸣山脉,面朝恶鬼平原,乃是万象域的首府,城中的万象学院是万象域最著名的修炼学府。万象学院旁边的集市,一片熙熙攘攘的景象,行人摩肩擦踵,摊位遍地都是,卖灵兽材料,灵药灵丹灵符阵盘,术法模型构建心得的应有尽有。此外,还有各种卖美食的摊位,五颜六色的美食目不暇接
- 最新章:第184章