随机效应模型


随机效应模型 random effects model
  随机效应模型(random effects models)是经典的线性模型的一种推广,就是把原来(固定)的回归系数看作是随机变量,一般都是假设是来自正态分布。如果模型里一部分系数是随机的,另外一些是固定的,一般就叫做混合模型(mixed models)。
  虽然定义很简单,对线性混合模型的研究与应用也已经比较成熟了,但是如果从不同的侧面来看,可以把很多的统计思想方法综合联系起来。概括地来说,这个模型是频率派和贝叶斯模型的结合,是经典的参数统计到高维数据分析的先驱,是拟合具有一定相关结构的观测的典型工具。
  随机效应最直观的用处就是把固定效应推广到随机效应。注意,这时随机效应是一个群体概念,代表了一个分布的信息 or 特征,而对固定效应而言,我们所做的推断仅限于那几个固定的(未知的)参数。例如,如果要研究一些水稻的品种是否与产量有影响,如果用于分析的品种是从一个很大的品种集合里随机选取的,那么这时用随机效应模型分析就可以推断所有品种构成的整体的一些信息。这里,就体现了经典的频率派的思想-任何样本都来源于一个无限的群体(population)。
  同时,引入随机效应就可以使个体观测之间就有一定的相关性,所以就可以用来拟合非独立观测的数据。经典的就有重复观测的数据,多时间点的记录等等,很多时候就叫做纵向数据(longitudinal data),已经成为很大的一个统计分支。
  上述两点基本上属于频率派,分析的工具也很经典,像极大似然估计,似然比检验,大样本的渐近性等。但是,应该注意到把固定的参数看做是随机变量,可是贝叶斯学派的观念。当然,mixed models 不能算是完全的贝叶斯模型,因为贝叶斯学派要把所有的未知的参数都看作是随机的。所以有人把它看做是半贝叶斯的 or 经验贝叶斯的。在这个模型上,我们可以看到两个学派很好的共存与交流,在现代的统计方法里两种学派互相结合的例子也越来越多。
  众所周知,随机效应有压缩(shrinkage)的功能, 而且可以使模型的自由度(df) 变小。这个简单的结果,对现在的高维数据分析的发展起到了至关重要的作用。事实上,随机效应模型就是一个带惩罚(penalty)的一个线性模型,有引入正态随机效应就等价于增加的一个二次惩罚。有趣的是,著名的岭回归(ridge regression) 就是一个二次惩罚,它的提出解决了当设计矩阵不满秩时最小二乘估计(LSE)无法计算以及提高了预测能力。于是,引入随机效应或者二次惩罚就可以处理当参数个数p 大于观测个数n的情形,这是在分析高维数据时必须面对的问题。当然,二次惩罚还有一个特性,如:计算简便,能选择相关的predictors,对前面的几个主成分压缩程度较小等。

热门词条

应收账款 区域货币 区间估计 CPI(Consumer Price Index) 资本成本 单向定单 金融危机 外汇通 认可 外汇佣金 资产 汇率 ISO 经济 增量成本 服务 CFO MIT 加工 什一税 租赁期 销售 股价反弹 SME 抽签偿还 REF MG金融集团 技术 空头陷阱 市场 美元 股利收入 中小企业 资本 美国 两会 中国股市 备付金率 价格 吊空 指数 股灾 葡萄牙币 pt 调至市价 清算 电子汇兑 下降三角形 Writer 税粮 FDI width Theta peg MACD 巴塞尔资本协议 冲账 管理 艾略特波段理论的含义 贴现现金流 外汇交易法 短期同业拆借 银行 消费发展战略 拔档 联系汇率制度 延期付款汇票 Exposure 短期国际商业贷款 公司 金融中介理论 阴烛 不完全竞争市场理论 (金融) 标准普尔(S&P) 外汇 美国贝勒大学 汇差清算率 正利差 分期付款汇票 软通货 出口物价指数 选择权买方 集中竞价 百分比回撤 无记名汇票最低报价戴维·凯特标准·普尔 500指数抵押品持平德国工业产值德国消费者物价指数成本协同效益 非农就业人口 交易 德国伊弗研究所景气调查 持平 道琼斯公用事业平均指数 指示汇票 金融 产品竞争力 财务指标 盈利能力比率 外汇实盘交易方式 Quote 国际收支差额 货币 外汇实盘交易指令 什么是外汇市场的过分反应 南洋商业银行 货币期货交易 BBC制度 波浪理论与新闻价值性的关系 希腊德拉马克