结合多重假设检验的随机森林长期降水预测方法及应用

1

作者 李梦杰 刘琨 +4 位作者 牟海磊 殷兆凯 刘志武 吴迪 梁犁丽 《南水北调与水利科技（中英文）》 CAS CSCD 北大核心 2024年第5期920-926,共7页

为解决随机森林方法经验性选取预测因子时存在的错误发现率问题,引入多重假设检验领域控制错误发现率的方法对预测因子的筛选进行质量控制,将因子筛选由经验依赖转化为数据依赖,从而提出一种基于多重假设检验的随机森林方法长期降水预... 为解决随机森林方法经验性选取预测因子时存在的错误发现率问题,引入多重假设检验领域控制错误发现率的方法对预测因子的筛选进行质量控制,将因子筛选由经验依赖转化为数据依赖,从而提出一种基于多重假设检验的随机森林方法长期降水预测方法。以巴西巴拉那河上游流域为研究区,利用逐月气候系统指数,应用提出的方法对研究区2018-2020年54个雨量站点的逐月降水量进行模拟预测、检验和交叉验证。结果表明:与传统的随机森林方法相比,该方法预报精度更高,对不同站点1-12月的预测平均合格率达到64%,其中6月预测合格率达到84%,表明该方法可以作为流域长期降水预测的有效工具之一。 展开更多

关键词 随机森林方法 长期降水预测 预测因子筛选 质量控制 多重假设检验

在线阅读 下载PDF 职称材料

多重假设检验中FDR的控制与估计方法 被引量：15

2

作者 刘晋 张涛 李康 《中国卫生统计》 CSCD 北大核心 2012年第2期305-308,共4页

近年来,基因组学、蛋白组学和代谢组学等高通量检测技术得到迅速发展〔1-4〕,由此产生变量数目巨大的数据（如m〉2000）,而样品数目较小（如10≤n≤100）,用传统的统计检验方法对生物标志物进行鉴别会产生大量的假阳性结果 （如检验水... 近年来,基因组学、蛋白组学和代谢组学等高通量检测技术得到迅速发展〔1-4〕,由此产生变量数目巨大的数据（如m〉2000）,而样品数目较小（如10≤n≤100）,用传统的统计检验方法对生物标志物进行鉴别会产生大量的假阳性结果 （如检验水准取α=0. 展开更多

关键词 多重假设检验 估计方法 FDR 统计检验方法 假阳性结果 生物标志物 基因组学 检测技术

在线阅读 下载PDF 职称材料

多重假设检验及其在经济计量中的应用 被引量：8

3

作者 刘乐平 张龙 蔡正高 《统计研究》 CSSCI 北大核心 2007年第4期26-30,共5页

基于错误发现率(FDR:False Discovery Rate)的多重假设检验(MHT:Multiple Hypothesis Testing),已成为一种有效解决大规模统计推断问题的新方法。本文以错误控制为主线,对多重假设检验问题的错误控制理论、方法、过程和最新进展进行综述... 基于错误发现率(FDR:False Discovery Rate)的多重假设检验(MHT:Multiple Hypothesis Testing),已成为一种有效解决大规模统计推断问题的新方法。本文以错误控制为主线,对多重假设检验问题的错误控制理论、方法、过程和最新进展进行综述,并对多重假设检验方法在经济计量中的应用进行展望。 展开更多

关键词 多重假设检验(MHT) 错误发现率(FDR) 经济计量学 q-值

在线阅读 下载PDF 职称材料

多重假设检验中参数估计问题研究 被引量：3

4

作者 刘遵雄 田珊珊 《统计与决策》 CSSCI 北大核心 2017年第5期23-26,共4页

在多重假设检验中,真正原假设的个数m_0是未知的,但是它有着很重要的影响,因此,它在最近的统计文献中备受关注。文章综述了三种主要的估计方法:最低斜率法、三次样条法、均值估计方法。然后将上述三种方法结合起来,提出了新的估计方法:... 在多重假设检验中,真正原假设的个数m_0是未知的,但是它有着很重要的影响,因此,它在最近的统计文献中备受关注。文章综述了三种主要的估计方法:最低斜率法、三次样条法、均值估计方法。然后将上述三种方法结合起来,提出了新的估计方法:均值三次样条法,并主要研究了其在微阵列数据上的应用。大量的模拟研究表明,和其他方法相比,新的估计方法具有较小的偏差和标准差。最后利用真实数据来对估计方法进行评估,并找出了差异表达性基因。模拟和实际数据表明此方法具有显著性提高。 展开更多

关键词 多重假设检验 真正原假设 m0 微阵列数据

在线阅读 下载PDF 职称材料

多重假设检验及其在大数据特征降维中的应用 被引量：3

5

作者 潘舒 祁云嵩 《计算机科学》 CSCD 北大核心 2015年第S1期89-93,共5页

现有的特征降维方法大致可分为特征提取和特征选择。在特征提取过程中,数据中的原始特征通过某些数据变换被映射到一个低维空间。提取出的特征尽管与原始特征相关,但不再具有原始特征的物理意义,即特征提取改变了原始数据的表达形式。... 现有的特征降维方法大致可分为特征提取和特征选择。在特征提取过程中,数据中的原始特征通过某些数据变换被映射到一个低维空间。提取出的特征尽管与原始特征相关,但不再具有原始特征的物理意义,即特征提取改变了原始数据的表达形式。与特征提取不同,特征选择则在原有的特征集中选择一个子集,选择出的特征子集中不再含有与数据分析任务相关性不大或冗余的那部分特征,其结果可能引起信息丢失。因而现有的数据降维方法几乎都不是保真降维,其降维后的数据仅适合特定的后续数据分析任务,因而只能算是特定数据分析任务的前期数据预处理。从多重假设检验方法的角度分析了高维数据保真降维的方法及研究的关键所在。 展开更多

关键词 特征选择 降维 多重假设检验

在线阅读 下载PDF 职称材料

基于方向性多重假设检验和信息熵的函数型数据聚类新方法 被引量：12

6

作者 杜秀丽 姜晓虎 +1 位作者 孙晨瞳 于正 《南京师大学报（自然科学版）》 CAS CSCD 北大核心 2022年第4期1-9,共9页

近年来,针对函数型数据的聚类分析得到了一定程度的发展.但当数据属于无限维空间时,会给聚类带来一定的难度.传统聚类方法的局限性在函数型数据的聚类过程中日益凸显.因此,本文提出了一种针对函数型数据的新聚类方法,能够更好地适应数... 近年来,针对函数型数据的聚类分析得到了一定程度的发展.但当数据属于无限维空间时,会给聚类带来一定的难度.传统聚类方法的局限性在函数型数据的聚类过程中日益凸显.因此,本文提出了一种针对函数型数据的新聚类方法,能够更好地适应数据的特点,实现较好的聚类效果.首先基于错误发现率的方向性多重假设检验和信息熵的理论,提出了新的平行度统计量,用以描述函数型曲线的形态差异.在此基础上提出了新接近度的计算公式,最终改进了凝聚式层次聚类算法.新的聚类方法被应用到4个不同类型的函数型数据集中,并与现有的其它方法的聚类结果进行分析和比较,证明了改进后的凝聚式层次聚类方法的有效性. 展开更多

关键词 函数型数据聚类分析 错误发现率 方向性多重假设检验 信息熵 平行度

在线阅读 下载PDF 职称材料

基于多重假设检验市长公开电话文本的自动分类 被引量：1

7

作者 郝立柱 赵世舜 郝立丽 《吉林大学学报（理学版）》 CAS CSCD 北大核心 2008年第6期1101-1104,共4页

提出一种基于多重假设检验的特征加权朴素贝叶斯分类算法,该算法通过特征选择方法得到多个特征词集合,再按多重假设检验错误率为每个特征词集合配以不同的权重系数并参与到分类器的构建中.该方法已经应用到市长公开电话的文本分类中,通... 提出一种基于多重假设检验的特征加权朴素贝叶斯分类算法,该算法通过特征选择方法得到多个特征词集合,再按多重假设检验错误率为每个特征词集合配以不同的权重系数并参与到分类器的构建中.该方法已经应用到市长公开电话的文本分类中,通过构建的3个特征加权朴素贝叶斯分类器实现了投诉文本的计算机自动分类,且相对传统方法提高了分类器的效率和精度. 展开更多

关键词 多重假设检验 文本分类 特征加权 市长公开电话

在线阅读 下载PDF 职称材料

率或比的多重假设检验方法探讨 被引量：1

8

作者 董时富 刘筱娴 王增珍 《同济医科大学学报》 CAS CSCD 北大核心 1993年第6期456-458,共3页

采用方差分析所使用的最小显著性差异技术,为大样本情况下率(比)提出一种多重假设检验方法。其思想为:首先计算所有对子的u检验统计量,然后指出其u值超出以u检验个数调整的合适显著性概率百分点者为显著性差异对。为了改善正态近似性,... 采用方差分析所使用的最小显著性差异技术,为大样本情况下率(比)提出一种多重假设检验方法。其思想为:首先计算所有对子的u检验统计量,然后指出其u值超出以u检验个数调整的合适显著性概率百分点者为显著性差异对。为了改善正态近似性,用自然对数尺度来构造成对u检验统计量。 展开更多

关键词 统计学 多重假设检验 率 比例

在线阅读 下载PDF 职称材料

基于真假设比例广义推断的多重检验方法

9

作者 晋佩 徐兴忠 刘旭华 《北京理工大学学报》 EI CAS CSCD 北大核心 2011年第8期1005-1008,共4页

研究了多重假设检验方法的改进问题,基于真假设所占比例的广义推断,利用其广义置信上限对现有的多重假设检验方法进行改进.该方法更好地利用了水平,在功效上有很大提升.采用广义推断方法,即使在假设个数比较小时,也能对真假设所占比例... 研究了多重假设检验方法的改进问题,基于真假设所占比例的广义推断,利用其广义置信上限对现有的多重假设检验方法进行改进.该方法更好地利用了水平,在功效上有很大提升.采用广义推断方法,即使在假设个数比较小时,也能对真假设所占比例做出较好推断.模拟结果表明,该方法显著提高了传统方法的功效. 展开更多

关键词 多重假设检验 广义推断 信仰推断 置信上限

在线阅读 下载PDF 职称材料

基于标准置换检验的差异序列模式挖掘算法 被引量：2

10

作者 吴军 欧阳艾嘉 张琳 《计算机应用研究》 CSCD 北大核心 2021年第3期710-713,共4页

为了去除差异序列模式挖掘算法返回结果中的假阳性差异序列模式,提出了一个基于标准置换假设检验的算法SP-DSP。该算法首先运用GSP算法挖掘频繁序列模式,然后基于growth rate阈值生成差异序列模式候选集,并运用标准置换检验计算候选集... 为了去除差异序列模式挖掘算法返回结果中的假阳性差异序列模式,提出了一个基于标准置换假设检验的算法SP-DSP。该算法首先运用GSP算法挖掘频繁序列模式,然后基于growth rate阈值生成差异序列模式候选集,并运用标准置换检验计算候选集合中每个模式的p-value,最后运用多重假设检验度量过滤假阳性差异序列模式。实验结果证明SP-DSP算法能够去除掉一定数量的假阳性模式并尽可能地保留真差异序列模式,从而促进后续分类任务正确率的提升。 展开更多

关键词 差异序列模式挖掘 模式评估 多重假设检验 标准置换检验

在线阅读 下载PDF 职称材料

Knockoff方法研究进展综述

11

作者 袁攀旭 李高荣 《应用概率统计》 CSCD 北大核心 2024年第3期463-497,共35页

随着现代科学技术的快速发展,大数据时代正向我们走来.此时,统计方法的可重复性对于提高科学研究的严谨性至关重要.Barber和Candès[48]提出的knockoff方法是一种可结合任意特征重要性得分的变量选择算法,在发现真实效应的同时严格... 随着现代科学技术的快速发展,大数据时代正向我们走来.此时,统计方法的可重复性对于提高科学研究的严谨性至关重要.Barber和Candès[48]提出的knockoff方法是一种可结合任意特征重要性得分的变量选择算法,在发现真实效应的同时严格控制错误发现率(false discovery rate,FDR),其核心想法是构造称为knockoff的合成变量来模仿原始变量之间的相关结构.该方法无需计算p-值而在近年来受到广泛关注,成为当今统计和机器学习最热点的研究领域.本文主要介绍knockoff方法的最新研究进展,并简要探讨未来可能的研究方向. 展开更多

关键词 knockoff方法 多重假设检验 错误发现率 高维数据 稀疏性 变量选择 可重复性

在线阅读 下载PDF 职称材料

悬浮式深水炸弹综合防御鱼雷作战仿真系统确认方法 被引量：6

12

作者 孙慧玲 胡伟文 +2 位作者 宋业新 张磊潇 刘彩霞 《兵工学报》 EI CAS CSCD 北大核心 2020年第12期2523-2529,共7页

为解决悬浮式深水炸弹综合防御鱼雷作战仿真评估确认问题,建立舰艇生存概率的数学模型,根据仿真系统输出的拦截概率和规避概率样本数据,结合模型计算得到生存概率的样本值。针对生存概率样本的高维、海量等特性,提出将多重假设检验应用... 为解决悬浮式深水炸弹综合防御鱼雷作战仿真评估确认问题,建立舰艇生存概率的数学模型,根据仿真系统输出的拦截概率和规避概率样本数据,结合模型计算得到生存概率的样本值。针对生存概率样本的高维、海量等特性,提出将多重假设检验应用于作战仿真系统确认的思路,建立评估多重假设检验功效的Power模型以及计算生存概率样本p-值的p-value模型,给出模型中关键指标的求解步骤。根据p-value模型求解得到该仿真系统的各项重要评估指标值,对系统进行评估确认。研究结果表明,多重假设检验对仿真系统确认更严格,并且在控制第一类错误方面明显优于传统假设检验。 展开更多

关键词 悬浮式深水炸弹 综合防御 鱼雷作战 仿真系统 生存概率 多重假设检验

在线阅读 下载PDF 职称材料

错误发现率及其扩展和应用 被引量：3

13

作者 王婷 曾平 +1 位作者 黄水平 赵华硕 《重庆医科大学学报》 CAS CSCD 北大核心 2011年第12期1445-1448,共4页

目的:介绍多重假设检验中的错误发现率控制和在此基础上发展起来的q值和局部错误发现率。方法:将Benjamini和Hochberg(BH)控制程序、q值和局部错误发现率应用于一个前列腺癌微阵列数据的基因差别表达分析,控制和估计错误发现率。结果:... 目的:介绍多重假设检验中的错误发现率控制和在此基础上发展起来的q值和局部错误发现率。方法:将Benjamini和Hochberg(BH)控制程序、q值和局部错误发现率应用于一个前列腺癌微阵列数据的基因差别表达分析,控制和估计错误发现率。结果:当错误发现率为0.10时通过BH程序得到60个差别表达基因,q值小于0.10的有74个基因,局部错误发现率小于0.10的有31个基因。结论:高维数据多重假设检验中能同时控制或估计错误发现率,BH控制程序、q值和局部错误发现率的联合应用能提供更多的信息。 展开更多

关键词 微阵列数据 多重假设检验 错误发现率 Q值 局部错误发现率 前列腺癌

在线阅读 下载PDF 职称材料

微阵列数据分析和错误发现率 被引量：2

14

作者 王婷 曾平 +1 位作者 黄水平 赵华硕 《郑州大学学报（医学版）》 CAS 北大核心 2013年第1期59-62,共4页

目的:介绍微阵列数据的差异表达分析和基于错误发现率的多重假设检验。方法:通过t检验对一个关于前列腺癌的微阵列数据进行基因差异表达分析,采用BH程序进行错误发现率的控制和经验估计。结果:当错误发现率为0.05时通过BH程序得到21个... 目的:介绍微阵列数据的差异表达分析和基于错误发现率的多重假设检验。方法:通过t检验对一个关于前列腺癌的微阵列数据进行基因差异表达分析,采用BH程序进行错误发现率的控制和经验估计。结果:当错误发现率为0.05时通过BH程序得到21个差异表达基因;当以|t|≥3作为拒绝域时,得到105个基因,对应的错误发现率估计值为0.20。结论:相对传统的总体错误率,错误发现率更加适合于微阵列这种高维数据多重比较的错误控制;而且能同时控制或估计错误发现率。 展开更多

关键词 微阵列数据 多重假设检验 错误发现率 控制和估计 前列腺癌

在线阅读 下载PDF 职称材料

卡尔曼滤波器在传感器软故障诊断中的应用 被引量：1

15

作者 许秀玲 《计算机工程与应用》 CSCD 北大核心 2010年第11期230-232,共3页

传感器发生软故障的特征是变化缓慢、不易检测。为克服传感器检测这一缺点设计了一种软故障诊断算法。该算法是在多重故障假设基础上,使用卡尔曼滤波器产生残差,采用加权二乘方(Weighted Sum of Squared Residuals,WSSR)方法对滤波残差... 传感器发生软故障的特征是变化缓慢、不易检测。为克服传感器检测这一缺点设计了一种软故障诊断算法。该算法是在多重故障假设基础上,使用卡尔曼滤波器产生残差,采用加权二乘方(Weighted Sum of Squared Residuals,WSSR)方法对滤波残差进行处理,从而方便快速地检测出传感器的软故障,并实现隔离和重构。仿真实验表明,算法能很好地实现传感器软故障的检测、隔离和重构,不会发生误报和漏报现象。 展开更多

关键词 传感器软故障 卡尔曼滤波器 多重假设检验

在线阅读 下载PDF 职称材料

基于最优线性无偏预测任意协方差下估计错误发现率

16

作者 王湘玉 张宝学 齐春香 《统计与决策》 CSSCI 北大核心 2018年第10期20-23,共4页

多重假设检验是高维统计推断的基本问题之一,应用领域非常广泛。特别地,在全基因组相关性问题研究中,需要同时对数以万计的假设进行检验,目的是找到与疾病相关的单核苷酸多态性（即SNP）位点。检验中需控制总体错误率,对此,Benjamini和H... 多重假设检验是高维统计推断的基本问题之一,应用领域非常广泛。特别地,在全基因组相关性问题研究中,需要同时对数以万计的假设进行检验,目的是找到与疾病相关的单核苷酸多态性（即SNP）位点。检验中需控制总体错误率,对此,Benjamini和Hochberg（1995）提出了错误发现率（即FDR标准）。实际问题中的检验统计量往往具有相关性,鉴于此,文章在任意协方差结构下,针对混合效应模型,基于最优线性无偏预测的方法,估计随机变量,提出一种FDR的估计方法。模拟表明,文章给出的算法估计FDP在真值附近波动,理论上较合理。 展开更多

关键词 多重假设检验 FDR 混合效应模型 极大似然估计 最优线性无偏预测

在线阅读 下载PDF 职称材料

基于非线性回归分析的差异基因选择方法 被引量：1

17

作者 朱钦平 胡晓涵 祁云嵩 《科学技术与工程》 2010年第27期6675-6678,共4页

提出了一种新的用于微阵列基因差异表达多重假设检验的统计量计算方法,该方法利用基因表达值到各类样本数据中心的距离作为统计量进行多重假设检验,各统计量之间没有相关性,并且有效地减弱了数据噪声带来的假阳性结果,从而提高了多重假... 提出了一种新的用于微阵列基因差异表达多重假设检验的统计量计算方法,该方法利用基因表达值到各类样本数据中心的距离作为统计量进行多重假设检验,各统计量之间没有相关性,并且有效地减弱了数据噪声带来的假阳性结果,从而提高了多重假设检验的功效,所选择出的基因集也具有更好的分类能力。 展开更多

关键词 基因微阵列 基因选择 差异表达基因 多重假设检验

在线阅读 下载PDF 职称材料

基于卡尔曼滤波器的传感器故障诊断 被引量：10

18

作者 许秀玲 汪晓东 张浩然 《仪器仪表学报》 EI CAS CSCD 北大核心 2005年第z1期79-80,共2页

传感器故障诊断是当今研究的热点领域。利用卡尔曼滤波器及多重故障假设检验方法检测发动机控制系统传感器硬、软故障,并实现故障传感器的输出重构。仿真表明,所研究的方法能及时、有效地检测到故障传感器,并对其进行隔离和重构,没有发... 传感器故障诊断是当今研究的热点领域。利用卡尔曼滤波器及多重故障假设检验方法检测发动机控制系统传感器硬、软故障,并实现故障传感器的输出重构。仿真表明,所研究的方法能及时、有效地检测到故障传感器,并对其进行隔离和重构,没有发生误报和漏报现象。 展开更多

关键词 传感器故障诊断 卡尔曼滤波器 多重故障假设检验

在线阅读 下载PDF 职称材料

基于LPV建模的故障诊断方法研究 被引量：2

19

作者 缑林峰 王鑫 王镛根 《计算机工程与应用》 CSCD 北大核心 2008年第2期218-221,共4页

建立航空发动机动态线性变参数(LPV)数学模型准确反映发动机动态特性,较好地消除了模型偏差对故障检测准确率的影响,并针对传感器典型故障进行仿真。仿真结果表明,所研究方法准确度高,实时性好,对模型误差具有较好地鲁棒性。

关键词 航空发动机 故障诊断 LPV模型 多重故障假设检验

在线阅读 下载PDF 职称材料