预测评估的意义
- 了解不同方法的预测水平和发展状况,促进方法的改进和预测水平的提高。
- 为综合集成决策提供依据,提高预测准确率。
预测准确率(P)
预测准确率是最古老、最普遍使用的评分方法
为预测正确的站(次)数
N 预测总站(次)数
在正负距平 2 分类预测中,预测距平与实况距平一致为预测正确。P>50% 才有意义,受气候概率影响,可能没有反应真实的预测水平。
预测评分()
预测评分是在距平符号预测百分率的基础上加上异常级加权得分构成
实际业务中经常将距平的异常程度划分为若干级,异常程度越大,越难预测,给予更多的分数。
公式
包括距平符号报对的以及预测与实况虽相反但是都属于正常级的站数
,一级异常报对的站数和权重
, 二级异常报对的站数和权重
N 参加评定的站数
权重系数
预测量达到 i 级异常的气候概率,权重系数与其相对级的气候概率成反比。
月尺度预测取;季节预测中.
异常级的 TS 评分
异常级评分主要用来评估预测异常级的能力,通常指达到二级或一级异常。
报对达到异常级的站数
实况达到异常级的站数
预测达到异常级的站数
TS 评分表示报对的异常级站数占实况和报错异常级的站数的百分比。目前预测的降水距平百分率或月平均气温距平出现异常级的概率较小,因此异常级评分也较低。
距平相关系数(ACC)
距平相关系数是预测距平和实况之间的一种相关系数,反映预测距平空间分布上的一致程度。
预测结果
观测值
特点
- 距平相关系数对大的距平比较敏感。
- 距平相关系数只能反映观测值与预测值之间相对趋势分布的相似度。
技巧评分(S)
技巧评分是相对于无技巧预测的预测评分方法,只有预测正确的次(站)数大于无技巧预测正确的次(站)数时,才可以判断预测是有技巧的。
:预测正确的次(站)数
N: 预测总次(站)数
C:无技巧预测正确的次(站)数
当预测正确的次(站)数等于无技巧预测的次(站)数时,无技巧评分,小于无技巧预测正确的次(站)数得负技巧评分,当全部次(站)都预测正确时得 100%
无技巧预测
- 随机预测
- 气候概率预测
- 持续性预测
临界成功指数(CSI)
同 TS 评分一样
预测 晴 | 预测 雨 | |
---|---|---|
真实 晴 | correctnegatives | falsealarms(误警) |
真实 雨 | misses(漏报) | hits(击中) |
公平技巧评分(ETS)
- ETS 是用于衡量对流尺度集合预报的预报效果。ETS 评分表示在预报区域内满足某降水阈值的降水预报结果相对于满足同样降水阈值的随机预报的预报技巧
num = (hits + falsealarms) * (hits + misses)
den = hits + misses + falsealarms + correctnegatives
Dr = num / den
ETS = (hits - Dr) / (hits + misses + falsealarms - Dr)
漏报率(MAF)
漏报率:实际降水区域中漏报的区域占据全部实际降水区域的比重
命中率(POD)
命中率:即预测出的实际降水区域占据全部实际降水区域的比重
偏差评分(Bia score)
偏差评分(Bia score)主要用来衡量模式对某一量级降水的预报偏差,该评分在数值上等于预报区域内满足某降水阈值的总格点数与对应实况降水总格点数的比值 (Kong et al, 2008)。用来反映降水总体预报效果的检验方法。
预测 晴 | 预测 雨 | |
---|---|---|
真实 晴 | correctnegatives | falsealarms(误警) |
真实 雨 | misses(漏报) | hits(击中) |
HSS 评分
用于定量评估不同方案的模拟。