Прогноз проверяется прибором, а не другим прогнозом

Дождь либо был, либо нет, а прогноз называет вероятность. По среднему промаху всегда побеждал бы источник, который вечно обещает «дождя не будет»: в сухой день он прав целиком, а в мокрый ошибается один раз.

Поэтому осадкам ставим оценку Брайера — средний квадрат промаха названной вероятности мимо факта, нуля или единицы. Она наказывает и за уверенно обещанный дождь, которого не случилось, и за пропущенный ливень. В обоих случаях меньше значит лучше.

Она отдаёт только последние сутки. Истории у неё нет, поэтому её часы копятся вперёд, начиная со дня, когда мы её подключили. За прошлые месяцы выгружать нечего. Это не поломка.

Над Москвой это сеть метеорадаров ДМРЛ-С Росгидромета, склеенная в одну картинку с ячейкой 2.2 км. Радар посылает импульс в тучу и слушает эхо, поэтому отражаемость здесь именно измерена, а не посчитана моделью.

Где радара нет, ступенью ниже стоит спутниковая оценка: спутник видит облако сверху и по его виду прикидывает, идёт ли из него дождь. Это два разных утверждения об одном и том же дожде, поэтому подпись всегда называет то, что было на самом деле. Подменить здесь одно слово ради краткости — и страница начнёт врать ровно тем способом, против которого затевалась.

Оценкой Брайера нельзя выбирать порог, с которого час считается мокрым. Подняв порог, мы делаем событие более редким, и оценка улучшается сама, без единого улучшения в прогнозе.

Сравнимая между порогами величина — насколько прогноз лучше простой многолетней доли мокрых часов. Её и считает калибровочный скрипт проекта.

Не среднее по источникам. Для температуры, ветра и давления считается распределение: середина — линейная поправка к среднему по моделям, ширина — линейная функция того, насколько модели разошлись. Это метод EMOS/NGR. Когда модели спорят между собой, коридор шире, и ровно этого среднее сказать не умеет.

Четыре коэффициента на срез «город — величина — срок» подбираются на скользящем окне в 90 суток. Скорость ветра не бывает отрицательной, поэтому её распределение усечено нулём слева: иначе часть вероятности уходила бы на ветер медленнее нуля. Осадки сюда не идут — на событии «мокро или сухо» тот же приём не выигрывает у монотонной кривой поправки, которая там уже стоит.

Вес обратен ошибке, но берётся осторожно. Сама ошибка измерена по конечной выборке и шумит, а от шума такой вес раздувается вверх: источник, промолчавший в трудные часы, выглядел бы лучшим по горстке удачных замеров.

Поэтому вес вообще не считается раньше 47 разных суток истории, полное доверие оценка получает к 90 суткам, а между этими границами вес подтянут к равному. Это не перестраховка: если веса случайны, комбинация прогнозов оказывается смещённой даже когда каждый её участник несмещён.