Ученые разработали метод, который объединяет спорные рейтинги в один

Новый подход учитывает неполные списки, разногласия между авторами рейтингов и изменения оценок со временем, а также показывает, насколько надежным оказался получившийся результат.

Ученые разработали метод, который объединяет спорные рейтинги в один
Можно оценивать и сами источники

BMRR позволяет сравнивать не только игроков, но и авторов рейтингов. В исследовании списки MLB оказались ближе всего к общему результату модели, следом шел ESPN. Рейтинги Bleacher Report и Yahoo Sports расходились с общим результатом сильнее.

Это не означает, что один источник обязательно прав, а другой ошибается. Метод лишь показывает, насколько оценки каждого из них совпадают с общей картиной и насколько отличаются их подходы.

«Вместо вопроса о том, кто занимает первое место, этот подход позволяет спросить, насколько мы уверены в таком выводе, почему конкретный человек оказался высоко и насколько вообще согласны между собой составители рейтингов», — сказала Марина Ваннуччи, профессор статистики Университета Райса и соавтор работы.

Метод подходит не только для спорта

Исследователи проверили BMRR и на смоделированных данных. Метод особенно хорошо показал себя в ситуациях, когда разные источники оценивают только часть объектов. Это распространенная проблема, поскольку эксперты далеко не всегда составляют полный список.

Авторы считают, что такой подход можно применять и за пределами спорта. Рейтинги используют поисковые системы, аналитики, эксперты и специалисты из разных областей. Везде возникает одна и та же проблема: несколько источников составляют разные списки, и их бывает трудно свести к единому результату.

«Основные трудности при работе с рейтинговыми данными удивительно похожи в разных областях и отраслях, — отметил Дэн Ковал, бывший сотрудник Университета Райса, а теперь исследователь Корнеллского университета. — Мы считаем, что BMRR может быть полезен во многих из них, а не только в Главной лиге бейсбола».

Код метода исследователи опубликовали в открытом доступе, чтобы другие специалисты могли использовать BMRR для анализа собственных рейтингов.

Статистика нашла разницу между мужской и женской красотой

Математики нашли самый худший способ вешать картину

Подписывайтесь и читайте «Науку» в MAX