Судейские игры – инструменты для анализа оценок соревнований

lsd пишет:

Мне кажется, что еще показательнее было бы отображать табличку в порядке выступлений. Будет видно, как у какого судьи замыливаются глаза к концу соревов.

поддержу, порядок выступлений имеет значение.

Амарант пишет:

Не совсем так. Допустим, в первых разминках попался очень сильный спортсмен, на три головы выше остальных (это бывает и из-за жеребъевки, и на рейтинговых стартах из-за потерянного рейтнига, вот как у Костнер к примеру в этом сезоне). И на фоне остальных этому спортсмену ставят очень высокие оценки.

Ну имя спортсмена тоже учитывается, особенно когда о громких именах речь идёт. Но общее правило есть, в слабых разминках выступают слабые, и это учитывается в оценках, как во второй оценке, так и в оценках за технику, там вращения с меньшей охотой плюсовать будут. Но здесь всё очень сложно учесть, как разделить "замыливание" от "низкого рейтинга", от просто от "низкого уровня", поскольку понятно, что у тех, у кого малый уровень, и рейтинг часто невысокий?

Амарант пишет:

Ок, хороший ответ, но эти таблички обязательно нужно КАЖДУЮ сопровождать кратким пояснением по этому поводу и насчет отбрасывания системой самых высоких и низких оценок. Стоит написать внятный и короткий текст в пару строк, которым предварять каждую таблицу. Иначе ими будут пользоваться только глядя на градиент и делая по нему выводы, что если судья красный, значит засуживает. Дело принципиальное, тк это не просто общее исследование работы сферического судьи в вакууме, а касается конкретных людей.

Спортсмены, которым судьи ставят те оценки, что отбрасываются, вообще говоря тоже конкретные люди. И им тоже не очень приятно видеть у себя в распечатке низкие оценки, даже не смотря на то, что они какие-то из них отбрасываются. Так что не надо про принципы, судьям тоже надо немного думать, прежде чем ставить оценки. Хотя и ошибки у всех бывают, и личное мнение, не совпадающее с мнением большинства (последнее я в целом приветствую, к слову).

Идеи судейства всем известны, в том числе и про выброс оценок. Ну более-менее. Вот сейчас судей с первенства России я не подписываю, хотя мне это не сложно было бы, более того, я эти таблицы для себя даже создаю. Ну просто потому, что в отличии от ЧМ, тут не видно явного манипулирования результатами. Кому интересны судьи, тот зайдёт и посмотрит, но такие люби обычно к комментариях не нуждаются.

А вообще, тебе интересны какие-то результаты? Либо же просто покритиковать? Почему-то я уверен, что второе.

Амарант пишет:

Хотя боюсь при широком распространении приведет обратно к введению анонимности судейства ))

Ну что возможно, то возможно. Вообще, надо было раньше табличками заняться, ну чтобы уже на ФГП они были. Но тогда я не умел парсить протоколы, чтобы их в программу для анализа загнать. Сейчас не думаю, что тема сильно взлетела, интересно, заметили ли это там на каком-то достаточно большом уровне? Если заметили, то да, не решат ли пересмотреть анонимность, всё-таки следующий сезон олимпийский

Амарант, не думаю, что в ISU решили «открыть личико» по доброте душевной. Скорее всего кто-то надавил, кого закрытость результатов не устраивала. Может даже МОК. Поэтому откатываться будет тяжело и неправильно. Будет интересно посмотреть какие решения примут на конгрессе в этом году, есть шанс что они все же как-то будут направлены на решение проблем, а не симптомов.

Я не вижу никакой трагедии в том, что оценки каких-то конкретных судей будут широко критиковаться. Если критика уместная — хорошо, нет — от кого зависят решения в состоянии компетентно разобраться и без подписей к каждой табличке.

Murchik пишет:

не вижу никакой трагедии в том, что оценки каких-то конкретных судей будут широко критиковаться. Если критика уместная — хорошо, нет — от кого зависят решения в состоянии компетентно разобраться и без подписей к каждой табличке.

Если судья действительно играет оценками, я только заподобные обсуждения. Но если кто-то просто слишком добрый или слишком строгий ко всем, а по градиенту в таблицах читается как судья подсуживающий или засуживающийконкретного спортсмена, то он теряет доброе имя вглазах общественности, что мне кажется неправильным. Кому надо разберутся, остальные будут шуметь мол вот какой плохой человек, купленный итд, и именно мы это будем провоцировать. Ложечки за диваном найдут, но осадочек останется, как говорится. Поэтому, мне кажется, в наших интересах как поставщиков такой обсуждаемой и отчасти скандальной информации, научить ВСЕХ как ею правильно пользоваться во имя сохранания доброго имени кажого конкретного честного судьи.

Амарант пишет:

поддержу, порядок выступлений имеет значение.

Никак на временные ряды подбиваете.

Tarantino пишет:

Сейчас не думаю, что тема сильно взлетела, интересно, заметили ли это там на каком-то достаточно большом уровне?

Взлетает потихоньку. Вот советский спорт уже эти таблицы приводит.
http://www.sovsport.ru/gazeta/article-item/970296
Скоро пойдет речь о русских хакерах, взломавших систему судейства ИСУ.

Tarantino пишет:

А вообще, тебе интересны какие-то результаты? Либо же просто покритиковать? Почему-то я уверен, что второе.

мне очень интересны твои таблички, по ЧМ я их не смотрела тк не было времени, там надо не просто же одним глазом глянуть..
я просто очень боюсь что из-за неучета каких-то нюансов с нашей стороны честно работающие судьи окажутся с подмоченной репутацией. Для тебя это просто проект, для них это дело чести. Поэтому и задаю все эти вопросы.
Я предполагаю что разработка будет очень востребована и со страниц Тулупа разойдется не только по российским сайтам и соцсетям, но и по всему миру. Поэтому прежде чем запускать эту бомбу, надо убедиться что она не рванет по своим (то есть по честно работающим судьям).

Relyut
ого!!
это Тарантино - американский блоггер?
таблички его, а ссылок на тулуп нету......

Амарант пишет:

Кому надо разберутся, остальные будут шуметь мол вот какой плохой человек, купленный итд, и именно мы это будем провоцировать.

Ну так разобрались же, где будет видно "злого судью", а где - подсуживание одним в пользу других. И без математики
А шумят всегда, и без табличек. Можно получить и обратный эффект: народ орет "на мыло!", а вы им - бледную табличку в доказательство, что все нормально

dustylace пишет:

это Тарантино - американский блоггер?

Там блоггер не американский, а со спортса.

Relyut
да там вообще загадка - некий Максим Тузин, автор этой статьи, ссылается на Блогер Полина Sandstorm, который "глубоко копнул", а Совспорт только пересказывает, что:
"С этого года зрители фигурного катания могут больше не задаваться вопросами «какой дурак поставил ноль за такой прекрасный тройной аксель?» и «кто умудрился оценить этот танец на десятки в компонентах?». Теперь мы знаем не только состав бригады, но и то, кому принадлежат конкретные колонки в протоколах. Результаты наблюдения за оценками стали настолько любопытными, что один американский болельщик даже создал инстаграм с самыми выдающимися случаями национального пристрастия на рабочем месте."

чего кто создал и откуда взяты таблички Тарантино?
из инста некого американского болельщика?
интересно...

Relyut, dustylace
Ну вообще, есть какой-то западный твиттер-проект: https://twitter.com/SkatingProtocol

где тоже разбираются протоколы. Они раньше появились, несколько месяцев назад, правда я про них не очень знал, хотя разово их картинки видел в перепостах. По всей видимости, у них это не очень автоматизировано, видимо они руками перебивают все GoE, поэтому не так быстро результаты выдают и ограниченно. Ну они ещё иногда отдельные элементы "разбирают", надо сказать, не всегда я с этим согласен, ну из того, что в последнее время публиковалось. Я здесь на форуме ещё в 2010 году какие-то расчёты проводил по поводу ОИ-2010, там тоже весело было. Но тогда руками, и анонимность была. Я к тому, что для меня идея была не нова, но на широкую публику в этом сезоне начал работать скорее этот американский твиттер, и публике он немного известен (хотя лично я именно про этот твиттер узнал на этом ЧМ, хотя картинки с него видел и раньше).

Статья же из СовСпорта – скорее перепечатка со СпортсРу: https://www.sports.ru/tribuna/blogs/sandstorm/1230144.htm
Ну и там даже ссылка на нас дана.

Но вообще, лично мне интересно, чтобы тема просто взлетела для обсуждений. Со ссылками на нас/меня, или без, не так важно в конечном счёте. Ну вроде как какая-то отдача есть, что приятно. Ну да, в том же СовСпорте картинки наших таблиц, а не со SkatingProtokol, могли бы, конечно, упомянуть, что тут русские тоже руку приложили... Но, повторюсь, не суть важно.

Tarantino
ну альтруист, ну по жизни!!

почитала Твиттер, захватывающий!
у Ханью штраф нашли за опоздание на позицию, по секундам на видео высчитывали ))
ну, патриоты!!

Tarantino пишет:

Ну вообще, есть какой-то западный твиттер-проект: https://twitter.com/SkatingProtocol где тоже разбираются протоколы. Они раньше появились, несколько месяцев назад, правда я про них не очень знал, хотя разово их картинки видел в перепостах.

Я видел, на голдене давали на них ссылки. Ваши полнее и с местами. Там у них еще по недокрутам интересные разборы есть.

лана ро пишет:

Ну так разобрались же, где будет видно "злого судью", а где - подсуживание одним в пользу других

Да, здесь и сейчас, а через день это обсуждение уйдет на другие страницы форума, а таблички останутся и разойдутся по инету. Я лишь прошу сопровождать их кратким пояснением. Думаю, прикрутить к каждой по две строчки с помощью копипейста не такая уж большая работа, но зато очень повысит объективность таблиц. И да, по-русски и по-английски, тк проект обещает стать интересным международной общественности

Амарант
Да, прикрутить не помешает

Tarantino пишет:

есть какой-то западный твиттер-проект: https://twitter.com/SkatingProtocol где тоже разбираются протоколы.

И не только они ... разбираются

https://twitter.com/rockerskating/status/848925790804815872

Tarantino пишет:

Ну чистое влияние – это показать, какой бы был результат, если бы судью просто выкинули.

dustylace пишет:

ого!! это Тарантино - американский блоггер? таблички его, а ссылок на тулуп нету.....

Relyut ответил в точку: "Скоро пойдет речь о русских хакерах, взломавших систему судейства ису. "

---

Нейтан всех порвёт. / Nathan Chen will tear up everyone. / No pasarán! Победа за нами! Алёна Косторная - Душа льда. / Alena Kostornaya - Soul of ice. Лучшая "Джульетта" - Настя Губанова, лучшая "Лебедь" - Алиса Лозко.