Як виміряти надійність рейтингу консенсусу (проблема з книги Kemeny-Snell)

Припустимо, що від кожного експерта пропонується класифікувати набір з об’єктів за порядком чи уподобанням. Нехай дозволяють зв'язки у рейтингу.$k$$n$

Джон Кемені та Лорі Снелл у своїй книзі "Математичні моделі соціальних наук" про 1962 рік пропонують вирішити наступну проблему:

ПРОЕКТ . Розробіть міру надійності ранжирування консенсусу експертами. Наприклад, це може ґрунтуватися на найбільшій можливій зміні, яка може відбутися шляхом зміни рейтингу одного експерта. (Необхідно звернути увагу на можливість множинних оцінок консенсусу.) Доведіть деякі теореми, що стосуються найбільш і найменш надійних консенсусів, можливих для даної .$1$$k$$k$

У книзі подано позначення для ранжування та методу зведення рейтингів (тобто отримання одного "колективного" рейтингу від багатьох "осіб"). Але жодної відповіді на вказану вище проблему не було.

По-перше, я подумав про коефіцієнт відповідності Кендалла$W$ , але, схоже, він не відповідає. Будь-які ідеї вітаються!

Для вимірювання надійності рейтингу консенсусу експертами можна скористатись розширенням Емонда та Мейсона. Щоб отримати детальніші пояснення, зверніться до: http://onlinelibrary.wiley.com/doi/10.1002/mcda.313/full або http://www.sciencedirect.com/science/article/pii/S0377221715008048$k$$\tau$