Як один графік отримає результати суб'єктивного рангового порядку?


17

Я шукаю спосіб візуалізації суб'єктивного ранжирування, окремо від моїх непараметричних тестів.

Я попросив 12 учасників класифікувати 8 різних предметів за різними суб'єктивними критеріями (окремі рейтинги для кожного). Для будь-якого індивідуального набору рейтингів я шукаю хороший спосіб візуалізації високих тенденцій рейтингу.

Я спробував як середні, так і радіочастотні графіки в середньому рейтингу, і я бачив, як одна людина використовує схему розкидання / кулі на кількість відповідей на рейтинг, але я не зовсім впевнений, що дає найкращий огляд. Або я можу використовувати 8 середніх оцінок, або 8 підрахунків кожного рейтингу за позицією.

Редагувати:

Наприклад: кожен стовпець - це елемент, кожен рядок - це рейтинг особи кожного з восьми елементів. У цьому прикладі не дуже сильна згода, але в цілому хотілося б зрозуміти найкращий спосіб передати загальні тенденції.

                        Item:
            A   B   C   D   E   F   G   H
Rater:  
  1         6   8   1   7   3   4   2   5
  2         1   3   8   7   6   5   2   4
  3         5   8   7   6   1   4   2   3
  4         5   8   7   6   4   2   1   3
  5         1   2   8   7   4   3   5   6
  6         1   7   8   5   6   2   4   3
  7         5   1   8   4   7   3   6   2
  8         4   2   8   7   6   1   5   2
  9         6   3   8   4   7   1   5   2
  10        3   2   8   7   4   1   5   6
  11        2   3   7   8   1   5   4   5
  12        8   5   6   7   2   3   1   4

Це може допомогти, якщо ви зможете перерахувати деякі свої дані. Крім того, яке програмне забезпечення ви, ймовірно, використовуєте?
Гун - відновить Моніка

Я додав матрицю прикладу, і, швидше за все, буду будувати графіки в Excel.
Джессі

Ви намагаєтеся відобразити позиції предмета або міжрейтингову угоду (або обидва)?
качан

1
Я запитував конкретно про позиції предметів, але якщо є хороший спосіб показати міжрейтингову угоду, окрім чогось, ніж W Кендалла, ще краще.
Джессі

Ви можете побудувати емпіричний CDF кожного стовпця. Це було б схоже на (цілий безлад) кривих ROC. Не впевнений, що вискочить, якби ти це зробив.
shabbychef

Відповіді:


8

Я зробив щось подібне для візуалізації подібних рейтингів. Метод, який я використав, дав мені короткий огляд того, як рейтинги пов'язані - нічого більше. У моєму рішенні використовувалися блискучі лінії Excel 2010 для створення перегляду невеликих кратних рейтингів (це можна зробити в інших версіях Excel, але це потребує трохи більше роботи). Крім того, я зазвичай використовую функцію таблиці Excel просто для прискорення роботи.

  1. Перекладіть матрицю так, щоб рядки містили всі значення на номінальний елемент.
  2. Якщо ранг 1 найкращий, інвертуйте свої ранги так 1 = 8,2 = 7 ... це просто допомагає вам як можна краще візуалізувати стовпці діаграми (а не порожнє місце).
  3. Підведіть підсумки рейтингів кожного питання. Потім сортуйте за цією сумою. Це ставить предмет із найкращими загальними оцінками першими та найгіршими загальними балами останніми. Цей рейтинг допоможе вам візуально ранжувати графіки, коли загальна модель може бути не очевидною (як це було у ваших вибіркових даних.
  4. Вставте іскрові лінії за допомогою даних вашого рейтингу (без стовпців підсумків) поруч із таблицею даних. Візуально, чим більше / більших барів там, тим краще загальний рейтинг.

У цьому підході немає нічого особливо аналітичного, але це досить швидкий спосіб візуалізації даних.

Суб'єктивні рейтинги

Зауважте, якщо у вас немає Excel 2010, ви можете створити відрізані графіки стовпців розміром комірок для кожного рядка, які приблизно однакові. Або ви можете використати сторонні додатки для їх створення.

EDIT: Таблиця та діаграма, що використовують пропозицію Гунга для середнього показника. Як зазначалося, оскільки масштаб схожий, його додавали до діаграми як додаткову точку порівняння (я використовував сірий, щоб допомогти відрізняти його від необроблених графіків даних).

введіть тут опис зображення


3
+1, це дійсно приємне, просте рішення для цієї ситуації. Одне з невеликих пропозицій я б запропонував використовувати середнє значення замість сум на кроці 3. Це насправді нічого не змінить, але поверне загальну суму до початкової шкали, що може полегшити інтерпретацію значення.
gung - Відновіть Моніку

@gung, дякую за відгук. Я думаю, що використання середніх значень справді добре (як вище). Мені ніколи не подобалося використовувати підсумки, але я не вкладав занадто багато думок у гарну альтернативу.
дан

2

Я зробив би це у вигляді шишки. Це виглядає досить захаращено, тому я б працював з квітами, щоб спробувати допомогти у цьому.

Запропоновані іскрові лінії @dav насправді не дозволяють порівнювати продукти.

введіть тут опис зображення


Я думаю, що ця діаграма була б чудовою, якби розміри точок масштабувались у зворотному порядку від 8 (найменший) до 1 (найбільший). Я думаю, що тенденції можуть вискочити більше таким чином.
Брендон Бертелсен

1

Діаграми точок можуть бути дуже корисними для такого типу аналізу.

Це те, що я придумав ваші дані. Ви також можете додати з'єднувальні лінії.

Це те, що я придумав ваші дані.  Ви також можете додати рядки

Я б також подумав над тим, щоб додати більш помітну серію, щоб показати середнє значення для кожного варіанту.

Деякі посилання:

http://peltiertech.com/Excel/Charts/DotPlot.html

http://peltiertech.com/WordPress/charting-survey-results/


1

Я знаю, що це питання сім років, і бачу, що афіша AWOL, але я вдячний питанням, що включає дані ...

Здається, що тенденції щодо рейтингування продукту - це питання, а не тенденції окремих рейтингів. У такому випадку ви можете зрозуміти тенденції високого рівня, побудувавши засоби та інтервал довіри для кожного продукту.

введіть тут опис зображення

Принаймні, ми можемо бачити, що C і D здаються гіршими, ніж інші (припустимо, що 8 - це найгірший рейтинг). Можливо, A, B і C мають більше розбіжностей, ніж інші.

Якщо окремі рейтинги важливі для передачі, ви можете використовувати різні позначки та кольори для точок кожного реферату.

Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.