Як пройти успішний бета-тест з невеликою командою?

Я багато пропрацював (про-боно) над виправленням комерційної гри від ~ 11 років тому, яка потребує бета-тестування. На нього чекають вантажі люди.

Які способи отримати хороший (маючи на увазі корисний) відгук під час фази бета-тестування для гри? У мене є багато людей, які хочуть пограти з цим, але я переживаю, щоб отримати хороший відгук, не забиваючись у розробці. Я також стурбований тим, що люди будуть більше стурбовані тим, що налаштування, які вони хочуть бачити, додані до патчу, ніж реально перевіряти виконану роботу.

• Чи надаєте ви можливість реєструвати помилки безпосередньо в трекері помилок або відправляти їх усім людині в команді розробників?
• Як ви гарантуєте, що охоплюєте всі підтримувані вами платформи (в моєму випадку: Mac OSX (x86 / ppc), Windows (кілька версій), Linux (кілька версій)?

Чи є якісні програмні пакети (наприклад, веб-портал) для запуску бета-тесту для такого проекту? Якісь хороші документи з порадами?

Я настійно пропоную мати в грі варіант подачі помилок, бажано велику кнопку, на якій написано "FILE BUG ТУТ". Гравці, які займаються, особливо якщо ваша гра насправді хороша, ніколи не пам’ятатимуть помилки, які виникли, якщо їм доведеться вийти з двигуна, щоб подати їх. Ви можете перейти до трекера помилок або просто надіслати електронною поштою адресу власника. Основна мета - спростити подачу матеріалів, хоча це може бути неможливо для 11-річної гри. У такому випадку я б підтримував пряму електронну пошту та посилання на веб-сайт, і, можливо, змусив би тестерів пройти якийсь тривіальний передній кінець, який відкриває кнопку "файл помилки", щоб вони пам'ятали, що вона існує.

Одним із хороших способів цього може стати напівприйнятне викриття самого програмного забезпечення для відстеження помилок. Більшість програм для відстеження помилок (Trac є хорошим безкоштовним, якщо у вас вже немає налаштувань) вже має хороший веб-інтерфейс, і ви можете відкрити це для всіх у бета-версії безпосередньо. Таким чином ваші бета-тестери можуть буквально зробити QA за вас.

Щоб отримати покриття платформи, ви можете спробувати перейти безпосередньо до цих спільнот. Не забудьте обговорити свою бета-версію на форумах, орієнтованих на ПК, Mac та Linux. Таким чином ви переконайтеся, що ви отримаєте декілька з кожної групи. Ви повинні попросити гравців вказати, які платформи вони також доступні в бета-програмі.

Нарешті, ви можете періодично надсилати певний електронний лист із "статусом тесту". Щось на кшталт "Гей, ми щойно змінили баланс зброї. Чи можете ви, хлопці, сьогодні зосередитись на рівнях 4-7? Рівні 8-10 все ще розробляються і буде трохи краще на наступному тижні". Все, що ви можете зробити, щоб зосередити процес тестування, буде працювати на вашу користь.

Що стосується отримання хорошої кількісної інформації, якщо у вас є час на розробку, додайте стільки журналів, скільки можна проаналізувати.

• Який% ваших бета-тестерів коли-небудь повертався?
• Як довго тривав їхній (найдовший, середній) сеанс гри?
• Де вони перестали грати (яка остання дія ввійшла)
• Який% людей стикався з новим вмістом?

тощо

Щодо збору даних ( http://docs.google.com ) має досить простий у використанні інструмент опитування - просто скористайтеся пунктом меню Form -> Create Form.

Якщо ви використовуєте Flash або Silverlight, я рекомендую інтегрувати Google Analytics або щось подібне. За допомогою Analytics легко інструментувати свою гру та вимірювати такі речі, як час гри, коли гравці кидають роботу тощо.

Крім того, я рекомендував би скористатися такою послугою, як «Перші враження» у ліцензії Flash Game або просто перейти безпосередньо до «Механічного турка Amazon». Я виявив, що за 1 долар ви можете змусити гравця спробувати свою гру протягом декількох хвилин і надати відгук для кількох категорій. Якщо ви використовуєте Mechanical Turk, ви можете розробити власну форму і задати питання, які вас цікавлять.

Якщо поєднувати обидва способи, ви можете отримати велику кількість інформації відносно дешево. Звичайно, переконайтеся, що ви знаєте, що ви хочете виміряти, перш ніж почати витрачати гроші. Нарешті, я чув, що деякі люди випускають свої ігри на портал, такий як Newgrounds, використовуючи псевдонім, а потім використовують Analytics, а також вбудовану форму для збору відгуків від гравців.