Багато разів, намагаючись придумати ефективний дизайн бази даних, найкращим способом дій є створення двох зразкових баз даних, заповнення їх даними та запуску запитів проти них, щоб побачити, яка з них працює краще.
Чи є інструмент, який генерує (в ідеалі прямо в базі даних) великі (~ 10000 записів) набори тестових даних порівняно швидко? Я шукаю щось, що принаймні працює з MySQL.
Відповіді:
Найкращий інструмент (якщо ви зможете його знайти) - це DataFactory. (На жаль, не надруковано). Я створив із них абсолютно чудові (і досить автентичні) набори даних.
Generatedata.com є ... прийнятним, але не дуже масштабним.
DataGenerator - це щось, на що слідкувати.
І хоча DTM Generator даних незграбний і поганий замінник DataFactory, він існує і продається, і я використовував його для отримання слабо прийнятних даних.
RedGate має інструмент, подібний до того, що ви шукаєте, але призначенням призначено бути MS SQL Server.
http://www.red-gate.com/products/sql-development/sql-data-generator
Ви також можете переглянути наступну статтю:
http://www.sqlservercentral.com/articles/Advanced+Querying/jointestdata/197/
Я, як правило, генерую свої власні, використовуючи якісь відомі дані як вхідні дані - якщо це занадто випадково, це не завжди хороший тест; Мені потрібні дані, які будуть розподілятися аналогічно моєму кінцевому продукту.
Усі більші бази даних, які мені доведеться налаштувати, мають наукову природу, тому я зазвичай можу взяти якесь інше дослідження як вхідне, і змінити його масштаб і додати тремтіння. (наприклад, взяття даних, які були в 5 хв каденції з точністю до мілісекунди, і перетворення їх на 10 секунд каденції з точністю до мілісекунди, але +/- 100 мс тремтіння до часу)
...
Але, як інша альтернатива, якщо ви не хочете писати свої власні, - це переглянути деякі інструменти бенчмаркінгу - оскільки вони можуть повторювати речі знову і знову на основі навчального набору, ви можете використовувати їх для вставки лотів записів (а потім просто ігноруйте звіти про те, наскільки швидко це було зроблено) ... і тоді ви можете використовувати той самий інструмент для тестування того, наскільки швидко працює база даних після її заповнення.
Я використовую mysqlslap. Прибирається і після себе.
Ось статтю, яку я прочитав, коли почав її використовувати.
Погляньте на благодійника
Почати з цього непросто, але досить потужно.
Погляньте на цю функцію. Ви можете генерувати імена, адреси телефонних номерів, поштові індекси тощо. Це повністю зроблено в MYSQL, не потрібно інших програм. http://moinne.com/blog/ronald/mysql/howto-generate-meaningful-test-data-using-a-mysql-function
Найефективніший спосіб - це, мабуть, використання відкритого джерела чи комерційного генератора даних. Я раніше це робив.
Зараз, у свої золоті роки, я розглядаю кожну потребу в тестових даних як мандат вивчати іншу мову сценаріїв.
Для тих, хто шукає іншого рішення цієї проблеми ... Я написав проект тестового генератора даних для студії синхронізації даних. Він може генерувати великий набір даних у межах від 1 до 100 мільйонів рядків реалістичних тестових дат. Ось допис у блозі про це. http://www.simego.com/Blog/2012/02/Test-Data-Generator-Download-for-Data-Sync Безкоштовно користуватися протягом 15 днів (коли ви отримаєте свої тестові дані, у вас є)