Я мігрую частину бази даних mysql в AWS. Дані, про які йдеться, пишуть на 99%, і кожен рядок містить близько 1 к. Варчарських полів, дату і 4 вставки.
Я вважаю, що нам знадобиться між 20-25 кб записів, вставлених / годину протягом пікового часу.
Я побіг iostat -h на поточній базі даних, і вона повідомила про 40 с.
Як визначити, який тип IOPS мені знадобиться?
Відповіді:
Вам доведеться його протестувати.
Ви можете зробити кілька зворотних обчислень конвертів, щоб наблизити кількість вводу-виводу на вкладиш, помножити його на кількість транзакцій в секунду, додати в якусь буферну кімнату тощо, але набагато простіше просто перевірити це.
Найпростіше - це виділити найкращу здогадку, а потім повернутися та збільшити або зменшити її, щоб відповідати тестуванню реального світу. Це одна з розкішностей використання хмарного середовища, зміни апаратних засобів мають низькі капітальні витрати, і такі зміни зазвичай потребують лише оновлень конфігурації. З томами EBS ви не можете просто збільшити кількість IOPS, вам також доведеться масштабувати розмір гучності 1 . Ви завжди можете просто створити новий том і скопіювати свої дані. Буде якийсь час простою, але якщо ваших даних не так багато, не повинно бути багато, як це була б необроблена копія.
Ось здогадка про кількість необхідних введення-виводу. Знову ж таки, це лише здогад, однак, оскільки специфіка залежить від кількості індексів та того, чи буде ваш потік трафіку рівним чи різким. При 25K tx / година у вас ~ 7 tx / sec. Розмір кожного рядка не особливо актуальний, оскільки він менший за розмір одного вводу-виводу (4К). Кожна транзакція буде робити десь від 1-5 IOP (первинна вставка плюс пара вставлених дерев індексу), тому скажімо ~ 35 / с.
Я кажу, почніть з мінімуму 100 IOPS і при необхідності збільшуйте масштаб.
Я використовував основний інструмент iostat (iostat -h), щоб зрозуміти, скільки іопів я використовую в даний час. З цього моменту я екстраполював, скільки б я використав, якщо мені було менше 4 разів більше навантаження і пішов з цією сумою. Для мене це працювало до 780 IOPS, тому я пішов з 800 IOPS.
Це може допомогти вам контролювати ваш IOPS: