У мене є велика база даних PostgreSQL розміром понад 500 ГБ, яка занадто велика. Чи варто все-таки стиснути базу даних до більш керованого розміру? Я намагався зробити це за допомогою SquashFS та бази даних, стиснутої до 177 Гб, проте PostgreSQL вимагає, щоб база даних мала доступ до запису, а системи Squashed - лише для читання. Чи мають більш досвідчені користувачі баз даних якісь пропозиції для досягнення цієї мети?

База даних містить дані ГІС для планети і будуть використовуватися локально в розгорнутій системі. В даний час він сидить на 1 ТБ SSD, однак я намагаюся уникати ударів на додатковому жорсткому диску просто для розміщення великої бази даних. База даних працює за бажанням без проблем, я просто хотів би її стиснути до більш керованого розміру і уникати розміщення її на окремому диску.

Файлова система

Дуже популярний спосіб зробити це з файлової системою. BTRFS і ZFS працює в базі даних на рівні файлової системи. Обидва можуть використовуватися в пристрої зворотного зв’язку, щоб ви могли забезпечити стиснене простір таблиць, не маючи іншого розділу. З цим є застереження, якщо простір таблиць не вдається, це може сприйняти і ваш кластер.

ZFS

ZFS тут великий. Це те, на що я б пішов.

Дивись також

• https://blog.2ndquadrant.com/pg-phriday-postgres-zfs/
• https://blogs.oracle.com/observatory/zfs-compression-a-win-win (також популярний на Oracle)

Btrfs

Btrfs є сильним конкурентом, але він активно розвивається протягом дуже тривалого часу, і через відсутність основних дистрибутивів, що сприймають його як за замовчуванням, багато людей ставлять під сумнів, чи він готовий до "прайм-тайму".

• https://btrfs.wiki.kernel.org/index.php/Compression

PostgreSQL

Методи ГІС (PostGIS)

• Для полігонів одним із способів є спрощення багатокутників, скидаючи вершини за допомогою ST_Simplify.

• Для точок одним методом є просторове кластеризація .

Обидва ці результати призводять до втрати інформації. PostGIS, як і більшість функцій бази даних, не має прозорого "магічного стиснення".

cstore_fdw

Є також cstore_fdwстовпчастий магазин, який пропонує стиснення. Він має інший профіль продуктивності, так ymmv.