Інженери використовують вибухівку для вивезення твердих порід поза нашою офісною будівлею. Які контрзаходи ми повинні вжити?


123

Наша будівля розташована ок. 100 метрів від вибухових зарядів. Вони трапляються кілька разів на день, і справді дуже струшують всю будівлю. Це триватиме довгі дні, і вибухи повинні посилитися.

Наші серверні кімнати - це ніщо не фантазійне; одна з них має всі стійки з твердого бетону, а друга має підняту підлогу (та, яка дозволяє кабелю проходити під нею).

Хтось має поради, контрзаходи чи кращі практики для нас?

В даний час ми думаємо про наступні контрзаходи:

  • Щоденний звіт про індикатори стану серверних кімнат (індикатори HD, джерела живлення тощо).
  • Щотижня перевіряйте сканування дисків на найважливіших серверах
  • Замовлення в додатковій доставці запасних жорстких дисків

Редагувати: Тут багато хороших відповідей! Однак потрібно прийняти. Найвища відповідь на момент редагування отримає відповідь.


84
Переконайтеся, що у вас хороші резервні копії!
Шейн Медден

49
Запитайте, чи можете ви взяти кілька паличок динаміту, зручно мати для себе апокаліпсис зомбі ...
Ward

37
Запитайте, чи можете ви "натиснути кнопку" для однієї з плати!
RobW

18
Використовуйте гаубицю в поєднанні з протитанковими ракетами.
xpda

31
Розгортайте плавний джаз.
Андрій

Відповіді:


127

Якби я був ти, я б зателефонував до страхової компанії компанії і запропонував би їм розмістити акселерометр.

Таким чином - страхова компанія знатиме, що ти не той, хто трясе диски, і страхова компанія точно знатиме, коли кожен вибух пішов, якщо ваш SAN загине в ту саму мить.

(Ми це зробили.)


15
З ОП не зрозуміло, де він знаходиться, але коли підривання відбувається поблизу інших будівель, підрядник іноді вимагає контролювати прискорення, що відчуваються в інших будівлях, тобто, розміщуючи в них акселерометр.
Уорд

1
Коли ви це зробили, чи сплачувала страхова компанія будь-які збитки?
Філ

1
Ми не отримали ніяких збитків afaik.
pauska

94

Зараз настав час переконатися, що ви підтвердили рішення щодо резервного копіювання. Все обладнання для заміни у світі не допоможе вам заощадити, якщо ваші резервні копії пошкоджені або іншим чином були непридатними.


8
Ви не знаєте якості резервної копії, якщо не перевірите відновлення. Просто не перевіряйте журнали, щоб забезпечити повне резервне копіювання - переконайтеся, що ви можете відновити.
Raj More

2
Я підозрюю, що він мав на увазі, що коли він сказав "перевірив ваше резервне рішення", але я думаю, що це добре сказати прямо. :-)
pc1oad1etter

52

На додаток до всіх інших чудових пропозицій (особливо резервного копіювання на місці ), вам слід розглянути питання щодо пилу, що захищає вашу кімнату, наскільки це практично: Погоняння погоди навколо дверей, стрічка навколо вікон тощо.
Якщо у вас є зовнішні повітрозабірники, потрібно змінити фільтрує, коли підривання закінчилося.

Все, що було сказано, я б не витрачав час / ресурси на нічні сканування дисків або гроші на запасні жорсткі диски (можливо, придбати одну-дві для своїх найважливіших машин, але пам’ятайте, що ви можете приїхати на ніч при необхідності).
Серверне обладнання напрочуд надійне, і воно буде працювати протягом багатьох років при досить жахливих умовах. Швидше за все, ти будеш добре.


12
Мені просто потрібно +1 для серверного обладнання напрочуд надійний . У нас були будівельники на майданчику через дорогу, і вони забивали землю близько 6 тижнів, і вся наша будівля трясеться, і все (до речі речі від удару від робочого столу вібрують від підлоги). Я панікував, але це була тотальна не подія. Це питання було б добре тоді :-)
Ben Pilbrow,

2
Комп'ютери взагалі загрожують досить сильним побиттям (подумайте про те, скільки людей скидає ноутбуки щодня, які продовжують працювати) - ці речі не такі крихкі, як наша історія вакуумних труб та феритових сердечників привела нас до думки (хоча до них слід все-таки добре поводитися, щоб вони не померли у невідповідні часи)
voretaq7,

4
Кремнієва долина - одна з найбільш схильних до землетрусів районів у світі. Реч, яка працює там , переживе кілька потрясінь.
MSalters

Порада: Не довіряйте нікому, якщо вони скажуть, що вони захищені від пилу у вашому серверному залі. Ніколи. Колись.
pauska

@pauska погодився - "захищений від пилу" - це досить розпливчастий термін (і навіть якщо вони кажуть, що вони відповідали відповідному стандарту (в США, який би був MIL-STD-810G 510.5) припускають, що вони брешуть, оскільки належним чином захищені від пилу a ROOM - це величезне підприємство, яке має повітряні замки, позитивний тиск, двоступінчасті фільтри HEPA тощо)
voretaq7,

27

Встановіть серверні стелажі на платформи ISO-Base . Це дозволить ізолювати вашу серверну стійку від ударів об землю та дозволить вашим системам функціонувати навіть у разі руху.

Це непросто, але ефективно. Особливо в зонах землетрусів.

Щоб побачити ISO-базу в дії, перегляньте це відео, де показані ефекти в серверній стійці під час моделювання землетрусу . Одна стійка встановлена ​​на базі ISO, друга - не.


2
Трохи запізнившись на це зараз. Але цікава ідея.
Метт

2
Я думаю, що це трохи зайвого для особистого короткочасного підривання, але це виглядає як крута система.
voretaq7

Проблема така ж, чи це короткочасні локальні потрясіння, чи довготермінові землетруси із низьким рівнем захворюваності. Існує справедливий випадок, що оскільки ви знаєте, що на 100% настають ці потрясіння, і не знаєте на 100%, що землетрус вдарить, що зараз це вигідніші інвестиції, ніж це було б для землетрусів, навіть у схильних районах.
Кріс Торп

Я знаю, що вже запізно купувати нові речі, але ви можете отримати собі хорошу кількість антивібраційних прокручених гвинтів для ваших жорстких дисків. Вони дешеві.
Містер Сміт

18

Потужність: Якщо ви втратили живлення, чи всі сервери, сховища даних, san (тощо) у вашій стійці перезавантазяться самостійно? Або вони з’являться лише після натискання кнопки «Увімкнено»?

Це з двох причин:

  • Якщо живлення нестабільна протягом декількох годин, можливо, ви захочете залишити свої сервери до тих пір, поки все не стане стабільним - менше шансів на підстрибуючий сервер вийняти невдалим сплеском потужності.
  • Коли в останній раз ви займалися математикою на амперажі, необхідному перезавантажити всі пристрої в стійці відразу? Чи є у вас ампераж для цього?

Ви також можете запропонувати своїм користувачам вимикати та відключати комп’ютери кожного вечора.


10
Три маленькі букви: UPS (і я не маю на увазі транспортну компанію). Добре проведене підривання навряд чи вирве енергію, але все ще немає приводу, щоб не мати хорошої, стабільної потужності для повсякденних проблем ...
voretaq7,

1
Га! Правильно, і я погоджуюся з використанням ДБЖ та інших лінійних кондиціонерів. Але, Карракс зазначив, що вибух "... струшує всю будівлю ...", і стане гірше. Я не знаю, що ви маєте на увазі під «добре проведеним», але якщо моя будівля трясеться, я б уявив, що моя підстанція, що триває 30 років (або 1 рік), пів кварталу по вулиці трясеться теж ...
RobW

"добре проведене", як у "спрямованих зарядах і вибухових мережах, так що літаюча скала не проходить через трансформатор" - Ніяких обіцянок щодо розпущених з'єднань, хоча якщо ваша підстанція не може впоратися з тряском, вашій комунальній компанії може знадобитися "тверда розмова з" про планове обслуговування :-)
voretaq7

13

Більшість людей говорять про резервне копіювання - не багато говорять про відновлення. Переконайтеся, що відновлення з резервного копіювання є максимально простим. Зокрема, якщо час є критичним.

Якщо у вас є реплікація за місцем розташування, переключіть їх на майстрів (якщо терміни дозволяють), оскільки ті, що знаходяться у вашій будівлі, значно вразливіші. Вони також частіше знижуються в робочий час (очевидно).

Раджу також працювати вдома.


2
Дуже, дуже хороший момент. Я бачив, що багато "резервних планів" провалюються, оскільки вони не містять ефективного "плану відновлення". Два дні відключення бізнесу можуть означати величезні платежі, які потрібно платити своїм клієнтам. Процедуру відновлення слід розглядати з економічної точки зору та інтегрувати в план надзвичайних ситуацій.
gd1

12

Грайте на важкому металі, щоб замінити жорсткий рок, коли він вибухає. Хард-рок все одно такий пасе. ;)

Більш серйозно, можливо, там, за рогом, є магазин із спорядженням DJ, де ви можете забрати деякі елементи поглинання / ізоляції. Багатьом (танцювальній музиці) ді-джеї мають такий же важкий час, коли вони грають на записах (тобто, тримаючи крихітну голку в крихітній обертовій канавці, дещо порівняну з чутливим обладнанням, таким як дисководи), при надзвичайній гучності, в той час як натовп навколо них стрибає і тужить синхронізована підлога (важливо "синхронізувати"; якщо ви ніколи не чули про інцидент мосту Tacoma Narrows , слід подумати про перегляд цього кліпу ). Відірвіть кілька мішків для сміття, щоб забезпечити додатковий захист від пилу.


2
Я збирався запропонувати це. Більшість клубів просто використовують бетонні садові ляски, сидячи на пінопласті. Простий, але дуже ефективний.
Ієн Холдер

9

Я здивований, що ніхто не згадав про процес справи.

Це ідеальна можливість перебрати те, що ви запланували для безперервності бізнесу. Який план, якщо вам доведеться переміщати офіси на день або тиждень? Чи є у вас актуальні плани на кресленнях та які системи мають пріоритет для відновлення? Чи повідомлено керівництву, що ви маєте план і знаєте про це

Прискорення від вибухів, що спричиняють хаос на серверній кімнаті, мабуть, найменше ваших турбот. Ваші комунальні послуги можуть бути загрожують значно більшим ризиком, якщо ви не забезпечите себе потужністю на місці та міцним підключенням (якщо припустити, що ви не є автономними та підтримуєте лише місцевий персонал).

Якщо виникла водопровід, електропостачання чи доступ до Інтернету, чи можете ви це пережити? Ви зателефонували своєму інтернет-провайдеру, щоб дізнатись, чи знають вони про вибухи та готові відновити сервіс за допомогою альтернативного маршруту, якщо ваші утиліти будуть перервані. Ви дізнаєтесь свою специфіку краще, ніж ми можемо здогадатися, але у вас повинен бути список всього необхідного для функціонування та адреса "Що робити, якщо це зникне несподівано?" для кожного.

Просто перевірте це в голові / на папері, ви допоможете зрозуміти, чи є у вас слабкі місця, які потребують роботи пізніше, і, можливо, повідомте про це ланцюжком, якщо у вашої організації нічого не записано. Почніть з двох сторінок, резюме - просто вигадка, щоб усі знали, що ви робите.

Так - отримання декількох додаткових жорстких дисків / запчастин на руку добре, але я б більше хвилювався за те, що я не бачу або не контролюю безпосередньо.

Реальна користь від цього процесу - перевірка реальності для вашої поточної системи моніторингу. Після того, як ви запланували кілька основних сценаріїв, ви будете краще підготуватися до несподіваного. Короткий підсумок того, що ви очікуєте вижити, а що ви не зробите, буде дуже зручним, незалежно від того, чому ви переживаєте відключення, а також допоможе в русі ваших зусиль щодо покращення моніторингу 24/7, а не тоді, коли фундамент почне тремтіти.


9

Раніше я працював на комп’ютерах на шахті, який відновлювався. Коли рекультивація наближалася до кабінету, кімната даних буде струшуватися майже щодня наприкінці дня.

Мій лічильник заходів включав переміщення стійок поверх деяких твердих гумових ніг, призначених для гасіння вібрації. Їх виготовив Менсон, і я щойно підрахував вагу моєї стійки і купив відповідні ноги. Це ніби фіксувало будь-який рух всередині стійки. Жорстка частина піднімала стійку досить обережно, щоб підсунути ноги під.

Крім того, як згадували інші, у мене були резервні копії, які я тестував і тримав поза сайтом.

Ці сервери тривали 3 роки з постійним струшуванням без збоїв, пов'язаних з обладнанням. Настільні в офісі не спрацьовували так добре, оскільки 2 з них мали катастрофічні збої на жорсткому диску.


8

Я ще не бачив цього згаданого про резервні копії, але переконайтесь, що ви знімаєте їх із сайту! Ви також можете зробити резервну копію конфігурацій комутатора, брандмауера тощо.


5

Попросіть інженерну компанію виконувати підривання. Коефіцієнти дуже хороші, вони мали власну передачу на місці або раніше мали справу з вибуховими пошкодженнями сусіднього серверного залу.


5

Перечитайте хроніки BOFH . Це дасть вам кілька практичних ідей щодо того, як зробити вибухи зупиненими. Все інше буде просто контрзаходом.

Що стосується контрзаходів, всі інші згадували резервні копії, тому я уникаю повторювати цю гарну пораду.

Щодня перевіряйте свої рейдові 5 масивів і майте запасні диски вже зараз. Вся ця вібрація не може бути корисною для шпинделів, і дивно, як часто втрачаються масиви, здатні зберегти, завдяки тривозі, яку ніхто не чує, і другої несправності шпинделя.

Можливо, я оптимістично налаштований, але інженери, які здійснюють підривання, як правило, не націлюють рівні вібрації для «руйнування сусіднього фундаменту» рівня енергії, тому я б найбільше переживав за рухомі частини комп’ютерів, також диски.


2

Покладіть деякий захист під стійки, особливо той, який є з твердого бетону. Це (або, ймовірно, є) сильно похитне. Якщо ви не можете придбати (особливо через час), придбайте підлогу, що має стійкість до землетрусу, покладіть під нього піну, щоб зменшити тремтіння.

Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.