Будівельні робітники заповнили мій SAN бетоном і мінеральним пилом

Оновлення: EMC відмовилася від гарантії та підтримки, тому це буде страховий випадок. Компанія Dell каже, що ми можемо отримати професійне агентство з очищення, щоб оновити сервери та зберегти гарантію. Cisco каже "можливо". HP все ще мовчить :(

Остаточне оновлення: EMC повернувся і затвердив очищення від сертифікованої компанії. Сьогодні VNX повернувся до нас і працює чудово. Решта серверної кімнати також очищається, і наші втрати обмежуються парою стрічкових накопичувачів. Страхова компанія бере рахунок за майже все інше.

Оригінальне запитання:

Ось історія ..

Власники будинку, у якого ми орендуємо офісні приміщення, вирішили зробити ремонт зовнішньої сторони. Це стосувалося досить важкої роботи на рівні, де знаходиться наша серверна кімната, включаючи обмін вікон, які поміщаються всередині бетонної стіни.

Моє червоне сповіщення вимкнуло, коли я почув, що вони збираються зробити те саме з нашою серверною кімнатою (так, у нашій серверній кімнаті є вікно. Ми невеликий магазин з 3 стелажами. Вікно закріплене сталевими брусками.) Я чітко сказав підряднику, що їм потрібно встановити тимчасову стіну між нашими стелажами та початковою стіною - і переконатися, що тимчасова стіна на 100% повітро- і водонепроникна. Вони обіцяли це зробити.

У тимчасовій стіні є невелика дверцята в ній, щоб працівники могли входити / виходити протягом дня (через наш серверний зал, який був єдиним варіантом ....). Кілька разів я міг знайти маленькі двері на півдорозі зачиненими під час робочих вечорів / ночей. Я замкнув двері і подумав, що вони, сподіваюсь, незабаром отримають крапку і триматимуть двері закритими. Я навіть дав рот електрику, коли побачив, що він не зачинив двері належним чином.

До цього моменту - я обділяюся, що більшість із вас отримує уявлення про те, що сталося. Так, вони, ймовірно, залишили двері відчиненими під час свердління в бетон.

Я представляю вам наш 4-тижневий EMC VNX: VNX диски VNX стійка

Я навіть покладу трохи бонуса, ось APC UPS одна стійка далі від тимчасової стіни. Бачите гарну маленьку посадкову смужку з мого пальця? ДБЖ

Що я повинен зробити? Єдине, що спадає на думку - це або зателефонувати всім нашим постачальникам (EMC, HP, Dell, Cisco) і змусити їх відправити техніків, щоб перевірити всю передачу в серверній кімнаті, або отримати якийсь сертифікований сторонній консул. щоб перевірити все це. Ви б запустили виробничі системи на цій передачі? Як довго?

Слід також зазначити, що наш кондиціонер не є таким рівнем підприємства, враховуючи характер нашого маленького приміщення. Це лише один інвертор, який один раз вийшов з ладу, перш ніж я почав тут працювати (несправні інвертори зазвичай призводять до витоку води).

server-room disaster

— пауска
джерело

На жаль, я знаю, що виробничі системи працюють у набагато гірших умовах (думаю, склади). Але це не ідеально для будь-якої розтяжки, особливо для нової передачі. Я хотів би розслідувати, як отримати якусь компенсацію за прибирання принаймні, і, можливо, за неминучі кілька невдач вентилятора. Це багато в чому залежить від вашого повітряного потоку і від того, скільки кожна одиниця обладнання пробирається через нього. Як мінімум, очистіть приміщення, потім повітряні фільтри або повітрозабірники, і слідкуйте за температурою та охолодженням.

— Сірекс

Так - хоча це не дуже добре, я бачив набагато гірше і на більш критичному і дорожчому комплекті. Отже, розібрайтеся, але я не сподівався на майбутній збій.

— День

Щоб погано прочитати, що EMC знизила гарантію, інші виробники зроблять те саме, я ставлю на

— облік

Навпаки: побоюйтеся залучити адвокатів до цього. Збери свої докази разом. Так, отримати професійну консультацію. Одного разу у нас були серйозні проблеми, і адвокат сказав нам, що ми відчутні збитки. Виявилося, що у нас не було, і після судового позову проти продавця, який ми програли, ми подали позов проти нашого адвоката, який був пом'якшений поза судом. Будьте дуже уважні до того, які збитки насправді існують, і хто несе відповідальність. Якщо ви знайдете надійного юриста (гоу), вони підкажуть, яких зусиль вимагає позов і які ваші шанси. Якщо вони кажуть, що це 100% зрозуміло, вони брешуть.

— Posipiet

Ті бідні дітки!

— Бен Брокка

Відповіді:

Попросіть усіх техніків.
Зробіть їх перевірити / очистити все обладнання.
Надішліть рахунок до планувальника будівлі.

Дійсно, сервери можуть витримати деякий рівень пилу, але це занадто багато. Ми регулярно чистимо наші сервери під час простою за допомогою вакууму на ПК 3М . Це приємно мати навколо офісу.

Але поки що починайте прибирання. Чим швидше ви виймаєте пил звідти, тим краще. Намагайтеся зберігати радіатори та вентилятори без пилу. Якщо радіатор або вентилятор вкриті пилом, його здатність розсіювати тепло набагато гірше, ніж чистий агрегат.

— Барт Де Вос
джерело

У такому випадку йому слід справді розслідувати питання найму сервісу, який спеціалізується на антистатичній чистці серверних кімнат.

— erimar77

@ erimar77: Наша страхова компанія зараз на цьому маршруті :)

— pauska

По-перше: Коли серверна кімната стає будівельним сайтом, потрібно видалити всі сервери з кількох причин.

відключення електроенергії
відключення охолодження
доступ (ви не знаєте, хто проходить повз ваші сервери, в яку годину)
механічне напруження внаслідок будівельної техніки
прямий збиток від робітників, які набувають ударів
залишок пилу з будівельного майданчика, особливо металевий або мінеральний пил

Єдина безпечна ставка - видалити сервери в іншу кімнату. Це означає додаткові відключення, але під час будівельних робіт вам, мабуть, доведеться робити зупинку.

(зауважте, наступна моя суб'єктивна думка) Зараз це сталося. Вентилятори покриті мінеральним пилом. Це потенційно скорочує їх термін експлуатації, впливаючи на підшипники.

Я б не очікував, що сервери будуть масово виходити з ладу, але я би розраховував мати більший відсоток відмов. У досить великого замовника відключення вентиляторів зросло після будівельних робіт.

Але знову ж таки, я б не намагався очистити системи. Якщо прибирання призведе до пошкодження, воно, ймовірно, більше, ніж вийшов з ладу вентилятор. Якщо, звичайно, якщо пил містить металеві частинки, які змінюють всю гру.

Що робити? Очистіть приміщення, приберіть зовнішню сторону серверів, зарезервуйте трохи готівки для більш ранніх замін у майбутньому.

Шкода, ймовірно, не є суттєвою. Частина шкоди, яку ви можете довести, напевно, не варто звертатись до суду. Ви можете спробувати отримати певну суму компенсації з орендодавця, можливо, зменшений платіж або близько того.

— Posipiet
джерело

Те, що ми повинні були зробити, не особливо корисне, але я згоден з переліченими вами пунктами. Винуватець у тому, що я не знаю (поки), чи є в пилу металеві сліди. Інша потенційна небезпека тут - відмова повітря, що може призвести до вологого повітря, яке не добре поєднується з бетоном та / або мінеральним пилом.

— pauska

Оскільки сайт читають багато інших людей, серед яких, можливо, наближаються будівельні роботи, те, що ви мали б зробити, - це дуже корисна інформація насправді, трохи запізнення для вас особисто.

— Сірекс

Це правда. Вибачте за те, що я був трохи задоволеним, настрій зараз нижче середнього.

— pauska

Я маю з цим погодитися. Ми встановлювали нові плитки для крапельних стель, і під час процесу робітники покривали серверні стелажі пластиковим покриттям. На щастя, я був там, і термічні попередження викликали повідомлення електронною поштою, але без цього було б тост. Як тільки сервери забруднюються твердими речовинами, це дуже важко повернути, і побічні ефекти можуть бути довготривалими і призводити до дуже важких проблем.

— Грег Аскеу