Як отримати ТБ даних на новий веб-сервер?

31

У мене є туберкульоз стислих медіа-файлів, який мені потрібен, щоб з певною швидкістю дістатися до віддаленого веб-сервера. (з мого офісу)

Швидкість завантаження становить лише 500 КБ / с, що може запропонувати ~ 23 дні для завантаження.

Нова хостинг-компанія не приймає диски з електронною поштою.

Чи є гарне місце для поїздок у великі райони метро, щоб позичити більш жирну трубу?

transfer data

— Брайан Вебстер
джерело

10

Я знаю, що це не відповідь або навіть особливо корисна, але якщо ваша нова хостинг-компанія не бажає працювати з вами над цим, вам потрібно знайти нову нову хостинг-компанію. Не приймати привід від замовника (за певну плату, звичайно) досить вдало.

— voretaq7

Перевірте мою відповідь, що це компанія з зберігання даних в

— Тульсі

Тут є хороші відповіді, але чи не слід це переносити на ServerFault?

— Марк Херд

1

Можливо, але я розглядаю серверне за замовчуванням як місце для обговорення конфігурації апаратного та програмного забезпечення, тоді як це використання будь-яких веб-майстрів у їхньому розпорядженні для досягнення більш складної задачі

— Брайан Вебстер

16

Я б зв’язався з деякими з ваших локальних центрів обробки даних (хостинг на рейках, керовані постачальники послуг тощо) і побачив, як орендувати vps чи віртуальну машину на день-два. Просто переконайтеся, що вони дозволяють вам принести диск для початкової передачі, і вони знають про ваші потреби в пропускній здатності.

Ви також можете просто запитати, чи просто вони допоможуть вам у завантаженні. Вони часто прагнуть бути опортуністичними, винахідливими та можуть бути готовими прийняти вас за можливість отримати якийсь бізнес.

— InChargeOfIT
джерело

3

Існує також можливість віддаленого центру обробки даних: Amazon AWS! Поставляйте їм жорсткі диски, і вони стягують (на момент написання цього запису) 80 доларів за пристрій, плюс 2,50 долара за годину завантаження даних, плюс усе, що коштує для зберігання даних доти, доки він знаходиться в AWS плюс передача даних. Можливо, не найпривабливіший варіант, а просто викинути його туди.

Це чудово знати. Ми дуже багато використовуємо AWS! Чи знаєте ви, де я можу прочитати про цю послугу? У Google важко знайти (принаймні ключові слова, якими я користуюся)

— Brian Webster

1

aws.amazon.com/importexport

— Багатий

11

Ви можете, якщо у вас є друзі або співробітники, готові надати вам руку з домашнім зв’язком, встановити торрент для великого файлу і налаштувати своїх працівників / друзів як насіння. Звичайно, вам доведеться зробити кошик і скопіювати файл для всіх. Вже тоді ви можете розділити файл на .rars і змусити "команди" надсилати частини (дбаючи про те, щоб вони не завантажували файли, яких у них немає). FW джерела натовпу!

— лука
джерело

3

Це було б особливо ефективно, якщо у вас є друзі, які навчаються в коледжі. Вони не тільки мають доступ до хороших високошвидкісних університетських зв'язків, але і їм не важко буде попросити пару друзів у різних гуртожитках допомогти з завантаженням.

— Lèse majesté

7

Знайдіть регіональний провайдер, який має місцеву власність, і принесіть чудовий зовнішній накопичувач, який може вмістити все це. Заходьте до їх офісу з грошовими коштами 300 доларів, обліковими записами для вашого сервера та 12 пачками пива. Помоліться, щоб у них була гігабітна висхідна лінія, тому що змішаний 100 Мбіт займе вас протягом 24 годин.

Якщо це не вдається, шукайте місцевий інтернет-пункт обміну Інтернетом і знайдіть будь-який AS, який з ним пов'язаний. Подружись по-справжньому добрими друзями з кимсь із місцевих з NANOG. Коефіцієнти - вам потрібно бути творчим. Спробуйте шукати будь-яке місце розташування поруч.

— Джефф Ферланд
джерело

2

Це шлях, який я б пішов. Пиво прагне змащувати ділові взаємодії.

— Евік Джеймс

1

Я думаю, що це цілком можливо найкраще рішення щодо найменшого опору.

— jeremiahd

5

Якщо файли - це текстові файли або добре cmpress, ви можете зафіксувати їх перед завантаженням, що може зменшити розмір файлу до 90%. Потім ви можете розпакувати їх на сервері.

Ви також можете спробувати розділити завантаження між кількома місцями. Кожен з них може дати вам свою максимальну швидкість.

— Джон Конде
джерело

4

Отримайте тимчасову хостингову компанію, на яку ви можете надіслати пошту, а потім швидше перейти з тимчасового хоста до постійного хоста.

— xpda
джерело

3

Або просто перейти на веб-хостинг, який приймає диски поштою. Більшість веб-хостів з гідним обслуговуванням клієнтів це дозволять.

— Lèse majesté

Я припускаю, що поточна компанія, яка займається хостингом, була обрана через ціну або якісь інші довгострокові критерії, і змінити їх було б дорожче на постійній основі.

— xpda

4

Ці хлопці перебувають у Tulsa, який у вас є у вашому профілі, тому якщо ви перебуваєте в цьому районі, зателефонуйте їм або заїжджайте і повідомте їм вашу ситуацію.

http://www.datastorageinc.com/

— Анагіо
джерело

3

Я просто хочу додати до існуючих відповідей щось, що може покращити вашу передачу, як тільки ви підключите ваш жорсткий диск до сервера з хорошою пропускною здатністю.

Мені потрібно було кілька разів перенести велику кількість даних між двома веб-серверами, і замість того, щоб використовувати загальні команди FTP або WGET для завантаження або завантаження даних, я використовував команду Linux SCP. Більше інформації можна знайти тут: http://www.go2linux.org/scp-linux-command-line-copy-files-over-ssh

Вам знадобиться доступ SSH до обох серверів, і тоді ви зможете скопіювати один файл або багато файлів рекурсивно.

Отже, якщо у вас є лише великі файли замість багатьох маленьких, я думаю, що вони скопіюються досить швидко.

При швидкості передачі 11 Мб / секунду між серверами передача триватиме близько 25 годин.

Удачі! ;)

— Олександру Трандафір Каталін2
джерело

1

А ще краще використовувати rsync, якщо цільовий хост його підтримує. (Багато хто робить.)

— Ілмарі Каронен

3

http://aws.amazon.com/importexport/

Відправте свій пристрій на AWS, і вони подбають про відпочинок.

— subiet
джерело

"... і вони подбають про інше" - ні , вони не будуть, якщо тільки ваше місце призначення не AWS. Якщо це не так, вони передадуть дані лише у відро S3. І вам належить дістати його з відра S3 до місця призначення, і в цьому випадку це відповідь xpda.

— Lèse majesté

2

Ну абсолютно, я повинен був прокоментувати так, як робив Річ (чи не було до моменту публікації) відповідь InChargeOfIt. Оскільки Hamlin11 особливо проявляв інтерес до рішення AWS і шукав посилання на цю послугу, я опублікував її. Коментар там був би більш відповідним, я згоден.

— subiet

Ну, я думаю, якщо ви зможете відредагувати відповідь, щоб приєднатись до цього коментаря, і зауважте, що для не AWS-адресатів вам потрібно просто ініціювати передачу сервера на сервер згодом, використовуючи дуже товсту трубку Amazon, все одно бути хорошою відповіддю.

— Lèse majesté

1

Якщо дані знаходяться у вашому офісі на повільному зв’язку, ви перебуваєте в солінні. Якщо дані включені або у вашого старого хоста, ви можете спробувати перенести сервер на сервер. Використання ISP-труб замість вашої офісної труби.

Якби ви це робили за допомогою wget від ssh, це було б набагато швидше, ніж доставка диска для встановлення. Однак, мені ніколи не доводилося рухати більше 250 ГБ.

— Брайан
джерело

Нагальна частина запитання виникла з катастрофічної події простою у "старого господаря". У нас не було хост-резервного резервного копіювання, але у нас були недавні резервні копії на локальному рівні.

— Брайан Вебстер

0

Як свідчать інші запитання, це, як правило, зводиться до пошуку когось із вас із хорошим зв’язком.

Одна група, з якою можна поговорити, - адміністратори університету чи коледжу. Просто переконайтесь, що хлопець, з яким ви розмовляєте, має право пускати туберкульоз через їх дріт, і я впевнений, що ви зможете домовитися.

Багато факультетів університетів, наприклад, фізика частинок, розміщують петабайти даних навколо, тому це може бути іншим можливим варіантом.

— Болдевін
джерело