Know How ... 105: Pizza Machine, Amazon Glacier a Lunchbox Chassis Assembly

Mám TB komprimovaných mediálních souborů, které potřebuji s trochou naléhavosti dostat na vzdálený webový server. (z mé kanceláře)

Naše rychlost nahrávání je pouze 500 kB / s, což by doporučovalo nahrát ~ 23 dní.

Nová hostingová společnost nepřijímá disky e-mailem.

Existuje dobré místo, kam si můžete v hlavních oblastech metra půjčit tlustší dýmku?

  • 10 Vím, že to není odpověď, nebo dokonce zvlášť užitečné, ale pokud vaše nová hostingová společnost není ochotna s vámi na tom spolupracovat, musíte najít Nový nová hostingová společnost. Nepřijetí jízdy od zákazníka (samozřejmě za poplatek) je docela šťavnaté.
  • Zkontrolujte moji odpověď, je to společnost pro ukládání dat v Tulse
  • Zde má dobré odpovědi, ale nemělo to být přeneseno na ServerFault?
  • 1 Možná, ale serverový server považuji za místo k diskusi o konfiguraci hardwaru a softwaru, zatímco toto je využití všeho, co mají webmasteři k dispozici, aby dosáhli složitějšího úkolu.

Kontaktoval bych některá z vašich místních datových center (hostování racků, poskytovatelé spravovaných služeb atd.) A podíval se na pronájem vps nebo virtuálního stroje na jeden nebo dva dny. Jen se ujistěte, že vám umožní přinést disk pro počáteční přenos a jsou si vědomi vašich potřeb šířky pásma.

Můžete se také jen zeptat, jestli by vám s nahráním jednoduše pomohli. Často mají sklon být oportunistické, vynalézavé a mohou být ochotné vám vyhovět pro šanci získat část vašeho podnikání.

  • 3 K dispozici je také možnost vzdáleného datového centra: Amazon AWS! Zašlete jim pevné disky a účtují si (od tohoto psaní) 80 $ za zařízení plus 2,50 $ za hodinu načítání dat, plus vše, co stojí za ukládání dat, pokud jsou v AWS plus přenos dat ven. Možná ne nejatraktivnější varianta, ale jen to vyhodit.
  • To je skvělé vědět. AWS používáme docela dost! Víte, kde si mohu o této službě přečíst? Je těžké najít na google (alespoň klíčová slova, která používám)
  • 1 aws.amazon.com/importexport

Dalo by se, pokud máte přátele nebo zaměstnance, kteří vám chtějí pomoci s jejich domácím připojením, nastavit torrent pro velký soubor a nastavit své zaměstnance / přátele jako semena. Samozřejmě budete muset vozík a zkopírovat soubor všem. Dokonce i poté můžete soubor rozdělit na .rars a nechat týmy posílat části (dávejte pozor, aby nestáhly soubory, které nemají). Získávání davů ftw!

  • 3 To by bylo zvláště účinné, pokud máte přátele, kteří jsou na vysoké škole. Nejen, že mají přístup k pěkným vysokorychlostním univerzitním spojením, ale nebylo by pro ně těžké požádat pár přátel v různých kolejích o pomoc s nahráváním.

Najděte regionálního poskytovatele internetových služeb, který je místně vlastněn, a přineste pěkný tlustý externí disk, který toto vše pojme. Vstupte do jejich kanceláře s hotovostí 300 $, přihlašovacími údaji pro váš server a 12 balení piva. Modlete se, aby měli gigabitový uplink, protože maximálně 100 Mbitů vám zabere více než 24 hodin.

Pokud se to nepodaří, vyhledejte místní internetový směnný internetový bod a najděte jakýkoli AS, který je k němu připojen. Najděte si opravdu dobré přátele s někým místním z NANOG. Kurzy jsou, že budete muset být kreativní. Zkuste hledat jakékoli společné umístění ve vašem okolí.

  • 2 Touto cestou bych se vydal. Pivo má tendenci mazat obchodní interakce.
  • 1 Myslím, že toto je docela pravděpodobně nejlepší řešení nejmenšího odporu zde.

Pokud jsou soubory textové soubory nebo jinak dobře tisknete, můžete je před nahráním zazipovat, což by mohlo zmenšit velikost souboru až o 90%. Poté je můžete na serveru dekomprimovat.

Můžete také zkusit rozdělit nahrávání na více míst. Každý z nich vám pak může poskytnout maximální rychlost.

Získejte dočasnou hostitelskou společnost, do které můžete odeslat disk e-mailem, a poté rychlejší převod z dočasného hostitele na stálého hostitele.

  • 3 Nebo jen přepněte na webového hostitele, který přijímá disky poštou. Většina webových hostitelů se slušným zákaznickým servisem to umožní.
  • Předpokládám, že současná hostingová společnost byla vybrána kvůli ceně nebo nějakým jiným dlouhodobým kritériím a trvalé změny by byly nákladnější.

Tito muži jsou v Tulse, kterou máte ve svém profilu, takže pokud jste v této oblasti, zavolejte jim nebo se zastavte a dejte jim vědět o vaší situaci.

http://www.datastorageinc.com/

Chci jen přidat k existujícím odpovědím něco, co by mohlo zlepšit váš přenos, jakmile připojíte pevný disk k serveru s dobrou šířkou pásma.

Potřeboval jsem několikrát přenést velké množství dat mezi dvěma webovými servery a namísto použití běžných příkazů FTP nebo WGET k nahrávání nebo stahování dat jsem používal příkaz Linux SCP. Více informací naleznete zde: http://www.go2linux.org/scp-linux-command-line-copy-files-over-ssh

Budete potřebovat přístup SSH k oběma serverům a poté můžete zkopírovat jeden soubor nebo více souborů rekurzivně.

Takže pokud máte místo mnoha malých pouze velké soubory, myslím, že se zkopírují dostatečně rychle.

Při rychlosti přenosu mezi servery 11 MB / s by přenos trval asi 25 hodin.

Hodně štěstí! ;)

  • 1 Ještě lepší je použít rsync, pokud to cílový hostitel podporuje. (Mnozí ano.)

http://aws.amazon.com/importexport/

Zašlete své zařízení do AWS a on se postará o zbytek.

  • „... a o zbytek se postarají“--no, nebudou, pokud nebude vaším cílem AWS. Pokud tomu tak není, přenesou data pouze do kbelíku S3. A vy jste ten, kdo to musí dostat z kbelíku S3 do cíle úložiště, v takovém případě je to stejné jako odpověď xpda.
  • 2 No absolutně, měl jsem to komentovat stejně jako Rich (nebyl tam v době, kdy jsem zveřejnil) odpověď InChargeOfIt. Vzhledem k tomu, že Hamlin11 zvláště projevil zájem o řešení AWS a hledal odkaz na tuto službu, zveřejnil jsem jej. Souhlasím, že by tam byl vhodnější komentář.
  • Myslím, že pokud můžete upravit odpověď, abyste se připojili k tomuto komentáři, a všimněte si, že pro destinace, které nejsou AWS, stačí poté zahájit přenos ze serveru na server pomocí velmi tlustého potrubí Amazonu, stále by to být dobrou odpovědí.

Pokud jsou data ve vaší kanceláři na pomalém připojení, jste v nálevu. Pokud jsou data na nebo na vašem starém hostiteli, můžete zkusit přenos mezi servery. Používání ISP trubek místo vašich těsných kancelářských trubek.

Pokud jste to udělali v blocích přes wget od ssh, bylo by to sakra mnohem rychlejší než odeslání jednotky pro instalaci. To znamená, že jsem nikdy nemusel přesunout více než 250 GB.

  • Naléhavá část otázky pocházela z katastrofické události prostoje u „starého hostitele“. Neměli jsme hostitele teplé zálohy, ale měli jsme lokální nedávné zálohy.

Jak naznačují další otázky, většinou se scvrkává na nalezení někoho kolem vás s dobrým spojením.

Jedna skupina, se kterou můžete mluvit, jsou administrátoři univerzit nebo vysokých škol. Jen se ujistěte, že ten chlap, se kterým mluvíte, je oprávněn nechat vám projít nějakou TB přes jejich drát a jsem si jistý, že se můžete dohodnout.

Mnoho fakult na univerzitách, např. Fyzika částic, zveřejňujte petabajty dat, takže by to mohla být další možná volba.

Pracoval pro vás: Charles Robertson | Chcete nás kontaktovat?