W tym Samouczek Snowball and Snowmobile przedstawia sposób migracji danych w Amazon Web Services Cloud. Poniższe wskazówki zostaną omówione w tym artykule,
- Przykład zastosowania migracji danych
- AWS Snowball
- Kroki migracji danych do chmury AWS przy użyciu Snowball
- Snowball vs Snowmobile
A więc zacznijmy,
Przykład zastosowania migracji danych
Wraz z szybszą penetracją wyższych prędkości Internetu, satelitów i smartfonów ilość generowanych danych rośnie z dnia na dzień. Na przykład firma zajmująca się zdjęciami satelitarnymi może już przechowywać petabajty informacji o Ziemi i regularnie je aktualizować. Stałe zwiększanie pojemności magazynów byłoby dla nich ogromnym wyzwaniem nie tylko pod względem kosztów, ale także logistyki, takiej jak przestrzeń, zasilanie, bezpieczeństwo itp. W tym miejscu pojawią się dostawcy chmury, tacy jak AWS. Kilka innych przypadków użycia, w których firmy mają ogromne ilości danych, to przechowywanie bibliotek wideo, sekwencji genomowych, danych sejsmicznych.
Firma Satellite Imagery Company i inni chcieliby przenieść swoje aplikacje i dane do chmury i pozwolić dostawcy usług w chmurze zająć się aspektami przechowywania, takimi jak bezpieczeństwo, kopie zapasowe, dodatkowa pamięć itp. znaleźć więcej klientów, zapewniając im większą wartość, więcej sposobów interakcji z nimi itp.
Jednak przenoszenie petabajtów danych przez Internet ma swoje własne wyzwania. Zgodnie z dokumentacją AWS tutaj : Przesłanie 100 terabajtów danych przez dedykowane połączenie 100 Mb / s zajmie ponad 100 dni . Zapomnij o przenoszeniu petabajtów danych, zajmie to prawie rok. Oprócz wymaganego czasu wiąże się to z dodatkowym kosztem przepustowości sieci i nie zapominajmy o szpiegowaniu danych podczas korzystania z publicznego internetu. To jest, gdy usługi lubią AWS Snowball i AWS Snowmobile wejdź w obraz.
Następnie w tym samouczku AWS Snowball and Snowmobile
AWS Snowball
Snowball to wytrzymałe urządzenie, które jest również odporne na wybuchy, odrobinę większe niż rozmiar walizki i można je również nadać do lotu. Oto kilka linków ( jeden , 2 ) o tym, jak wytrzymała jest śnieżka.
Inną opcją przyspieszenia przepływu danych między centrum danych a chmurą AWS jest użycie rozszerzenia Usługa AWS Direct Connect . Korzystając z tej usługi, ustanawiana jest dedykowana linia między AWS Cloud a Twoim własnym centrum danych w celu zapewnienia stabilnego połączenia i stałej wysokiej przepustowości.
Następnie w tym samouczku AWS Snowball and Snowmobile, zobaczmy, jak działa migracja danych,
Kroki migracji danych do chmury AWS przy użyciu Snowball
Oto kroki na wysokim poziomie, aby przeprowadzić migrację danych między własnym centrum danych a chmurą AWS.
Krok 1: Poproś o jedno lub więcej urządzeń Snowball od AWS w zależności od ilości przesyłanych danych. Snowball ma dwie wersje z pamięcią 50 i 80 TB i można je zamówić w AWS za pośrednictwem konsoli zarządzania.
Krok 2: AWS będzie wysyłał Snowball do klienta. Następnym krokiem byłoby podłączenie tego samego do sieci lokalnej, a następnie przesłanie danych do Snowball za pomocą Klient program dostarczony przez AWS. Dane są automatycznie szyfrowane i przechowywane.
Krok 3: Gdy dane zostaną przesłane do Snowball, muszą zostać przesłane kurierem do AWS. Snowball ma e-ink do automatycznego wypełnienia adresu lokalizacji AWS. Dane w Snowball są zaszyfrowane (256-bitowe szyfrowanie przy użyciu AWS KMS Keys), więc jest teraz możliwe, że Snowball zostanie zmodyfikowany lub ktoś spróbuje wydobyć z niej dane. To wszystko jest chronione.
Krok 4: Gdy ludzie z AWS zdobędą Snowball, podłączają ją do chmury AWS, odszyfrowują dane i przenoszą je do S3.
Krok 5: Gdy dane zostaną przeniesione do S3, Snowball jest usuwany, aby nikt nie miał do nich dostępu.
Krok 6: Ostatnim i ostatnim krokiem jest uzyskanie przez klienta dostępu do danych w S3. Stamtąd dane można przenieść do EBS, EFS, DynamoDB i różnych innych usług AWS.
Powyższe kroki są bardzo podobne do tego, jak przesyłamy dane z jednego laptopa do drugiego, gdy nie jest on podłączony do sieci. Wkładamy dysk USB do laptopa źródłowego, kopiujemy dane na dysk USB. Wyjmij i włóż dysk USB do docelowego laptopa i skopiuj dane. Chociaż powyższe kroki dotyczą przenoszenia danych z naszego własnego centrum danych do chmury AWS, możliwe jest również przeniesienie danych w drugą stronę, wykonując dokładnie te kroki w odwrotnej kolejności. W ten sposób nie ma blokowania danych.
Snowball służy nie tylko do przenoszenia danych istniejących aplikacji do chmury AWS, ale może być również używany do migracji centrum danych, gdy ma sens zamknięcie istniejącego centrum danych i przeniesienie wszystkiego do chmury. Takie podejście przyspiesza przejście w porównaniu z przenoszeniem danych przez publiczny internet, który jest nieco powolny.
To prowadzi nas do ostatniej części samouczka AWS Snowball and Snowmobile,
Snowball vs Snowmobile
Pojedyncza Snowball może przechowywać do 80 TB danych, z czego tylko 72 TB to przestrzeń do wykorzystania. Wiele Snowball może być używanych równolegle, gdy istnieje potrzeba przeniesienia więcej niż 80 TB danych.
znajdź największy element w tablicy java
AWS zapewnia również Skuter śnieżny gdzie rozmiar przechowywanych danych jest znacznie większy niż to, co może przechowywać Snowball. Snowball to wytrzymały kontener transportowy z naczepą. Podczas gdy pojedyncza kula śnieżna może przechowywać do 80 TB danych, pojedynczy skuter śnieżny może przechowywać 100 PB danych, czyli prawie 1250 razy więcej niż pojedyncza śnieżka. AWS zaleca używanie Snowball, gdy dane do przesłania mają mniej niż 10 PB lub użycie skutera śnieżnego. Oprócz domyślnego szyfrowania, skuter śnieżny wykonuje kilka dodatkowych kroków, takich jak śledzenie GPS, całodobowy nadzór wideo, opcjonalna eskorta, aby dane były jeszcze bezpieczniejsze.
To prowadzi nas do końca tego artykułu o samouczku AWS Snowball and Snowmobile. Aby dowiedzieć się więcej o AWS, możesz polecić nasz blog. Opracowaliśmy również program nauczania obejmujący dokładnie to, czego potrzebujesz, aby złamać egzamin na architekta rozwiązań! Możesz rzucić okiem na szczegóły kursu .
Umieść wszystkie swoje zapytania w sekcji komentarzy, abyśmy mogli wrócić do Ciebie najwcześniej.