Nowy standard. Twoje centrum tworzenia inteligentnego, szybkiego i zrównoważonego oprogramowania AI

Zobacz teraz
Słownik/Architektura i dostarczanie oprogramowania

Migracja bazy danych

Migracja bazy danych to proces przenoszenia danych i schematu z jednego systemu bazodanowego lub środowiska do innego.

Czym jest migracja bazy danych?

Migracja bazy danych to projekt, którego celem jest bezpieczne przeniesienie danych aplikacji ze starego systemu bazodanowego do nowego, bez utraty rekordów i bez zakłócania działania aplikacji, która z nich korzysta. Potrzeba takiej zmiany zwykle wynika z powodów niezwiązanych bezpośrednio z danymi: dostawca zmienia model cenowy, zespół potrzebuje funkcji dostępnej tylko w innym silniku albo fuzja zmusza dwie firmy działające na dublujących się systemach do ich połączenia.

Ten proces to coś więcej niż kopiowanie wierszy. Migracja zwykle obejmuje dostosowanie schematu do typów danych i ograniczeń w systemie docelowym, sprawdzenie, czy każdy wiersz dotarł bez zmian, oraz skoordynowanie momentu przełączenia, w którym aplikacja zaczyna odczytywać i zapisywać dane w nowej bazie zamiast w starej.

Migracje mają bardzo różną skalę: od aktualizacji wersji u tego samego dostawcy, która zajmuje jedno popołudnie, po migrację między różnymi dostawcami, na przykład z MySQL do PostgreSQL, która wymaga miesięcy równoległych testów, zanim będzie można wyłączyć stary system.

Dlaczego migracja bazy danych ma znaczenie?

  • Baza danych wybrana przez zespół na starcie rzadko odpowiada potrzebom firmy pięć lat później. Ruch może wzrosnąć ponad poziom, z którym pierwotny silnik dobrze sobie radzi. Wymogi zgodności z przepisami mogą wykluczyć obecny model hostingu. Taki sam efekt daje zakończenie przez dostawcę planu cenowego, od którego zależy produkt: migracja pozwala mu nadążyć za zmianami bez przepisywania aplikacji.

  • Pozostawanie przy niewspieranej albo zbyt słabo skalującej się bazie danych generuje stałe koszty. Wolne zapytania przekładają się na wolniejsze funkcje produktu, a baza danych po zakończeniu okresu wsparcia dostawcy przestaje otrzymywać poprawki bezpieczeństwa. To zmienia rutynowe utrzymanie w problem ze zgodnością z przepisami.

  • Fuzje i przejęcia wymuszają konsolidację. Dwie firmy rzadko korzystają z takiej samej konfiguracji baz danych, a utrzymywanie obu po połączeniu podwaja koszty licencji i hostingu.

Jak działa migracja bazy danych?

  • Zespół najpierw przeprowadza audyt źródłowej bazy danych. Obejmuje on inwentaryzację schematu, wolumenu danych, indeksów, procedur składowanych oraz każdej aplikacji i usługi, która z niej odczytuje lub do niej zapisuje dane. Wszystko, co zostanie tu pominięte, wróci później jako incydent na produkcji.

  • Mapowanie schematu przekształca strukturę pod system docelowy. Typy danych i ograniczenia rzadko przekładają się jeden do jednego między silnikami baz danych. Na tym etapie zapada decyzja, jak każda struktura źródłowa ma zostać odwzorowana w strukturze docelowej.

  • Zespół wybiera model migracji. Jednorazowy transfer wsadowy sprawdza się w systemach, które mogą pozwolić sobie na okno serwisowe. Jeśli system działa na żywo i nie może zostać wyłączony, change data capture (CDC) replikuje bieżące zapisy, podczas gdy transfer wsadowy działa w tle.

  • Dane są przenoszone partiami, a każdy etap jest weryfikowany. Liczba wierszy i sumy kontrolne potwierdzają, że to, co trafiło do systemu docelowego, odpowiada temu, co opuściło system źródłowy, zamiast opierać się wyłącznie na komunikacie narzędzia o powodzeniu transferu.

  • Moment przełączenia kieruje aplikację do nowej bazy danych. Zwykle jest to najkrótszy etap w całym harmonogramie i jednocześnie ten obarczony największym ryzykiem. To chwila, od której ruch produkcyjny zaczyna zależeć od poprawnego działania nowego systemu.

  • Stary system pozostaje dostępny przez ustalone okno wycofania zmian. Zespoły utrzymują źródłową bazę danych w działaniu i synchronizacji jeszcze przez kilka dni po przełączeniu, aby móc cofnąć zmiany, jeśli po uruchomieniu produkcyjnym pojawi się problem.

Jakich narzędzi zespoły używają do migracji bazy danych?

  • Zarządzane usługi migracyjne przenoszą dane między określonymi silnikami źródłowymi i docelowymi, ograniczając potrzebę pisania własnych skryptów. AWS Database Migration Service, Google Cloud Database Migration Service oraz Azure Database Migration Service obsługują konwersję schematu i ciągłą replikację w ramach swoich platform chmurowych.

  • Narzędzia change data capture replikują zapisy do bazy niemal w czasie rzeczywistym, dzięki czemu możliwe są migracje z niemal zerowym przestojem. Debezium i Fivetran przesyłają zmiany na poziomie wierszy ze źródłowej bazy danych do docelowej w chwili, gdy te zmiany zachodzą.

  • Narzędzia do zarządzania schematem i ładowania danych obsługują strukturalną stronę pracy oraz jednorazowy transfer. Flyway i Liquibase wersjonują zmiany schematu między środowiskami, a pgloader automatyzuje masowy transfer danych i konwersję typów między określonymi silnikami baz danych.

Jakie są kluczowe cechy migracji bazy danych?

  • Jasno określony model przestoju. Każda migracja zakłada albo tryb offline, w którym aplikacja jest niedostępna podczas transferu, albo podejście online z użyciem CDC, w którym aplikacja działa bez przerwy, a dane replikują się w tle.

  • Logika transformacji schematu. Przejście między silnikami baz danych oznacza konwersję typów danych i ograniczeń.

  • Weryfikacja względem źródła. Migrację można uznać za zakończoną dopiero wtedy, gdy liczba wierszy albo sumy kontrolne potwierdzą, że system docelowy odpowiada źródłowemu.

  • Plan wycofania zmian. Źródłowa baza danych pozostaje aktywna i zsynchronizowana przez określony czas po przełączeniu. Dzięki temu zespół może wrócić do poprzedniego stanu, jeśli nowy system zacznie działać nieprawidłowo pod obciążeniem produkcyjnym.

  • Moment przełączenia. W pewnym momencie ruch aplikacji przestaje odczytywać i zapisywać dane w starej bazie, a zaczyna w nowej. Może to nastąpić jednorazowo albo stopniowo, w ramach wdrożenia sterowanego feature flagami.

Jakie korzyści daje migracja bazy danych?

  • Zmniejsza zależność od jednego dostawcy. Przeniesienie danych do silnika bazodanowego z otwartą specyfikacją lub szerszym wsparciem hostingowym daje zespołowi większą swobodę, jeśli w przyszłości znów będzie chciał zmienić dostawcę.

  • Poprawia wydajność w nowej skali. Silnik bazodanowy wybrany dla startupu liczącego pięć osób często nie radzi sobie z wzorcami zapytań ani wolumenem danych tego samego produktu trzy lata później. Migracja pomaga zapleczu technicznemu nadążyć za produktem.

  • Obniża koszty infrastruktury. Konsolidacja wielu baz danych w jedną albo odejście od kosztownej licencji własnościowej na rzecz silnika open source zmniejsza stałe koszty hostingu i wsparcia.

  • Zamyka luki w zgodności z przepisami. Baza danych po zakończeniu wsparcia dostawcy przestaje otrzymywać poprawki bezpieczeństwa. Migracja do wspieranej wersji lub silnika przywraca rytm aktualizacji, którego oczekują audytorzy.

  • Odblokowuje funkcje, których stary silnik nie oferuje. Wyszukiwanie pełnotekstowe albo natywna obsługa JSON to częste powody przejścia na nowszy silnik.

Jakie wyzwania wiążą się z migracją bazy danych?

  • Narzędzia do migracji bez przestoju wprowadzają własną złożoność. Change data capture eliminuje potrzebę okna serwisowego, ale oznacza też konieczność utrzymywania synchronizacji dwóch baz danych i zbudowania procesu przełączenia, który poprawnie obsłuży transakcje będące w toku.

  • Niezgodność schematów wymusza kompromisy. Typy danych, które istnieją w jednym silniku, a nie istnieją w drugim, na przykład przejście typu ENUM z MySQL do PostgreSQL, wymagają decyzji konwersyjnej, która później zmienia sposób, w jaki aplikacja odpyta tę kolumnę.

  • Weryfikacja spowalnia wraz ze wzrostem ilości danych. Porównanie sum kontrolnych wiersz po wierszu to najbardziej wiarygodny sposób wykrycia błędnego transferu, ale przy dużych wolumenach danych trwa na tyle długo, że zespoły przechodzą na próbkowanie, co niesie niewielkie ryzyko przeoczenia uszkodzonego wiersza.

  • Kod aplikacji często wymaga tymczasowych zmian. Logika podwójnego zapisu albo kierowanie części ruchu do nowej bazy, a części do starej, zwiększa złożoność w krótkim okresie. Jeśli nie usuniesz tego porządnie po przełączeniu, stanie się trwałym długiem technicznym.

Czym różni się migracja bazy danych od migracji do chmury?

Aspekt

Migracja bazy danych

Migracja do chmury

Zakres

Dane i schemat w jednej lub kilku bazach danych

Cały stos aplikacyjny, w tym moc obliczeniowa, pamięć masowa, sieć i często także baza danych

Typowy powód

Zmiana dostawcy lub wersji bazy danych albo konsolidacja systemów

Przeniesienie z infrastruktury lokalnej do chmury albo między dostawcami chmurowymi

Przenoszenie danych

Zawsze podstawowy element prac

Opcjonalne; podejście lift-and-shift może pozostawić struktury danych bez zmian

Relacja

Może przebiegać niezależnie od zmian infrastrukturalnych

Często obejmuje migrację bazy danych jako jeden z kilku strumieni prac

Główne narzędzia

AWS DMS, Debezium, pgloader

Centra migracyjne dostawców chmurowych, narzędzia infrastructure as code

Przykład

Przeniesienie produkcyjnej bazy danych z MySQL do PostgreSQL na tym samym serwerze

Przeniesienie aplikacji wraz z bazą danych z prywatnego centrum danych do dostawcy chmurowego

FAQ o migracji bazy danych

Migracja bazy danych: potrzebujesz wsparcia ekspertów?

Monterail tworzy oprogramowanie na zamówienie z wykorzystaniem najnowszych technologii. Porozmawiajmy o tym, jak możemy pomóc w Twoim projekcie.

EXPLORE WEB DEVELOPMENT SERVICES