Projektowanie systemów w 40 lekcjach

Poznaj projektowanie systemów w 40 lekcjach z animacjami. Zobacz, jak działają równoważenie obciążenia, pamięć podręczna, bazy danych i kolejki.

Co się dzieje, gdy przeglądarka ładuje stronę?

Podczas pierwszej wizyty przez TCP i TLS przeglądarka rozpoznaje domenę, otwiera bezpieczne połączenie i wysyła żądanie HTTP. Następnie wyświetla odpowiedź serwera.

Znajdź adres (DNS)

Sieci kierują ruch według numerycznego adresu IP, nie nazwy. Przeglądarka najpierw pyta więc resolver DNS: gdzie jest shop.example?

Odpowiedź (203.0.113.7) wraca po około 20 ms.

RFC 1034 — Domain Names: Concepts and Facilities

Otwórz połączenie

Teraz przeglądarka otwiera połączenie z 203.0.113.7. Handshake TCP uzgadnia rozmowę, a handshake TLS ustawia szyfrowanie. Każdy wymaga rundy (round trip): tam i z powrotem.

Tu runda trwa 30 ms, więc samo połączenie kosztuje 60 ms, zanim padnie prośba o choćby jeden bajt strony.

Wyślij żądanie

Otwartym połączeniem przeglądarka wysyła GET /products. Serwer je parsuje, sprawdza sesję i uruchamia twój kod.

To kosztuje jeszcze jedną rundę i ~10 ms pracy serwera.

Serwer pyta bazę danych

Produkty nie mieszkają w serwerze WWW, tylko w bazie danych. Serwer wysyła zapytanie i czeka, aż wrócą wiersze.

Zobacz, jak żądanie przechodzi całą drogę tam, a odpowiedź całą drogę z powrotem.

Odpowiedź wraca do domu

Serwer zamienia wiersze w HTML i odsyła go; pobranie zajmuje kolejne 20 ms. Przeglądarka renderuje stronę 155 ms po naciśnięciu Enter.

Potem zauważa w stronie obrazki i arkusze stylów i wysyła kolejne żądania. Ponowne użycie otwartego połączenia oszczędza im handshake.

Kurs

Podstawy

  • Droga żądania

    Prześledź ładowanie jednej strony skok po skoku i sprawdź, gdzie naprawdę ucieka czas.

  • Opóźnienie i przepustowość

    Dwa pytania o szybkość i dlaczego zajęte serwery zwalniają, zanim się zapełnią.

  • Szybkie szacunki

    Zamień pomysł na produkt w serwery i terabajty za pomocą rachunków, które mieszczą się na serwetce.

Skalowanie

  • Pionowo czy poziomo

    Twój jedyny serwer się topi. Kupujesz większy czy więcej serwerów?

  • Równoważenie obciążenia

    Jedne drzwi wejściowe dla wielu serwerów i zasady, kto dostaje które żądanie.

  • Usługi bezstanowe

    Dlaczego następne żądanie musi działać na każdym serwerze i dokąd zamiast tego trafia stan.

  • Cache

    Trzymaj najczęściej potrzebne odpowiedzi w miejscu znacznie szybszym niż baza danych.

  • Dostarczanie treści

    Skopiuj to, co wszyscy pobierają, na serwery blisko użytkowników, i przestań walczyć z prędkością światła.

Dane i magazyny

  • SQL czy NoSQL

    Tabele, dokumenty czy proste klucze: w czym dobry jest każdy rodzaj bazy danych i z czego rezygnuje.

  • Indeksy

    Dlaczego to samo zapytanie może trwać dwie sekundy albo dwie milisekundy.

  • Silniki magazynowania

    Co baza danych naprawdę robi z Twoim zapisem i dlaczego jedne są zbudowane pod odczyty, a inne pod zapisy.

  • Replikacja

    Kopie bazy danych na kilku maszynach: więcej odczytów i przetrwanie awarii.

  • Sharding

    Gdy dane albo zapisy przerastają jedną maszynę, podziel je między wiele.

  • Spójne haszowanie

    Dodawaj lub usuwaj serwery, przenosząc tylko drobny ułamek danych.

  • Unikalne ID w skali

    Nadanie każdemu wierszowi nazwy, której nikt inny nigdy nie użyje, bez jednego licznika, do którego wszyscy muszą stać w kolejce.

  • CAP i spójność

    Gdy sieć się rozpada, kopie twoich danych muszą wybrać: mieć rację czy być osiągalne.

  • Konsensus i liderzy

    Jak grupa serwerów uzgadnia jednego lidera i jedną historię, nawet gdy części z nich nie da się osiągnąć.

  • Transakcje i izolacja

    Dwie osoby, jedno miejsce, ta sama milisekunda. Jak bazy danych utrzymują poprawność równoczesnych zmian.

  • Pliki i media

    Zdjęcia i filmy nie mają miejsca w bazie danych: dokąd trafiają zamiast tego i jak tam docierają i wracają.

Komunikacja

  • REST, RPC i GraphQL

    Trzy sposoby, w jakie programy proszą się nawzajem o różne rzeczy, i ile każdy z nich kosztuje telefon na 4G.

  • Kolejki wiadomości

    Odpowiedz od razu, wolną pracę zrób później i nigdy nie zgub zadania po drodze.

  • Pub/Sub i zdarzenia

    Ogłoś, że coś się wydarzyło, i pozwól zareagować tym, których to obchodzi, bez czekania kogokolwiek.

  • Aktualizacje na żywo

    Jak serwer daje znać, że coś się wydarzyło: czat, wyniki na żywo, powiadomienia.

Niezawodność

  • Redundancja i failover

    Wszystko w końcu się psuje. Projektuj tak, by żadna pojedyncza awaria cię nie położyła.

  • Limitowanie żądań

    Daj każdemu klientowi uczciwy budżet, żeby jeden rozpędzony skrypt nie położył wszystkich.

  • Timeouty i ponowienia

    Bezpieczne wywoływanie usługi w tarapatach: poddaj się na czas, ponawiaj ostrożnie i wiedz, kiedy przestać.

  • Obserwowalność

    Metryki, logi i ślady: jak szybko ustalić, co jest nie tak, gdzie i dlaczego.

Architektura

  • Monolit czy mikroserwisy

    Jedna baza kodu czy wiele usług? Co daje każde podejście, ile kosztuje i jak przejść z jednego do drugiego.

  • Wykrywanie usług

    Jak usługi znajdują się nawzajem, gdy instancje pojawiają się i znikają, i jedne drzwi wejściowe dla wszystkich z zewnątrz.

  • Sagi i transakcje rozproszone

    Jedna akcja, kilka usług, kilka baz danych: jak zachować zasadę wszystko albo nic bez jednej wielkiej transakcji.

  • Przetwarzanie wsadowe i strumieniowe

    Mielenie miliardów zdarzeń: nocą w dużych partiach albo na bieżąco, gdy napływają.

Bezpieczeństwo

  • Uwierzytelnianie

    Udowodnić, kim ktoś jest, i nie stać się powodem wycieku jego hasła.

  • Autoryzacja

    Wiedza, kim ktoś jest, nie mówi, co wolno mu zobaczyć ani zrobić. Sprawdzanie tego, wszędzie.

  • Szyfrowanie i sekrety

    Ochrona danych w sieci, na dysku, a także kluczy i haseł, których używają twoje usługi.

Dostarczanie

  • Testowanie

    Wiedzieć, że zmiana jest bezpieczna, zanim przekonają się o tym użytkownicy: szybkie testy logiki, kilka wolnych na całą resztę.

  • CI/CD i wdrożenia

    Szybkie i bezpieczne dostarczanie każdej zmiany na produkcję, i równie szybkie wycofywanie.

Całe systemy

  • HLD i LLD

    Ten sam system w dwóch przybliżeniach: mapa usług i wnętrze jednej z nich.

  • Projekt skracacza URL

    Pierwszy projekt od początku do końca: od jednozdaniowego zlecenia do systemu obsługującego miliardy przekierowań.

  • Projekt feedu aktualności

    Posty od wszystkich, których obserwujesz, w 200 ms, i pytanie, kiedy wykonać pracę.

  • Projekt systemu czatu

    Dwadzieścia milionów otwartych połączeń i obietnica: każda wiadomość dociera, w kolejności, dokładnie raz.

Źródła techniczne