Systemdesign lernen in 40 Lektionen

Lerne Systemdesign in 40 interaktiven Lektionen. Erkunde Lastverteilung, Caches und Datenbanken und entwirf einen URL-Kürzer, einen Feed und ein Chatsystem.

Was passiert, wenn ein Browser eine Seite lädt?

Beim ersten Aufruf über TCP und TLS löst der Browser den Domainnamen auf, baut eine sichere Verbindung auf und sendet eine HTTP-Anfrage. Danach stellt er die Antwort des Servers dar.

Die Adresse finden (DNS)

Netze routen nach numerischer IP-Adresse, nicht nach Namen. Also fragt der Browser zuerst einen DNS-Resolver: Wo ist shop.example?

Die Antwort (203.0.113.7) kommt nach etwa 20 ms zurück.

RFC 1034 — Domain Names: Concepts and Facilities

Eine Verbindung öffnen

Jetzt öffnet der Browser eine Verbindung zu 203.0.113.7. Ein TCP-Handshake vereinbart das Gespräch, ein TLS-Handshake richtet die Verschlüsselung ein. Jeder braucht einen Roundtrip, hin und zurück.

Hier dauert ein Roundtrip 30 ms, also kostet das Verbinden 60 ms, bevor auch nur ein Byte der Seite angefragt wird.

Die Anfrage senden

Über die offene Verbindung sendet der Browser GET /products. Der Server parst sie, prüft die Session und führt deinen Code aus.

Das kostet einen weiteren Roundtrip plus ~10 ms Serverarbeit.

Der Server fragt die Datenbank

Die Produkte liegen nicht im Webserver, sondern in einer Datenbank. Der Server schickt eine Abfrage und wartet, bis die Zeilen zurückkommen.

Sieh zu, wie eine Anfrage den ganzen Weg hinein reist und die Antwort den ganzen Weg zurück.

Die Antwort kommt nach Hause

Der Server macht aus den Zeilen HTML und schickt es zurück; das Herunterladen dauert weitere 20 ms. Der Browser rendert die Seite 155 ms, nachdem du Enter gedrückt hast.

Dann bemerkt er Bilder und Stylesheets in der Seite und schickt weitere Anfragen los. Die offene Verbindung wiederzuverwenden erspart ihnen den Handshake.

Kurs

Grundlagen

  • Der Weg einer Anfrage

    Verfolge einen Seitenaufruf Schritt für Schritt und finde heraus, wo die Zeit wirklich bleibt.

  • Latenz & Durchsatz

    Zwei Fragen zur Geschwindigkeit, und warum ausgelastete Server langsam werden, bevor sie voll sind.

  • Überschlagsrechnung

    Mach aus einer Produktidee Server und Terabytes, mit Rechnungen, die auf einen Bierdeckel passen.

Skalierung

  • Vertikal oder horizontal

    Dein einziger Server schmilzt. Kaufst du einen größeren oder mehrere?

  • Lastverteilung

    Eine Eingangstür für viele Server – und die Regeln, wer welche Anfrage bekommt.

  • Zustandslose Dienste

    Warum die nächste Anfrage auf jedem Server funktionieren muss – und wohin der Zustand stattdessen wandert.

  • Caching

    Halte die meistgefragten Antworten an einem Ort, der viel schneller ist als die Datenbank.

  • Content Delivery

    Kopiere, was alle herunterladen, auf Server nahe deinen Nutzern – und hör auf, gegen die Lichtgeschwindigkeit zu kämpfen.

Daten & Speicher

  • SQL oder NoSQL

    Tabellen, Dokumente oder einfache Schlüssel – worin jede Art von Datenbank gut ist und worauf sie verzichtet.

  • Indizes

    Warum dieselbe Query zwei Sekunden oder zwei Millisekunden dauern kann.

  • Speicher-Engines

    Was eine Datenbank wirklich mit deinem Schreibzugriff macht – und warum manche fürs Lesen und andere fürs Schreiben gebaut sind.

  • Replikation

    Kopien der Datenbank auf mehreren Maschinen halten: für mehr Lesezugriffe und zum Überleben.

  • Sharding

    Wenn Daten oder Schreibvorgänge einer Maschine entwachsen, verteile sie auf viele.

  • Consistent Hashing

    Server hinzufügen oder entfernen und dabei nur einen schmalen Teil der Daten bewegen.

  • Eindeutige IDs

    Jeder Zeile einen Namen geben, den nie jemand anderes benutzt, ohne einen einzigen Zähler, vor dem alle Schlange stehen.

  • CAP & Konsistenz

    Wenn das Netz reißt, müssen sich die Kopien deiner Daten entscheiden: richtig sein oder erreichbar bleiben.

  • Konsens & Leader

    Wie sich eine Gruppe von Servern auf einen Leader und eine Geschichte einigt, auch wenn einige nicht erreichbar sind.

  • Transaktionen & Isolation

    Zwei Personen, ein Platz, dieselbe Millisekunde. Wie Datenbanken gleichzeitige Änderungen korrekt halten.

  • Dateien & Medien

    Fotos und Videos gehören nicht in deine Datenbank: wohin sie stattdessen kommen und wie sie hin- und zurückgelangen.

Kommunikation

  • REST, RPC & GraphQL

    Drei Arten, wie Programme einander um etwas bitten, und was jede davon ein Handy im 4G-Netz kostet.

  • Message Queues

    Sofort antworten, die langsame Arbeit später erledigen und unterwegs nie einen Job verlieren.

  • Pub/Sub & Events

    Verkünden, dass etwas passiert ist, und reagieren lassen, wen es interessiert, ohne dass jemand wartet.

  • Echtzeit-Updates

    Wie der Server dir sagt, dass etwas passiert ist: Chat, Live-Ergebnisse, Benachrichtigungen.

Zuverlässigkeit

  • Redundanz & Failover

    Alles fällt irgendwann aus. Entwirf so, dass kein einzelner Ausfall dich lahmlegt.

  • Rate Limiting

    Gib jedem Client ein faires Budget, damit kein außer Kontrolle geratenes Skript alle lahmlegt.

  • Timeouts & Retries

    Einen angeschlagenen Dienst sicher aufrufen: rechtzeitig aufgeben, vorsichtig wiederholen und wissen, wann Schluss ist.

  • Observability

    Metriken, Logs und Traces: wie du schnell herausfindest, was falsch läuft, wo und warum.

Architektur

  • Monolith oder Microservices

    Eine Codebasis oder viele Dienste? Was dir jede Variante bringt, was sie kostet und wie du von einer zur anderen wechselst.

  • Service Discovery

    Wie Dienste einander finden, wenn Instanzen kommen und gehen, und eine einzige Eingangstür für alle draußen.

  • Sagas & verteilte Tx

    Eine Aktion, mehrere Dienste, mehrere Datenbanken: wie alles-oder-nichts gelingt, ohne eine große Transaktion.

  • Batch- & Stream-Verarbeitung

    Milliarden Events verarbeiten: über Nacht in großen Batches oder laufend, sobald sie ankommen.

Sicherheit

  • Authentifizierung

    Nachweisen, wer jemand ist, ohne zum Grund dafür zu werden, dass sein Passwort leakt.

  • Autorisierung

    Zu wissen, wer jemand ist, sagt nicht, was er sehen oder tun darf. Das überall prüfen.

  • Verschlüsselung & Secrets

    Daten im Netz und auf der Platte schützen, ebenso die Schlüssel und Passwörter, die deine Dienste nutzen.

Auslieferung

  • Testen

    Wissen, dass eine Änderung sicher ist, bevor es deine Nutzer merken: schnelle Tests für die Logik, wenige langsame für den Rest.

  • CI/CD & Deployments

    Jede Änderung schnell und sicher in Produktion bringen, und genauso schnell wieder zurücknehmen.

Ganze Systeme

  • HLD & LLD

    Dasselbe System in zwei Zoomstufen: die Karte der Dienste und das Innere eines davon.

  • URL-Kürzer entwerfen

    Ein erstes Design von Anfang bis Ende: von einem einzeiligen Auftrag zu einem System, das Milliarden Weiterleitungen ausliefert.

  • News-Feed entwerfen

    Posts von allen, denen du folgst, in 200 ms, und die Frage, wann die Arbeit passiert.

  • Chat-System entwerfen

    Zwanzig Millionen offene Verbindungen und ein Versprechen: Jede Nachricht kommt an, in der richtigen Reihenfolge, genau einmal.

Technische Quellen