Belajar desain sistem dalam 40 pelajaran

Pelajari desain sistem dalam 40 kelas animasi. Pahami penyeimbangan beban, cache, basis data, dan antrean, lalu rancang linimasa dan aplikasi percakapan.

Apa yang terjadi saat browser memuat halaman?

Pada kunjungan pertama melalui TCP dan TLS, browser mencari alamat domain, membuka koneksi aman, dan mengirim permintaan HTTP. Browser kemudian menampilkan respons server.

Mencari alamat (DNS)

Jaringan merutekan berdasarkan alamat IP berupa angka, bukan nama. Jadi browser lebih dulu bertanya ke resolver DNS: di mana shop.example?

Jawabannya (203.0.113.7) kembali dalam sekitar 20 ms.

RFC 1034 — Domain Names: Concepts and Facilities

Membuka koneksi

Sekarang browser membuka koneksi ke 203.0.113.7. Handshake TCP menyepakati percakapan; handshake TLS menyiapkan enkripsi. Masing-masing butuh satu round trip: pergi dan pulang.

Di sini satu round trip butuh 30 ms, jadi menyambung saja makan 60 ms sebelum satu byte pun dari halaman diminta.

Mengirim permintaan

Lewat koneksi yang terbuka, browser mengirim GET /products. Server mem-parse-nya, memeriksa sesi, dan menjalankan kodemu.

Itu butuh satu round trip lagi ditambah ~10 ms kerja server.

Server bertanya ke database

Produk tidak tinggal di server web, tapi di database. Server mengirim query dan menunggu baris-barisnya kembali.

Lihat sebuah permintaan menempuh seluruh jalan masuk dan responsnya seluruh jalan keluar.

Respons pulang ke rumah

Server mengubah baris menjadi HTML dan mengirimnya kembali; mengunduhnya butuh 20 ms lagi. Browser merender halaman 155 ms setelah kamu menekan Enter.

Lalu ia melihat gambar dan stylesheet di halaman dan mengirim permintaan lain. Memakai ulang koneksi yang terbuka menghemat handshake mereka.

Kursus

Dasar

  • Perjalanan sebuah permintaan

    Ikuti satu kali muat halaman lompatan demi lompatan, dan temukan ke mana waktu sebenarnya habis.

  • Latensi & throughput

    Dua pertanyaan tentang kecepatan, dan mengapa server yang sibuk melambat sebelum penuh.

  • Hitungan kasar

    Ubah ide produk menjadi server dan terabyte dengan hitungan yang muat di selembar serbet.

Skalabilitas

  • Vertikal atau horizontal

    Satu-satunya servermu meleleh. Beli yang lebih besar, atau beli lebih banyak?

  • Load balancing

    Satu pintu depan untuk banyak server, dan aturan siapa mendapat permintaan yang mana.

  • Layanan stateless

    Mengapa permintaan berikutnya harus bisa jalan di server mana pun, dan ke mana state dipindahkan.

  • Caching

    Simpan jawaban yang paling sering diminta di tempat yang jauh lebih cepat daripada database.

  • Pengiriman konten

    Salin apa yang diunduh semua orang ke server dekat penggunamu, dan berhentilah melawan kecepatan cahaya.

Data & penyimpanan

  • SQL atau NoSQL

    Tabel, dokumen, atau sekadar kunci: keunggulan tiap jenis database, dan apa yang dikorbankannya.

  • Indeks

    Mengapa query yang sama bisa butuh dua detik atau dua milidetik.

  • Mesin penyimpanan

    Apa yang sebenarnya dilakukan database dengan penulisanmu, dan mengapa ada yang dibangun untuk baca dan ada yang untuk tulis.

  • Replikasi

    Simpan salinan database di beberapa mesin: untuk lebih banyak pembacaan dan untuk bertahan hidup.

  • Sharding

    Saat data atau penulisan sudah melampaui satu mesin, pecah ke banyak mesin.

  • Consistent hashing

    Tambah atau hapus server dan pindahkan hanya secuil data.

  • ID unik dalam skala besar

    Memberi setiap baris nama yang tak akan pernah dipakai pihak lain, tanpa satu penghitung yang harus diantre semua orang.

  • CAP & konsistensi

    Saat jaringan terbelah, salinan data Anda harus memilih antara benar atau bisa dijangkau.

  • Konsensus & leader

    Bagaimana sekelompok server sepakat pada satu leader dan satu sejarah, bahkan saat beberapa di antaranya tak terjangkau.

  • Transaksi & isolasi

    Dua orang, satu kursi, milidetik yang sama. Bagaimana database menjaga perubahan yang bersamaan tetap benar.

  • File & media

    Foto dan video tidak seharusnya ada di database Anda: ke mana mereka disimpan, dan bagaimana mereka sampai ke sana dan kembali.

Komunikasi

  • REST, RPC & GraphQL

    Tiga cara program saling meminta sesuatu, dan berapa biaya masing-masing bagi ponsel di jaringan 4G.

  • Antrean pesan

    Jawab segera, kerjakan pekerjaan lambat nanti, dan jangan pernah kehilangan satu job pun di tengah jalan.

  • Pub/Sub & event

    Umumkan bahwa sesuatu terjadi, dan biarkan pihak yang peduli bereaksi, tanpa ada yang menunggu.

  • Pembaruan real-time

    Bagaimana server memberi tahu Anda bahwa sesuatu terjadi: chat, skor langsung, notifikasi.

Keandalan

  • Redundansi & failover

    Semuanya pada akhirnya akan gagal. Rancang agar tidak ada satu kegagalan pun yang menjatuhkan Anda.

  • Rate limiting

    Beri setiap klien jatah yang adil, agar satu skrip yang lepas kendali tidak menjatuhkan semua orang.

  • Timeout & retry

    Memanggil layanan yang sedang kesulitan dengan aman: menyerah tepat waktu, mencoba ulang dengan hati-hati, dan tahu kapan harus berhenti.

  • Observabilitas

    Metrik, log, dan trace: cara cepat menemukan apa yang salah, di mana, dan mengapa.

Arsitektur

  • Monolit atau mikroservis

    Satu codebase atau banyak layanan? Apa yang diberikan masing-masing, apa biayanya, dan cara berpindah di antara keduanya.

  • Service discovery

    Bagaimana layanan saling menemukan saat instance datang dan pergi, dan satu pintu depan untuk semua pihak di luar.

  • Saga & transaksi terdistribusi

    Satu aksi, beberapa layanan, beberapa database: cara menjaga semua-atau-tidak tanpa satu transaksi besar.

  • Pemrosesan batch & stream

    Mengolah miliaran event: semalaman dalam batch besar, atau terus-menerus begitu event datang.

Keamanan

  • Autentikasi

    Membuktikan siapa seseorang, tanpa menjadi penyebab kata sandinya bocor.

  • Otorisasi

    Tahu siapa seseorang tidak memberi tahu apa yang boleh ia lihat atau lakukan. Memeriksanya, di mana saja.

  • Enkripsi & rahasia

    Melindungi data di jaringan, di disk, serta kunci dan kata sandi yang dipakai layanan Anda.

Pengiriman

  • Pengujian

    Tahu bahwa sebuah perubahan aman sebelum pengguna Anda menemukannya: tes cepat untuk logika, beberapa tes lambat untuk sisanya.

  • CI/CD & deployment

    Membawa setiap perubahan ke produksi dengan cepat dan aman, dan menariknya kembali secepat itu juga.

Sistem utuh

  • HLD & LLD

    Sistem yang sama di dua tingkat zoom: peta layanan, dan isi dari salah satunya.

  • Rancang pemendek URL

    Desain ujung ke ujung pertama: dari brief satu baris hingga sistem yang melayani miliaran pengalihan.

  • Rancang news feed

    Postingan dari semua yang Anda ikuti, dalam 200 ms, dan pertanyaan kapan pekerjaan dilakukan.

  • Rancang sistem chat

    Dua puluh juta koneksi terbuka dan satu janji: setiap pesan sampai, berurutan, tepat sekali.

Referensi teknis