לומדים תכנון מערכות ב־40 שיעורים

למדו תכנון מערכות ב־40 שיעורים אינטראקטיביים. הכירו איזון עומסים, מטמונים ומסדי נתונים ותכננו מקצר כתובות, פיד חדשות וצ׳אט.

מה קורה כשהדפדפן טוען דף?

בביקור ראשון דרך TCP ו-TLS, הדפדפן פותר את שם המתחם, פותח חיבור מאובטח ושולח בקשת HTTP. לאחר מכן הוא מציג את תשובת השרת.

מוצאים את הכתובת (DNS‏)

רשתות מנתבות לפי כתובת IP מספרית, לא לפי שם. לכן הדפדפן שואל קודם פותר DNS: איפה shop.example‏?

התשובה (203.0.113.7) חוזרת תוך כ־20 ms‏.

RFC 1034 — Domain Names: Concepts and Facilities

פותחים חיבור

עכשיו הדפדפן פותח חיבור אל 203.0.113.7. לחיצת יד של TCP מסכמת על השיחה; לחיצת יד של TLS מקימה הצפנה. כל אחת צריכה סבב הלוך־ושוב אחד.

כאן סבב הלוך־ושוב לוקח 30 ms‏, אז ההתחברות לבדה עולה 60 ms עוד לפני שמבקשים בייט אחד מהעמוד.

שולחים את הבקשה

על גבי החיבור הפתוח הדפדפן שולח GET /products. השרת מפענח אותה, בודק את הסשן ומריץ את הקוד שלכם.

זה עולה עוד סבב הלוך־ושוב ועוד כ־10 ms של עבודת שרת.

השרת שואל את מסד הנתונים

המוצרים לא גרים בשרת הווב, אלא במסד נתונים. השרת שולח שאילתה ומחכה שהשורות יחזרו.

צפו בבקשה שעוברת את כל הדרך פנימה ובתגובה שעוברת את כל הדרך החוצה.

התגובה חוזרת הביתה

השרת הופך את השורות ל־HTML ושולח אותו חזרה; ההורדה לוקחת עוד 20 ms‏. הדפדפן מציג את העמוד 155 ms אחרי שלחצתם Enter‏.

אחר כך הוא מבחין בתמונות ובגיליונות סגנון בעמוד ושולח עוד בקשות. שימוש חוזר בחיבור הפתוח חוסך להן את לחיצת היד.

קורס

יסודות

  • המסע של בקשה

    עקבו אחרי טעינת עמוד אחד קפיצה אחר קפיצה, וגלו לאן הזמן באמת הולך.

  • השהיה ותפוקה

    שתי שאלות על מהירות, ולמה שרתים עמוסים מאטים עוד לפני שהם מתמלאים.

  • חישוב על גב מפית

    הפכו רעיון למוצר לשרתים ולטרה־בייטים בחישובים שנכנסים על מפית.

הרחבה

  • אנכי או אופקי

    השרת היחיד שלכם נמס. קונים שרת גדול יותר, או עוד שרתים?

  • איזון עומסים

    דלת כניסה אחת להרבה שרתים, והכללים מי מקבל איזו בקשה.

  • שירותים חסרי מצב

    למה הבקשה הבאה חייבת לעבוד על כל שרת, ולאן המצב הולך במקום זה.

  • מטמון

    שמרו את התשובות שמבקשים הכי הרבה במקום מהיר בהרבה ממסד הנתונים.

  • הפצת תוכן

    העתיקו את מה שכולם מורידים לשרתים ליד המשתמשים, והפסיקו להילחם במהירות האור.

נתונים ואחסון

  • SQL או NoSQL

    טבלאות, מסמכים או סתם מפתחות: במה כל סוג של מסד נתונים טוב, וממה הוא מוותר.

  • אינדקסים

    למה אותה שאילתה יכולה לקחת שתי שניות או שתי מילישניות.

  • מנועי אחסון

    מה מסד נתונים באמת עושה עם הכתיבה שלכם, ולמה חלקם בנויים לקריאות ואחרים לכתיבות.

  • שכפול

    להחזיק עותקים של מסד הנתונים על כמה מכונות: בשביל יותר קריאות ובשביל לשרוד.

  • שרדינג

    כשהנתונים או הכתיבות גדלים מעבר למכונה אחת, מפצלים אותם בין הרבה מכונות.

  • גיבוב עקבי

    להוסיף או להסיר שרתים ולהזיז רק פרוסה דקה מהנתונים.

  • מזהים ייחודיים בקנה מידה

    לתת לכל שורה שם שאף אחד אחר לא ישתמש בו לעולם, בלי מונה אחד שכולם צריכים לעמוד אליו בתור.

  • CAP ועקביות

    כשהרשת נקרעת, העותקים של הנתונים שלכם צריכים לבחור בין להיות צודקים לבין להיות זמינים.

  • קונצנזוס ומנהיגים

    איך קבוצת שרתים מסכימה על מנהיג אחד ועל היסטוריה אחת, גם כשאי אפשר להגיע לחלק מהם.

  • טרנזקציות ובידוד

    שני אנשים, מקום אחד, אותה מילישנייה. איך מסדי נתונים שומרים על נכונות כששינויים קורים במקביל.

  • קבצים ומדיה

    תמונות וסרטונים לא שייכים למסד הנתונים שלכם: לאן הם הולכים במקום, ואיך הם מגיעים לשם וחוזרים.

תקשורת

  • REST,‏ RPC ו־GraphQL

    שלוש דרכים שבהן תוכנות מבקשות דברים זו מזו, וכמה כל אחת עולה לטלפון ברשת 4G‏.

  • תורי הודעות

    לענות מיד, לעשות את העבודה האיטית אחר כך, ולעולם לא לאבד משימה בדרך.

  • Pub/Sub ואירועים

    להודיע שמשהו קרה, ולתת למי שאכפת לו להגיב, בלי שאף אחד יחכה.

  • עדכונים בזמן אמת

    איך השרת אומר לכם שמשהו קרה: צ׳אט, תוצאות חיות, התראות.

אמינות

  • יתירות ו־failover

    הכול נכשל בסוף. תכננו כך שאף כשל בודד לא יפיל אתכם.

  • הגבלת קצב

    תנו לכל לקוח תקציב הוגן, כדי שסקריפט משתולל אחד לא יפיל את כולם.

  • פסקי זמן וניסיונות חוזרים

    לקרוא בבטחה לשירות שמתקשה: לוותר בזמן, לנסות שוב בזהירות, ולדעת מתי לעצור.

  • נצפות

    מדדים, לוגים ו־traces‏: איך מגלים מהר מה לא בסדר, איפה ולמה.

ארכיטקטורה

אבטחה

  • אימות זהות

    להוכיח מי מישהו, בלי להפוך לסיבה שהסיסמה שלו דלפה.

  • הרשאות

    לדעת מי מישהו לא אומר לכם מה מותר לו לראות או לעשות. לבדוק את זה, בכל מקום.

  • הצפנה וסודות

    הגנה על נתונים ברשת ועל הדיסק, ועל המפתחות והסיסמאות שהשירותים שלכם משתמשים בהם.

שחרור

  • בדיקות

    לדעת ששינוי בטוח לפני שהמשתמשים שלכם יגלו: בדיקות מהירות ללוגיקה, כמה איטיות לכל השאר.

  • CI/CD ופריסות

    להביא כל שינוי לייצור מהר ובבטחה, ולהחזיר אותו באותה מהירות.

מערכות שלמות

  • HLD ו־LLD

    אותה מערכת בשתי רמות זום: מפת השירותים, והפנים של אחד מהם.

  • תכנון מקצר קישורים

    תכנון ראשון מקצה לקצה: מבריף של שורה אחת למערכת שמגישה מיליארדי הפניות.

  • תכנון פיד חדשות

    פוסטים מכל מי שאתם עוקבים אחריו, ב־200 ms‏, והשאלה מתי לעשות את העבודה.

  • תכנון מערכת צ׳אט

    עשרים מיליון חיבורים פתוחים והבטחה אחת: כל הודעה מגיעה, לפי הסדר, בדיוק פעם אחת.

מקורות טכניים