להתחיל משאלה תפעולית
Observability עוזרת להבין מה קורה במערכת דרך מידע שהיא מפיקה. OpenTelemetry מתארת signals כגון metrics, logs ו־traces. ההחלטה הראשונה אינה איזה כלי להתקין, אלא אילו שאלות צריך לענות עליהן כשמשתמש לא מצליח להשלים פעולה.
במערכת פניות אפשר לשאול: האם הבקשה נקלטה, האם נשלחה להתראה, והאם היא מחכה לטיפול אחרי כשל? מדד כללי של CPU אינו עונה בהכרח על השאלות האלה. התחילו מהתהליך שהעסק תלוי בו והגדירו אילו מצבים צריך לראות.
למדוד תוצאה, עומס וזמן
בחרו מדדים שמתארים הצלחה או כשל של פעולה, זמן תגובה וקצב עבודה. אם יש תור, בדקו גם כמה משימות מחכות וכמה זמן הוותיקה שבהן נמצאת שם. מונה של משימות מוצלחות יכול להיראות תקין גם כשחלק מהבקשות תקוע כבר שעות.
שמרו את מספר הצירופים של תוויות המדדים בשליטה. מזהה משתמש או בקשה אינו תווית טובה לכל מדד. מעבר להיקף הנתונים, חשוב לשאול אם התווית כוללת מידע אישי ואם היא נחוצה לשאלה התפעולית שבחרתם.
לכתוב לוגים שניתן לחבר לתהליך
לוג שימושי מתאר אירוע, תוצאה והקשר מספיק לאבחון. הודעה כמו “משהו נכשל” אינה מאפשרת להבין איזה שלב דורש טיפול. מזהה בקשה יכול לעזור לחבר אירועים, כל עוד אינו מכיל מידע אישי ואינו מחליף בקרת הרשאות על כלי הצפייה.
אל תכתבו סיסמאות, tokens או גוף פנייה מלא כברירת מחדל. תכננו הרשאות ומשך שמירה למידע התפעולי. אפשר לתעד קוד שגיאה והשלב שבו התרחש הכשל, ולשמור פרטים רגישים במנגנון נפרד ומוגן כאשר הם באמת נחוצים.
לעקוב אחרי פעולה שעוברת בין רכיבים
Trace מתאר את הדרך של בקשה בין רכיבים, ויכול לעזור לזהות היכן הושקע זמן או איזה חיבור נכשל. הוא שימושי במיוחד כשהמסלול עובר בשירותים שונים. בדקו שההקשר נשמר גם כשעבודה עוברת לתור או לעובד רקע.
אין צורך לאסוף כל פרט בכל בקשה. קבעו מדיניות דגימה ובדקו שהיא לא מסתירה את התרחישים שחשובים לכם. שמרו את השאלה התפעולית מול העיניים: אם מידע מסוים אינו מסייע לאבחון, ייתכן שאין הצדקה לעלות ולאיסוף שלו.
להתריע רק כשאפשר לפעול
התראה צריכה לתאר בעיה עם השלכה ובעלים שיכול לפעול. ליד כל התראה כתבו מה לבדוק, מהו מצב תקין ומה עושים כאשר התקלה מאומתת. ערך שחצה סף אינו בהכרח אירוע שדורש להעיר אדם; ההקשר קובע.
לפני השקה, גרמו לכשל מבוקר ובקשו מאדם אחר לזהות אותו בעזרת הכלים והתיעוד. אם הוא רואה לוח מרשים אבל לא מצליח להבין מה לעשות, צריך לשפר את המידע או את הוראות הפעולה. זהו תרגיל קטן שמחבר ניטור לתפעול אמיתי.