ניתוח נתונים סטטיסטיים של ביצועי שאילתות

בדף הזה מוסבר איך משתמשים בלוח הבקרה של Query Insights כדי לזהות ולנתח את ביצועי השאילתות.

סקירה כללית של תובנות לגבי שאילתות

להשתמש בלוח הבקרה של Query Insights כדי לעקוב אחרי שאילתות שקשורות למדדים. על סמך המדדים, אתם יכולים לזהות את השאילתות הנפוצות ביותר ואת השאילתות עם זמני אחזור ארוכים, שאולי צריך לבצע להן אופטימיזציה. אתם יכולים להשתמש בלוח הבקרה של תובנות לגבי שאילתות כדי:

  • אופטימיזציה של ביצועי שאילתות: זיהוי שאילתות עם זמני אחזור ארוכים, שאולי צריך לבצע להן אופטימיזציה.
  • ניהול עלויות של שאילתות: זיהוי שאילתות בעלות גבוהה וביצוע אופטימיזציה שלהן כדי להפחית את העלויות.
  • מעקב אחרי נתונים סטטיסטיים של שאילתות: מעקב אחרי נתונים סטטיסטיים של שאילתות לאורך זמן.
  • המלצות לאינדקסים: זיהוי אינדקסים מורכבים חסרים או לא אופטימליים, ויצירת אינדקסים מומלצים ישירות ממרכז הבקרה (מהדורת Enterprise).

נתוני תובנות לגבי שאילתות

התובנות לגבי שאילתות כוללות נתונים מהשיטות הבאות של ה-API:

  • find
  • aggregate

אתם יכולים לראות נתונים על השאילתות שמשתמשות בשיטות האלה בפרויקט ובמסד נתונים מסוימים, בטווח זמן של בין 10 דקות ל-30 ימים. נתונים של שאילתות עם מבנים מקבילים נאספים בשאילתה מנורמלת אחת.

התובנות לגבי שאילתות מחזירות את המידע הבא על שאילתה:

טקסט שאילתה מנורמל מבנה השאילתה מיוצג בטקסט.
מספר ההרצות מספר ההפעלות בחלון הזמן שנבחר.
מספר השגיאות מספר השגיאות בחלון הזמן שנבחר.
משך הביצוע הממוצע (באלפיות השנייה) הזמן הממוצע באלפיות השנייה שלקח למסד הנתונים לעבד את השאילתה.
מספר התוצאות הממוצע שהתקבלו מספר התוצאות שהוחזרו על ידי השאילתה. התוצאות כוללות מסמכים, מזהי אוספים וקטגוריות נתונים נצברים.
המספר הממוצע של מסמכים שנסרקו מספר המסמכים שנסרקו בשאילתה.
המספר הממוצע של רשומות באינדקס שנסרקו מספר הרשומות באינדקס שנבדקו כדי להריץ את השאילתה.
טעינה לפי זמן ממוצע נתונים שיעזרו לסנן את השאילתות המובילות לפי זמן אחזור ממוצע.
עומס לפי סך כל פעולות הקריאה (הניתנות לחיוב) נתונים שיעזרו לכם לסנן את השאילתות המובילות לפי סך כל פעולות הקריאה הניתנות לחיוב.
המלצות לאינדקסים אינדקסים מורכבים מומלצים, אינדקסים בשימוש וההשפעה המשוערת על עומס העבודה של שאילתות במסדי נתונים של מהדורת Enterprise.

רמת הפירוט ושמירת הנתונים

רמת הפירוט של הנתונים תלויה במשך הזמן שצוין:

  • רזולוציה של 10 דקות למרווחים של עד 4 ימים לפני כן
  • רמת פירוט של שעה אחת למרווחים של עד 30 ימים לפני כן

תקופת השמירה המקסימלית של נתונים בתובנות לגבי שאילתות היא 30 ימים. נתונים של 10 דקות נשמרים למשך 4 ימים, ונתונים שעתיים נשמרים למשך 30 ימים.

הצגת תובנות לגבי שאילתות

מסוף Firebase
  1. כדי לראות את התובנות לגבי שאילתות במסד נתונים של Cloud Firestore, פותחים את החלונית Query insights של מסד הנתונים במסוף Google Cloud.
  2. במסוף Firebase, נכנסים לדף Firestore Database.

    כניסה למסד הנתונים ב-Firestore

  3. בוחרים מסד נתונים מרשימת מסדי הנתונים.
  4. ברשימת הכרטיסיות, לוחצים על Query Insights.

    כדי למצוא את השאילתות המובילות לפי זמן אחזור או לפי מספר פעולות הקריאה, לוחצים על Latency או על Read operations.

המלצות לאינדקסים

המלצות לאינדקסים בתובנות לגבי שאילתות מזהות באופן אוטומטי הגדרות חסרות או לא אופטימליות של אינדקסים מורכבים, לצורות של שאילתות שמופעלות לעיתים קרובות במסדי נתונים של מהדורת Firestore Enterprise.

במהדורת Firestore Enterprise, אפשר להריץ שאילתות גם בלי אינדקסים מורכבים תואמים, מה שעלול לגרום לסריקות איטיות של אוספים מלאים או לפעולות מיון בזיכרון. בלוח הבקרה של Query Insights מנותחים נתונים סטטיסטיים היסטוריים של הרצת שאילתות, ומוצעים אינדקסים מורכבים ממוקדים כדי לשפר את זמן האחזור של השאילתות ולצמצם את מספר המסמכים הסרוקים שניתן לחייב עליהם.

איך פועלות ההמלצות לאינדקסים

צינור עיבוד נתונים באצווה אופליין מעריך מדי פעם את השאילתות המובילות בהיסטוריה:

  • ניתוח מבנה השאילתה: חילוץ פרדיקטים של שוויון, מיון וטווח משאילתות שמופעלות לעיתים קרובות.
  • יצירת אינדקסים מועמדים: יצירת הגדרות פוטנציאליות לאינדקסים מורכבים באמצעות היוריסטיקה של סדר אינדקסים (שוויון > מיון > טווח).
  • הערכת כלי האופטימיזציה: הוספת אינדקסים מועמדים למודל העלות של מנוע השאילתות כדי להשוות בין עלויות ההרצה של שאילתות בסיסיות לבין תוכניות הרצה היפותטיות של אינדקסים.
  • ‫Workload impact ranking: דירוג האינדקסים המומלצים לפי רמות השפעה, על סמך החיסכון הכולל המשוער בעומס העבודה:
    • ‫HIGH: המרת סריקות של אוספים מלאים לחיפושים סלקטיביים באינדקס, וכך להפחית באופן משמעותי את קריאות המסמכים ואת זמן האחזור של הביצוע.
    • בינוני: מבטל פעולות יקרות כמו מיון בזיכרון על ידי מתן תוצאות אינדקס ממוינות מראש.
    • נמוך: שיפורים קלים בחיפוש.
כדי לראות המלצות לאינדקסים וליצור אינדקסים מוצעים ממסוף Firebase:

  1. במסוף Firebase, נכנסים לדף Firestore Database.

    כניסה למסד הנתונים ב-Firestore

  2. בוחרים מסד נתונים במהדורת Enterprise מרשימת מסדי הנתונים.

  3. לוחצים על הכרטיסייה Query Insights.

  4. בטבלת השאילתות, מאתרים תבנית שאילתה עם המלצות ולוחצים על Review Recommendations בשורה או בחלון הקופץ.

  5. בתיבת הדו-שיח של ההמלצה לאינדקס, בודקים את ההגדרה של האינדקס המורכב, את סדר השדות ואת רמת ההשפעה המשוערת על עומס העבודה (HIGH,‏ MEDIUM או LOW).

  6. לוחצים על שמירה. החלונית Long-Running Operations (LRO) נפתחת כדי לעקוב אחרי התקדמות בניית האינדקס.

  7. בסיום הבנייה, האינדקס מופיע בכרטיסייה Indexes ואינדיקטור ההמלצה נעלם משורת השאילתה.

מהדורות נתמכות

המלצות לאינדקסים נתמכות רק במסדי נתונים של Firestore Enterprise. אין תמיכה במסדי נתונים של Standard Edition.

מגבלות

  • הנתונים של תובנות לגבי שאילתות מתעדכנים בעיכוב של שעה עד שעתיים.
  • ההמלצות לאינדקסים נוצרות מדי פעם על סמך נתוני שאילתות היסטוריים, ולא בזמן אמת.
  • ההמלצות לאינדקסים מציעות אינדקסים מורכבים חדשים, ולא מציעות לשנות או למחוק אינדקסים קיימים.
  • אין תמיכה ביצירת אינדקסים אוטומטית, וצריך ליצור את האינדקסים המומלצים באופן ידני.
  • בנורמליזציה של שאילתות, ערכים מילוליים מוחלפים ב-placeholder. ההמלצות לאינדקסים מבוססות על תבניות מנורמלות של שאילתות, ולא על ערכים ספציפיים של זמן ריצה.
  • הערכת העלות מתבססת על היוריסטיקה ולא על דגימת נתונים בזמן אמת. יכול להיות שהאינדקסים המומלצים לא ישפרו את הביצועים בכל תרחיש, ויצירת אינדקס מוסיפה תקורה של כתיבה ואחסון.

תמחור

אין עלות נוספת על תובנות לגבי שאילתות או המלצות לאינדקסים.

התפקידים הנדרשים

כדי לקבל את ההרשאות שנדרשות לצפייה בלוח הבקרה של Query Insights וליצירת אינדקסים מומלצים, צריך לבקש מהאדמין להקצות לכם את תפקידי ה-IAM הבאים בפרויקט:

התפקידים המוגדרים מראש האלה כוללים את ההרשאות datastore.insights.get ו-datastore.indexes.create.

יכול להיות שתוכלו לקבל את ההרשאות האלה גם באמצעות תפקידים בהתאמה אישית או תפקידים מוגדרים מראש אחרים.

המאמרים הבאים