איכות חיפוש: הערכה וכוונון רלוונטיות
איכות חיפוש היא הדיסציפלינה המתמשכת של מדידה אם תוצאות חיפוש באמת טובות — לא רק אם המערכת רצה — ושימוש במדידה הזו כדי להנחות כוונון רלוונטיות לאורך זמן.
איכות זה לא אותו דבר כמו זמינות
מערכת חיפוש יכולה להיות מהירה וללא שגיאות ועדיין להחזיר התאמות גרועות. איכות חיפוש מתייחסת ספציפית לשאלה אם התוצאות שימושיות, מה שדורש סוג מדידה שונה מניטור מערכת סטנדרטי.
שתי דרכים למדוד איכות
שיפוטי רלוונטיות אנושיים — דירוג מדגם של זוגות שאילתה-תוצאה מול רובריקה — ואותות התנהגותיים, כמו שיעור הקלקה, שיעור הוספה לעגלה ושיעור ניסוח מחדש. לכל אחד יש נקודות עיוורות לבד, ולכן רוב הצוותים משתמשים בשניהם יחד.
ניסוח מחדש של שאילתה כאות איכות
כשקונה מחפש מיד שוב עם שאילתה שונה וקשורה, זה אות חזק שהניסיון הראשון לא החזיר את מה שרצה — גם אם הוא טכנית החזיר כמה תוצאות.
בדיקת A/B של שינויי חיפוש בבטחה
כי שינויי רלוונטיות משפיעים על כל שאילתה בבת אחת, בדיקת שינויים על חלק מהתעבורה לפני פריסה מלאה היא הדרך הסטנדרטית לתפוס רגרסיות לפני שהן משפיעות על כל החנות.
שאלות נפוצות
איך איכות חיפוש שונה מאנליטיקס חיפוש?
אנליטיקס היא המדדים הגולמיים. איכות היא הדיסציפלינה ההערכית של שיפוט אם המדדים האלה משקפים תוצאות טובות, לעיתים קרובות בשילוב מדדים עם ביקורת אנושית ישירה.
מהו ניסוח מחדש של שאילתה, ולמה זה חשוב?
זה כשקונה מחפש שוב זמן קצר אחרי שאילתה ראשונית, בדרך כלל בניסוח שונה — סימן חזק שהחיפוש הראשון לא סיפק אותו, גם בלי סקר פורמלי.
למה לבדוק שינויי חיפוש על חלק מהתעבורה קודם?
כי שינוי רלוונטיות משפיע על כל שאילתה שעוברת דרכו בבת אחת, כך שבדיקה על חלק מגבילה את רדיוס הפיצוץ אם השינוי מתברר כרגרסיה ולא כשיפור.