החיפוש השתנה לאורך השנים כדי לעמוד בציפיות ובצרכים המשתנים של האנשים שמשתמשים ב-Google. אנחנו תמיד מנסים להציג תוצאות שימושיות יותר ונעזרים בחידושים כמו \Knowledge Graph ועדכונים במערכות שלנו. בזכות כל אלה ועוד אנחנו יכולים להמשיך להדגיש תוכן רלוונטי.

כל שינוי בחיפוש Google עובר תהליך בדיקה קפדני כדי לנתח מדדים ולהחליט אם כדאי ליישם אותו.

נתונים מההערכות והניסויים האלו עוברים בדיקה יסודית של מהנדסי תוכנה מנוסים ואנליסטים שמתמחים בחיפוש. בודקים אותם גם מומחים נוספים לעניינים משפטיים ולפרטיות, שקובעים אם השינוי מאושר להשקה. בשנת 2022 ביצענו יותר מ-800,000 ניסויים. התוצאה הייתה יותר מ-4,000 שיפורים ב'חיפוש'.

כל שינוי מוצע עובר בדיקה של המהנדסים ומדעני הנתונים המנוסים ביותר שלנו, שבוחנים בקפידה את הנתונים מכל הניסויים השונים כדי להחליט אם השקת השינוי תאושר. חלק גדול מהשינויים שהוצעו השנה לא הושקו, מפני שאם אנחנו לא מצליחים להראות ששינוי משפר את חוויית המשתמש, אנחנו לא משיקים אותו.

אנחנו מבצעים ניסויים בתנועה בזמן אמת כדי לראות איך אנשים מקיימים אינטראקציה בפועל עם תכונה כלשהי, לפני שכולם מקבלים גישה אליה. אנחנו משיקים את התכונה הנבדקת בקרב אחוז קטן מהאנשים – בדרך כלל החל מ-0.1%. לאחר מכן אנחנו משווים את קבוצת הניסוי לקבוצת בקרה שלא קיבלה גישה לתכונה. אנחנו בוחנים מדדים רבים כמו תוצאות שאנשים לחצו עליהן, מספר השאילתות שבוצעו, אם אנשים נטשו שאילתות או כמה זמן עבר עד שהם לחצו על תוצאה. בעזרת התוצאות האלה, אנחנו בודקים אם האינטראקציה עם התכונה החדשה חיובית. המטרה שלנו היא להבטיח שהשינויים שאנחנו עורכים משפרים את הרלוונטיות ואת התועלת של התוצאות לכולם.

החיפוש משתנה כל הזמן. אנחנו משפרים על בסיס קבוע את המערכות כדי להציג תוצאות טובות יותר, ולמדרגי איכות החיפוש יש תפקיד חשוב בתהליך ההשקה. בניסוי השוואתי אנחנו מראים למדרגים שתי רשימות שונות של תוצאות חיפוש: אחת שבה השינוי המוצע מיושם ואחת ללא השינוי. אנחנו שואלים אותם אילו תוצאות הם מעדיפים, ומדוע.