רוב העסקים שמטמיעים סוכן AI לראשונה מבלים את שלושת החודשים הראשונים במדידת המדדים הלא נכונים. הם מסתכלים על ירידת נפח הפניות וחיסכון בעלויות תמיכה – מדדים שלוקחים שישה עד שנים עשר חודשים להתייצב – ובינתיים מפספסים את האותות המוקדמים שמראים האם הפרויקט הולך לכיוון הנכון.
זהו מדריך למדידת ROI של AI בתקופה שבה מדדים פיננסיים עדיין לא אמינים. חלון ה־90 יום הוא הזמן שבו רוב פרויקטי ה־AI מצליחים או נכשלים, וכמעט אף מסגרת מדידה לא מתייחסת לתקופה זו כראוי.
למה ROI פיננסי הוא נקודת ההתחלה הלא נכונה
נוסחת ה־ROI הסטנדרטית – (תועלות פחות עלויות) חלקי עלויות – אינה הבעיה. הבעיה היא הנתונים שמזינים אותה בחודשים הראשונים.
חיסכון בעלויות משירות לקוחות מבוסס AI לא מתגבש בצורה ברורה לפני שישה עד שנים עשר חודשים, כי אתה לא מקטין כוח אדם ביום ה־30. הנפח שהוסט נספג כזמן פנוי לפני שמתרחש כל שינוי בצוות. גם התנהגות הלקוחות משתנה לאט – לקוחות שרגילים ליצור קשר עם התמיכה ימשיכו לעשות זאת גם כשה־AI יכול היה לענות להם. ועלויות תפעול מנופחות בתחילה – 60 הימים הראשונים כוללים עבודת הגדרה, כוונון פרומפטים ועדכוני בסיס ידע שמעוותים את צד העלויות.
מרדף אחר ROI פיננסי ב־90 הימים הראשונים בדרך כלל מוביל לאחת משתי תוצאות גרועות: הכרזה על הצלחה מוקדמת מדי, כי ה־AI טיפל ב־200 פניות מבלי לבדוק אם טיפל בהן היטב – או הכרזה על כישלון מוקדם מדי, כי העלויות עדיין גבוהות, וזה נורמלי.
שלושה מדדים שמספרים לך את מה שאתה צריך לדעת
לפני שמספרים פיננסיים כלשהם מתייצבים, שלושה מדדים תפעוליים אומרים לך האם הפרויקט בנוי נכון.
1. שיעור פתרון
זהו אחוז השיחות שה־AI פותר ללא התערבות אנושית – פתרון אמיתי, לא רק סגירה. שיחה נחשבת לפתרון כאשר הלקוח קיבל את מה שביקש, לא פתח מחדש את הפנייה ולא פנה לתמיכה דרך ערוץ אחר ב־24 השעות הבאות.
סוכן AI ממוגדר היטב בשירות לקוחות מגיע בדרך כלל ל־60–75% פתרון בתוך 60 עד 90 הימים הראשונים. מתחת ל־50% באופן עקבי זה אות, לא מזל רע – בדרך כלל מצביע על פערים בבסיס הידע, הגדרת תחום גרועה, או ש־AI פרוס על סוגי שאילתות שלא נבנה לטפל בהן.
המגמה חשובה יותר מהמספר המוחלט. סוכן שעולה מ־45% בשבוע הראשון ל־62% בשבוע השמיני נמצא במצב שונה לחלוטין מסוכן שנתקע ב־48% לאורך כל התקופה.