من القواعد اليدوية إلى النموذج: كيفية أتمتة الدعم دون خفض مؤشرات A/B

خدمة Avito Podrabotka، وهي خدمة توظيف مؤقت، كانت تستخدم سابقًا التخصيص اليدوي للإعانات "في الأعلى" للعمال المستقلين في الورديات الأقل جاذبية، بتمويل من ميزانية المنصة. ومع نمو الخدمة، أصبحت الإدارة اليدوية غير فعالة، مما أدى إلى الإفراط في الإنفاق في القطاعات غير المرنة ونقص الإنفاق حيث كانت الإعانات مطلوبة، وتم تحديد هدف تقليل GMV الفرعي (مستوى الدعم) دون الإضرار بمؤشرات الأعمال. قام الفريق بتقييم أساليب مختلفة بما في ذلك قواعد العمل، والرفع الثنائي، وروافع الاختيار، والتعلم المعزز، والأساليب البايزية، لكنه اختار نموذج استجابة السعر بسبب القيود: البيانات المنحرفة، وقدرة تجريبية محدودة (لا يمكن صفر الإعانات في الاختبارات)، وانخفاض التكرار والتأخر في التغذية الراجعة، والحاجة إلى قابلية التفسير. يتنبأ النموذج باحتمالية إغلاق الفتحة خلال يوم محدد، بناءً على السعر (السعر الأساسي بالإضافة إلى الإعانة)، ومعايير الوردية، والموقع الجغرافي، والسوق، والإحصاءات التاريخية للمنصة. لمكافحة انحياز البيانات، قاموا بتوسيع بيانات التدريب ببيانات اختبار A/B وقاموا بصياغة المهمة كتصنيف ثلاثي الفئات (تواصل في المجموعة A، تواصل في المجموعة B، لا تواصل)، ثم اختصروها إلى فئتين في الإنتاج. طبقوا قيدًا رتيبًا على ميزات السعر لضمان أن الإعانات الأعلى لا تقلل من احتمالية الإغلاق، وذلك من خلال تفكيك CatBoost إلى نموذجين ثنائيين. تشمل مقاييس التقييم الرئيسية LogLoss 0.44، و Brier 0.29، وانحراف معدل التعبئة -0.6 نقطة مئوية، وفجوة تماثل أقل من 0.01. معايرة النموذج ضرورية لخوارزمية تخصيص الميزانية لتوزيع الإعانات بشكل فعال دون الإضرار بالوظائف المكتملة ومعدل التعبئة.