مواد پر جائیں

بینچ مارکس

AMD کی کارکردگی۔ دیانت داری سے ناپی گئی۔

ہمارا بینچ مارک طریقہ کار، ہم کون سے میٹرکس ٹریک کرتے ہیں، کن زبانوں کی جانچ کرتے ہیں، اور کن حدود کو تسلیم کرتے ہیں۔ جہاں ہمارے پاس آپ جیسے ٹریفک پر ناپا گیا کوئی عدد نہیں ہوتا، وہاں ہم کوئی عدد پیش کرنے کے بجائے صاف بتا دیتے ہیں۔

مختصر جواب

DialerBee کے بینچ مارکس کیا ناپتے ہیں؟ یہ AI AMD کی درستگی ناپتے ہیں: ماڈل کال آڈیو کے پہلے 3 سیکنڈ کی ریئل ٹائم ٹرانسکرپٹ کی بنیاد پر طے کرتا ہے کہ دوسری طرف زندہ انسان ہے یا آنسرنگ مشین، اور ہم اسے 11 سپورٹڈ زبانوں میں سے 9 زبانوں (پرتگالی اور انڈونیشیائی ابھی پائلٹ ڈیٹا میں شامل نہیں)، مختلف کیریئر ماحول اور کیمپین کی اقسام میں جانچتے ہیں۔ درست نتیجے کی بنیاد ایجنٹ اوور رائیڈز ہیں: جو ایجنٹ کسی درجہ بندی سے متفق نہ ہو وہ ایک کلک میں اسے نشان زد کر دیتا ہے، اور جانچ ایک بار کے لیب ٹیسٹ کے بجائے مسلسل جاری رہتی ہے۔ پانچ پیمانے ٹریک کیے جاتے ہیں: درستگی، فالس پازیٹو ریٹ، فالس نیگیٹو ریٹ، شناخت میں تاخیر، اور ایجنٹ اوور رائیڈ ریٹ۔ شائع شدہ اعداد و شمار اندرونی پائلٹس سے لیے گئے ہیں اور منتخب پائلٹ حالات پر لاگو ہوتے ہیں؛ جہاں ہمارے پاس آپ جیسی ٹریفک پر ناپا گیا کوئی عدد نہیں ہوتا، وہاں ہم کوئی عدد بتانے کے بجائے صاف کہہ دیتے ہیں۔

ہم کیا بینچ مارک کرتے ہیں

AMD کی درستگی مختلف زبانوں میں

DialerBee کا AI AMD کال آڈیو کے پہلے 3 سیکنڈ کے ٹرانسکرپٹ کی درجہ بندی کر کے طے کرتا ہے کہ کال کسی انسان نے اٹھائی ہے یا آنسرنگ مشین نے۔ ہم حقیقی دنیا میں درستگی ناپنے کے لیے اس نظام کو متعدد زبانوں، کیریئر ماحول اور کیمپین کی اقسام میں بینچ مارک کرتے ہیں۔

لیب کے حالات میں درستگی بتانے والے وینڈرز کے برعکس، ہمارے بینچ مارکس پروڈکشن ڈیٹا کی عکاسی کرتے ہیں، اس تمام شور، کیریئر کے فرق اور علاقائی اختلافات کے ساتھ جو حقیقی آؤٹ باؤنڈ کیمپینز میں ہوتے ہیں۔

طریقہ کار

ہم کیسے درستگی ناپتے ہیں

ٹرانسکرپٹ کی درجہ بندی

AMD ماڈل آڈیو کے پہلے 3 سیکنڈ کے ریئل ٹائم ٹرانسکرپٹ کی درجہ بندی کرتا ہے۔ یہ الفاظ اور جملے پڑھتا ہے، آڈیو ویوفارمز یا بیپ پیٹرنز نہیں۔

ایجنٹ اوور رائیڈ بطور درست معیار

جب ایجنٹس AMD کی درجہ بندی سے متفق نہیں ہوتے تو ایک کلک میں اسے فلیگ کر دیتے ہیں۔ یہی اوور رائیڈز درستگی ناپنے کے لیے درست معیار (ground truth) کے لیبل کا کام دیتے ہیں۔

مسلسل جانچ

بینچ مارکس ایک بار کے ٹیسٹ نہیں ہیں۔ ہم تمام پروڈکشن کیمپینز میں ایجنٹ اوور رائیڈز کے تسلسل کے مقابلے میں درستگی کی مسلسل جانچ کرتے ہیں۔

ٹریک کیے جانے والے میٹرکس

پانچ میٹرکس جو واقعی اہم ہیں

درستگی

تمام کالز میں درست درجہ بندی کی مجموعی شرح۔

فالس پازیٹو ریٹ

انسانی کالز جنہیں غلطی سے مشین قرار دیا گیا۔

فالس نیگیٹو ریٹ

مشین کالز جنہیں غلطی سے انسان قرار دیا گیا۔

ڈیٹیکشن لیٹنسی

کال اٹھائے جانے سے AMD کی درجہ بندی کے فیصلے تک کا وقت۔

ایجنٹ اوور رائیڈ ریٹ

کالز کا وہ فیصد جن میں ایجنٹس AMD کا فیصلہ درست کرتے ہیں۔

بینچ مارک کا خلاصہ

اندرونی پائلٹس کا عوامی خلاصہ

ہمارے اندرونی پائلٹس کے فی زبان، فی کیریئر اور فی خطہ تفصیلی اعداد و شمار درخواست پر دستیاب ہیں۔

میٹرک عوامی خلاصہ نوٹس
جانچی گئی کالز 10,000–50,000 کی حد اندرونی پائلٹ کیمپینز میں
مدت Q1–Q2 2026 نیا پائلٹ ڈیٹا دستیاب ہونے پر اپ ڈیٹ کیا جاتا ہے
جانچی گئی زبانیں 9 EN, AR, ES, FR, IT, DE, TR, HI, UR
جانچے گئے خطے MENA، یورپ، شمالی امریکہ کیریئرز کا امتزاج خطے کے لحاظ سے مختلف ہے
کیمپین کی اقسام کلیکشنز، BPO، سیلز، انشورنس جہاں ممکن ہو نتائج الگ الگ درج کیے گئے
AMD فالس پازیٹو ریٹ منتخب پائلٹس میں 3% سے کم انسان جسے غلطی سے مشین قرار دیا گیا
AMD فالس نیگیٹو ریٹ منتخب پائلٹس میں 5% سے کم مشین جسے غلطی سے انسان قرار دیا گیا
میڈین ڈیٹیکشن لیٹنسی 1 سیکنڈ سے کم کال اٹھانے سے AMD فیصلے تک
P90 ڈیٹیکشن لیٹنسی 1.5 سیکنڈ سے کم کال اٹھانے سے AMD فیصلے تک
ایجنٹ اوور رائیڈ ریٹ 2–5% کی حد پائلٹ کیمپینز میں دستی تصحیح کی شرح
کانٹیکٹ ریٹ میں اضافہ دستی ڈائلنگ کے مقابلے میں 4x تک پائلٹ ورک فلوز میں؛ نتائج مختلف ہو سکتے ہیں
فارغ وقت میں کمی 30–45% کی حد منتخب پائلٹ کیمپینز میں

اندرونی پائلٹ بینچ مارکس پر مبنی۔ نتائج مہم کی قسم، لسٹ کے معیار، کیریئر، خطے، زبان، پیسنگ کنفیگریشن اور ایجنٹ ورک فلو کے لحاظ سے مختلف ہوتے ہیں۔ فی زبان اور فی کیریئر رویہ اتنا مختلف ہوتا ہے کہ ہم اسے آپ کے روٹس پر پائلٹ کے دوران ناپنا پسند کریں گے بجائے اس کے کہ ایک اوسط شائع کریں جو آپ کے نتائج سے میل نہ کھائے۔ پائلٹ سے پہلے، آپ اپنے موجودہ سیٹ اپ کو اس طریقہ کار کے مطابق مفت AMD درستگی کا سیلف اسیسمنٹ.

جانچی گئی زبانیں

گیارہ میں سے نو زبانیں، حقیقی پائلٹ ڈیٹا

EN

English

AR

عربی

ES

ہسپانوی

FR

فرانسیسی

IT

اطالوی

DE

جرمن

TR

ترکی

HI

ہندی

UR

اردو

عربی بینچ مارکس میں خلیجی، شامی (Levantine) اور مصری لہجے شامل ہیں۔ ہندی اور اردو بینچ مارکس میں علاقائی لہجوں کی کوریج شامل ہے۔ ہر زبان کو الگ سے بینچ مارک کیا جاتا ہے، کیریئر اور خطے کے لحاظ سے تفصیلی تقسیم کے ساتھ۔

حدود

بینچ مارکس کیا نہیں بتا سکتے

نتائج کیریئر کے لحاظ سے مختلف ہوتے ہیں۔ مختلف کیریئرز کے وائس میل پیغامات، آڈیو کوالٹی اور کنکشن ٹائمنگ مختلف ہوتے ہیں۔

نتائج کیمپین کی قسم کے لحاظ سے مختلف ہوتے ہیں۔ کلیکشنز کیمپینز میں کال اٹھائے جانے کے پیٹرن سیلز یا سروے کیمپینز سے مختلف ہوتے ہیں۔

نتائج خطے کے لحاظ سے مختلف ہوتے ہیں۔ وائس میل پیغامات کے انداز، کیریئر انفراسٹرکچر اور نیٹ ورک کے حالات ہر مارکیٹ میں مختلف ہوتے ہیں۔

نتائج لسٹ کے معیار کے لحاظ سے مختلف ہوتے ہیں۔ پرانے نمبرز، غلط نمبرز اور منقطع لائنیں AMD کی کارکردگی کو مختلف طریقوں سے متاثر کرتی ہیں۔

بینچ مارکس مجموعی کارکردگی کی عکاسی کرتے ہیں۔ کسی انفرادی کیمپین کے نتائج رپورٹ کردہ اوسط سے زیادہ یا کم ہو سکتے ہیں۔

مکمل اندرونی پائلٹ بینچ مارک ڈیٹا درخواست پر

فی زبان درستگی کے جدولوں، کیریئر کے لحاظ سے تفصیلی تقسیم اور تاریخی رجحانات کے ڈیٹا کے ساتھ اندرونی پائلٹ بینچ مارک رپورٹس اہل ممکنہ کلائنٹس کے لیے NDA کے تحت دستیاب ہیں۔ رسائی کی درخواست کے لیے ہماری ٹیم سے رابطہ کریں۔

بینچ مارک ڈیٹا کی درخواست کریں

ڈیمو بک کریں اور ہم آپ کی زبان، خطے اور کیمپین کی قسم سے متعلق تفصیلی AMD بینچ مارک نتائج آپ کے ساتھ شیئر کریں گے۔

← مکمل سائٹ انگریزی میں دیکھیں