बेंचमार्क
AMD परफ़ॉर्मेंस। ईमानदारी से मापा गया।
हमारी बेंचमार्क पद्धति, हम कौन-से मेट्रिक्स ट्रैक करते हैं, किन भाषाओं का परीक्षण करते हैं, और हम कौन-सी सीमाएँ स्वीकार करते हैं। जहाँ हमारे पास आपके जैसे ट्रैफ़िक पर मापा गया आँकड़ा नहीं है, वहाँ हम कोई आँकड़ा बताने के बजाय साफ़ यही कहते हैं।
संक्षिप्त उत्तर
DialerBee बेंचमार्क क्या मापते हैं? ये AI AMD की सटीकता मापते हैं: मॉडल कॉल ऑडियो के पहले 3 सेकंड के रियल-टाइम ट्रांसक्रिप्ट को देखकर तय करता है कि जवाब किसी जीवित व्यक्ति ने दिया या आंसरिंग मशीन ने, और हम इसे 11 समर्थित भाषाओं में से 9 भाषाओं (पुर्तगाली और इंडोनेशियाई अभी पायलट डेटा में शामिल नहीं हैं), अलग-अलग कैरियर परिवेशों और कैंपेन प्रकारों में बेंचमार्क करते हैं। ग्राउंड ट्रुथ एजेंट ओवरराइड से आता है: जो एजेंट किसी वर्गीकरण से असहमत होता है, वह एक क्लिक में उसे फ़्लैग कर देता है, और मूल्यांकन एक बार का लैब टेस्ट नहीं बल्कि निरंतर चलने वाली प्रक्रिया है। पाँच मेट्रिक्स ट्रैक किए जाते हैं: सटीकता, फ़ॉल्स पॉज़िटिव दर, फ़ॉल्स नेगेटिव दर, डिटेक्शन लेटेंसी और एजेंट ओवरराइड दर। प्रकाशित आँकड़े आंतरिक पायलट से लिए गए हैं और चुनी हुई पायलट परिस्थितियों में ही लागू होते हैं; जहाँ हमारे पास आपके जैसे ट्रैफ़िक पर मापा गया आँकड़ा नहीं है, वहाँ हम कोई आँकड़ा बताने के बजाय साफ़ यही कहते हैं।
हम क्या बेंचमार्क करते हैं
AMD सटीकता सभी भाषाओं में
DialerBee का AI AMD कॉल ऑडियो के पहले 3 सेकंड पर ट्रांसक्रिप्ट वर्गीकरण का उपयोग करके तय करता है कि कॉल किसी व्यक्ति ने उठाई है या आंसरिंग मशीन ने। वास्तविक सटीकता मापने के लिए हम इस सिस्टम को कई भाषाओं, कैरियर वातावरणों और कैंपेन प्रकारों में बेंचमार्क करते हैं।
लैब परिस्थितियों की सटीकता बताने वाले वेंडरों के विपरीत, हमारे बेंचमार्क प्रोडक्शन डेटा को दर्शाते हैं — उस सारे शोर, कैरियर के उतार-चढ़ाव और क्षेत्रीय अंतर के साथ जो असली आउटबाउंड कैंपेन में होते हैं।
पद्धति
हम कैसे सटीकता मापते हैं
ट्रांसक्रिप्ट वर्गीकरण
AMD मॉडल ऑडियो के पहले 3 सेकंड के रियल-टाइम ट्रांसक्रिप्ट को वर्गीकृत करता है। यह शब्द और वाक्यांश पढ़ता है, ऑडियो वेवफ़ॉर्म या बीप पैटर्न नहीं।
ग्राउंड ट्रुथ के रूप में एजेंट ओवरराइड
जब एजेंट AMD वर्गीकरण से असहमत होते हैं, तो एक क्लिक में उसे फ़्लैग करते हैं। ये ओवरराइड सटीकता मापने के लिए ग्राउंड ट्रुथ लेबल का काम करते हैं।
निरंतर मूल्यांकन
बेंचमार्क एक बार के टेस्ट नहीं हैं। हम सभी प्रोडक्शन कैंपेन में एजेंट ओवरराइड की निरंतर धारा के आधार पर सटीकता का लगातार मूल्यांकन करते हैं।
ट्रैक किए जाने वाले मेट्रिक्स
पाँच मेट्रिक्स जो मायने रखते हैं
सटीकता
सभी कॉल में सही वर्गीकरण की कुल दर।
फ़ॉल्स पॉज़िटिव दर
व्यक्ति वाली कॉल जिन्हें गलती से मशीन माना गया।
फ़ॉल्स नेगेटिव दर
मशीन वाली कॉल जिन्हें गलती से व्यक्ति माना गया।
डिटेक्शन लेटेंसी
कॉल उठने से AMD वर्गीकरण निर्णय तक का समय।
एजेंट ओवरराइड दर
उन कॉल का प्रतिशत जिनमें एजेंट AMD निर्णय को सुधारते हैं।
बेंचमार्क सारांश
आंतरिक पायलट का सार्वजनिक सारांश
हमारे आंतरिक पायलट से प्रति-भाषा, प्रति-कैरियर और प्रति-क्षेत्र विस्तृत आँकड़े अनुरोध पर उपलब्ध हैं।
| मेट्रिक | सार्वजनिक सारांश | नोट्स |
|---|---|---|
| मूल्यांकित कॉल | 10,000–50,000 की रेंज | आंतरिक पायलट कैंपेन में |
| अवधि | Q1–Q2 2026 | नया पायलट डेटा उपलब्ध होने पर अपडेट किया जाता है |
| परीक्षित भाषाएँ | 9 | EN, AR, ES, FR, IT, DE, TR, HI, UR |
| परीक्षित क्षेत्र | MENA, यूरोप, उत्तरी अमेरिका | कैरियर मिश्रण क्षेत्र के अनुसार बदलता है |
| कैंपेन प्रकार | कलेक्शन, BPO, सेल्स, बीमा | जहाँ संभव हो, परिणाम खंडों में बाँटे गए |
| AMD फ़ॉल्स पॉज़िटिव दर | चुनिंदा पायलट में 3% से कम | व्यक्ति को गलती से मशीन माना गया |
| AMD फ़ॉल्स नेगेटिव दर | चुनिंदा पायलट में 5% से कम | मशीन को गलती से व्यक्ति माना गया |
| मीडियन डिटेक्शन लेटेंसी | 1 सेकंड से कम | कॉल उठने से AMD निर्णय तक |
| P90 डिटेक्शन लेटेंसी | 1.5 सेकंड से कम | कॉल उठने से AMD निर्णय तक |
| एजेंट ओवरराइड रेट | 2–5% की रेंज | पायलट कैंपेन में मैनुअल सुधार दर |
| कॉन्टैक्ट-रेट में बढ़ोतरी | मैनुअल डायलिंग की तुलना में 4x तक | पायलट वर्कफ़्लो में; परिणाम अलग-अलग हो सकते हैं |
| आइडल-टाइम में कमी | 30–45% की रेंज | चुनिंदा पायलट कैंपेन में |
आंतरिक पायलट बेंचमार्क पर आधारित। नतीजे कैंपेन टाइप, लिस्ट क्वालिटी, कैरियर, क्षेत्र, भाषा, पेसिंग कॉन्फिगरेशन और एजेंट वर्कफ़्लो के अनुसार अलग-अलग होते हैं। भाषा और कैरियर के हिसाब से व्यवहार इतना अलग होता है कि हम कोई औसत आंकड़ा प्रकाशित करने के बजाय आपके रूट्स पर पायलट के दौरान इसे मापना बेहतर मानते हैं। पायलट से पहले, आप इस मेथडोलॉजी के आधार पर अपने मौजूदा सेटअप को इस फ्री AMD सटीकता सेल्फ-असेसमेंट.
परीक्षित भाषाएँ
ग्यारह में से नौ भाषाएँ, असली पायलट डेटा
EN
English
AR
अरबी
ES
स्पेनिश
FR
फ़्रेंच
IT
इटैलियन
DE
जर्मन
TR
तुर्की
HI
हिंदी
UR
उर्दू
अरबी बेंचमार्क में खाड़ी, लेवेंटाइन और मिस्री बोलियाँ शामिल हैं। हिंदी और उर्दू बेंचमार्क में क्षेत्रीय रूपों का कवरेज शामिल है। हर भाषा को कैरियर-विशिष्ट और क्षेत्र-विशिष्ट विवरण के साथ स्वतंत्र रूप से बेंचमार्क किया जाता है।
सीमाएँ
बेंचमार्क क्या नहीं बता सकते
परिणाम कैरियर के अनुसार बदलते हैं। अलग-अलग कैरियर अलग वॉइसमेल ग्रीटिंग, ऑडियो गुणवत्ता और कनेक्शन टाइमिंग देते हैं।
परिणाम कैंपेन प्रकार के अनुसार बदलते हैं। कलेक्शन कैंपेन में कॉल उठाने के पैटर्न सेल्स या सर्वे कैंपेन से अलग होते हैं।
परिणाम क्षेत्र के अनुसार बदलते हैं। वॉइसमेल ग्रीटिंग की शैली, कैरियर इंफ्रास्ट्रक्चर और नेटवर्क की स्थितियाँ हर बाज़ार में अलग होती हैं।
परिणाम लिस्ट की गुणवत्ता के अनुसार बदलते हैं। पुराने नंबर, गलत नंबर और बंद लाइनें AMD परफ़ॉर्मेंस को अलग-अलग तरह से प्रभावित करती हैं।
बेंचमार्क समग्र परफ़ॉर्मेंस दर्शाते हैं। किसी एक कैंपेन के परिणाम बताए गए औसत से अधिक या कम हो सकते हैं।
आंतरिक पायलट का पूरा बेंचमार्क डेटा अनुरोध पर
प्रति-भाषा सटीकता तालिकाओं, कैरियर-विशिष्ट विवरण और ऐतिहासिक ट्रेंड डेटा वाली आंतरिक पायलट बेंचमार्क रिपोर्ट योग्य संभावित ग्राहकों को NDA के तहत उपलब्ध हैं। एक्सेस के लिए हमारी टीम से संपर्क करें।
बेंचमार्क डेटा का अनुरोध करें
डेमो बुक करें, और हम आपकी भाषा, क्षेत्र और कैंपेन प्रकार से संबंधित विस्तृत AMD बेंचमार्क परिणाम साझा करेंगे।