मुख्य सामग्री पर जाएँ

खरीदार गाइड · स्कोरिंग मैट्रिक्स

AI वॉइस एजेंट मूल्यांकन मैट्रिक्स

बीस मानदंड, हर एक के साथ क्या परखना है, पायलट में उसे कैसे परखना है, और रेड फ़्लैग। मैट्रिक्स जानबूझकर खाली है: आप वेंडरों को अपनी कॉल के आधार पर स्कोर करते हैं, किसी की मार्केटिंग के आधार पर नहीं — हमारी भी नहीं।

2 हफ़्ते की पायलट योजना

संक्षिप्त उत्तर

AI वॉइस एजेंट का मूल्यांकन कैसे करें? अपनी कॉल पर एक छोटा पायलट चलाएँ और हर वेंडर को एक ही मानदंडों पर स्कोर करें: टेलीफ़ोनी इंटीग्रेशन, BYOC, SIP और SBC इंटरऑपरेबिलिटी, इनबाउंड और आउटबाउंड हैंडलिंग, बार्ज-इन, मीडियन और p95 के रूप में मापी गई रिस्पॉन्स लेटेंसी, टूल कॉलिंग, नॉलेज ग्राउंडिंग, मानव हैंडऑफ़, CRM राइट-बैक, ऑब्ज़र्वेबिलिटी, ऑडिटेबिलिटी, भाषाएँ और अरबी बोलियाँ, सुरक्षा, डिप्लॉयमेंट, डेटा रेज़िडेंसी, मूल्य पारदर्शिता और सपोर्ट। हर मानदंड को खुद परखें, जानबूझकर विफलताएँ पैदा करें, और केवल वही स्कोर करें जो आपने देखा। किसी भी वेंडर के प्रकाशित स्कोर पर भरोसा न करें।

मैट्रिक्स का उपयोग कैसे करें?

AI वॉइस एजेंट डेमो वेंडर द्वारा चुनी गई कॉल पर रिहर्स किया गया प्रदर्शन होता है। मैट्रिक्स उसकी जगह आपकी चुनी हुई कॉल के सबूत रखता है। किसी भी वेंडर से संपर्क करने से पहले:

  • कॉल प्रकार तय करें। एजेंटों को उन्हीं कॉल पर स्कोर करें जिन्हें आप वास्तव में ऑटोमेट करने की योजना बना रहे हैं। अगर अभी तय नहीं किया है, तो पहले देखें AI या इंसान? कौन-सी कॉल ऑटोमेट करें first.
  • पहले वेटेज तय करें। कोई भी पायलट शुरू होने से पहले हर मानदंड को 1 से 3 तक वेटेज दें। क्लिनिक की बुकिंग लाइन टूल कॉलिंग और अरबी बोलियों को 3 और आउटबाउंड को 1 वेटेज दे सकती है; कलेक्शन टीम इसका उल्टा कर सकती है।
  • सबूत के आधार पर 0 से 3 स्कोर दें। 3 का मतलब आपकी कॉल पर काम करते देखा गया; 2 का मतलब छोटी समस्याओं के साथ काम करता है; 1 का मतलब आंशिक रूप से काम करता है या सिर्फ़ डेमो में दिखाया गया; 0 का मतलब काम नहीं करता या उपलब्ध नहीं है। वेटेज से गुणा करें और जोड़ें।
  • डील-ब्रेकर चिह्नित करें। कुछ रेड फ़्लैग कुल स्कोर कुछ भी हो, मूल्यांकन वहीं खत्म कर देते हैं, जैसे ऐसा एजेंट जो विफल कार्रवाइयों को सफल बताता है, या ऐसा AI आउटबाउंड जो आपकी DNC सूची को बायपास करता है।

पायलट से पहले भेजे जाने वाले लिखित प्रश्नों के लिए, इसका AI वॉइस एजेंट सेक्शन इस्तेमाल करें: कॉन्टैक्ट सेंटर RFP चेकलिस्ट.

मूल्यांकन मैट्रिक्स

खाली और दोबारा इस्तेमाल योग्य। हर वेंडर के लिए एक कॉपी प्रिंट करें। फ़ोन पर साइड में स्क्रॉल करें।

मानदंड क्या परखना है पायलट में इसे कैसे परखें रेड फ़्लैग वेटेज (1–3) स्कोर (0–3)
टेलीफ़ोनी इंटीग्रेशन क्या एजेंट उसी टेलीफ़ोनी पर चलता है जिस पर आपके मानव एजेंट, ताकि वह ट्रांसफ़र ले सके, आपकी क्यू इस्तेमाल कर सके और आपके कॉलर ID दिखा सके। एक असली DID एजेंट को रूट करें और एजेंट से मानव क्यू तक और वापस ट्रांसफ़र करें। जाँचें कि आउटबाउंड पर आपके टेस्ट फ़ोन पर कौन-सा कॉलर ID दिखता है। एजेंट केवल अलग नंबर या ऐप पर काम करता है; ट्रांसफ़र में संदर्भ खो जाता है या नई कॉल करनी पड़ती है।
BYOC क्या एजेंट आपके मौजूदा कैरियर या SIP ट्रंक पर कॉल चला सकता है। पायलट वेंडर के डेमो ट्रंक पर नहीं, अपने ट्रंक पर चलाएँ। दोनों पर ऑडियो गुणवत्ता और कॉल सेटअप की तुलना करें। पायलट केवल वेंडर के कैरियर पर संभव; आपके अपने ट्रंक पर कॉल के लिए ऐसे प्रति-मिनट शुल्क जो कोटेशन में नहीं थे।
SIP और SBC आपके PBX या SBC के साथ इंटरऑपरेबिलिटी: सिग्नलिंग, कोडेक, DTMF, और विफलताओं को कैसे संभाला जाता है। अपने टेलीफ़ोनी इंजीनियर से कॉल ट्रेस की समीक्षा कराएँ। DTMF एंट्री, होल्ड, और वाक्य के बीच में दूसरी तरफ़ से कॉल काटना परखें। वेंडर की ओर से कोई भी SIP ट्रेस नहीं पढ़ सकता; वन-वे ऑडियो या DTMF समस्याओं को एज केस कहकर टाल दिया जाता है।
इनबाउंड एजेंट कैसे जवाब देता है, कॉलर की पहचान करता है, और अनुरोध को रूट या हल करता है। अलग-अलग फ़ोन से, कॉल करने के अपने पाँच सबसे आम असली कारणों के साथ बीस बार कॉल करें, और हर बार क्या हुआ उसे दर्ज करें। केवल डेमो स्क्रिप्ट पर काम करता है; कॉलर से वह जानकारी माँगता है जो सिस्टम में पहले से है।
आउटबाउंड क्या एजेंट मानव कैंपेन जैसी ही लिस्ट, पेसिंग, कॉलिंग-घंटों और DNC नियंत्रणों के साथ आउटबाउंड कैंपेन चला सकता है। केवल आंतरिक टेस्ट नंबरों पर एक छोटी आउटबाउंड लिस्ट चलाएँ। एक नंबर आपकी DNC सूची का और एक कॉलिंग घंटों के बाहर का शामिल करें; दोनों ब्लॉक होने चाहिए। AI आउटबाउंड उन नियंत्रणों को बायपास करता है जो मानव कैंपेन पर लागू होते हैं; कोई रिकॉर्ड नहीं कि कॉल क्यों लगी या क्यों नहीं लगी।
बार्ज-इन क्या कॉलर बीच में टोक सकता है और एजेंट रुककर, सुनकर उस पर जवाब देता है। ग्रीटिंग के बीच में, वाक्य के बीच में और नंबर बोलते समय टोकें। एक छोटा हस्तक्षेप और एक खाँसी आज़माएँ; किसी से भी कॉल पटरी से नहीं उतरनी चाहिए। एजेंट कॉलर के ऊपर बोलता रहता है, या हर बैकग्राउंड आवाज़ पर रुक जाता है।
लेटेंसी कॉलर के बोलना खत्म करने से जवाब के पहले सुनाई देने वाले शब्द तक का रिस्पॉन्स टाइम। केवल औसत नहीं, मीडियन और p95 मापें। पायलट कॉल की अपनी रिकॉर्डिंग से, अपने ट्रंक पर, अपनी भाषाओं में मापें। हर भाषा और हर कॉल प्रकार के लिए मीडियन और p95 बताएँ, उन टर्न सहित जिनमें टूल कॉल होता है। वेंडर एक ही आँकड़ा बताता है लेकिन यह नहीं बता पाता कि उसे कैसे मापा गया; डेटा खोजने वाले टर्न पर लंबी चुप्पी; लेटेंसी केवल लैब से दिखाई गई, आपकी कॉल से नहीं।
टूल कॉलिंग क्या एजेंट असली कार्रवाइयाँ (बुक करना, रीशेड्यूल करना, ऑर्डर खोजना, भुगतान का वादा दर्ज करना) कर सकता है और कॉलर को बताने से पहले कार्रवाई सफल होने की पुष्टि करता है। टेस्ट अपॉइंटमेंट बुक करें, बदलें और रद्द करें, फिर टारगेट सिस्टम जाँचें। जानबूझकर विफलता पैदा करें, जैसे भरा हुआ स्लॉट, और सुनें कि कॉलर को क्या बताया जाता है। कार्रवाई विफल होने पर भी एजेंट “हो गया” कहता है; बाद में कार्रवाइयाँ आपके सिस्टम में नहीं दिखतीं।
नॉलेज ग्राउंडिंग क्या जवाब आपकी स्वीकृत सामग्री से आते हैं, और जवाब न होने पर एजेंट क्या करता है। दस प्रश्न पूछें जिनका जवाब आपके दस्तावेज़ों में है और पाँच जिनका नहीं। ऐसी कीमत पूछें जो आपकी प्राइस लिस्ट में नहीं है। यह कहने और व्यक्ति से बात का विकल्प देने के बजाय कि उसे नहीं पता, एजेंट जवाब या कीमत गढ़ लेता है।
मानव हैंडऑफ़ एजेंट कब और कैसे किसी व्यक्ति को कॉल सौंपता है, और उस व्यक्ति को क्या मिलता है। सीधे इंसान से बात माँगें, परेशान आवाज़ में बोलें, और ऐसा विषय उठाएँ जिसे संभालने की एजेंट को अनुमति नहीं है। जाँचें कि व्यक्ति को ट्रांसक्रिप्ट और कारण दिखता है। कॉलर को सब कुछ दोहराना पड़ता है; कामकाजी घंटों के बाहर कोई हैंडऑफ़ नहीं और कॉलबैक की पेशकश नहीं; व्यक्ति से बात के अनुरोध पर एजेंट बहस करता है।
CRM राइट-बैक क्या परिणाम, सारांश, रिकॉर्डिंग और ट्रांसक्रिप्ट आपके CRM में सही रिकॉर्ड के साथ दर्ज होते हैं। हर पायलट कॉल के बाद CRM रिकॉर्ड खोलें। जाँचें कि परिणाम, सारांश और लिंक मौजूद हैं और सही कॉन्टैक्ट से जुड़े हैं। परिणाम वेंडर के कंसोल में ही रहते हैं; राइट-बैक के लिए अलग से कोट किया गया कस्टम प्रोजेक्ट चाहिए।
ऑब्ज़र्वेबिलिटी चलते समय आप क्या देख सकते हैं: लाइव कॉल, त्रुटियाँ, लेटेंसी, हैंडऑफ़ दर, विफल टूल कॉल। अपने सुपरवाइज़र से कहें कि बिना वेंडर की मदद के पायलट की तीन सबसे खराब कॉल और हर एक के गलत होने का कारण खोजें। केवल समग्र डैशबोर्ड; हर कॉल की रिकॉर्डिंग और ट्रांसक्रिप्ट नहीं; त्रुटियाँ केवल वेंडर को दिखती हैं।
ऑडिटेबिलिटी क्या आप किसी भी कॉल पर एजेंट ने क्या कहा और क्या किया, और उस समय कौन-सा कॉन्फ़िगरेशन संस्करण लाइव था, यह दोबारा तैयार कर सकते हैं। एक हफ़्ते पुरानी कॉल चुनें। उसकी रिकॉर्डिंग, ट्रांसक्रिप्ट, की गई कार्रवाइयाँ और उसे संभालने वाला एजेंट संस्करण निकालें। कॉन्फ़िगरेशन बदलाव वर्ज़न नहीं होते; यह जानने का कोई तरीका नहीं कि किसी पुरानी कॉल का जवाब किस प्रॉम्प्ट या नॉलेज बेस ने दिया।
भाषाएँ असली कॉल पर प्रोडक्शन में कौन-सी भाषाएँ काम करती हैं, कॉल के बीच भाषा बदलने सहित। अपनी ज़रूरत की हर भाषा के लिए अपनी टीम के मूल वक्ताओं का उपयोग करें। एक कॉल में बीच में भाषा बदलें। भाषा सूची स्पीच प्रोवाइडर के कैटलॉग से ली गई, परखी गई कॉल से नहीं; लहजे से पहचान बिगड़ जाती है।
अरबी बोलियाँ क्या एजेंट आपके कॉलर की बोली (जैसे खाड़ी, लेवेंटाइन, मिस्री) समझता और उसमें जवाब देता है, सिर्फ़ मानक आधुनिक अरबी में नहीं। जिस-जिस बोली के कॉलर को आप सेवा देते हैं, उनसे एक जैसे अनुरोध करवाएँ। उनसे पूछें कि जवाब स्वाभाविक लगे या अनुवाद जैसे। बोली वाले कॉलर को औपचारिक अरबी में जवाब; बोली में नंबर, तारीख या नाम गलत सुने जाते हैं।
सिक्योरिटी एन्क्रिप्शन, टेनेंट आइसोलेशन, एक्सेस कंट्रोल और ऑडिट लॉग, और AI प्रोवाइडर आपके कॉल डेटा को कैसे प्रोसेस करते हैं। अपनी मानक सुरक्षा प्रश्नावली चलाएँ। पूछें कि कौन-से AI प्रोवाइडर ऑडियो या टेक्स्ट प्राप्त करते हैं और क्या आपका डेटा साझा मॉडल को ट्रेन करता है। जो सर्टिफ़िकेशन केवल नियोजित हैं उन्हें प्राप्त बताया जाता है; ऑडियो कहाँ प्रोसेस होता है इसका कोई जवाब नहीं; सिंगल साइन-ऑन का अस्पष्ट वर्णन, बिना रोडमैप तारीख के।
डिप्लॉयमेंट एजेंट को कैसे कॉन्फ़िगर, टेस्ट, प्रकाशित और रोलबैक किया जाता है, और आपकी टीम में कौन यह कर सकता है। अपने एडमिन से बिना वेंडर की मदद के ग्रीटिंग बदलवाएँ, प्रकाशित करवाएँ, टेस्ट करवाएँ और रोलबैक करवाएँ। हर बदलाव के लिए वेंडर टिकट चाहिए; कोई टेस्ट एनवायरनमेंट नहीं; रोलबैक नहीं।
डेटा रेज़िडेंसी ऑडियो, ट्रांसक्रिप्ट, रिकॉर्डिंग और AI प्रोसेसिंग कहाँ स्थित हैं, और क्या इसे चुना जा सकता है। हर डेटा प्रकार के लिए, AI मॉडल प्रोवाइडर सहित, जवाब लिखित में लें और उसे अपने नियामक की आवश्यकताओं से मिलाएँ। रेज़िडेंसी केवल डेटाबेस के लिए बताई गई, जबकि ऑडियो किसी दूसरे देश के AI प्रोवाइडर के पास जाता है।
मूल्य पारदर्शिता उपयोग का बिल कैसे बनता है (प्रति मिनट, प्रति कॉल, प्रति टोकन), क्या शामिल है, और क्या आप खर्च की सीमा तय कर सकते हैं। पायलट वॉल्यूम के लिए इनवॉइस का अनुमान माँगें और उसकी तुलना पायलट के वास्तविक बिल से करें। पायलट की कीमत प्रोडक्शन की कीमत से अलग; विफल या ट्रांसफ़र की गई कॉल के शुल्क नहीं बताए गए; खर्च की कोई सीमा नहीं।
सपोर्ट कुछ खराब होने पर कौन मदद करता है, किन घंटों और भाषाओं में, और कितनी जल्दी। पायलट के दौरान एक असली सपोर्ट टिकट बनाएँ और पहले जवाब और समाधान का समय नोट करें। पायलट में सेल्स इंजीनियर सपोर्ट करता है, प्रोडक्शन में ऐसी क्यू जिससे आप कभी मिले ही नहीं; कोई एस्केलेशन पाथ नहीं।
भारित कुल (वेटेज × स्कोर का योग)

प्रतिस्पर्धियों को उनकी वेबसाइट के आधार पर स्कोर न करें, और किसी वेंडर से यह मैट्रिक्स भरवाने को न कहें। हर सेल आपकी टीम को उन कॉल के आधार पर भरना चाहिए जो उन्होंने की, सुनीं या समीक्षा कीं।

लेटेंसी कैसे मापें?

लेटेंसी वह मानदंड है जिसका जवाब वेंडर अक्सर एक ही संख्या में देते हैं, और जिसे खरीदार अक्सर बिना जाँचे मान लेते हैं। इसे खुद मापें:

  • अंतराल परिभाषित करें। कॉलर के बोलना बंद करने के क्षण से जवाब के पहले सुनाई देने वाले शब्द तक, जैसा कॉलर के फ़ोन पर सुनाई देता है। मॉडल द्वारा लिया गया समय नहीं, और वेंडर के सर्वर के भीतर मापा गया समय भी नहीं।
  • अपनी रिकॉर्डिंग इस्तेमाल करें। अपनी पायलट कॉल की रिकॉर्डिंग लें और हर एजेंट टर्न पर, या टर्न के एक तय सैंपल पर, अंतराल मापें।
  • मीडियन और p95 बताएँ। मीडियन सामान्य जवाब है। p95 हर बीस में सबसे धीमा जवाब है, और आम तौर पर यहीं कॉलर “हैलो?” कहने लगते हैं।
  • इसे बाँटें। हर भाषा के लिए, और उन टर्न के लिए जिनमें एजेंट कोई टूल कॉल करता है, जैसे कैलेंडर जाँचना, अलग-अलग बताएँ। ये टर्न धीमे होते हैं, और सबसे ज़्यादा मायने रखते हैं।
  • अपना नेटवर्क इस्तेमाल करें। अपने ट्रंक और अपने कॉलर के नेटवर्क पर मापें। वेंडर की डेमो लाइन की लेटेंसी केवल डेमो लाइन के बारे में बताती है।

फिर किसी भी वेंडर का परिणाम देखने से पहले, अपनी कॉल के लिए स्वीकार्य मीडियन और p95 की अपनी सीमा तय करें।

दो हफ़्ते

2 हफ़्ते का AI वॉइस एजेंट पायलट कैसे चलाएँ?

अपनी शॉर्टलिस्ट के हर वेंडर के साथ एक ही योजना चलाएँ, बेहतर हो कि एक साथ, ताकि परिस्थितियाँ समान रहें।

  1. 1

    पहले दिन से पहले

    दायरे पर लिखित सहमति बनाएँ

    AI या इंसान फ़्रेमवर्क की 'AI के लिए उपयुक्त' सूची से एक या दो कॉल प्रकार चुनें। लिखें कि सफलता का मतलब क्या है: पूरी तरह हल हुई कॉल का हिस्सा, सही ढंग से व्यक्ति को सौंपी गई कॉल का हिस्सा, मीडियन और p95 पर स्वीकार्य लेटेंसी, और वे त्रुटियाँ जो पायलट तुरंत खत्म कर देंगी। तय करें कि पायलट आपके अपने नंबरों, जहाँ संभव हो आपके अपने ट्रंक, और आपकी अपनी सामग्री पर चलेगा।

  2. 2

    दिन 1 से 3

    आंतरिक रूप से कॉन्फ़िगर और टेस्ट करें

    अपनी नॉलेज सामग्री और प्राइस लिस्ट लोड करें, वह कैलेंडर या CRM जोड़ें जिसमें एजेंट को लिखना है, और हैंडऑफ़ गंतव्य सेट करें। ऊपर के मानदंडों को कवर करने वाली टेस्ट कॉल आपके अपने कर्मचारी करें, वेंडर नहीं। किसी भी ग्राहक के एजेंट को सुनने से पहले कॉन्फ़िगरेशन की समस्याएँ ठीक करें।

  3. 3

    दिन 4 से 5

    स्क्रिप्टेड टेस्ट सेट चलाएँ

    हर वेंडर पर एक ही तरह से टेस्ट कॉल का एक तय सेट चलाएँ: वही अनुरोध, वही टोकना, जानबूझकर पैदा की गई वही विफलताएँ, वही बोलियाँ। हर कॉल रिकॉर्ड करें। यह तुलना का बराबरी वाला हिस्सा है।

  4. 4

    दिन 6 से 12

    लाइव ट्रैफ़िक, कम और निगरानी में

    असली कॉल का एक छोटा, तय हिस्सा एजेंट को रूट करें, जैसे एक DID या दिन का एक घंटा, जिसमें सुपरवाइज़र सुन रहा हो और कॉल अपने हाथ में ले सके। किल स्विच अपनी टीम के पास रखें। हर दिन रिकॉर्डिंग के एक सैंपल की समीक्षा करें और हर विफलता को प्रकार के अनुसार दर्ज करें।

  5. 5

    दिन 13 से 14

    मापें और स्कोर करें

    रिकॉर्डिंग से मीडियन और p95 रिस्पॉन्स लेटेंसी, समाधान और हैंडऑफ़ दरें, और विफल कार्रवाइयाँ निकालें। जो देखा उसके आधार पर मैट्रिक्स भरें। फिर हैंडऑफ़ संभालने वाले लोगों और जिन कॉलर तक आप पहुँच सकते हैं, उनसे उनकी राय पूछें: कॉलर का अनुभव किसी भी डैशबोर्ड से ऊपर है।

पायलट के लाइव हिस्से के बुनियादी नियम

  • आउटबाउंड पायलट कॉल केवल उन लोगों को जाएँ जिन्होंने उन्हें प्राप्त करने की सहमति दी है, आपके कॉलिंग घंटों के भीतर, और आपकी DNC सूची लागू करके।
  • जहाँ आपके नियम या आपकी अपनी नीति इसकी माँग करें, कॉलर को बताएँ कि वे AI एजेंट से बात कर रहे हैं, और हमेशा किसी व्यक्ति से बात का विकल्प दें।
  • एजेंट को रोकने वाला स्विच केवल वेंडर के नहीं, अपनी टीम के हाथ में रखें।
  • अगर एजेंट ऐसी कार्रवाई की पुष्टि करता है जो हुई ही नहीं, या ऐसी सलाह देता है जिसके लिए उसे कॉन्फ़िगर नहीं किया गया था, तो पायलट तुरंत रोक दें।

DialerBee इसमें कहाँ फ़िट होता है?

हम इस मैट्रिक्स पर अपने लिए कोई स्कोर प्रकाशित नहीं करते, उसी कारण से जिससे हम किसी और के लिए भी नहीं करते। हम आपको यह बता सकते हैं कि हमारी AI वॉइस एजेंट Layla का पायलट करते समय किन बातों पर ध्यान दें, ताकि आप उन्हें जाँच सकें:

  • यह मानव एजेंटों वाले उसी प्लेटफ़ॉर्म पर चलती है: DID से रूट की गई इनबाउंड कॉल, आउटबाउंड AI कैंपेन, और मानव एजेंट को हैंडऑफ़।
  • कॉलर बीच में टोक सकते हैं (बार्ज-इन), जवाब आपके नॉलेज बेस से आते हैं, और केवल आपके सर्विस कैटलॉग की कीमतें ही बोली जा सकती हैं।
  • हर संभावित जवाब टेक्स्ट-टू-स्पीच से पहले गार्डरेल्स से गुज़रता है, और बुकिंग जैसी कार्रवाइयों के लिए पुष्टि वाला स्टेटस लौटना ज़रूरी है, उसके बाद ही एजेंट कहता है कि काम हो गया।
  • अरबी बोलियों में खाड़ी, लेवेंटाइन और मिस्री अरबी शामिल हैं, और साथ में दस अन्य भाषाएँ।
  • हर AI कॉल रिकॉर्डिंग और ट्रांसक्रिप्ट के साथ एक परिणाम देती है, जो CRM में पुश होता है। एजेंट संस्करण प्रकाशित और रोलबैक किए जा सकते हैं, और किल स्विच किसी एजेंट, किसी कैंपेन या सभी AI कॉलिंग को रोकते हैं।
  • इसका बिल उपयोग के आधार पर बनता है, मैनेज्ड मॉडल कीज़ या आपकी अपनी कीज़ पर। SOC 2 Type II नियोजित है, प्राप्त नहीं, और सिंगल साइन-ऑन उपलब्ध है; ट्रस्ट सेंटर पर हर आइटम की स्थिति दी गई है।

अधिक विवरण यहाँ है: AI वॉइस एजेंट और Agent Studio पेज। फिर इसे भी बाकी सबकी तरह मैट्रिक्स पर परखें।

सवाल

AI वॉइस एजेंट का मूल्यांकन: FAQ

AI वॉइस एजेंट की तुलना करते समय क्या मापना चाहिए?
वह मापें जो कॉलर आपकी अपनी कॉल पर अनुभव करते हैं: मीडियन और p95 पर रिस्पॉन्स लेटेंसी, बार्ज-इन कैसा व्यवहार करता है, क्या बुकिंग जैसी कार्रवाइयाँ वास्तव में सफल होती हैं, एजेंट कितनी बार बातें गढ़ने के बजाय आपकी सामग्री से जवाब देता है, और वह कितनी साफ़ तरह से व्यक्ति को कॉल सौंपता है। मैट्रिक्स में हर मानदंड को सेल्स डेमो से नहीं, पायलट के सबूत से स्कोर करें।
औसत के बजाय मीडियन और p95 लेटेंसी क्यों?
औसत धीमे टर्न को छिपा देता है, और कॉलर धीमे टर्न ही याद रखते हैं। मीडियन बताता है कि सामान्य जवाब कैसा लगता है; p95 बताता है कि हर बीस में सबसे धीमा जवाब कितना खराब है, जो आम तौर पर वह टर्न होता है जिसमें एजेंट कुछ खोजता है। दोनों को अपनी रिकॉर्डिंग से, हर भाषा के लिए मापें।
इस मैट्रिक्स में किसी भी वेंडर के स्कोर क्यों नहीं हैं?
क्योंकि स्कोर का मतलब केवल आपकी कॉल पर, आपकी भाषाओं में, आपके कैरियर पर होता है। प्रकाशित स्कोर किसी और की परिस्थितियों को मापता है। मैट्रिक्स जानबूझकर खाली है: आप इसे अपने पायलट से भरते हैं।
AI वॉइस एजेंट का पायलट कितने समय चलना चाहिए?
एक या दो कॉल प्रकारों के लिए दो हफ़्ते काफ़ी हैं: कॉन्फ़िगर और आंतरिक टेस्ट के लिए कुछ दिन, हर वेंडर के लिए एक जैसा स्क्रिप्टेड टेस्ट सेट, लगभग एक हफ़्ते का कम और निगरानी वाला लाइव ट्रैफ़िक, और मापने व स्कोर करने के लिए दो दिन।
AI वॉइस एजेंट पायलट में सबसे बड़ा रेड फ़्लैग क्या है?
ऐसा एजेंट जो कार्रवाई विफल होने पर भी कॉलर को बताता है कि काम हो गया। कभी न हुई बुकिंग की पुष्टि करना, या आपकी लिस्ट में न होने वाली कीमत बताना, धीमे जवाब से ज़्यादा नुकसान करता है। पायलट के दौरान जानबूझकर विफलताएँ पैदा करें और सुनें कि कॉलर को क्या सुनाई देता है।
क्या हमें अरबी बोलियों को अलग से टेस्ट करना चाहिए?
हाँ। जिस-जिस बोली के कॉलर को आप सेवा देते हैं, जैसे खाड़ी, लेवेंटाइन या मिस्री अरबी, उसके मूल वक्ताओं से एक जैसे अनुरोध करवाएँ, और उनसे पूछें कि जवाब स्वाभाविक लगे या नहीं। बोली में नाम, तारीख और नंबर पहचानने में ही एजेंट सबसे ज़्यादा विफल होते हैं।

अपनी कॉल पर पायलट करें

अपने कॉल प्रकारों और भाषाओं के अनुसार पायलट की योजना बनाने के लिए डेमो बुक करें, या प्लेटफ़ॉर्म का 14 दिन का फ़्री ट्रायल शुरू करें।

डेमो बुक करें फ़्री ट्रायल शुरू करें

खरीदार गाइड से और

खरीदार गाइड हब

तीनों संसाधन, और हर एक का उपयोग कब करें।

RFP चेकलिस्ट

हर वेंडर को भेजने के लिए लिखित प्रश्न।

AI या इंसान?

कौन-सी कॉल ऑटोमेट करें, कौन-सी इंसानों के पास रखें।

प्राइसिंग

प्रति-एजेंट प्लान और AI उपयोग का बिल कैसे बनता है।
पूरी साइट अंग्रेज़ी में देखें →