QA कैलिब्रेशन सत्र जो स्कोरिंग को निष्पक्ष रखें
कैलिब्रेशन सत्र कैसे चलाएँ ताकि समीक्षक कॉल को एक जैसा स्कोर करें: कॉल चुनें, स्वतंत्र स्कोरिंग करें, अंतर पर चर्चा करें, स्कोरकार्ड सुधारें और सहमति ट्रैक करें।
अगर दो समीक्षक एक ही कॉल सुनें और एक उसे बहुत अच्छा दे जबकि दूसरा फ़ेल कर दे, तो एजेंट जल्दी ही स्कोर पर भरोसा करना छोड़ देते हैं। कैलिब्रेशन वह आदत है जो इसे रोकती है। समीक्षक एक ही कॉल को अलग-अलग स्कोर करते हैं, नोट्स मिलाते हैं और अंतर सुलझाते हैं, ताकि स्कोर का मतलब एक ही रहे, चाहे किसी ने भी दिया हो।

यह गाइड बताती है कि छोटी टीम में कैलिब्रेशन सत्र कैसे चलाएँ। यह कॉल के लिए क्वालिटी मैनेजमेंट पर आधारित है और इस गाइड के फ़ीडबैक चक्र को सपोर्ट करती है: कॉल पर एजेंटों की कोचिंग के लिए एक सरल फ़्रेमवर्क।
कैलिब्रेशन क्यों ज़रूरी है
स्कोरकार्ड शब्दों में लिखे होते हैं, और शब्द अलग-अलग ढंग से पढ़े जाते हैं। "सहानुभूति दिखाई" या "समस्या हल की" का मतलब अलग-अलग समीक्षकों के लिए, या एक ही समीक्षक के लिए अलग-अलग दिनों में, अलग होता है। कैलिब्रेशन के बिना तीन समस्याएँ होती हैं: एजेंटों के बीच अनुचित स्कोर, राय पर आधारित कोचिंग, और ऐसी रिपोर्ट जिनकी समय या टीमों के बीच तुलना नहीं हो सकती।
संकेत कि आपको कैलिब्रेशन चाहिए
- एजेंट स्कोर पर सवाल उठाते हैंवे कहते हैं कि कोई दूसरा समीक्षक उसी कॉल को पास कर देता।
- समीक्षकों के औसत अलग हैंएक समीक्षक लगातार दूसरे से ज़्यादा सख्त या नरम है।
- नए समीक्षक भटकते हैंकिसी के जुड़ने या कवर करने पर स्कोर बदल जाते हैं।
- स्कोरकार्ड आइटम अस्पष्ट हैंअलग-अलग लोग उन्हें अलग ढंग से समझाते हैं।
सत्र की तैयारी
अच्छे सत्र के लिए थोड़ी तैयारी चाहिए। संचालक ऐसा व्यक्ति हो जो स्कोरकार्ड को अच्छी तरह जानता हो और तटस्थ रह सके, अक्सर कोई QA लीड या वरिष्ठ टीम लीड।
सत्र से पहले
- तीन-चार कॉल चुनेंएक साफ़ पास, एक साफ़ फ़ेल और कम से कम एक सीमा-रेखा वाली कॉल शामिल करें।
- पहचान वाले विवरण हटाएँएजेंटों के नाम छिपाएँ, ताकि चर्चा कॉल पर ही रहे।
- स्कोरकार्ड साझा करेंसभी परिभाषाओं के साथ मौजूदा संस्करण इस्तेमाल करें।
- स्वतंत्र स्कोरिंग माँगेंहर समीक्षक मीटिंग से पहले स्कोर करे, और इस बारे में दूसरों से बात न करे।
असली कॉल सबसे अच्छी सामग्री देती हैं। सीमा-रेखा वाली कॉल अपनी सामान्य समीक्षा से निकालें, क्योंकि असहमति उन्हीं में छिपी होती है। जाँच लें कि आपके अंदरूनी नियमों के अनुसार रिकॉर्डिंग समीक्षकों के साथ साझा की जा सकती हैं, और किसी भी निजी डेटा को सावधानी से सँभालें; इसके रिकॉर्डिंग वाले पक्ष के लिए कॉल रिकॉर्डिंग की सहमति देखें।
सत्र चलाना
राय से नहीं, स्कोर से शुरुआत करें। सबके आइटम-दर-आइटम नतीजे एक साझा स्क्रीन पर रखें और सबसे बड़े अंतर वाले आइटम खोजें। पहले उन्हीं पर काम करें।
- अंतर बताएँ। हर कॉल के लिए हर समीक्षक का कुल स्कोर और आइटम-स्तर के अंतर दिखाएँ।
- हर समीक्षक से विवादित आइटम समझाने को कहें, कॉल के उस पल का हवाला देकर जिसने उनका फ़ैसला तय किया।
- स्कोरकार्ड के शब्दों पर लौटें। क्या यह साफ़ बताता है कि पास किसे माना जाएगा?
- इस कॉल के जवाब पर सहमति बनाएँ, और तर्क लिख लें।
- अगर शब्द ही समस्या हैं, तो किया जाने वाला बदलाव नोट करें; उसे वहीं बैठे-बैठे इस तरह न सुधारें कि लोग उलझ जाएँ।
बुनियादी नियम
- कॉल और स्कोरकार्ड पर चर्चा करें, लोगों पर नहीं।
- संचालक की राय से पहले सब बोलें।
- असहमति अपेक्षित और उपयोगी है।
- फ़ैसले दर्ज किए जाते हैं ताकि अगला सत्र नई जानकारी के बिना उन्हें फिर न खोले।
एक काल्पनिक सत्र व्यवहार में
मान लीजिए छह लोगों की टीम में तीन समीक्षक हैं। वे चार कॉल चुनते हैं और अकेले स्कोर करते हैं। तीसरी कॉल पर, ग्राहक के विवरण की पुष्टि वाले आइटम पर एक समीक्षक पास देता है और दूसरा फ़ेल। संचालक दोनों से वह पल चलाने को कहता है जिस पर उन्होंने भरोसा किया। पता चलता है कि एजेंट ने पिनकोड की पुष्टि की लेकिन नाम की नहीं, और स्कोरकार्ड में बस "विवरण की पुष्टि करें" लिखा है। टीम सहमत होती है कि आइटम में ठीक-ठीक लिखा जाए कि कौन-से दो विवरण गिने जाएँगे, उसे दोबारा लिखती है और फ़ैसला दर्ज करती है।
यह छोटा बदलाव भविष्य की हर समीक्षा से अनुचित स्कोर का एक स्रोत हटा देता है। यही पैटर्न खोजना है: किसी कॉल पर असहमति आमतौर पर स्कोरकार्ड में किसी कमी का संकेत होती है।
एजेंटों के साथ बात पूरी करना याद रखें। उन्हें बताएँ कि शब्दों में क्या बदला और क्यों, और पुरानी कॉल दोबारा स्कोर करने के बजाय बदलाव एक घोषित तारीख से लागू करें। अगर पुराने शब्दों की वजह से कोई पिछला स्कोर साफ़ तौर पर अनुचित था, तो उसे सुधारने के बारे में खुलकर बताएँ।
असहमति को बेहतर स्कोरकार्ड में बदलना
सत्र का सबसे कीमती नतीजा आमतौर पर ज़्यादा स्पष्ट स्कोरकार्ड होता है। अगर समीक्षक किसी आइटम पर असहमत हैं, तो वह आइटम शायद अस्पष्ट है। उसे ठोस बनाएँ।
| अस्पष्ट आइटम | ज़्यादा स्पष्ट संस्करण |
|---|---|
| सहानुभूति दिखाई | समाधान देने से पहले ग्राहक की समस्या को उनके अपने शब्दों में स्वीकार किया। |
| समस्या हल की | पूरा जवाब दिया या समय के साथ साफ़ अगला कदम तय किया। |
| पेशेवर टोन | न टोका-टाकी, न व्यंग्य, और विनम्र शुरुआत व समापन। |
| प्रक्रिया का पालन किया | मौजूदा प्रक्रिया के चरणों से ग्राहक की पहचान सत्यापित की। |
हर आइटम में पास और फ़ेल के एक-दो उदाहरण वाक्य जोड़ें। जो आइटम किसी कॉल प्रकार पर लागू नहीं होते, उनके लिए अंदाज़ा लगाने के बजाय सोच-समझकर "N/A" इस्तेमाल करें। क्रिटिकल आइटम, यानी वे जो पूरी कॉल को फ़ेल कर सकते हैं, की सूची बहुत छोटी रखें, और उन्हें बिल्कुल स्पष्ट बनाएँ। उचित पास मार्क आपकी टीम का फ़ैसला है; एजेंटों को बताए बिना उसे न बदलें।
समय के साथ सहमति मापना
आपको जटिल आँकड़ों की ज़रूरत नहीं है। एक सरल पैमाना है हर कैलिब्रेट की गई कॉल के सबसे ऊँचे और सबसे कम कुल स्कोर के बीच का अंतर। हर महीने औसत अंतर ट्रैक करें, और उन आइटम को देखें जो सबसे ज़्यादा असहमति पैदा करते हैं।
अंतर को कैसे पढ़ें
| छोटा अंतर | बड़ा अंतर | |
|---|---|---|
| यह क्या संकेत देता है | समीक्षक स्कोरकार्ड को एक जैसा पढ़ते हैं | समीक्षक उसे अलग-अलग पढ़ते हैं |
| क्या करें | रूटीन जारी रखें और कॉल बदलते रहें | आइटम दोबारा लिखें, उदाहरण जोड़ें, जल्द ही एक और सत्र चलाएँ |
| जोखिम | आत्मसंतोष, वही अनदेखे पहलू | अनुचित स्कोर और अविश्वास |
मोटे तौर पर, सौ अंकों के पैमाने पर लगभग बीस अंकों से ज़्यादा का अंतर इस बात का संकेत है कि समीक्षक स्कोरकार्ड को अलग-अलग ढंग से इस्तेमाल कर रहे हैं, और शब्दों पर साथ मिलकर सहमति बनाना फ़ायदेमंद है। ऐसी किसी भी संख्या को अपनी टीम के लिए एक मार्गदर्शक मानें, कोई मानक नहीं।
फ़ैसलों का लॉग रखें। तारीख, कॉल, विवादित आइटम और सहमत व्याख्या वाला एक सरल साझा दस्तावेज़ काफ़ी है। नए समीक्षक इसे पढ़कर सीख सकते हैं कि टीम स्कोरकार्ड कैसे लागू करती है, और यह हर महीने एक ही बहस लौटने से रोकता है। स्कोरकार्ड में संशोधन करते समय लॉग की समीक्षा करें, और उन एंट्री को हटा दें जिन्हें नए शब्द अनावश्यक बना देते हैं।
आवृत्ति और कौन हिस्सा ले
- आवृत्ति: शुरुआत में हर दो से चार हफ़्ते, फिर अंतर कम हो जाने पर महीने में एक बार।
- कौन: सभी समीक्षक, साथ में एक-दो टीम लीड। नए प्रशिक्षित समीक्षकों को भी शामिल करें।
- अवधि: तीन-चार कॉल के लिए आमतौर पर पैंतालीस मिनट काफ़ी हैं।
- एजेंट: कभी-कभी एजेंटों को भी गुमनाम कॉल के साथ बुलाने पर विचार करें, ताकि वे देखें कि स्कोरिंग कैसे काम करती है।
कैलिब्रेशन को अपनी सैंपलिंग योजना के साथ जोड़ें ताकि समीक्षक अलग-अलग एजेंटों और कॉल प्रकारों का मिश्रण देखें; देखें आपको कितनी कॉल की समीक्षा करनी चाहिए?। अगर कोई AI टूल कॉल को पहले से स्कोर करता है, तो उसके कुछ नतीजे भी कैलिब्रेशन में शामिल करें, ताकि लोग सीखें कि उस पर कब भरोसा करें और कब उसे बदलें।
Call में कैलिब्रेशन
Call के "समीक्षा और प्रशिक्षण" वाले हिस्से में एक "कैलिब्रेशन" सेक्शन है, जो उन कॉल की सूची देता है जिन्हें एक से ज़्यादा समीक्षकों ने स्कोर किया है, साथ में उनके स्कोर के बीच का अंतर भी। एडमिन और मैनेजर समीक्षा कतार से कॉल को स्कोर करते हैं, हर स्कोरकार्ड आइटम के लिए "पास", "विफल" या N/A इस्तेमाल करके, और क्रिटिकल आइटम फ़ेल होने पर स्कोर शून्य हो जाता है। Call का मार्गदर्शन यह है कि 20 अंकों से ज़्यादा का अंतर बताता है कि समीक्षक स्कोरकार्ड को अलग-अलग पढ़ते हैं, इसलिए उन्हें साथ मिलकर उस पर सहमति बनानी चाहिए।
जहाँ आप कुछ आइटम को कहे गए या न कहे गए शब्दों के रूप में बताते हैं, वहाँ Call "स्वचालित स्कोरिंग" नियमों से उन्हें खुद भी स्कोर कर सकता है। इन नियमों को संकरा और सटीक रखें; अंदाज़े से बने नियम से खाली नियम बेहतर है। समीक्षा कतार और स्कोरकार्ड के लिए आपके वर्कस्पेस में एक सक्रिय स्कोरकार्ड ज़रूरी है, इसलिए उसके इर्द-गिर्द कैलिब्रेशन की योजना बनाने से पहले उसे सेट कर लें।
अक्सर पूछे जाने वाले प्रश्न
कैलिब्रेशन सामान्य क्वालिटी समीक्षा से कैसे अलग है?
सामान्य समीक्षा में एक समीक्षक एक कॉल को स्कोर करता है। कैलिब्रेशन में कई समीक्षक एक ही कॉल को स्वतंत्र रूप से स्कोर करते हैं, फिर तुलना करते हैं। इसका उद्देश्य समीक्षकों में तालमेल बनाना है, एजेंट को आँकना नहीं।
क्या समीक्षकों के स्कोर बिल्कुल एक जैसे होने चाहिए?
नहीं। छोटे अंतर सामान्य हैं। लक्ष्य है हर आइटम पर इस बात पर सहमत होना कि पास किसे माना जाएगा, और कुल अंतर छोटा रखना।
हर सत्र में कितनी कॉल इस्तेमाल करनी चाहिए?
आमतौर पर तीन-चार काफ़ी हैं। ज़्यादा कॉल मीटिंग को लंबा और सतही बना देती हैं। ऐसी कॉल चुनें जो असहमति सामने लाएँ।
क्या एजेंटों को कैलिब्रेशन के नतीजे दिखने चाहिए?
एजेंटों को स्कोरकार्ड की परिभाषाएँ और कैलिब्रेशन से हुए बदलाव दिखने चाहिए। कॉल-दर-कॉल तुलना साझा करनी है या नहीं, यह टीम का फ़ैसला है, लेकिन खुलापन भरोसा बनाता है।
अगर एक समीक्षक हमेशा ज़्यादा सख्त हो तो?
देखें कि कौन-से आइटम अंतर पैदा करते हैं और सत्र में उन पर चर्चा करें। अक्सर स्कोरकार्ड के शब्द अस्पष्ट होते हैं। अगर अंतर बना रहे, तो उस समीक्षक को अतिरिक्त मार्गदर्शन और उदाहरण दें।
स्कोरकार्ड कितनी बार अपडेट होना चाहिए?
जब कैलिब्रेशन बार-बार उलझन दिखाए, जब आपकी प्रक्रिया या प्रोडक्ट बदले, या जब ग्राहकों की ज़रूरतें बदलें, तब अपडेट करें। बदलावों की घोषणा एजेंटों के लिए करें।