மதிப்பீட்டை நியாயமாக வைக்கும் QA கலிபரேஷன் அமர்வுகள்
மதிப்பாய்வாளர்கள் அழைப்புகளை ஒரே மாதிரி மதிப்பிட கலிபரேஷன் அமர்வுகளை நடத்துவது எப்படி: அழைப்புத் தேர்வு, தனித்த மதிப்பீடு, இடைவெளி விவாதம், ஸ்கோர்கார்டு மேம்பாடு.
இரண்டு மதிப்பாய்வாளர்கள் ஒரே அழைப்பைக் கேட்டு, ஒருவர் அதை மிகச் சிறப்பு என்றும் மற்றவர் தோல்வி என்றும் மதிப்பிட்டால், முகவர்கள் விரைவில் மதிப்பெண்களை நம்புவதை நிறுத்திவிடுவார்கள். இதைத் தடுக்கும் பழக்கமே கலிபரேஷன். மதிப்பாய்வாளர்கள் ஒரே அழைப்புகளைத் தனித்தனியாக மதிப்பிட்டு, குறிப்புகளை ஒப்பிட்டு, வேறுபாடுகளைத் தீர்த்துக்கொள்கிறார்கள்; இதனால் யார் கொடுத்தாலும் ஒரு மதிப்பெண் ஒரே பொருளைக் குறிக்கிறது.

ஒரு சிறிய குழுவில் கலிபரேஷன் அமர்வுகளை நடத்துவது எப்படி என்று இந்த வழிகாட்டி காட்டுகிறது. இது அழைப்புகளுக்கான தர மேலாண்மை என்பதன் மேல் கட்டமைக்கப்படுகிறது; அழைப்புகளில் முகவர்களுக்குப் பயிற்சியளிக்க ஒரு எளிய கட்டமைப்பு என்பதில் உள்ள பின்னூட்டச் சுழற்சிக்கும் துணைபுரிகிறது.
கலிபரேஷன் ஏன் முக்கியம்
ஸ்கோர்கார்டுகள் சொற்களில் எழுதப்படுகின்றன, சொற்கள் வெவ்வேறு விதமாகப் படிக்கப்படுகின்றன. “பரிவைக் காட்டினார்” அல்லது “பிரச்சினையைத் தீர்த்தார்” என்பது வெவ்வேறு மதிப்பாய்வாளர்களுக்கு, அல்லது ஒரே மதிப்பாய்வாளருக்கு வெவ்வேறு நாட்களில், வெவ்வேறு பொருள் தரும். கலிபரேஷன் இல்லாவிட்டால் மூன்று பிரச்சினைகள் வருகின்றன: முகவர்களுக்கு இடையே நியாயமற்ற மதிப்பெண்கள், அபிப்பிராயத்தின் அடிப்படையிலான பயிற்சி, காலத்துக்கோ குழுக்களுக்கோ இடையே ஒப்பிட முடியாத அறிக்கைகள்.
கலிபரேஷன் தேவை என்பதற்கான அறிகுறிகள்
- முகவர்கள் மதிப்பெண்களை எதிர்க்கிறார்கள்வேறொரு மதிப்பாய்வாளர் அதே அழைப்புக்குத் தேர்ச்சி கொடுத்திருப்பார் என்கிறார்கள்.
- மதிப்பாய்வாளர் சராசரிகள் வேறுபடுகின்றனஒரு மதிப்பாய்வாளர் தொடர்ந்து மற்றவரை விடக் கடுமையாகவோ தாராளமாகவோ இருக்கிறார்.
- புதிய மதிப்பாய்வாளர்கள் விலகிச் செல்கிறார்கள்யாராவது சேரும்போதோ மாற்றாகப் பணியாற்றும்போதோ மதிப்பெண்கள் மாறுகின்றன.
- ஸ்கோர்கார்டு உருப்படிகள் தெளிவற்றவைவெவ்வேறு நபர்கள் அவற்றை வெவ்வேறு விதமாக விளக்குகிறார்கள்.
அமர்வைத் தயாரித்தல்
நல்ல அமர்வுக்குச் சிறிது தயாரிப்பு தேவை. ஒருங்கிணைப்பாளர் ஸ்கோர்கார்டை நன்கு அறிந்தவராகவும் நடுநிலையாக இருக்கக்கூடியவராகவும் இருக்க வேண்டும்; பெரும்பாலும் QA தலைவர் அல்லது மூத்த குழுத் தலைவர்.
அமர்வுக்கு முன்
- மூன்று அல்லது நான்கு அழைப்புகளைத் தேர்ந்தெடுங்கள்தெளிவான ஒரு தேர்ச்சி, தெளிவான ஒரு தோல்வி, குறைந்தது ஒரு எல்லைக்கோட்டு அழைப்பு ஆகியவற்றைச் சேருங்கள்.
- அடையாள விவரங்களை நீக்குங்கள்விவாதம் அழைப்பைப் பற்றியே இருக்க, முகவர் பெயர்களை மறையுங்கள்.
- ஸ்கோர்கார்டைப் பகிருங்கள்எல்லோரும் வரையறைகளுடன் கூடிய தற்போதைய பதிப்பைப் பயன்படுத்துகிறார்கள்.
- தனித்த மதிப்பீட்டைக் கேளுங்கள்ஒவ்வொரு மதிப்பாய்வாளரும் கூட்டத்துக்கு முன் மதிப்பிடுகிறார், அதைப் பற்றி மற்றவர்களுடன் பேசுவதில்லை.
உண்மையான அழைப்புகளே சிறந்த பொருள். கருத்து வேறுபாடு மறைந்திருப்பவை எல்லைக்கோட்டு அழைப்புகள்தான் என்பதால், அவற்றை உங்கள் வழக்கமான மறுபார்வையிலிருந்து எடுங்கள். உங்கள் உள் விதிகளின்படி பதிவுகளை மதிப்பாய்வாளர்களுடன் பகிர முடியுமா என்று சரிபார்த்து, எந்தத் தனிப்பட்ட தரவையும் கவனமாகக் கையாளுங்கள்; இதன் பதிவுப் பக்கத்துக்கு அழைப்புப் பதிவுக்கான ஒப்புதல் பார்க்கவும்.
அமர்வை நடத்துதல்
அபிப்பிராயங்களுடன் அல்ல, மதிப்பெண்களுடன் தொடங்குங்கள். எல்லோரின் உருப்படிவாரியான முடிவுகளையும் பகிர்ந்த திரையில் காட்டி, மிகப் பெரிய இடைவெளி உள்ள உருப்படிகளைத் தேடுங்கள். முதலில் அவற்றைக் கையாளுங்கள்.
- வேறுபாட்டைச் சொல்லுங்கள். ஒவ்வொரு அழைப்புக்கும், ஒவ்வொரு மதிப்பாய்வாளரின் மொத்த மதிப்பெண்ணையும் உருப்படி நிலை வேறுபாடுகளையும் காட்டுங்கள்.
- சர்ச்சைக்குரிய உருப்படியை விளக்கும்படி ஒவ்வொரு மதிப்பாய்வாளரிடமும் கேளுங்கள்; தங்கள் முடிவுக்குக் காரணமான அழைப்பின் தருணத்தைச் சுட்டிக்காட்டச் சொல்லுங்கள்.
- ஸ்கோர்கார்டு சொற்றொடருக்குத் திரும்புங்கள். எது தேர்ச்சி என்று அது தெளிவாகச் சொல்கிறதா?
- இந்த அழைப்புக்கான பதிலை ஒப்புக்கொண்டு, காரணத்தை எழுதி வையுங்கள்.
- சொற்றொடரே பிரச்சினை என்றால், செய்ய வேண்டிய மாற்றத்தைக் குறித்துக்கொள்ளுங்கள்; மக்களைக் குழப்பும் வகையில் அங்கேயே அதைச் சரிசெய்யாதீர்கள்.
அடிப்படை விதிகள்
- நபர்களை அல்ல, அழைப்பையும் ஸ்கோர்கார்டையும் விவாதியுங்கள்.
- ஒருங்கிணைப்பாளர் கருத்துச் சொல்வதற்கு முன் எல்லோரும் பேசுகிறார்கள்.
- கருத்து வேறுபாடு எதிர்பார்க்கப்படுவது, பயனுள்ளது.
- புதிய தகவல் இல்லாமல் அடுத்த அமர்வு அவற்றை மீண்டும் திறக்காமல் இருக்க, முடிவுகள் பதிவு செய்யப்படுகின்றன.
நடைமுறையில் ஒரு கற்பனை அமர்வு
மூன்று மதிப்பாய்வாளர்களுடன் ஆறு பேர் கொண்ட ஒரு குழுவைக் கற்பனை செய்யுங்கள். அவர்கள் நான்கு அழைப்புகளைத் தேர்ந்தெடுத்துத் தனித்தனியாக மதிப்பிடுகிறார்கள். மூன்றாவது அழைப்பில், வாடிக்கையாளரின் விவரங்களை உறுதிப்படுத்துவது பற்றிய உருப்படிக்கு ஒரு மதிப்பாய்வாளர் தேர்ச்சியும் மற்றொருவர் தோல்வியும் கொடுக்கிறார்கள். ஒருங்கிணைப்பாளர் ஒவ்வொருவரையும் தாங்கள் நம்பிய தருணத்தை ஒலிக்கச் செய்யச் சொல்கிறார். முகவர் அஞ்சல் குறியீட்டை உறுதிப்படுத்தினார், ஆனால் பெயரை அல்ல; ஸ்கோர்கார்டு வெறுமனே “விவரங்களை உறுதிப்படுத்து” என்கிறது என்று தெரியவருகிறது. எந்த இரண்டு விவரங்கள் கணக்கில் வரும் என்று அந்த உருப்படி சரியாகப் பட்டியலிட வேண்டும் என்று குழு ஒப்புக்கொண்டு, அதை மீண்டும் எழுதி, முடிவைப் பதிவு செய்கிறது.
அந்தச் சிறிய மாற்றம், எதிர்கால மறுபார்வைகள் அனைத்திலும் நியாயமற்ற மதிப்பெண்களின் ஒரு மூலத்தை நீக்குகிறது. தேட வேண்டிய வடிவம் இதுதான்: ஒரு அழைப்பைப் பற்றிய கருத்து வேறுபாடு பொதுவாக ஸ்கோர்கார்டில் உள்ள இடைவெளியின் அறிகுறி.
முகவர்களுடன் சுழற்சியை முடிக்க நினைவில் கொள்ளுங்கள். சொற்றொடரில் என்ன மாறியது, ஏன் என்று அவர்களிடம் சொல்லுங்கள்; பழைய அழைப்புகளை மீண்டும் மதிப்பிடாமல், குறிப்பிட்ட தேதியிலிருந்து மாற்றத்தைப் பயன்படுத்துங்கள். பழைய சொற்றொடரால் ஒரு கடந்த மதிப்பெண் தெளிவாக நியாயமற்றதாக இருந்தால், அதைத் திருத்துவதில் வெளிப்படையாக இருங்கள்.
கருத்து வேறுபாட்டைச் சிறந்த ஸ்கோர்கார்டாக மாற்றுதல்
ஒரு அமர்வின் மிக மதிப்புமிக்க விளைவு பெரும்பாலும் தெளிவான ஸ்கோர்கார்டுதான். ஒரு உருப்படியில் மதிப்பாய்வாளர்கள் உடன்படவில்லை என்றால், அந்த உருப்படி தெளிவற்றதாக இருக்கலாம். அதை உறுதியானதாக்குங்கள்.
| தெளிவற்ற உருப்படி | தெளிவான பதிப்பு |
|---|---|
| பரிவைக் காட்டினார் | தீர்வை வழங்குவதற்கு முன், வாடிக்கையாளரின் பிரச்சினையை அவர்களின் சொந்தச் சொற்களில் ஒப்புக்கொண்டார். |
| பிரச்சினையைத் தீர்த்தார் | முழுமையான பதில் கொடுத்தார், அல்லது நேரத்துடன் தெளிவான அடுத்த படியை அமைத்தார். |
| தொழில்முறைத் தொனி | இடைமறிப்பு இல்லை, கிண்டல் இல்லை, மரியாதையான தொடக்கமும் நிறைவும். |
| செயல்முறையைப் பின்பற்றினார் | தற்போதைய நடைமுறையில் உள்ள படிகளைப் பயன்படுத்தி வாடிக்கையாளரைச் சரிபார்த்தார். |
ஒவ்வொரு உருப்படிக்கும் தேர்ச்சி, தோல்விக்கான ஓரிரு உதாரணச் சொற்றொடர்களைச் சேருங்கள். ஒரு அழைப்பு வகைக்குப் பொருந்தாத உருப்படிகளுக்கு, ஊகிப்பதற்குப் பதிலாக வேண்டுமென்றே “N/A” பயன்படுத்துங்கள். முழு அழைப்பையும் தோல்வியடையச் செய்யக்கூடிய முக்கிய உருப்படிகளை மிகச் சிறிய பட்டியலாக வைத்து, அவற்றைத் தெளிவற்றதாக இல்லாமல் ஆக்குங்கள். நியாயமான தேர்ச்சி மதிப்பெண் உங்கள் குழுவின் முடிவு; முகவர்களிடம் சொல்லாமல் அதை மாற்றாதீர்கள்.
காலப்போக்கில் ஒத்திசைவை அளவிடுதல்
சிக்கலான புள்ளியியல் தேவையில்லை. கலிபரேட் செய்யப்பட்ட ஒவ்வொரு அழைப்புக்கும் மிக அதிக, மிகக் குறைந்த மொத்த மதிப்பெண்களுக்கு இடையிலான வேறுபாடு ஒரு எளிய அளவீடு. சராசரி வேறுபாட்டை மாதவாரியாகக் கண்காணித்து, அதிக கருத்து வேறுபாட்டை ஏற்படுத்தும் உருப்படிகளைப் பாருங்கள்.
வேறுபாட்டைப் புரிந்துகொள்ளுதல்
| சிறிய வேறுபாடு | பெரிய வேறுபாடு | |
|---|---|---|
| அது எதைக் குறிக்கிறது | மதிப்பாய்வாளர்கள் ஸ்கோர்கார்டை ஒத்த விதத்தில் படிக்கிறார்கள் | மதிப்பாய்வாளர்கள் அதை வெவ்வேறு விதமாகப் படிக்கிறார்கள் |
| என்ன செய்வது | வழக்கத்தைத் தொடர்ந்து, அழைப்புகளை மாற்றி மாற்றிப் பயன்படுத்துங்கள் | உருப்படிகளை மீண்டும் எழுதுங்கள், உதாரணங்களைச் சேருங்கள், விரைவில் இன்னொரு அமர்வு நடத்துங்கள் |
| அபாயம் | மெத்தனம், அதே குருட்டுப் புள்ளிகள் | நியாயமற்ற மதிப்பெண்களும் அவநம்பிக்கையும் |
பொது விதியாக, நூறு புள்ளி அளவில் சுமார் இருபது புள்ளிகளுக்கு மேல் வேறுபாடு இருந்தால், மதிப்பாய்வாளர்கள் ஸ்கோர்கார்டை வெவ்வேறு விதமாகப் பயன்படுத்துகிறார்கள் என்பதற்கான அறிகுறி; சொற்றொடரில் ஒன்றாக உடன்படுவது பயனுள்ளது. அப்படிப்பட்ட எண்ணை ஒரு தரநிலையாக அல்ல, உங்கள் சொந்தக் குழுவுக்கான வழிகாட்டியாகக் கருதுங்கள்.
ஒரு முடிவுப் பதிவேட்டை வைத்திருங்கள். தேதி, அழைப்பு, சர்ச்சைக்குரிய உருப்படி, ஒப்புக்கொண்ட புரிதல் ஆகியவற்றைக் கொண்ட ஒரு எளிய பகிர்ந்த ஆவணம் போதும். குழு ஸ்கோர்கார்டை எப்படிப் பயன்படுத்துகிறது என்று அறியப் புதிய மதிப்பாய்வாளர்கள் அதைப் படிக்கலாம்; அதே வாக்குவாதம் ஒவ்வொரு மாதமும் திரும்பி வருவதையும் அது தடுக்கிறது. ஸ்கோர்கார்டைத் திருத்தும்போது பதிவேட்டை மறுபார்வை செய்து, புதிய சொற்றொடரால் தேவையற்றதாகிவிட்ட பதிவுகளை நீக்குங்கள்.
அதிர்வெண்ணும் யார் பங்கேற்கிறார்கள் என்பதும்
- கால இடைவெளி: தொடக்கத்தில் இரண்டு முதல் நான்கு வாரங்களுக்கு ஒருமுறை, வேறுபாடு குறைந்ததும் மாதந்தோறும்.
- யார்: எல்லா மதிப்பாய்வாளர்களும், ஓரிரு குழுத் தலைவர்களும். புதிதாகப் பயிற்சி பெற்ற மதிப்பாய்வாளர்களையும் சேருங்கள்.
- நேர அளவு: மூன்று அல்லது நான்கு அழைப்புகளுக்கு நாற்பத்தைந்து நிமிடங்கள் பொதுவாகப் போதும்.
- முகவர்கள்: மதிப்பீடு எப்படி வேலை செய்கிறது என்று அவர்கள் பார்க்க, பெயர் நீக்கப்பட்ட அழைப்புகளுடன் எப்போதாவது முகவர்களை அழைப்பதைப் பரிசீலியுங்கள்.
மதிப்பாய்வாளர்கள் பல்வேறு முகவர்களையும் அழைப்பு வகைகளையும் பார்க்கும்படி, கலிபரேஷனை உங்கள் மாதிரித் திட்டத்துடன் இணையுங்கள்; பார்க்க: எத்தனை அழைப்புகளை மறுபார்வை செய்ய வேண்டும்?. ஒரு AI கருவி அழைப்புகளை முன்கூட்டியே மதிப்பிட்டால், அதன் சில முடிவுகளையும் கலிபரேஷனில் சேருங்கள்; அப்போது அதை எப்போது நம்புவது, எப்போது மீறுவது என்று மக்கள் கற்றுக்கொள்வார்கள்.
Call-இல் கலிபரேஷன்
Call-இன் “மறுஆய்வும் பயிற்சியும்” பகுதியில் “கலிபரேஷன்” என்ற பிரிவு உள்ளது; இது ஒன்றுக்கு மேற்பட்ட மதிப்பாய்வாளர்கள் மதிப்பிட்ட அழைப்புகளை, அவர்களின் மதிப்பெண்களுக்கு இடையிலான வேறுபாட்டுடன் பட்டியலிடுகிறது. நிர்வாகிகளும் மேலாளர்களும் மறுஆய்வு வரிசையிலிருந்து, ஒவ்வொரு ஸ்கோர்கார்டு உருப்படிக்கும் “தேர்ச்சி”, “தோல்வி” அல்லது N/A பயன்படுத்தி அழைப்புகளை மதிப்பிடுகிறார்கள்; முக்கிய உருப்படிகள் தோல்வியடைந்தால் மதிப்பெண் பூஜ்ஜியமாகிறது. 20 புள்ளிகளுக்கு மேல் வேறுபாடு இருந்தால் மதிப்பாய்வாளர்கள் ஸ்கோர்கார்டை வெவ்வேறு விதமாகப் படிக்கிறார்கள், எனவே அவர்கள் ஒன்றாக உடன்பட வேண்டும் என்பது Call-இன் வழிகாட்டுதல்.
சொல்லப்பட்ட அல்லது சொல்லப்படாத சொற்களாக நீங்கள் விவரிக்கும் சில உருப்படிகளை, “தானியங்கு மதிப்பிடல்” விதிகளைப் பயன்படுத்தி Call தானாகவே மதிப்பிடவும் முடியும். இந்த விதிகளைக் குறுகியதாகவும் உண்மையானதாகவும் வையுங்கள்; ஊகித்த விதியை விட வெற்று விதி சிறந்தது. மறுஆய்வு வரிசைக்கும் ஸ்கோர்கார்டுக்கும் உங்கள் பணியிடத்தில் செயலில் உள்ள ஸ்கோர்கார்டு தேவை, எனவே அதைச் சுற்றிக் கலிபரேஷனைத் திட்டமிடுவதற்கு முன் அதை அமையுங்கள்.
அடிக்கடி கேட்கப்படும் கேள்விகள்
கலிபரேஷன் வழக்கமான தர மறுபார்வைகளிலிருந்து எப்படி வேறுபடுகிறது?
வழக்கமான மறுபார்வையில் ஒரு மதிப்பாய்வாளர் ஒரு அழைப்பை மதிப்பிடுகிறார். கலிபரேஷனில், பல மதிப்பாய்வாளர்கள் ஒரே அழைப்பைத் தனித்தனியாக மதிப்பிட்டு, பிறகு ஒப்பிடுகிறார்கள். முகவரை மதிப்பிடுவதல்ல, மதிப்பாய்வாளர்களை ஒத்திசைப்பதே அதன் நோக்கம்.
மதிப்பாய்வாளர்கள் ஒரே மதிப்பெண்களைப் பெற வேண்டுமா?
இல்லை. சிறிய வேறுபாடுகள் இயல்பானவை. ஒவ்வொரு உருப்படிக்கும் எது தேர்ச்சி என்பதில் உடன்படுவதும், ஒட்டுமொத்த வேறுபாட்டைச் சிறியதாக வைப்பதுமே இலக்கு.
ஒவ்வொரு அமர்விலும் எத்தனை அழைப்புகளைப் பயன்படுத்த வேண்டும்?
பொதுவாக மூன்று அல்லது நான்கு போதும். அதிக அழைப்புகள் கூட்டத்தை நீளமாகவும் மேலோட்டமாகவும் ஆக்கும். கருத்து வேறுபாட்டை வெளிப்படுத்தும் அழைப்புகளைத் தேர்ந்தெடுங்கள்.
முகவர்கள் கலிபரேஷன் முடிவுகளைப் பார்க்க வேண்டுமா?
முகவர்கள் ஸ்கோர்கார்டு வரையறைகளையும் கலிபரேஷனின் விளைவாக வரும் மாற்றங்களையும் பார்க்க வேண்டும். அழைப்புவாரியான ஒப்பீடுகளைப் பகிர்வதா என்பது குழுவின் முடிவு, ஆனால் வெளிப்படைத்தன்மை நம்பிக்கையை வளர்க்கிறது.
ஒரு மதிப்பாய்வாளர் எப்போதும் கடுமையாக இருந்தால்?
எந்த உருப்படிகள் இடைவெளியை ஏற்படுத்துகின்றன என்று பார்த்து, அமர்வில் அவற்றை விவாதியுங்கள். பெரும்பாலும் ஸ்கோர்கார்டு சொற்றொடர் தெளிவற்றதாக இருக்கும். இடைவெளி தொடர்ந்தால், அந்த மதிப்பாய்வாளருக்குக் கூடுதல் வழிகாட்டுதலும் உதாரணங்களும் கொடுங்கள்.
ஸ்கோர்கார்டை எத்தனை முறை புதுப்பிக்க வேண்டும்?
கலிபரேஷன் திரும்பத் திரும்ப வரும் குழப்பத்தைக் காட்டும்போது, உங்கள் செயல்முறையோ தயாரிப்போ மாறும்போது, அல்லது வாடிக்கையாளர்களின் தேவைகள் மாறும்போது புதுப்பியுங்கள். மாற்றங்களை முகவர்களுக்கு அறிவியுங்கள்.