বিচার হয় আপনি কী বলছেন তা দিয়ে। কেমন শোনাচ্ছেন বা দেখতে কেমন, তা দিয়ে কখনো নয়।
আবেদন শুরুর আগেই নিয়োগকারী টিম একটি রুব্রিক ঠিক করে, আর SeekIQ সেই রুব্রিক ধরে উত্তরের স্কোর দেয়। শুরুতে সিদ্ধান্ত নেন একজন মানুষ, আর টিম কোনো অটোমেশন চালু করলে তা প্রার্থীদের জানানো হয় এবং একজন মানুষের কাছে যেতে পারে। কীভাবে, তা এখানে ধাপে ধাপে বলা হলো।
যা আমরা মূল্যায়ন করি। কাজের জন্য দরকারি দক্ষতা, প্রথম আবেদনের আগেই ঠিক করা।
পদ খোলার আগে নিয়োগকারী টিম ঠিক করে কাজটির জন্য কোন কোন দক্ষতা দরকার, আর প্রতিটির জন্য একটি রুব্রিক লেখে। ওই পদের প্রত্যেক প্রার্থীকে একই রুব্রিকে মাপা হয়।
০১দক্ষতা
কাজের জন্য যা দরকার, যেমন রেগে থাকা গ্রাহককে শান্ত করা বা শিফটের পরিকল্পনা করা। প্রতিটি দক্ষতার জন্য ১ থেকে ৫ পর্যন্ত লিখিত রুব্রিক থাকে।
০২প্রমাণ
প্রতিটি স্কোরের সঙ্গে থাকে সেই কথাগুলো, যার ভিত্তিতে স্কোর দেওয়া হয়েছে। তাই রিভিউয়ার রেকর্ডিং শুনে মিলিয়ে নিতে পারেন।
০৩সমতা
প্রার্থীরা সমমানের প্রশ্ন পান, আর সবগুলো একই রুব্রিকে মাপা হয়। তাই কারও পরীক্ষা সহজ হয় না।
০৪যথেষ্ট তথ্য
উত্তরে বিচার করার মতো যথেষ্ট কিছু না থাকলে স্কোর অনুমান করে না, সেটাই জানিয়ে দেয়।
যা আমরা কখনো মূল্যায়ন করি না। কিছু সংকেত আসলে অন্তর্দৃষ্টির ছদ্মবেশে গোলমাল। নকশা করেই আমরা সেগুলো বাদ রাখি।
এগুলোর কোনোটিই স্কোরে পৌঁছায় না। স্কোর করার আগে ব্যক্তিগত তথ্য সরিয়ে ফেলা হয়, আর রুব্রিকে থাকে শুধু কাজের দক্ষতা।
- উচ্চারণসিলেটি, লাগোস বা গ্লাসগো, বিচার হয় কী বলা হলো তা দিয়ে।
- চেহারাস্কোর আসে উত্তরের কথা থেকে। কোনো ছবি বা ভিডিও স্কোরে ব্যবহার হয় না।
- আবেগ“আত্মবিশ্বাস” বা “উৎসাহ” মাপা হয় না। নার্ভাস হওয়া কোনো বৈশিষ্ট্য নয়।
- ভাষা বাছাইইংরেজির বদলে নিজের ভাষায় উত্তর দিলে নম্বর কাটে না, যদি না পদের জন্য সত্যিই ইংরেজি লাগে।
- কণ্ঠস্বর ও কথার গতিভারী গলা, নরম গলা বা ধীরে কথা বলা, একই উত্তরে একই স্কোর।
- বয়সবয়স কখনো রুব্রিকের অংশ নয়, তাই কখনো স্কোরও হয় না।
- লিঙ্গলিঙ্গ কখনো রুব্রিকের অংশ নয়। স্কোর করার আগে নাম সরিয়ে ফেলা হয়।
- ধর্ম ও জাতিসত্তাবিশ্বাস, বর্ণ বা জাতিসত্তা কখনো রুব্রিকে থাকে না, স্কোরও হয় না।
কে সিদ্ধান্ত নেবে, তা আপনি ঠিক করেন। শুরুতে আপনার টিমের একজন মানুষ সিদ্ধান্ত নেন। আপনি পদ ধরে ধরে চালু না করা পর্যন্ত অটোপাইলট বন্ধ থাকে।
- শুরুতে একজন মানুষপ্রতিটি ধাপ শুরুতে ম্যানুয়াল: সেখানে শুধু নিয়োগকারী টিমের একজন সদস্যই প্রার্থীকে এগিয়ে নিতে বা বাদ দিতে পারেন।
- প্রতিবার কারণ লাগেবাদ দেওয়ার সঙ্গে সবসময় একটি কারণ থাকে, সিদ্ধান্তটি মানুষ নিন বা টিমের চালু করা কোনো নিয়ম, আর কোনো স্কোর বদলালে তার কারণও লেখা থাকে।
- যে অটোমেশন দেখা ও থামানো যায়কোনো পদে টিম অটোপাইলট চালু করলে প্রতিটি স্বয়ংক্রিয় সিদ্ধান্তে তার নিয়মের নাম থাকে, প্রার্থীকে জানানো হয় এবং তিনি একজন মানুষের পর্যালোচনা চাইতে পারেন, আর একটি সুইচেই সব থামানো যায়। যেখানে আইন স্বয়ংক্রিয় বাদ দেওয়া সীমিত করে (ইইউ, যুক্তরাজ্য ও নিউ ইয়র্ক সিটি), সেখানে একজন মালিক নিশ্চিত না করা পর্যন্ত এটি বন্ধ থাকে।
স্কোর যেভাবে তৈরি হয়। ছয়টি ধাপ, সহজ ভাষায়।
প্রশ্ন থেকে সিদ্ধান্ত পর্যন্ত, ইন্টারভিউয়ের একটি উত্তরের সঙ্গে যা ঘটে।
- ০১
আগে রুব্রিক
পদ খোলার আগে নিয়োগকারী টিম জরুরি দক্ষতাগুলো বেছে নেয়, আর দুর্বল, মোটামুটি ও ভালো উত্তর দেখতে কেমন তা লিখে রাখে।
- ০২
সবার জন্য ন্যায্য প্রশ্ন
আপনি ওই দক্ষতাগুলোর একটির জন্য লেখা প্রশ্ন শুনবেন। অন্য প্রার্থী হয়তো ভিন্ন শব্দে প্রশ্নটি শুনবেন, কিন্তু দুজনের উত্তর মাপা হবে একইভাবে।
- ০৩
আপনার কথা লেখা হয়
আপনার বলা উত্তর লেখায় রূপান্তর করা হয়। আপনি তা ঠিক করে নিতে পারেন; মূল রেকর্ডিং আপনার সংশোধনের পাশে থাকে, যতদিন না মুছে ফেলা হয়। ডিফল্টভাবে তা মুছে যায় তৈরির ৩০ দিন পর।
- ০৪
ব্যক্তিগত তথ্য বাদ যায়
স্কোর করার আগে আপনার নাম, ফোন নম্বর ও অন্যান্য ব্যক্তিগত তথ্য সরিয়ে ফেলা হয়।
- ০৫
উত্তর মেলানো হয় রুব্রিকের সঙ্গে
SeekIQ-এর ইন্টারভিউয়ার প্রতিটি দক্ষতার জন্য ১ থেকে ৫-এর মধ্যে একটি স্কোর প্রস্তাব করে, আর যে কথাগুলোর ওপর ভরসা করেছে তা উদ্ধৃত করে। বিচার করার মতো যথেষ্ট তথ্য না থাকলে সেটাই জানায়।
- ০৬
সিদ্ধান্ত নেন একজন মানুষ, অথবা টিমের নিয়ম
রিক্রুটার প্রমাণ পড়েন, চাইলে আপনার উত্তর শোনেন, তারপর সিদ্ধান্ত নেন। কোনো স্কোর বদলালে কেন বদলালেন তা লিখে রাখেন।
পক্ষপাত যেভাবে পরীক্ষা করি। কোনো পরিবর্তন চালুর আগেই।
আমাদের কাছে উত্তরের একটি পরীক্ষামূলক সেট আছে। ভিন্ন ভিন্ন লিঙ্গ, বয়স, অঞ্চল ও উচ্চারণের মানুষ সম্মতি দিয়ে তা রেকর্ড করেছেন, আমাদের সমর্থিত প্রতিটি ভাষায়।
নতুন রুব্রিক টেমপ্লেট, প্রম্পট সংস্করণ বা স্পিচ মডেল আগে এই সেটে চালানো হয়। একই উত্তর যে-ই বলুক, যে ভাষাতেই বলুক, স্কোর একই হওয়া উচিত। না হলে পরিবর্তনটি চালু হয় না।
চাকরির বিবরণ ও রুব্রিকেও পক্ষপাতমূলক শব্দ খোঁজা হয়, যেমন বয়সের সীমা বা লিঙ্গভিত্তিক শব্দ। যিনি লিখছেন, তাঁকে তা ঠিক করতে বলা হয়।
ত্রৈমাসিক অডিট। এটি আমাদের অঙ্গীকার, আর প্রতিটি আউটপুটের রেকর্ড থাকে।
পাসের হারের তুলনা
প্রতি ত্রৈমাসিকে আমরা প্রতিটি ধাপে লিঙ্গ, অঞ্চল ও ভাষাভিত্তিক পাসের হার তুলনা করব, কোনো ফারাক পেলে খতিয়ে দেখব, আর যা পাব তা প্রকাশ করব।
প্রতিটি এআই আউটপুটের লগ
অডিট লগে প্রতিটি স্কোর ও সারাংশ অন্তত ছয় মাস রাখা হয়, সঙ্গে থাকে যে মডেল সংস্করণ ও প্রম্পট সংস্করণে তা তৈরি হয়েছে।
পর্যালোচনার জন্য খোলা
এন্টারপ্রাইজ গ্রাহকরা নিজেদের পর্যালোচনার জন্য পুরো অডিট লগ এক্সপোর্ট করতে পারেন।
পুরো এক ত্রৈমাসিক লাইভ ইন্টারভিউ হওয়ার পর প্রথম ত্রৈমাসিক রিপোর্ট এখানে প্রকাশ করা হবে।