মেট্রিকের মুদ্রাস্ফীতি ও মানের তরলীকরণ
এআই যখন পরিমাণ ও গতিকে সস্তা করে, তখন পরিমাণ ও গতি গোনা প্রতিটি মেট্রিক ফুলে ওঠে, তাই প্রতিটিকে একজন মানুষের যাচাই করা উপযোগিতার পরিমাপের সঙ্গে জোড় বাঁধুন, এবং নজর রাখুন আপনার তথ্যের সংকেত ডুবে যাচ্ছে কি না।
ভূমিকা ও প্রেক্ষাপট
একটি মেট্রিক কাজ করে কারণ তা এমন কিছু প্রতিফলিত করে যা তৈরি করা কঠিন। সমাধান হওয়া টিকিট প্রচেষ্টা প্রতিফলিত করে। লেখা নথি জ্ঞান প্রতিফলিত করে। যোগ করা পরীক্ষা যত্ন প্রতিফলিত করে। একটি টুল যখন দৃশ্যমান আউটপুট প্রায় বিনামূল্যে করে দেয়, আউটপুট ও প্রচেষ্টার সম্পর্ক ভেঙে যায়। সংখ্যা বাড়তেই থাকে আর অর্থ ফুরিয়ে যায়। এটিই মেট্রিকের মুদ্রাস্ফীতি, এবং তার সঙ্গী মানের তরলীকরণ: যা তৈরি হয় তার কাজের অংশ কমে যায়, এবং কাজের অংশ খুঁজে পাওয়া কঠিনতর হয়।
এটি নতুন সমস্যা নয়। গুডহার্টের সূত্র (Goodhart's law) এবং তার আত্মীয় ক্যাম্পবেলের সূত্র (Campbell's law) বর্ণনা করে নিয়ন্ত্রণে ব্যবহৃত পরিমাপ কীভাবে বিকৃত হয়। একটি ভ্যানিটি মেট্রিক (vanity metric) চমকপ্রদ দেখায় অথচ কাজের স্বাস্থ্য সম্পর্কে কিছু বলে না। এআই যা বদলায় তা হলো আউটপুট যে গতি ও পরিসরে তৈরি হতে পারে, এবং সঙ্গে এই পুরোনো ব্যর্থতাগুলো যে গতি ও পরিসরে ঘটতে পারে। যে দল আগে হাতে একটি গণনা ফুলিয়ে তুলত সে এখন কয়েক মিনিটে তা করতে পারে, প্রায়ই ইচ্ছা না করেই।
সেবা ও ডেলিভারির কাজে কয়েকটি ধরন বারবার ফেরে।
- পরিমাণের মুদ্রাস্ফীতি। এআই আরও টিকিট, উত্তর, মন্তব্য, পরীক্ষার ক্ষেত্র, নথি ও কোড খসড়া করে। এগুলোর গণনা বাড়ে। যাঁদের এগুলো পড়তে, পর্যালোচনা করতে ও রক্ষণাবেক্ষণ করতে হয় তাঁদের কাজের বোঝাও বাড়ে।
- গতির মুদ্রাস্ফীতি। প্রথম খসড়ার সময় তীব্রভাবে কমে, আর একটি সম্পূর্ণ, যাচাই করা ফল পর্যন্ত সময় কম কমে, বা একেবারেই কমে না। যে ড্যাশবোর্ড প্রথমটি জানায় তা একটি তোষামোদের গল্প বলে।
- কোলাহল। আরও বিষয়বস্তু মনোযোগের জন্য প্রতিযোগিতা করে। তথ্যের অতিভার (information overload) এমন অবস্থা যেখানে একজন মানুষ উপস্থাপিত তথ্যের পরিমাণ প্রক্রিয়া করতে পারেন না, এবং জ্ঞান ভান্ডার, টিকিটের সারি বা সতর্কবার্তার ধারার সংকেত-কোলাহল অনুপাত (signal-to-noise ratio) কমে। সতর্কবার্তার ক্লান্তি (alert fatigue) তার পরিচালনামূলক রূপ (বিষয় 5.5, পর্যবেক্ষণ ও সতর্কবার্তার মানের মেট্রিক দেখুন)।
- নিম্নমানের তৈরি বিষয়বস্তু। সামান্য পর্যালোচনায় বিপুল পরিমাণে তৈরি বিষয়বস্তু, কখনও কখনও এআই স্লপ (AI slop) বলা হয়, বিশ্বাসযোগ্য অথচ পাতলা। এমন নিবন্ধে ভরা একটি জ্ঞান ভান্ডার কম বিশ্বাসযোগ্য হয়ে ওঠে, এবং ব্যবহারকারীরা অবিশ্বাস করতে শেখেন।
- যাচাইয়ের খরচ। একটি দাবি যাচাইয়ের প্রচেষ্টা প্রায়ই তা করার প্রচেষ্টার চেয়ে অনেক বড়, একটি ধরন যা কখনও কখনও ব্র্যান্ডোলিনির সূত্র (Brandolini's law) বলা হয়। তৈরি সস্তা হলে যাচাই বাধা হয়ে ওঠে।
- দক্ষতা যা ব্যবহার বাড়ায়। জেভন্সের প্যারাডক্স (Jevons paradox) এমন ক্ষেত্র বর্ণনা করে যেখানে দক্ষতার লাভ একটি সম্পদের কম নয়, বেশি ব্যবহার ঘটায়। একটি প্রতিবেদন খসড়া সস্তা হলে আরও প্রতিবেদনের চাহিদা ওঠে। একটি টুলে বাঁচানো সময় কম মূল্যের আরও কাজে খরচ হয়ে যেতে পারে।
- প্রতিক্রিয়া চক্র। তৈরি বিষয়বস্তু পরের দফার তৈরিতে খাদ্য হলে ভুল জমে ওঠে। গবেষণার সাহিত্য নিজেদের আউটপুটে প্রশিক্ষিত মডেলে মডেল ধস (model collapse) বর্ণনা করে। একটি সংগঠনের ভেতরেও অনুরূপ চক্র ঘটতে পারে যখন একটি সহকারী এমন টিকিটের সারসংক্ষেপ করে যা অন্য একটি সহকারী এমন নিবন্ধ থেকে লিখেছে যা আরেকটি সহকারী সারসংক্ষেপ করেছিল।
- সরে যাওয়া ভিত্তিরেখা। এআইয়ের কারণে তথ্যের বণ্টন বদলালে প্রবণতা ও সীমা আর আগের অর্থ রাখে না। এটি মেশিন লার্নিংয়ের ধারণার প্রবাহ (concept drift)-এর মতো, যেখানে ইনপুট ও ফলের সম্পর্ক সময়ের সঙ্গে বদলায়। টিকিটের পরিমাণ বাড়া সহজতর টিকিট তৈরির প্রতিফলন হতে পারে, বেশি সমস্যার নয়।
এজাইল লক্ষ্য এখানে গুরুত্বপূর্ণ। নিরন্তর ডেলিভারি, নিরন্তর উন্নয়ন ও স্থির গতি সবই সংকেত পরিষ্কার থাকার ওপর নির্ভর করে। প্রেরণাপ্রাপ্ত মানুষকে মেশিন-তৈরি কোলাহল ঘেঁটে যেতে বা অসহনীয় গতিতে আউটপুটের স্তূপ যাচাই করতে বলা উচিত নয়। নিরন্তর জড়িত অংশীজনরাও সেরা প্রতিরক্ষা: প্রতিবেদন আর সাহায্য করছে না হলে তাঁরাই আপনাকে বলবেন।
এই বিষয় মুদ্রাস্ফীতি ও তরলীকরণ লক্ষ করার পরিমাপ এবং তা প্রকাশ করা জোড়াগুলো দেয়। এটি ভিত্তি ও সহায়তাপ্রাপ্ত কাজের পরিমাপের ওপর দাঁড়ায় (বিষয় 10.1, সেবা ব্যবস্থাপনার পরিমাপে এআই এবং বিষয় 10.2, এআই-সহায়তাপ্রাপ্ত কাজের পরিমাপ দেখুন)।
মূল নীতি
- প্রতিটি পরিমাণ বা গতির মেট্রিককে একটি উপযোগিতার যাচাইয়ের সঙ্গে জোড় বাঁধুন। একজন মানুষ আউটপুট উপযোগী কি না বিচার করেন।
- একটি সম্পন্ন, যাচাই করা ফল পর্যন্ত মাপুন। প্রথম খসড়ার গতি একটি ফাঁদ।
- যাচাইয়ের বোঝা দেখুন। তা নীরবে বাড়ে এবং বাঁচানো সময় খেয়ে ফেলে।
- সংকেত রক্ষা করুন। জ্ঞান ভান্ডার, সারি ও সতর্কবার্তা ভরসা করার মতো পরিষ্কার রাখুন।
- প্রতিক্রিয়া চক্র ভাঙুন। পর্যালোচনা ছাড়া তৈরি বিষয়বস্তুকে তৈরির খাদ্য হতে দেবেন না।
- তথ্য বদলালে আবার ভিত্তিরেখা ধরুন। প্রযুক্তির বদল জুড়ে প্রবণতায় যত্ন লাগে।
- কম, ভালো আউটপুট পছন্দ করুন। মনোযোগ সীমিত সম্পদ হলে কমই বেশি হতে পারে।
মেট্রিকের সংজ্ঞা
| মেট্রিক | সংজ্ঞা | সূত্র | একক | তথ্যের উৎস | ITIL চর্চা | এজাইল সমতুল্য | পর্যায়কাল |
|---|---|---|---|---|---|---|---|
| আউটপুট-ফল অনুপাত | যে ফল তৈরির উদ্দেশ্য ছিল তার তুলনায় আউটপুটের পরিমাণ | একই সময়কালে আউটপুটের গণনা (টিকিট, নিবন্ধ, পরিবর্তন) / ফলের পরিমাপ (সমাধান হওয়া সমস্যা, ব্যবহৃত নিবন্ধ, ধরে রাখা পরিবর্তন), প্রবণতা হিসেবে ট্র্যাক | অনুপাত | কাজের ট্র্যাকার, জ্ঞান ভান্ডার, ফলের পরিমাপ | নিরন্তর উন্নয়ন; পরিমাপ ও প্রতিবেদন | নথির পরিমাণের চেয়ে কার্যকর সফটওয়্যার | মাসিক |
| উপযোগী আইটেমের অংশ | একজন যোগ্য পর্যালোচক উপযোগী বিচার করা নমুনা আইটেমের অংশ | উপযোগী (শুদ্ধ, প্রাসঙ্গিক, পুনরাবৃত্তিহীন) বিচার করা নমুনা আইটেম / নমুনা নেওয়া আইটেম | শতাংশ | এলোমেলো নমুনা পর্যালোচনা | জ্ঞান ব্যবস্থাপনা; গুণমান আশ্বাস | বিষয়বস্তুর সম্পন্নের সংজ্ঞা | মাসিক |
| যাচাইয়ের বোঝা | প্রতি একক আউটপুটে তৈরি কাজ যাচাই ও সংশোধনে ব্যয় হওয়া মানুষের সময় | প্রবণতা হিসেবে ট্র্যাক করা পর্যালোচনা ও সংশোধনের ঘণ্টা / আউটপুটের একক | প্রতি এককে ঘণ্টা | সময়ের অনুমান, পর্যালোচনা টুলের তথ্য | সেবা আর্থিক ব্যবস্থাপনা; নিরন্তর উন্নয়ন | বাধা হিসেবে পর্যালোচনার সামর্থ্য | মাসিক |
| বিষয়বস্তুর পুনরাবৃত্তির হার | অন্য আইটেমের সঙ্গে পুনরাবৃত্ত বা সারবানভাবে মিলে যাওয়া জ্ঞান আইটেমের অংশ | পর্যালোচনায় বা মিলানোর মাধ্যমে পুনরাবৃত্ত বা মিলে যাওয়া চিহ্নিত আইটেম / জ্ঞান ভান্ডারের আইটেম | শতাংশ | জ্ঞান ভান্ডারের পর্যালোচনা, মিলানোর প্রতিবেদন | জ্ঞান ব্যবস্থাপনা | সত্যের একক উৎস | ত্রৈমাসিক |
| তৈরি জ্ঞানের পর্যালোচিত অংশ | প্রকাশের আগে একজন যোগ্য মানুষ পর্যালোচনা ও অনুমোদন করেছেন এমন এআই-তৈরি জ্ঞান আইটেমের অংশ | অনুমোদিত পর্যালোচনাসহ প্রকাশিত তৈরি আইটেম / প্রকাশিত তৈরি আইটেম | শতাংশ | জ্ঞান ভান্ডারের মেটাডেটা | জ্ঞান ব্যবস্থাপনা; পরিবর্তন সক্ষমকরণ | রিলিজের আগে পর্যালোচনা | মাসিক |
| সমাধানের বিপরীতে ব্যাকলগের প্রবেশ | এআই দ্বারা প্রভাবিত সারির জন্য সমাধান হওয়া কাজের বৃদ্ধির তুলনায় আসা কাজের বৃদ্ধি | (তৈরি আইটেমের পরিবর্তন) / (সমাধান হওয়া আইটেমের পরিবর্তন), এআই-পূর্ব ভিত্তিরেখার সঙ্গে তুলনা | অনুপাত | টিকিট ও ট্র্যাকারের ইতিহাস | ইনসিডেন্ট ব্যবস্থাপনা; সার্ভিস রিকোয়েস্ট ব্যবস্থাপনা | প্রবাহের ভারসাম্য | মাসিক |
| মেট্রিকের সরে যাওয়ার পতাকা | এআই চালুর পর যাদের সংজ্ঞা বা বণ্টন লক্ষণীয়ভাবে সরেছে, পর্যালোচিত ও টীকাযুক্ত, এমন মেট্রিকের সংখ্যা | পর্যালোচনায় পতাকা দেওয়া মেট্রিক / নিবন্ধনের মেট্রিক | সংখ্যা; শতাংশ | মেট্রিক নিবন্ধন পর্যালোচনা, বণ্টনের যাচাই | পরিমাপ ও প্রতিবেদন | পরিমাপের রিট্রোস্পেক্টিভ | ত্রৈমাসিক |
"উপযোগী" একটি লিখিত রুব্রিকে সংজ্ঞায়িত করুন: শুদ্ধ, প্রকৃত প্রয়োজনের জন্য প্রাসঙ্গিক, পুনরাবৃত্তিহীন এবং হালনাগাদ। যাচাইয়ের বোঝা মানুষের ব্যয় করা সময় গোনে, আবার প্রম্পট করার সময়সহ, এবং কেবল অপেক্ষার সময় বাদ দেয়। পর্যালোচিত অংশ একটি নিয়ন্ত্রণ: অপর্যালোচিত তৈরি জ্ঞান আলাদাভাবে ট্র্যাক করা হয় এবং স্পষ্টভাবে লেবেলযুক্ত রাখা হয়। মেট্রিকের সরে যাওয়ার পতাকা আলাপ, শাস্তি নয়: একটি পতাকার মানে একজন মানুষ সংজ্ঞা সমন্বয়, প্রবণতায় টীকা বা আবার ভিত্তিরেখা ধরা ঠিক করেছেন। সব পরিমাপ প্রক্রিয়া ও বিষয়বস্তু বর্ণনা করে, ব্যক্তিকে নয়।
সুপারিশ
পরিমাণকে উপযোগিতার সঙ্গে জোড় বাঁধুন
1. প্রতিটি পরিমাণের মেট্রিকে একটি উপযোগিতার যাচাই গড়ুন। আপনার ড্যাশবোর্ডের প্রতিটি পরিমাণ বা গতির পরিমাপের জন্য একজন মানুষের বিচার করা একটি উপযোগিতার পরিমাপের নাম দিন। তৈরি টিকিট সমাধানের গুণমানের সঙ্গে, লেখা নিবন্ধ নিবন্ধের ব্যবহার ও নির্ভুলতার সঙ্গে, মার্জ হওয়া পরিবর্তন ধরে রাখা ও পুনঃকাজের সঙ্গে জোড় বাঁধুন (বিষয় 10.2, এআই-সহায়তাপ্রাপ্ত কাজের পরিমাপ দেখুন)। সেগুলো একসঙ্গে দেখান, এবং ভিন্ন হলে আলোচনা করুন।
2. নিয়মিত নমুনা নিন ও বিচার করুন। প্রতি মাসে এআই যে ধারা ছোঁয় তা থেকে আইটেমের একটি এলোমেলো নমুনা টানুন এবং একজন যোগ্য মানুষকে একটি লিখিত রুব্রিকের বিপরীতে বিচার করতে বলুন। উপযোগী অংশ এবং আইটেম ব্যর্থ হওয়ার কারণ লিপিবদ্ধ করুন। পর্যালোচক ঘোরান এবং তাঁদের উৎপাদনকারীদের থেকে স্বাধীন রাখুন। ধীর তরলীকরণের বিরুদ্ধে নমুনা প্রধান প্রতিরক্ষা।
3. আউটপুটের আগে ফল প্রতিবেদন করুন। নেতৃত্বের প্রতিবেদনে ফল দিয়ে শুরু করুন: সমাধান হওয়া সমস্যা, সন্তুষ্ট ব্যবহারকারী, এড়ানো ত্রুটি। আউটপুটের গণনা প্রেক্ষাপট হিসেবে পরে রাখুন। আউটপুটের গণনা সরিয়ে নিলেও প্রতিবেদন মূল্যবান থাকলে তা ভালোভাবে দিকনির্দেশিত।
যাচাই ও কোলাহল নিয়ন্ত্রণ করুন
4. যাচাইয়ের বোঝা মাপুন। তৈরি কাজ যাচাই ও সংশোধনে ব্যয় হওয়া সময় অনুমান করুন, এবং প্রতি একক আউটপুটে প্রবণতা হিসেবে ট্র্যাক করুন। আউটপুট বাড়ার সঙ্গে তা বাড়লে নিট লাভ তৈরির সংখ্যার ইঙ্গিতের চেয়ে ছোট, এবং পর্যালোচকেরা অতিভারের পথে থাকতে পারেন। প্রতি কাজের খরচে বোঝা অন্তর্ভুক্ত করুন (বিষয় 10.1, সেবা ব্যবস্থাপনার পরিমাপে এআই দেখুন)।
5. ব্যবস্থায় যা ঢোকে সীমিত করুন। কোন তৈরি বিষয়বস্তু স্বয়ংক্রিয়ভাবে তৈরি ও প্রকাশ করা যাবে এবং কোনটিতে পর্যালোচনা লাগবে ঠিক করুন। একটি পর্যালোচনায় তৈরি পরিবর্তনের আকার ও সংখ্যায় সীমা ঠিক করুন। পরিমাণকে না বলা সহজ করুন। স্পষ্টতর আইটেমসহ ছোট সারি ব্যবহারকারীদের ভালো সেবা দেয়।
6. জ্ঞান ভান্ডারকে পণ্য হিসেবে পরিচালনা করুন। তৈরি বিষয়বস্তুতে লেবেল দিন, প্রকাশের আগে পর্যালোচনা বাধ্যতামূলক করুন, পুনরাবৃত্তি ও পুরোনো আইটেম অবসর দিন, এবং পুনরাবৃত্তি ও ব্যবহার ট্র্যাক করুন। জ্ঞান ভান্ডার ব্যবহারকারীরা তাকে কতটা বিশ্বাস করেন সেই অনুপাতে উপযোগী। যে নিবন্ধ কেউ ব্যবহার করে না এবং কেউ গ্যারান্টি দিতে পারে না তা সরান (বিষয় 3.6, জ্ঞান ব্যবস্থাপনার মেট্রিক দেখুন)।
7. সতর্কবার্তা ও টিকিটের ধারা পরিষ্কার রাখুন। এআই সতর্কবার্তা বা সারসংক্ষেপ থেকে টিকিট বানালে উপযোগী অংশ ও পুনরাবৃত্তি মাপুন। জোরালোভাবে সুর বাঁধুন। কমতে থাকা সংকেত-কোলাহল অনুপাতকে নিজেই একটি ইনসিডেন্ট ধরুন, কারণ প্রকৃত বিপদ এলে তা সাড়াকে ক্ষতি করে।
চক্র ভাঙুন ও ভিত্তিরেখা দেখুন
8. তৈরি বিষয়বস্তুকে অযাচাইয়ে নিজেকে খাওয়ানো থেকে আটকান। একটি সহকারী জ্ঞান ভান্ডার, টিকিটের ইতিহাস বা অতীত প্রতিবেদন থেকে নিলে সেই উৎসের তৈরি উপাদান পর্যালোচিত, বা লেবেল ও সেই অনুযায়ী ওজন করা নিশ্চিত করুন। শৃঙ্খলের নমুনা নিন: একটি উত্তর বেছে তার উৎসের মধ্য দিয়ে ফিরে অনুসরণ করুন কোথা থেকে এসেছে দেখতে। অযাচাই চক্র ভুল বাড়ায়।
9. তথ্য সরলে আবার ভিত্তিরেখা ধরুন। এআই চালুর পর প্রবণতার চার্টে টীকা দিন, এবং তথ্যের প্রকৃতি বদলালে নতুন ভিত্তিরেখা শুরু করুন। শুধু মোট নয়, বণ্টন যাচাই করুন: টিকিটের দৈর্ঘ্য, শ্রেণির মিশ্রণ এবং তৈরির সময় সবই সরতে পারে। মেট্রিকের সরে যাওয়ার পতাকা এই আলাপ উসকে দেয় (বিষয় 1.6, সেবা মেট্রিকের জন্য পরিসংখ্যান-সাক্ষরতা দেখুন)।
10. প্রত্যাবর্তন খুঁজুন। একটি কাজ সস্তা হলে জিজ্ঞাসা করুন তার চাহিদা বাড়বে কি না। বাঁচানো সময় কী কাজে লাগবে আগে ঠিক করুন, যাতে তা কম মূল্যের আরও আউটপুটে শোষিত না হয়। যে দল একই প্রচেষ্টায় দ্বিগুণ প্রতিবেদন বানায় সে কম উপযোগী কাজ করতে পারে।
মানুষের মনোযোগ চক্রে রাখুন
11. পর্যালোচক ও ব্যবহারকারীদের মনোযোগ রক্ষা করুন। পর্যালোচনার সামর্থ্য ও মনোযোগ দুর্লভ। মানুষকে যা পড়তে হয় তার পরিমাণ কমান, পর্যালোচকদের বাস্তবসম্মত বোঝা দিন এবং কী কঠিনতর হচ্ছে তাঁদের জিজ্ঞাসা করুন। স্থির গতিতে পড়া ও বিচার করার গতি অন্তর্ভুক্ত (বিষয় 9.2, সন্তুষ্টি ও কল্যাণের মেট্রিক দেখুন)।
12. ব্যবহারকারী ও অংশীজনদের জিজ্ঞাসা করুন সংকেত পরিষ্কার কি না। আউটপুট যাঁরা ব্যবহার করেন তাঁদের নিরন্তর সম্পৃক্ততা সেরা পরীক্ষা। জিজ্ঞাসা করুন জ্ঞান ভান্ডার ব্যবহার সহজতর না কঠিনতর হয়েছে, প্রতিবেদন তাঁদের যা দরকার তা বলে কি না, সারি পরিষ্কারতর মনে হয় কি না। তাঁদের উত্তর ও মন্তব্য সংখ্যার পাশে পড়া উচিত।
কারসাজির উপায় ও রক্ষাবেষ্টনী
| মেট্রিক | যেভাবে কারসাজি হয় | জোড়া রক্ষাবেষ্টনী মেট্রিক বা চর্চা |
|---|---|---|
| আউটপুট-ফল অনুপাত | পরিমাণের সঙ্গে বাড়ে এমন ফলের পরিমাপ বাছা; সময়কাল বদলানো | নিবন্ধনে ফল স্থির; সন্তুষ্টি ও আবার খোলার হারের সঙ্গে তুলনা |
| উপযোগী আইটেমের অংশ | সহজ আইটেমের নমুনা; শিথিল রুব্রিক; উৎপাদনকারীর প্রভাবিত পর্যালোচক | এলোমেলো নমুনা; লিখিত রুব্রিক; স্বাধীন, ঘূর্ণায়মান পর্যালোচক |
| যাচাইয়ের বোঝা | পর্যালোচনার সময় লগ না করা; যাচাই নিম্নধারার দলে সরানো | নিম্নধারার পুনঃকাজ অন্তর্ভুক্ত; পর্যালোচকদের বোঝা সম্পর্কে জিজ্ঞাসা |
| বিষয়বস্তুর পুনরাবৃত্তির হার | পুনরাবৃত্তি ফসকানো সংকীর্ণ মিলানোর নিয়ম; স্বতন্ত্র আইটেম মিশিয়ে ফেলা | পুনরাবৃত্তির হাতে নমুনা; মিশ্রণের নিয়ম লগ |
| তৈরি জ্ঞানের পর্যালোচিত অংশ | না পড়েই পর্যালোচনা সম্পূর্ণ চিহ্নিত করা; একসঙ্গে বাল্কে পর্যালোচনা | সারবস্তুর জন্য পর্যালোচনার নমুনা; প্রতি পর্যালোচনায় সময়; প্রকাশিত আইটেমে ভুলের হার |
| সমাধানের বিপরীতে ব্যাকলগের প্রবেশ | আইটেম স্বয়ংক্রিয়ভাবে বন্ধ করা; আইটেম ভাগ করা | সমাধানের গুণমান; আবার খোলার হার; বন্ধ আইটেমের নমুনা যাচাই |
| মেট্রিকের সরে যাওয়ার পতাকা | কাজ এড়াতে পতাকা না দেওয়া; সবকিছুতে পতাকা | প্রতি ত্রৈমাসিকে সব মেট্রিক পর্যালোচনা; প্রতিটি পতাকার জন্য একটি সিদ্ধান্ত বাধ্যতামূলক |
একটি সুস্থ পাঠ হলো পরিমাণ বাড়ার সঙ্গে স্থির বা বাড়তে থাকা উপযোগী আইটেমের অংশ, জানা ও সামর্থ্যের মধ্যে যাচাইয়ের বোঝা, কম পুনরাবৃত্তি ও পর্যালোচিত তৈরি বিষয়বস্তুসহ জ্ঞান ভান্ডার, পরিষ্কার সংকেতের সারি, এবং ফল দিয়ে শুরু করা নেতৃত্বের দৃষ্টি।
ভারসাম্য: সুবিধা ও অসুবিধা
| পদ্ধতি | শক্তি | দুর্বলতা |
|---|---|---|
| আউটপুট গোনা | সহজ, পরিচিত | ফুলে ওঠে; পরিমাণকে পুরস্কৃত করে |
| ফল মাপা | মূল্য প্রতিফলিত করে | ধীর; আরোপ করা কঠিনতর |
| নমুনা নিয়ে বিচার | তরলীকরণ শনাক্ত করে | দক্ষ পর্যালোচক লাগে; শ্রম |
| স্বয়ংক্রিয় গুণমান স্কোরিং | পরিসরে মাপে | আরেকটি মডেলের মত; একই অন্ধ দাগ থাকতে পারে |
| তৈরি সবকিছু পর্যালোচনা | নিরাপদ | সুবিধা সরায়; পর্যালোচকেরা অতিভারিত |
| একটি নমুনা পর্যালোচনা | ব্যবহারিক | কিছু খারাপ আইটেম পার হয় |
| খোলা তৈরির অনুমতি | দ্রুত, বিস্তৃত | কোলাহল; আস্থা ক্ষয় |
| তৈরি অনুমোদিত ব্যবহারে সীমিত | পরিষ্কারতর সংকেত | ধীর গ্রহণ; হারানো সুবিধা |
ব্যবহারিক উত্তর হলো ফল মাপা, মানুষ দিয়ে নমুনা নিয়ে উপযোগিতা বিচার করা, পর্যালোচনা ছাড়া ভাগ করা ভান্ডারে যা ঢোকে সীমিত করা, এবং ভিত্তিরেখা আবার দেখা। স্বয়ংক্রিয় স্কোরিং সহায়ক হিসেবে ব্যবহার করুন, বিচারক হিসেবে নয়।
দলের সঙ্গে আলোচনার প্রশ্ন
1. আমরা এআই ব্যবহার শুরুর পর আমাদের কোন সংখ্যা বেড়েছে, এবং যাঁদের সেবা করি তাঁদের জন্য তা কী করেছে? সংখ্যাগুলো তালিকা করুন। প্রতিটির জন্য যে ফল প্রতিফলনের উদ্দেশ্য ছিল তা দেখুন। সঞ্চালক কোথায় ফল নড়েনি লক্ষ করুন। সেসব সংখ্যা একটি উপযোগিতার যাচাইয়ের সঙ্গে জোড় বাঁধুন।
2. গত মাসে আমরা যা প্রকাশ বা তৈরি করেছি তার কতটা লাইন ধরে ধরে রক্ষা করতে আমরা খুশি হতাম? একটি এলোমেলো নমুনা নিন এবং একসঙ্গে পড়ুন। কী উপযোগী, পাতলা, ভুল বা পুনরাবৃত্ত চিহ্নিত করুন। হার ও কারণ আলোচনা করুন। ভাগ করা ভান্ডারে কী যাবে তার একটি মানদণ্ডে একমত হোন।
3. যাচাই কোথায় আমাদের বাধা হয়ে উঠছে? পর্যালোচকদের জিজ্ঞাসা করুন। পর্যালোচনার সারি, পর্যালোচনার গভীরতা এবং তাঁরা এখন যে প্রচেষ্টা বহন করেন তা দেখুন। প্রতি পর্যালোচনায় তৈরি আইটেমের আকার বা সংখ্যার সীমা এবং বোঝা মাপার একটি উপায়ে একমত হোন।
4. এখানে কোন তৈরি বিষয়বস্তু অন্য তৈরি বিষয়বস্তুকে খাওয়াচ্ছে? একটি সাধারণ উত্তর তার উৎস পর্যন্ত অনুসরণ করুন। শৃঙ্খল কোথায় শুরু হয়েছিল? কোথায় একজন মানুষ শৃঙ্খল যাচাই করবেন বা বিষয়বস্তুতে লেবেল দেবেন আলোচনা করুন।
5. এক বছর আগের তুলনায় আমাদের জ্ঞান ভান্ডার সম্পর্কে একজন ব্যবহারকারী এখন কী বলবেন? সাম্প্রতিক মন্তব্য পড়ুন এবং ব্যবহারের তথ্য দেখুন। বিশ্বাসযোগ্য উত্তর খোঁজা সহজতর না কঠিনতর হয়েছে জিজ্ঞাসা করুন। একটি পরিষ্কার-করা এবং নতুন বিষয়বস্তুর একটি নিয়মে একমত হোন।
6. আমাদের কোন প্রবণতা নতুন ভিত্তিরেখায় আবার শুরু করা উচিত? পরিমাণ বা আইটেম তৈরির উপায়ের ওপর নির্ভর করা মেট্রিক তালিকা করুন। এআই আসার পর আকৃতির পরিবর্তন খুঁজুন। প্রবণতায় টীকা দিন, এবং কোনগুলোর নতুন ভিত্তিরেখা দরকার ঠিক করুন।
চারটি দৃষ্টিভঙ্গি
পণ্য ও ডেলিভারি দল
ডেলিভারি দল বেশিরভাগ পরিমাণ তৈরি করে এবং রক্ষণাবেক্ষণ বহন করে। তাদের ছোট, স্পষ্টতর পরিবর্তন পছন্দ করা, তৈরি উপাদান পর্যালোচিত ও লেবেলযুক্ত রাখা এবং ধরে রাখা ও পুনঃকাজ দেখা উচিত। তৈরি পরিমাণভিত্তিক মেট্রিক তাদের প্রত্যাখ্যান করা এবং ফলের পরিমাপ চাওয়া উচিত।
সেবা ও পরিচালন দল
পরিচালন দল সেই সারি, সতর্কবার্তা ও জ্ঞান ভান্ডারে বাস করে যা তরলীকরণ ক্ষতি করে। সংকেত শক্ত রাখতে তাদের এআই-তৈরি টিকিট ও সতর্কবার্তা সুর বাঁধা, প্রকাশের আগে তৈরি জ্ঞান পর্যালোচনা করা, এবং ধারা কোলাহল হয়ে উঠলে প্রতিবেদন করা উচিত। উপযোগিতা বিচারের জন্য তারাই সেরা অবস্থানে।
নেতৃত্ব ও গভর্ন্যান্স
নেতারা সেই ড্যাশবোর্ড পান যা মুদ্রাস্ফীতি বিকৃত করে। তাঁদের আগে ফল চাওয়া, পরিমাণের পাশে উপযোগিতার যাচাই বাধ্যতামূলক করা, পর্যালোচনার সামর্থ্যে অর্থায়ন করা এবং মেনে নেওয়া উচিত যে কিছু পরিমাপে আবার ভিত্তিরেখা ধরা দরকার। গভর্ন্যান্সের উচিত ভাগ করা ভান্ডারের তৈরি বিষয়বস্তু পর্যালোচিত ও লেবেলযুক্ত কি না যাচাই করা।
গ্রাহক ও ব্যবহারকারী
উত্তর ভুল হলে, নিবন্ধ পরস্পর বিরোধী হলে এবং উত্তর দীর্ঘ ও ফাঁপা হলে ব্যবহারকারীরা তরলীকরণের খরচ বহন করেন। তাঁরা চান সংক্ষিপ্ত, শুদ্ধ, প্রাসঙ্গিক সাহায্য। তাঁরা যা পান তার গুণমান নিয়ে তাঁদের প্রতিক্রিয়া সংকেত টিকেছে কি না তার সরাসরি পরীক্ষা।
বাস্তবে: সেবা ব্যবস্থাপনার একটি উদাহরণ
একটি বৈশ্বিক ওষুধ কোম্জলর আইটি গ্রুপ জ্ঞান নিবন্ধ খসড়া, টিকিটের সারসংক্ষেপ এবং সাপ্তাহিক অবস্থার প্রতিবেদন তৈরির জন্য একটি এআই সহকারী চালু করে। এক ত্রৈমাসিকের মধ্যে ড্যাশবোর্ড চমৎকার দেখায়। নিচের সংখ্যা দৃষ্টান্তমূলক।
তৈরি জ্ঞান নিবন্ধ প্রতি মাসে ১৪০ থেকে ৬১০-এ ওঠে। টিকিটে বিস্তারিত এআই-লেখা সারসংক্ষেপ থাকে। সাপ্তাহিক প্রতিবেদন বারো পাতায় দাঁড়ায়। সেবার গুণমান ব্যবস্থাপক লক্ষ করেন সেলফ-সার্ভিসের সন্তুষ্টি কমেছে এবং সার্ভিস ডেস্ক আরও "নিবন্ধটি সাহায্য করেনি" ধরনের যোগাযোগ জানাচ্ছে। তিনি দুজন অভিজ্ঞ এজেন্টসহ নতুন নিবন্ধের ১০০টির নমুনা নেন। কেবল ৫৪টি উপযোগী বিচার হয়: ২৩টি বিদ্যমান নিবন্ধের পুনরাবৃত্তি, ১৫টিতে পুরোনো বা ভুল ধাপ আছে, এবং ৮টি কাজে লাগানোর মতো খুব অস্পষ্ট। নতুন নিবন্ধের ৭১ শতাংশ মানুষের পর্যালোচনা ছাড়া প্রকাশিত হয়েছিল। জ্ঞান ভান্ডারে এখন প্রায় ৩,২০০টি নিবন্ধ, বিষয়বস্তুর পুনরাবৃত্তির হার তাঁর অনুমানে এক বছর আগের ৯ শতাংশের বিপরীতে ২৮ শতাংশ। এজেন্টরা জানান বিশ্বাসযোগ্য উত্তর খুঁজতে এখন বেশি সময় লাগে। সার্ভিস ডেস্কের নিবন্ধ সম্পাদকদের যাচাইয়ের বোঝা ১২ ঘণ্টা থেকে বেড়ে সপ্তাহে প্রায় ৪০ ঘণ্টা হয়েছে। টিকিটের এআই-লেখা সারসংক্ষেপ পরবর্তী এআই-তৈরি উত্তরকে এমন লেখার ওপর নির্ভর করায় যা কেউ লেখেননি, এবং পাঁচটি উত্তরের উৎসের মধ্য দিয়ে একটি অনুসরণে দুটি এমন একটি সারসংক্ষেপের ওপর নির্ভর করেছিল যা সমস্যাটি ভুল বলেছিল। সাপ্তাহিক অবস্থার প্রতিবেদন পড়লে আগেরটিতে ছিল না এমন সামান্যই বলে, এবং অংশীজনরা দ্বিতীয় পাতার পরে পড়া ছেড়ে দিয়েছেন।
তিনি চারটি পরিবর্তনের প্রস্তাব করেন, যা সেবা নেতৃত্ব দল ও জ্ঞানের মালিকেরা গ্রহণ করেন। তৈরি নিবন্ধ প্রকাশের আগে একজন নামধারী সম্পাদকের পর্যালোচনা লাগে, এবং অনুমোদনের আগে লেবেলযুক্ত থাকে। প্রতি বিষয়-গুচ্ছে একটি তৈরি নিবন্ধের সীমা পুনরাবৃত্তি ঠেকায়, এবং একটি ঝাড়ু অপ্রয়োজনীয় আইটেম মিশায় বা অবসর দেয়। প্রতিবেদনের টেমপ্লেট ফল দিয়ে শুরু করা দুই পাতায় ছাঁটা হয়, এবং এআই কেবল সেই অংশগুলো খসড়া করে যা একজন মানুষ পরে সম্পাদনা করেন। টিকিটের সারসংক্ষেপ তৈরি হিসেবে চিহ্নিত হয়, এবং প্রতি মাসে একটি নমুনা যাচাই হয়। ড্যাশবোর্ড নিবন্ধের গণনার পাশে উপযোগী আইটেমের অংশ, পুনরাবৃত্তির হার, পর্যালোচিত অংশ এবং যাচাইয়ের বোঝা জানায়।
দুই ত্রৈমাসিক পরে প্রতি মাসে তৈরি নিবন্ধ ১৯০-এ নামে, উপযোগী আইটেমের অংশ ৯১ শতাংশে ওঠে, পুনরাবৃত্তির হার ১১ শতাংশে নামে, পর্যালোচিত অংশ ১০০ শতাংশ, এবং যাচাইয়ের বোঝা সপ্তাহে প্রায় ১৬ ঘণ্টায় স্থির হয়। সেলফ-সার্ভিসের সন্তুষ্টি ফেরে এবং "নিবন্ধটি সাহায্য করেনি" যোগাযোগ কমে। অংশীজনরা দুই পাতার প্রতিবেদন পড়েন। একজন পরিচালক এআই কর্মসূচির মূল্য দেখাতে প্রতি মাসে ১,০০০ নিবন্ধের লক্ষ্য চান। সেবার গুণমান ব্যবস্থাপক ব্যাখ্যা করেন গণনাই ছিল সমস্যা, এবং উপযোগিতা ও ব্যবহার ট্র্যাক করার প্রস্তাব করেন। সিদ্ধান্ত লিপিবদ্ধ হয়।
এজাইল, এআই, অটোমেশন ও বিশ্লেষণ
এজাইল
প্রতিটি গণনা এখনও উপযোগিতা প্রতিফলিত করে কি না তার নিয়মিত পর্যালোচনা দলকে মুদ্রাস্ফীতি আগে লক্ষ করতে সাহায্য করে, এবং অংশীজনরা বলতে পারেন তাঁরা আসলে কী ব্যবহার করেন। সতর্কতা হলো, মুদ্রাস্ফীতি লক্ষ করার পর একটি গণনা কড়া করলে চক্র আবার শুরু হয়।
এআই
এআই পরিমাণ ও গতিকে সস্তা করে, তাই পরিমাণ বা গতির প্রতিটি গণনা ফুলে ওঠে। প্রতিটিকে একজন মানুষ উপযোগী বিচার করা আইটেমের অংশ ও যাচাইয়ের বোঝার সঙ্গে জোড় বাঁধুন, এবং পুনরাবৃত্ত বিষয়বস্তু যাচাই করুন। সতর্কতা হলো, এআই আউটপুট যাচাইয়ে এআই ব্যবহার একই অন্ধ দাগ ভাগ করতে পারে, তাই মানুষের নমুনা রাখুন।
অটোমেশন
পুনরাবৃত্তি, প্রায়-পুনরাবৃত্তি ও পুরোনো বিষয়বস্তু শনাক্তকরণ স্বয়ংক্রিয় করুন, এবং ভুল ইতিবাচকে শনাক্তকরণ মাপুন। সতর্কতা হলো, স্বয়ংক্রিয় পরিষ্কার-করা বিরল অথচ গুরুত্বপূর্ণ আইটেম সরিয়ে দিতে পারে।
বিশ্লেষণ
নমুনার আকারসহ আউটপুট-ফল অনুপাত ও উপযোগী আইটেমের অংশ প্রতিবেদন করুন। এটি যে সিদ্ধান্তে তথ্য জোগায় তা হলো কোন গণনা প্রতিবেদন বন্ধ করবেন। সতর্কতা হলো, অনুপাত ফল কীভাবে সংজ্ঞায়িত তার ওপর নির্ভর করে, তাই তা বলুন।
খাতভিত্তিক দৃষ্টিকোণ
স্টার্টআপ। তৈরি সস্তা আর পর্যালোচনার সময় দুর্লভ। নথি ও টিকিট সংক্ষিপ্ত রাখুন, গ্রাহকেরা যা পড়বেন তা পর্যালোচনা করুন, এবং স্বচ্ছন্দে মুছুন। সন্দেহজনক নিবন্ধের বড় সংগ্রহের চেয়ে শুদ্ধ নিবন্ধের ছোট সংগ্রহ ভালো।
ছোট ব্যবসা। পর্যালোচনার সামর্থ্য সামান্য, তাই টুল যা তৈরি করে তা সীমিত করুন। কয়েকটি যাচাই করা নির্দেশিকা ও টেমপ্লেট পছন্দ করুন। যাচাই না করে সর্বজনীন পাতায় তৈরি উপাদান প্রকাশে সতর্ক থাকুন।
এন্টারপ্রাইজ। আকার কোলাহল বাড়ায়। মালিক, লেবেল ও পর্যালোচনার নিয়মসহ বিষয়বস্তুর গভর্ন্যান্স গড়ুন, জ্ঞান ভান্ডার জুড়ে উপযোগিতা মাপুন এবং পর্যায়ক্রমে পরিষ্কার চালান। দল জুড়ে রুব্রিক ভাগ করুন এবং দল নয়, প্রবণতা তুলনা করুন।
সরকার ও জনসেবা খাত। সরকারি বিষয়বস্তু শুদ্ধ ও অভিগম্য হতে হবে, এবং ভুল ক্ষতি করতে পারে। তৈরি সরকারি তথ্য পর্যালোচনা দাবি করুন, কীভাবে তৈরি হয়েছে তার রেকর্ড রাখুন, এবং সহজ ভাষা ও অভিগম্যতার মান প্রয়োগ করুন। ধারণ ও রেকর্ডের নিয়ম তৈরি উপাদানে প্রযোজ্য হতে পারে (বিষয় 8.5, নিয়ন্ত্রক ও সরকারি প্রতিবেদন দেখুন)।
ব্যবসায়িক যুক্তি: প্রেরণা, ROI ও TCO
মুদ্রাস্ফীতির বিরুদ্ধে সুরক্ষার খরচ মাঝারি: নমুনার জন্য পর্যালোচনার সময়, তৈরি বিষয়বস্তুর সম্পাদকীয় শ্রম, পুনরাবৃত্তি শনাক্তের টুলিং এবং প্রবণতায় আবার ভিত্তিরেখা ধরার শ্রম। না করার খরচ বড় কিন্তু ছড়ানো: যে ব্যবহারকারীরা সেলফ-সার্ভিসে আস্থা হারান, পর্যালোচকেরা ক্লান্ত হয়ে পড়েন, ফোলানো সংখ্যার ওপর নেওয়া সিদ্ধান্ত, এবং পরিষ্কারের প্রকল্প।
নিজের তথ্য থেকে যুক্তি গড়ুন: সময়ের সঙ্গে উপযোগী আইটেমের অংশ ও যাচাইয়ের বোঝা, অসহায়ক বিষয়বস্তুর কারণে যোগাযোগের পরিমাণ, এবং জ্ঞান ভান্ডার পরিষ্কারের খরচ। তৈরি বিষয়বস্তুর গুণমান নিয়ে প্রকাশিত সংখ্যা ব্যবহার এড়ান, যা টুল, কাজ ও পদ্ধতিতে ব্যাপকভাবে বদলায়। ভুল তথ্য প্রকাশ করে সুনামের ক্ষতি এড়ানোর খরচ অন্তর্ভুক্ত করুন (বিষয় 7.7, বিনিয়োগে প্রতিদান ও ব্যবসায়িক যুক্তি দেখুন)।
অ্যান্টি-প্যাটার্ন ও ফাঁদ
- পরিমাণ উদযাপন। এটি কোলাহলকে পুরস্কৃত করে। ফল ও উপযোগিতা উদযাপন করুন।
- প্রথম খসড়ার গতি উৎপাদনশীলতার গল্প হিসেবে। সাশ্রয় যাচাইয়ে উধাও হতে পারে। যাচাই করা ফল পর্যন্ত সময় মাপুন।
- পর্যালোচনা ছাড়া তৈরি বিষয়বস্তু প্রকাশ। আস্থা নীরবে ক্ষয় হয়। পর্যালোচনা ও লেবেল দিন।
- তৈরি বিষয়বস্তুকে তৈরির খাদ্য হতে দেওয়া। ভুল জমে। শৃঙ্খল যাচাই করুন।
- অপরিবর্তিত ভিত্তিরেখা। প্রযুক্তির বদলের পর প্রবণতা বিভ্রান্ত করে। টীকা দিন ও আবার ভিত্তিরেখা ধরুন।
- পর্যালোচকদের অতিভারিত করা। পর্যালোচনা রাবার স্ট্যাম্প হয়ে ওঠে। পরিমাণ সীমিত করুন এবং বোঝা মাপুন।
- সবকিছুতে এআই বিচারক ব্যবহার। সে উৎপাদনকারীর অন্ধ দাগ ভাগ করতে পারে। মানুষকে চক্রে রাখুন।
- প্রত্যাবর্তন উপেক্ষা। সস্তা কাজ আরও কাজ টানে। বাঁচানো সময় কীসের জন্য ঠিক করুন।
পরিপক্বতার মডেল
| মাত্রা | 1 সূচনা | 2 বিকাশ | 3 মানসম্মত | 4 পরিচালিত | 5 সুসমন্বিত |
|---|---|---|---|---|---|
| জোড়া বাঁধা ও নমুনা | পরিমাণ একা প্রতিবেদিত | গুণমান নিয়ে অনানুষ্ঠানিক ধারণা | প্রতিটি পরিমাণের মেট্রিক একটি নমুনা-নেওয়া উপযোগিতার যাচাইয়ের সঙ্গে জোড়া | উপযোগিতা, বোঝা ও পুনরাবৃত্তি পরিচালিত, লক্ষ্য পরিমাণ নয়, পর্যালোচনার জন্য | সংকেতের গুণমানের সংগঠন-জোড়া দৃষ্টি; অংশীদারদের সঙ্গে রুব্রিক ভাগ |
| বিষয়বস্তু ও চক্র | তৈরি বিষয়বস্তু মেশানো | কিছু লেবেল | তৈরি বিষয়বস্তু লেবেলযুক্ত ও প্রকাশের আগে পর্যালোচিত; শৃঙ্খলের নমুনা | চক্র নজরে; ভান্ডার সুবিন্যস্ত; পুনরাবৃত্তি নির্ধারিত সময়ে অবসর | টুল ও সরবরাহকারী জুড়ে প্রান্ত থেকে প্রান্তে উৎস ট্র্যাক |
| ভিত্তিরেখা ও মনোযোগ | বদল জুড়ে প্রবণতা পড়া | কিছু চার্টে টীকা | তথ্য বদলালে ভিত্তিরেখা পুনঃস্থাপিত; প্রত্যাবর্তন বিবেচিত | সরে যাওয়ার পতাকা ত্রৈমাসিকে পর্যালোচিত; পর্যালোচকদের বোঝা পরিচালিত | অংশীজনদের সঙ্গে প্রযুক্তির পরিবর্তনের সঙ্গে মেট্রিকের নকশা নিরন্তর মানিয়ে নেয় |
চেকলিস্ট
- প্রতিটি পরিমাণ বা গতির মেট্রিকের একজন মানুষের বিচার করা উপযোগিতার সঙ্গী আছে।
- এআই-ছোঁয়া আইটেমের একটি এলোমেলো নমুনা মাসিক একটি লিখিত রুব্রিকের বিপরীতে পর্যালোচিত হয়।
- যাচাইয়ের বোঝা অনুমান করা এবং প্রবণতা হিসেবে ট্র্যাক করা হয়।
- তৈরি জ্ঞান প্রকাশের আগে লেবেলযুক্ত ও পর্যালোচিত।
- জ্ঞান ভান্ডারে পুনরাবৃত্তি মাপা ও কমানো হয়।
- সতর্কবার্তা ও টিকিটের ধারা উপযোগী অংশ ও পুনরাবৃত্তির জন্য নজরে থাকে।
- তৈরি আউটপুট থেকে তাদের উৎস পর্যন্ত শৃঙ্খলের নমুনা নেওয়া হয়।
- এআই চালুর জুড়ে প্রবণতায় টীকা বা নতুন ভিত্তিরেখা।
- নেতৃত্বের প্রতিবেদন ফল দিয়ে শুরু হয়।
- ব্যবহারকারী ও অংশীজনদের জিজ্ঞাসা করা হয় সংকেত পরিষ্কারতর না কোলাহলপূর্ণ।
এআই প্রম্পট
একটি উপযোগিতার রুব্রিক তৈরি করুন।
[প্রতিষ্ঠানের ধরন]-এ একটি [জ্ঞান নিবন্ধ, টিকিটের সারসংক্ষেপ, অবস্থার প্রতিবেদন] উপযোগী কি না বিচারের জন্য একটি
সংক্ষিপ্ত রুব্রিক (ছয়টির বেশি মানদণ্ড নয়) খসড়া করুন। শুদ্ধতা, প্রকৃত প্রয়োজনের প্রাসঙ্গিকতা, পুনরাবৃত্তি,
হালনাগাদ থাকা ও স্পষ্টতা অন্তর্ভুক্ত করুন, তিন স্তরের রেটিং এবং প্রতি স্তরের উদাহরণসহ। পরিসংখ্যান উদ্ভাবন করবেন
না। আপনার অনুমান এবং পর্যালোচকদের সামঞ্জস্যপূর্ণ রাখার উপায় তালিকা করুন।
সংকেতের পতন বিশ্লেষণ করুন।
[কাজ]-এর জন্য এআই চালুর পর এই সংখ্যাগুলো বদলেছে: [পরিমাণ, সমাধান, সন্তুষ্টি, আবার খোলার হার, পর্যালোচকের ঘণ্টা
পেস্ট করুন]। ধরন মুদ্রাস্ফীতি বা তরলীকরণ সম্পর্কে কী ইঙ্গিত দেয়, কোন পরিবর্তন সহজতর তৈরির কারণে হতে পারে,
পরবর্তী কী নমুনা নেবেন, এবং কোন মেট্রিকে নতুন ভিত্তিরেখা লাগতে পারে বর্ণনা করুন। তথ্য সমর্থন করে না এমন কারণ ধরে
নেবেন না। আপনার অনুমান তালিকা করুন।
জ্ঞান ভান্ডার পরিষ্কারের পরিকল্পনা করুন।
আমাদের জ্ঞান ভান্ডারে [সংখ্যা]টি নিবন্ধ আছে, যার [সংখ্যা]টি গত [সময়কাল]-এ তৈরি। একটি পরিষ্কারের পরিকল্পনা প্রস্তাব
করুন: পুনরাবৃত্তি ও পুরোনো আইটেম কীভাবে শনাক্ত করবেন, ব্যবহার অনুযায়ী কীভাবে অগ্রাধিকার দেবেন, তৈরি নিবন্ধ কীভাবে
পর্যালোচনা করবেন, পুনরাবৃত্তি ঠেকানোর নিয়ম এবং ট্র্যাক করার পরিমাপ। নির্দিষ্ট টুল ধরে নেবেন না। আপনার অনুমান ও
ঝুঁকি তালিকা করুন।
তৈরি বিষয়বস্তুর একটি শৃঙ্খল অনুসরণ করুন।
এখানে একটি এআই-তৈরি উত্তর এবং তার উৎস: [পেস্ট করুন]। প্রতিটি দাবি তার উৎস পর্যন্ত অনুসরণ করুন এবং চিহ্নিত
করুন উৎস মানুষের লেখা, পর্যালোচিত তৈরি বিষয়বস্তু, নাকি অপর্যালোচিত তৈরি বিষয়বস্তু। কোথায় ভুল ঢুকতে পারত
শনাক্ত করুন এবং একটি যাচাই প্রস্তাব করুন। পাঠ্যের বাইরে তথ্য ধরে নেবেন না। আপনার অনুমান তালিকা করুন।
এআই স্কিল
- Service Management Metrics skill: একটি পরিমাণ বা গতির মেট্রিকের উপযোগিতার সঙ্গী খুঁজে পেতে ব্যবহার করুন।
- Service Management Metrics maintainer skill: এআই দ্বারা প্রভাবিত একটি মেট্রিক পরিমাণকে নমুনা-নেওয়া উপযোগিতার সঙ্গে জোড় বাঁধে এবং তার কারসাজির উপায় ও রক্ষাবেষ্টনী বহন করে কি না যাচাই করতে ব্যবহার করুন।
মূল শিক্ষা
- এআই আউটপুট সস্তা করলে পরিমাণ ও গতির মেট্রিক ফুলে ওঠে এবং উপযোগী অংশ কমতে পারে।
- প্রতিটি পরিমাণ বা গতির পরিমাপকে নমুনা-নেওয়া, মানুষের বিচার করা উপযোগিতার যাচাইয়ের সঙ্গে জোড় বাঁধুন।
- যাচাই করা ফল পর্যন্ত সময় ও যাচাইয়ের বোঝা মাপুন, কারণ যাচাই বাধা হয়ে ওঠে।
- ভাগ করা ভান্ডারে ঢোকার আগে তৈরি বিষয়বস্তুতে লেবেল দিন ও পর্যালোচনা করুন, এবং চক্রকে অযাচাইয়ে নিজেকে খাওয়াতে দেবেন না।
- প্রযুক্তির বদলের পর প্রবণতায় আবার ভিত্তিরেখা ধরুন, এবং প্রতিবেদন ফল দিয়ে শুরু করুন।
- বাঁচানো সময় কীসের জন্য আগে ঠিক করুন, এবং পর্যালোচক ও ব্যবহারকারীদের মনোযোগ রক্ষা করুন।
তথ্যসূত্র ও আরও পড়ার জন্য
- Shumailov, I., Shumaylov, Z., Zhao, Y., Papernot, N., Anderson, R., and Gal, Y., "AI models collapse when trained on recursively generated data," Nature, 631, 2024.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Campbell, D. T., "Assessing the impact of planned social change," Evaluation and Program Planning, 2(1), 1979.
- Muller, J. Z., The Tyranny of Metrics, Princeton University Press, 2018.
- Parasuraman, R., and Manzey, D. H., "Complacency and bias in human use of automation: An attentional integration," Human Factors, 52(3), 2010.
- National Institute of Standards and Technology, Artificial Intelligence Risk Management Framework (AI RMF 1.0), NIST AI 100-1, 2023.
- Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
- Wikipedia, Goodhart's law.
- Wikipedia, Campbell's law.
- Wikipedia, Vanity metric.
- Wikipedia, Information overload.
- Wikipedia, Signal-to-noise ratio.
- Wikipedia, Alert fatigue.
- Wikipedia, AI slop.
- Wikipedia, Brandolini's law.
- Wikipedia, Jevons paradox.
- Wikipedia, Model collapse.
- Wikipedia, Concept drift.