৭.২ AI-সহায়ক সফটওয়্যার উন্নয়ন পরিমাপ করা
সারসংক্ষেপ এবং প্রেরণা
বিষয় ৭.১ প্রতিষ্ঠিত করেছে কেন বেশ কয়েকটি বিদ্যমান মেট্রিক AI-সহায়ক উন্নয়নের অধীনে আর নির্ভরযোগ্যভাবে তারা আগে যা পরিমাপ করত তা পরিমাপ করে না। এই বিষয়টি এর বদলে কী পরিমাপ করতে হবে সে সম্পর্কে: কীভাবে জানতে হবে, ধারণা বা বিক্রেতার বিপণনের বদলে প্রকৃত প্রমাণসহ, AI কোডিং সহায়তা প্রকৃতপক্ষে আপনার প্রতিষ্ঠানকে সাহায্য করছে কিনা, এবং কতটা। এটি প্রকৃত বাজেট পরিণতিসহ একটি প্রকৃতপক্ষে গুরুত্বপূর্ণ প্রশ্ন, AI টুলিং লাইসেন্স একটি প্রকৃত, চলমান খরচ প্রতিনিধিত্ব করে, বিষয় ৫.৪-এর একক অর্থনীতি শৃঙ্খলা সরাসরি প্রযোজ্য, এবং একটি প্রতিষ্ঠান যা প্রমাণসহ এটির উত্তর দিতে পারে না হয় একটি টুলের জন্য অতিরিক্ত অর্থ প্রদান করছে যা সাহায্য করছে না বা একটিতে কম বিনিয়োগ করছে যা প্রকৃতপক্ষে করছে।
এই বিষয়ের পদ্ধতি সরাসরি বিষয় ১.৩-এর ফলাফল-উপরে-আউটপুট নীতির উপর টানে, এখন বিশেষভাবে AI টুলিং মূল্যায়নে প্রয়োগ করা। সরল, সবচেয়ে সাধারণ পদ্ধতি আউটপুট আয়তন দ্বারা AI-সহায়ক উন্নয়ন পরিমাপ করে, উৎপাদিত কোড লাইন, গৃহীত পরামর্শ, প্রকৌশলীদের দ্বারা স্ব-প্রতিবেদিত প্রতি কাজে সাশ্রয়কৃত সময়, ঠিক সেই মেট্রিক যা বিষয় ৭.১ সতর্ক করেছে এই পরিবর্তনের প্রতি সবচেয়ে বেশি প্রকাশিত। এই বিষয়ের সুপারিশকৃত আরও কঠোর পদ্ধতি ফলাফল পরিমাপ করে: AI সহায়তা কি প্রকৃতপক্ষে গুণমান অবনতি না করে চক্র সময় কমিয়েছে, এটি কি প্রকৃতপক্ষে নিম্ন-মূল্যের, পুনরাবৃত্ত কাজে ব্যয় করা সময় কমিয়েছে, উচ্চতর-মূল্যের কাজের জন্য ক্ষমতা মুক্ত করে, এবং এটি কি পর্ব ৫ থেকে ব্যবসা ও পণ্য ফলাফল পরিমাপযোগ্যভাবে প্রভাবিত করেছে।
বড় দলের জন্য, এই পরিমাপ সঠিকভাবে পাওয়া নির্ধারণ করে AI টুলিং বিনিয়োগ সিদ্ধান্ত প্রমাণের উপর নাকি বিক্রেতার দাবি ও প্রাতিষ্ঠানিক গতির উপর নেওয়া হয়। বড়-মাত্রার AI টুলিং চুক্তি আলোচনাকারী এন্টারপ্রাইজ প্রতিষ্ঠানের ব্যয় ন্যায্যতা দিতে ও ন্যায্যভাবে প্রতিযোগী টুল তুলনা করতে মূল্যের প্রকৃত প্রমাণ প্রয়োজন; সরকারি প্রতিষ্ঠান, প্রায়ই প্রযুক্তি ব্যয়ের জন্য বিশেষ পরীক্ষার অধীনে, মাত্রায় AI টুলিং গ্রহণে সরকারি তহবিল প্রতিশ্রুতিবদ্ধ করার আগে একটি কঠোর, রক্ষণযোগ্য মূল্যায়ন পদ্ধতি প্রয়োজন।
মূল নীতিসমূহ
- আউটপুট আয়তন বা বিক্রেতা-প্রতিবেদিত ব্যবহার পরিসংখ্যান নয়, ফলাফল দ্বারা AI সহায়তা পরিমাপ করুন। বিষয় ১.৩-এর শৃঙ্খলা এখানে পূর্ণ শক্তিসহ প্রযোজ্য।
- যেখানেই সম্ভব একটি প্রকৃত তুলনা গোষ্ঠী ব্যবহার করুন, শুধু একটি আগে-ও-পরে তুলনা নয় যা একটি বেড়ে যাওয়া শিল্প-ব্যাপী বেসলাইন দ্বারা বিভ্রান্ত হতে পারে।
- স্ব-প্রতিবেদিত সময় সঞ্চয় নিজে থেকে একটি দুর্বল সংকেত। বস্তুনিষ্ঠ চক্র-সময় ও গুণমান উপাত্তের সাথে এগুলো জোড়া দিন।
- শুধু উৎপাদন গতি নয়, পর্যালোচনা ও সংশোধন সময়সহ সম্পূর্ণ খরচ পরিমাপ করুন।
- ভিন্ন কাজ ও ভিন্ন প্রকৌশলী খুব ভিন্ন AI সহায়তা মূল্য দেখতে পারে। একটি একক, মিশ্রিত প্রতিষ্ঠান-ব্যাপী সংখ্যা এড়িয়ে চলুন যা এই ভিন্নতা লুকায়।
সুপারিশসমূহ
শুধু একটি আগে-ও-পরে স্ন্যাপশট নয়, একটি প্রকৃত তুলনা তৈরি করুন
সম্ভব হলে, আপনার নিজের প্রতিষ্ঠানের আগে-ও-পরে সংখ্যা তুলনা করার বদলে একই সময়কালে AI সহায়তা ব্যবহারকারী একটি গোষ্ঠী ও এটি ব্যবহার না করা একটি তুলনাযোগ্য গোষ্ঠীর মধ্যে ফলাফল তুলনা করুন, যা AI সহায়তার প্রভাবকে অন্য কোনো সমবর্তী পরিবর্তন থেকে পৃথক করতে পারে না (বিষয় ১.৬-এর বিভ্রান্তিকর-চলক সতর্কতা সরাসরি প্রযোজ্য)। যেখানে একটি প্রকৃত তুলনা গোষ্ঠী অব্যবহারিক, কমপক্ষে একটি একক আগে-ও-পরে স্ন্যাপশটের বদলে একটি দীর্ঘতর ঐতিহাসিক বেসলাইনের (বিষয় ১.৬ অনুযায়ী একটি নিয়ন্ত্রণ চার্ট) বিরুদ্ধে তুলনা করুন যা গড়ে প্রত্যাবর্তন বা অসম্পর্কিত সমবর্তী পরিবর্তনের প্রতি দুর্বল।
একসাথে চক্র সময় ও গুণমান পরিমাপ করুন, কখনও একা AI সহায়তার গতি দাবি নয়
সরাসরি বিষয় ২.৬ ও বিষয় ২.১০-এর শৃঙ্খলা প্রয়োগ করুন: ট্র্যাক করুন AI-সহায়ক কাজ চক্র-সময় পর্যায়ের মধ্য দিয়ে দ্রুততর চলে কিনা, এবং একই সাথে সেই কাজের জন্য পরিবর্তন ব্যর্থতার হার বা পলাতক ত্রুটির হার (বিষয় ৫.১) ভুল দিকে নড়ে কিনা। একটি প্রকৃত উৎপাদনশীলতা লাভ স্থিতিশীল বা উন্নত গুণমানসহ দ্রুততর চক্র সময় দেখায়; একটি মিথ্যা লাভ অবনতিশীল গুণমানসহ দ্রুততর চক্র সময় দেখায়, ঠিক সেই বাণিজ্য যার বিরুদ্ধে বিষয় ৭.১ সতর্ক করেছে, এখানে এই বই জুড়ে প্রয়োগ করা একই জোড়া-মেট্রিক শৃঙ্খলার মাধ্যমে আবিষ্কৃত।
সম্পূর্ণ খরচ হিসাবে পর্যালোচনা ও সংশোধন সময় অন্তর্ভুক্ত করুন
AI-উৎপাদিত কোড যা উৎপাদন করতে দ্রুততর কিন্তু পর্যালোচনা করতে ধীরতর, বা প্রাথমিক উৎপাদনের পরে আরও সংশোধন ও পুনঃকাজ প্রয়োজন, একবার সম্পূর্ণ পাইপলাইন পরিমাপ করা হলে কোনো নেট চক্র-সময় উন্নতি নাও দেখাতে পারে, এমনকি যদি প্রাথমিক কোড-উৎপাদন পদক্ষেপ পৃথক প্রকৌশলীর কাছে নাটকীয়ভাবে দ্রুততর মনে হয়। শুধু কোডিং পর্যায় নয়, সম্পূর্ণ চক্র-সময় শৃঙ্খল (বিষয় ২.৬) পরিমাপ করুন এটি সততার সাথে ধারণ করতে একটি অনুভূত, কিন্তু অসম্পূর্ণ, গতির অনুভূতির ভিত্তিতে AI সহায়তাকে কৃতিত্ব দেওয়ার বদলে।
স্ব-প্রতিবেদিত সময় সঞ্চয়কে একটি প্রাথমিক হাইপোথিসিস হিসেবে বিবেচনা করুন, একটি উপসংহার নয়
একজন ডেভেলপারের স্ব-প্রতিবেদন “এটি আমার একটি ঘণ্টা বাঁচিয়েছে” একটি প্রাথমিক সংকেত ও গুণগত প্রেক্ষাপট হিসেবে দরকারী (বিষয় ৫.৩-এর একত্রিত পরিমাণগত-গুণগত পদ্ধতি এখানেও প্রযোজ্য), কিন্তু এটি বিষয় ১.৫ যে কোনো স্ব-প্রতিবেদিত উপাত্তের জন্য সতর্ক করা একই স্মরণ ও কাঙ্ক্ষিততা পক্ষপাতের সাপেক্ষে, এবং এটি নিম্নধারার পর্যালোচনা বা সংশোধন খরচ সম্পর্কে কিছু বলে না। AI সহায়তা কোথায় সবচেয়ে বেশি সাহায্য করছে সে সম্পর্কে হাইপোথিসিস উৎপাদন করতে স্ব-প্রতিবেদন ব্যবহার করুন, তারপর একটি দৃঢ় উপসংহারে পৌঁছানোর আগে বস্তুনিষ্ঠ চক্র-সময় ও গুণমান উপাত্তের বিরুদ্ধে সেই হাইপোথিসিস বৈধ করুন।
কাজের ধরন অনুযায়ী পরিমাপ বিভক্ত করুন এবং একটি একক মিশ্রিত সংখ্যা এড়িয়ে চলুন
AI কোডিং সহায়তা সম্ভবত সাধারণ, ভালোভাবে-বোঝা কাজের জন্য প্রকৃতপক্ষে নতুন, জটিল সমস্যা-সমাধানের চেয়ে খুব ভিন্ন মূল্য প্রদান করে। একটি একক, মিশ্রিত প্রতিষ্ঠান-ব্যাপী গড়ের বদলে কাজ শ্রেণী অনুযায়ী পরিমাপ ও প্রতিবেদন করুন, যা এই তথ্য লুকাতে পারে যে সহায়তা একটি শ্রেণীতে শক্তিশালী মূল্য প্রদান করছে যখন অন্যটিতে সামান্য বা এমনকি নেতিবাচক মূল্য প্রদান করছে, তথ্য যা একটি মিশ্রিত সংখ্যা সম্পূর্ণভাবে অস্পষ্ট করবে।
মূল্যবিচার: ভালো ও মন্দ দিক
| পদ্ধতি | ভালো দিক | মন্দ দিক |
|---|---|---|
| একা স্ব-প্রতিবেদিত সময় সঞ্চয় | দ্রুত, সংগ্রহ করা সহজ | দুর্বল সংকেত; পক্ষপাতের সাপেক্ষে; নিম্নধারার পর্যালোচনা খরচ উপেক্ষা করে |
| শুধু আগে-ও-পরে তুলনা | সেটআপ করা সরল | যে কোনো অন্য সমবর্তী পরিবর্তন বা শিল্প-ব্যাপী প্রবণতা দ্বারা বিভ্রান্ত |
| প্রকৃত তুলনা গোষ্ঠী | সবচেয়ে শক্তিশালী, সবচেয়ে রক্ষণযোগ্য প্রমাণ | ব্যবস্থা করা কঠিনতর; একটি সম্পূর্ণ-গ্রহণ রোলআউটের জন্য অব্যবহারিক হতে পারে |
| কাজ-বিভক্ত ফলাফল পরিমাপ | মূল্য প্রকৃতপক্ষে কোথায় কেন্দ্রীভূত তা প্রকাশ করে | আরও দানাদার ট্র্যাকিং ও শ্রেণীবিভাগ প্রচেষ্টা প্রয়োজন |
কেন্দ্রীয় টানাপোড়েন হলো পরিমাপ কঠোরতা বনাম ব্যবহারিক সম্ভাব্যতা। একটি প্রকৃত, নিয়ন্ত্রিত তুলনা গোষ্ঠী সবচেয়ে শক্তিশালী প্রমাণ কিন্তু একবার একটি টুল কোনো ধরে-রাখা নিয়ন্ত্রণ গোষ্ঠী ছাড়া প্রতিষ্ঠান-ব্যাপী রোলআউট হলে প্রায়ই অব্যবহারিক; স্ব-প্রতিবেদিত ধারণা দ্রুত ও সহজ কিন্তু নিজে থেকে দুর্বল। আপনার প্রকৃত রোলআউট যে সবচেয়ে শক্তিশালী তুলনা নকশা অনুমতি দেয় তা ব্যবহার করে টানাপোড়েন সমাধান করুন, সম্ভব হলে একটি প্রাথমিক পাইলট পর্যায়ে একটি প্রকৃত নিয়ন্ত্রণ গোষ্ঠী, না হলে একটি ঐতিহাসিক বেসলাইন নিয়ন্ত্রণ চার্ট, এবং আপনি যে তুলনা নকশা ব্যবহার করেন তা নির্বিশেষে স্ব-প্রতিবেদনকে চূড়ান্ত শব্দের বদলে একটি হাইপোথিসিস-উৎপাদন টুল হিসেবে বিবেচনা করে।
আপনার দলের সাথে আলোচনার প্রশ্ন
১. আমাদের AI টুলিং গ্রহণ মূল্যায়নের জন্য আমাদের কি একটি প্রকৃত তুলনা গোষ্ঠী ছিল, বা আমরা কি এখনও একটি তৈরি করতে পারি, নাকি আমরা সম্পূর্ণভাবে একটি আগে-ও-পরে তুলনার উপর নির্ভর করছি? যদি একটি প্রকৃত তুলনা গোষ্ঠী কখনও প্রতিষ্ঠিত না হয়ে থাকে, আলোচনা করুন একটি ঐতিহাসিক বেসলাইন নিয়ন্ত্রণ চার্ট এখনও একটি যুক্তিসঙ্গতভাবে কঠোর বিকল্প প্রদান করতে পারে কিনা।
২. আমরা কি AI-সহায়ক কাজের জন্য একসাথে চক্র সময় ও গুণমান পরিমাপ করেছি, নাকি আমাদের শুধু একটি সংশ্লিষ্ট গুণমান পরীক্ষা ছাড়া একটি গতি দাবি আছে? যা কিছু উপাত্ত বিদ্যমান তা টানুন এবং এই নির্দিষ্ট জোড়ার জন্য পরীক্ষা করুন; যদি এটি বিদ্যমান না থাকে, সেই ফাঁক এই বিষয়ের একক সর্বোচ্চ-অগ্রাধিকার সমাধান।
৩. AI-সহায়ক কাজের জন্য আমাদের চক্র-সময় পরিমাপে কি পর্যালোচনা ও সংশোধন সময় অন্তর্ভুক্ত, নাকি শুধু প্রাথমিক উৎপাদন পদক্ষেপ? শুধু উৎপাদন সময়ের ভিত্তিতে একটি গতি দাবি, নিম্নধারার পর্যালোচনা খরচ উপেক্ষা করে, এই বিষয় সরাসরি সতর্ক করা অসম্পূর্ণ-হিসাব ফাঁদের ঝুঁকি নেয়।
৪. আমরা কোন স্ব-প্রতিবেদিত সময়-সঞ্চয় দাবি সংগ্রহ করেছি, এবং আমরা কি তাদের কোনোটি বস্তুনিষ্ঠ উপাত্তের বিরুদ্ধে বৈধ করেছি? একটি নির্দিষ্ট, সাধারণত পুনরাবৃত্ত দাবি বেছে নিন এবং পরীক্ষা করুন বস্তুনিষ্ঠ উপাত্ত প্রকৃতপক্ষে এটি সমর্থন করে কিনা।
৫. আমাদের বর্তমান পরিমাপ কি সব কাজের ধরনকে একটি সংখ্যায় মিশ্রিত করে, নাকি আমরা জানি কোন নির্দিষ্ট শ্রেণীর কাজ আমাদের জন্য সবচেয়ে শক্তিশালী AI সহায়তা মূল্য দেখায়? যদি মিশ্রিত হয়, আলোচনা করুন একটি কাজ-বিভক্ত ভাঙন কী প্রকাশ করতে পারে যা বর্তমান সংখ্যা লুকায়।
৬. যদি আমাদের আজ একজন সন্দেহপ্রবণ আর্থিক অংশীদারের কাছে আমাদের AI টুলিং বিনিয়োগ রক্ষা করতে হতো, ধারণার বদলে প্রমাণ ব্যবহার করে, আমরা প্রকৃতপক্ষে তাদের কী দেখাতে পারতাম? এই সুনির্দিষ্ট পরীক্ষা আপনার প্রতিষ্ঠান বর্তমানে AI সহায়তা মূল্য সম্পর্কে যা বিশ্বাস করে এবং এটি প্রকৃতপক্ষে প্রমাণসহ কী প্রদর্শন করতে পারে তার মধ্যে ফাঁক প্রকাশ করে।
ক্ষেত্র লেন্স
স্টার্টআপ। একটি আনুষ্ঠানিক তুলনা-গোষ্ঠী অধ্যয়ন সাধারণত ছোট মাত্রায় অব্যবহারিক, কিন্তু কাজ কত দ্রুত মনে হয় তার উপর বিশুদ্ধভাবে নির্ভর করার বদলে চক্র সময় ও ত্রুটির হারের একটি সরল, সৎ আগে-ও-পরে দৃষ্টিও একা ধারণার চেয়ে অর্থপূর্ণভাবে আরও নির্ভরযোগ্য সংকেত দেয়।
ছোট ব্যবসা। আপনার সবচেয়ে উচ্চ-মূল্যের, সবচেয়ে পুনরাবৃত্ত কাজ শ্রেণীতে প্রথমে পরিমাপ প্রচেষ্টা ফোকাস করুন, যেখানে AI সহায়তা মূল্য স্পষ্ট ও পরিমাপযোগ্য হওয়ার সবচেয়ে সম্ভাবনাময়, আপনার ছোট দল করে এমন প্রতিটি ধরনের কাজ জুড়ে একটি বিস্তৃত মূল্যায়নের চেষ্টা করার বদলে।
এন্টারপ্রাইজ। সম্পূর্ণ প্রতিষ্ঠান-ব্যাপী রোলআউটের আগে একটি প্রাথমিক পাইলট পর্যায়ে একটি প্রকৃত, নিয়ন্ত্রিত তুলনা প্রায়ই এখানে অর্জনযোগ্য এবং এটি ব্যবস্থা করার ইচ্ছাকৃত প্রচেষ্টার যোগ্য, যেহেতু এটি একটি সফল পাইলট সাধারণত অনুসরণ করে এমন বড়-মাত্রার টুলিং বিনিয়োগ সিদ্ধান্তের জন্য অনেক বেশি রক্ষণযোগ্য প্রমাণ উৎপাদন করে।
সরকার। AI টুলিং ক্রয়সহ সরকারি প্রযুক্তি ব্যয় সিদ্ধান্ত প্রায়ই বিশেষ পরীক্ষার মুখোমুখি হয় এবং আনুষ্ঠানিক খরচ-সুবিধা ন্যায্যতা (বিষয় ৫.৫) প্রয়োজন হতে পারে। শুরু থেকে যে কোনো পাইলট পর্যায়ে এই বিষয়ের সুপারিশকৃত পরিমাপ শৃঙ্খলা তৈরি করুন, যেহেতু একটি কঠোর, নথিভুক্ত মূল্যায়ন পদ্ধতি অবশেষে অর্থায়ন বা ক্রয় মামলা যথেষ্ট শক্তিশালী করে।
উদাহরণ
এন্টারপ্রাইজ। একটি সফটওয়্যার কোম্পানি এর অর্ধেক প্রকৌশল দলে একটি ইচ্ছাকৃত পাইলট হিসেবে একটি AI কোডিং সহকারী রোলআউট করেছিল, সম্পূর্ণ রোলআউটের আগে এক ত্রৈমাসিকের জন্য অন্য অর্ধেককে একটি তুলনা গোষ্ঠী হিসেবে ধরে রেখেছিল। পাইলট গোষ্ঠী ভালোভাবে-সংজ্ঞায়িত, বয়লারপ্লেট-ভারী কাজের জন্য একটি প্রকৃত, পরিসংখ্যানগতভাবে অর্থপূর্ণ চক্র-সময় উন্নতি দেখিয়েছিল, কিন্তু জটিল, নতুন স্থাপত্য কাজের জন্য কোনো পরিমাপযোগ্য উন্নতি দেখায়নি, এবং একটি সামান্য বেড়ে যাওয়া পর্যালোচনা-পুনরাবৃত্তি গণনা (বিষয় ২.৯) দেখিয়েছিল। এই কাজ-বিভক্ত অনুসন্ধান, শুধুমাত্র প্রকৃত তুলনা নকশা ও কাজ-শ্রেণী ভাঙনের কারণে দৃশ্যমান, কোম্পানিকে সব কাজ জুড়ে এটিকে একটি অভিন্ন উৎপাদনশীলতা বৃদ্ধি হিসেবে উপস্থাপন করার বদলে নির্দিষ্টভাবে যেখানে এটি প্রদর্শনযোগ্যভাবে সাহায্য করেছিল সেই কাজ শ্রেণীর দিকে AI সহায়তা রোলআউট বার্তা ও প্রশিক্ষণ লক্ষ্য করতে পরিচালিত করেছিল।
সরকার। এর আধুনিকীকরণ কর্মসূচি দলের একটি উপসেটের জন্য AI কোডিং সহায়তা পাইলট করা একটি ফেডারেল সংস্থা প্রাথমিকভাবে স্ব-প্রতিবেদিত সময়-সঞ্চয় জরিপের উপর নির্ভর করেছিল, যা উৎসাহী, সামঞ্জস্যপূর্ণভাবে ইতিবাচক প্রতিক্রিয়া দেখিয়েছিল। অনুরূপ সিস্টেম উপাদানে কাজ করা পাইলট দল ও একটি তুলনাযোগ্য অ-পাইলট গোষ্ঠীর মধ্যে চক্র সময় ও পলাতক ত্রুটির হার তুলনা করা একটি ফলো-আপ বস্তুনিষ্ঠ বিশ্লেষণ পেয়েছিল বস্তুনিষ্ঠ চক্র-সময় উন্নতি প্রকৃত ছিল কিন্তু স্ব-প্রতিবেদিত অনুমান পরামর্শ দেওয়ার চেয়ে উল্লেখযোগ্যভাবে ছোট, এবং একটি পরিমিত কিন্তু প্রকৃত পর্যালোচনা সময় বৃদ্ধি চিহ্নিত করেছিল যা উৎপাদন-গতি লাভের কিছু অফসেট করছিল, একটি অনুসন্ধান যা একা স্ব-প্রতিবেদন উপাত্ত সম্পূর্ণভাবে মিস করেছিল। এই আরও সঠিক, প্রমাণ-ভিত্তিক চিত্র সরাসরি টুলের অব্যাহত, সম্প্রসারিত ক্রয়ের জন্য একটি আরও বিনয়ী ও আরও রক্ষণযোগ্য ব্যবসায়িক মামলা অবহিত করেছিল।
ব্যবসায়িক যুক্তি: প্রেরণা, ROI, এবং TCO
কঠোরভাবে AI-সহায়ক উন্নয়ন পরিমাপের রিটার্ন হলো আত্মবিশ্বাসী, প্রমাণ-ভিত্তিক বিনিয়োগ সিদ্ধান্ত: একটি প্রতিষ্ঠান যা সুনির্দিষ্টভাবে জানে AI সহায়তা প্রকৃতপক্ষে কোথায় সাহায্য করে সেখানে এটি সম্প্রসারণে বিনিয়োগ করতে পারে এবং যেখানে এটি সামান্য মূল্য প্রদান করে সেই কাজ শ্রেণীতে লাইসেন্সের জন্য অতিরিক্ত অর্থ প্রদান এড়াতে পারে, ঠিক উপরের সফটওয়্যার কোম্পানি উদাহরণ প্রদর্শিত কাজ-বিভাজন অন্তর্দৃষ্টি। এটি সরাসরি বিষয় ৫.৪-এর একক অর্থনীতি ও বিষয় ৫.৫-এর ROI শৃঙ্খলার সাথে সংযুক্ত, যেহেতু AI টুলিং খরচ, প্রায়ই প্রতি-আসন লাইসেন্সপ্রাপ্ত, এই বই যে কোনো অন্য প্রধান প্রকৌশল বিনিয়োগে প্রয়োগ করে সেই একই কঠোর খরচ-সুবিধা চিকিৎসা প্রয়োজন।
মোট মালিকানা খরচ হলো প্রকৃত তুলনা তৈরি করা, পর্যালোচনা ও সংশোধনসহ সম্পূর্ণ চক্র সময় পরিমাপ করা, এবং কাজের ধরন অনুযায়ী বিভক্ত করার বিশ্লেষণাত্মক প্রচেষ্টা, যা বিক্রেতা-প্রতিবেদিত ব্যবহার পরিসংখ্যান বা স্ব-প্রতিবেদিত ধারণা মুখ মূল্যে গ্রহণ করার চেয়ে বেশি কাজ। সেই প্রচেষ্টা সরাসরি একটি বড় প্রতিষ্ঠান জুড়ে AI টুলিং লাইসেন্সিং খরচের মাত্রা ও ধারণার বদলে উপাত্তের ভিত্তিতে একটি খারাপভাবে প্রমাণিত, ব্যয়বহুল, প্রতিষ্ঠান-ব্যাপী প্রতিশ্রুতির ঝুঁকি দ্বারা ন্যায্যতাপ্রাপ্ত।
বিরোধী প্যাটার্ন এবং ফাঁদ
- শুধু আউটপুট আয়তন বা বিক্রেতা ব্যবহার পরিসংখ্যান দ্বারা AI সহায়তা পরিমাপ করা: সরাসরি বিষয় ৭.১-এর কেন্দ্রীয় সতর্কীকরণ পুনরাবৃত্তি করে।
- সম্পূর্ণভাবে স্ব-প্রতিবেদিত সময় সঞ্চয়ের উপর নির্ভর করা: পক্ষপাতের প্রতি দুর্বল একটি সংকেত, এবং নিম্নধারার পর্যালোচনা ও সংশোধন খরচের প্রতি অন্ধ।
- শুধু উৎপাদন-গতি পদক্ষেপ পরিমাপ করা, সম্পূর্ণ চক্র সময় উপেক্ষা করা: প্রকৃত উৎপাদনশীলতা প্রভাবের একটি অসম্পূর্ণ, সম্ভাব্যভাবে বিভ্রান্তিকর হিসাব উৎপাদন করে।
- একটি একক, মিশ্রিত প্রতিষ্ঠান-ব্যাপী সংখ্যা প্রতিবেদন করা: বিভিন্ন কাজ শ্রেণী জুড়ে মূল্যে প্রকৃত ভিন্নতা লুকায়।
- কোনো তুলনা গোষ্ঠী বা ঐতিহাসিক বেসলাইন নেই: AI সহায়তার প্রকৃত প্রভাবকে যে কোনো অন্য সমবর্তী পরিবর্তন থেকে পৃথক করতে পারে না।
- একটি উৎসাহী স্ব-প্রতিবেদিত জরিপ ফলাফলকে একটি বড়-মাত্রার বিনিয়োগ সিদ্ধান্তের জন্য যথেষ্ট প্রমাণ হিসেবে বিবেচনা করা: উপরের ফেডারেল সংস্থা উদাহরণ একটি আরও কঠোর তুলনা তৈরি করার পরেই আবিষ্কৃত ঠিক সেই ফাঁকের ঝুঁকি নেয়।
পরিপক্বতা মডেল
- স্তর ১, শুরু: AI-সহায়ক উন্নয়ন মূল্য মূল্যায়িত হয়, যদি মোটেও, শুধু স্ব-প্রতিবেদিত ধারণা ও বিক্রেতা ব্যবহার পরিসংখ্যানের মাধ্যমে।
- স্তর ২, উন্নয়ন: কিছু চক্র-সময় বা গুণমান উপাত্ত বিদ্যমান, কিন্তু কোনো প্রকৃত তুলনা গোষ্ঠী বা ঐতিহাসিক বেসলাইন এবং কোনো কাজ-বিভক্ত বিশ্লেষণ নেই।
- স্তর ৩, মানসম্মতকরণ: জোড়া চক্র-সময় ও গুণমান পরিমাপসহ একটি প্রকৃত তুলনা নকশা (নিয়ন্ত্রণ গোষ্ঠী বা ঐতিহাসিক বেসলাইন) সামঞ্জস্যপূর্ণভাবে প্রয়োগ করা হয়, কাজের ধরন অনুযায়ী বিভক্ত।
- স্তর ৪, ব্যবস্থাপনা: পর্যালোচনা ও সংশোধন সময়সহ সম্পূর্ণ চক্র-সময় হিসাব ট্র্যাক করা হয়; স্ব-প্রতিবেদিত দাবি পদ্ধতিগতভাবে বস্তুনিষ্ঠ উপাত্তের বিরুদ্ধে বৈধ করা হয়।
- স্তর ৫, সমন্বয়: প্রতিষ্ঠানের ঠিক কোথায় AI সহায়তা প্রকৃতপক্ষে সাহায্য করে তার একটি পরিপক্ব, প্রমাণ-ভিত্তিক বোঝাপড়া আছে, লক্ষ্যযুক্ত রোলআউট, প্রশিক্ষণ বিনিয়োগ, এবং প্রদর্শিত, রক্ষণযোগ্য ROI সহ ক্রয় সিদ্ধান্ত অবহিত করে।
আলোচনার জন্য ধারণা
১. আমাদের বর্তমান AI টুলিং গ্রহণের জন্য আমাদের কি কোনো প্রকৃত তুলনা আছে? ২. আমরা কি একসাথে চক্র সময় ও গুণমান পরিমাপ করেছি, নাকি শুধু একটি গতি দাবি? ৩. কোন স্ব-প্রতিবেদিত AI সহায়তা দাবি আমাদের বস্তুনিষ্ঠ উপাত্তের বিরুদ্ধে বৈধ করা উচিত? ৪. কোন নির্দিষ্ট কাজ শ্রেণী আমাদের জন্য প্রকৃত AI সহায়তা মূল্যের সবচেয়ে শক্তিশালী প্রমাণ দেখায়? ৫. আমরা কি বর্তমানে প্রমাণসহ একজন সন্দেহপ্রবণ আর্থিক অংশীদারের কাছে আমাদের AI টুলিং বিনিয়োগ রক্ষা করতে পারব?
মূল বিষয়সমূহ
- আউটপুট আয়তন বা বিক্রেতা-প্রতিবেদিত ব্যবহার পরিসংখ্যান নয়, ফলাফল দ্বারা AI-সহায়ক উন্নয়ন পরিমাপ করুন।
- শুধু একটি আগে-ও-পরে স্ন্যাপশট নয় যা বিভ্রান্তিকর চলকের প্রতি দুর্বল, একটি প্রকৃত তুলনা গোষ্ঠী বা ঐতিহাসিক বেসলাইন ব্যবহার করুন।
- শুধু উৎপাদন গতি নয়, সম্পূর্ণ পাইপলাইন, পর্যালোচনা ও সংশোধন সময়সহ একসাথে চক্র সময় ও গুণমান পরিমাপ করুন।
- স্ব-প্রতিবেদিত সময় সঞ্চয়কে একটি উপসংহার নয়, একটি হাইপোথিসিস হিসেবে বিবেচনা করুন, এবং বস্তুনিষ্ঠ উপাত্তের বিরুদ্ধে এটি বৈধ করুন।
- কাজের ধরন অনুযায়ী বিভক্ত করুন; একটি একক মিশ্রিত সংখ্যা মূল্য প্রকৃতপক্ষে কোথায় কেন্দ্রীভূত এবং কোথায় নয় তা লুকায়।
তথ্যসূত্র এবং অতিরিক্ত পাঠ
- Forsgren, Nicole, Jez Humble, and Gene Kim. Accelerate: The Science of Lean Software and DevOps. IT Revolution Press, 2018.
- GitHub. Research on AI pair programming and developer productivity.
- Forsgren, Nicole, Margaret-Anne Storey, Chandra Maddila, Thomas Zimmermann, Brian Houck, and Jenna Butler. “The SPACE of Developer Productivity.” ACM Queue, 2021.
- Hubbard, Douglas W. How to Measure Anything: Finding the Value of Intangibles in Business. Wiley, 2014.