সিআই বট (২:০৪)
এজেন্ট (২:০৬)
সাকিব ভাই (৭:৪০)
রুমি (৭:৪২)
তানভীর ভাই (৭:৪৩)
সকালে রুমি এজেন্টের খসড়াটা খুলল। ফেল পাঁচটি, ঝুড়ি তিনটি:
ঝুড়ি ক: সম্ভাব্য আসল ডিফেক্ট (১টি)
রিফান্ড-ফি টেস্ট: প্রত্যাশা ৫০, পাওয়া ৬০। তিনবার রি-রানে একই ফল।
গতকাল রিফান্ড হিসাবের ফাংশনে কমিট ছিল।
ঝুড়ি খ: ফ্লেকি সন্দেহ (২টি)
সিট-হোল্ড টেস্ট: গত দুই সপ্তাহে ধরুন ১০ বারের মধ্যে ৩ বার ফেল, একই কোডে।
অনুসন্ধান পেজ: রাত ১২টার পর তারিখ-সংক্রান্ত ফেল, সন্দেহ সময়-অঞ্চল।
ঝুড়ি গ: পরিবেশ (২টি)
স্টেজিং ডেটাবেস ধীর, টাইমআউট ২টি।
আত্মবিশ্বাস: ক উচ্চ, খ মধ্যম, গ নিম্ন (সংখ্যা এজেন্টের অনুমান)
এজেন্ট ফেলগুলো কীভাবে ভাগ করে(How the Agent Groups Failures)
ট্রায়াজ এজেন্ট ফেলের লগ, আগের রানের ইতিহাস আর সাম্প্রতিক কমিট পাশাপাশি রাখে। সে দুটো প্রশ্নের উত্তর খোঁজে: ফেলটা কি বারবার হচ্ছে? আর প্রত্যাশিত নিয়ম কি সম্প্রতি ইচ্ছা করে বদলেছে? নিচের সরঞ্জামে দুটো উত্তর বদলে বদলে দেখুন, ঝুড়ি কীভাবে বদলায়।
নিজে চালান: ডিসিশন টেবিল
ফলাফল: ফ্লেকি বা পরিবেশের সন্দেহ। সময়, ডেটা আর অন্য টেস্টের সঙ্গে মিলিয়ে দেখুন
| নিয়ম | একই ফেল আবার চালালে বারবার হয়? | অ্যাপ বা প্রত্যাশিত নিয়ম সম্প্রতি ইচ্ছা করে বদলেছে? | ফলাফল |
|---|---|---|---|
| ১ | হ্যাঁ | না | আসল ডিফেক্টের সম্ভাবনা বেশি। প্রমাণসহ বাগ রিপোর্টের খসড়া |
| ২ | হ্যাঁ | হ্যাঁ | সম্ভবত পুরোনো টেস্ট। মানুষ দেখে নিক বদলটি ইচ্ছাকৃত কি না, তারপর টেস্ট হালনাগাদ |
| ৩মিলেছে | না | না | ফ্লেকি বা পরিবেশের সন্দেহ। সময়, ডেটা আর অন্য টেস্টের সঙ্গে মিলিয়ে দেখুন |
| ৪ | না | হ্যাঁ | মিশ্র সংকেত। আগে আবার চালান, মানুষের চোখে দেখুন, এজেন্টের ধারণা যাচাইসাপেক্ষ |
লক্ষ করুন, এজেন্ট সাজায়, রায় দেয় না। ঝুড়ির নাম "সম্ভাব্য" ও "সন্দেহ", "নিশ্চিত" নয়।
ফ্লেকির কয়েকটি চেনা নকশা(Familiar Flaky Patterns)
- একই কোডে একই টেস্ট কখনো পাস, কখনো ফেল।
- শুধু নির্দিষ্ট সময়ে ফেল, যেমন রাত বারোটার পর, কারণ তারিখ বদলায়।
- অন্য টেস্টের পরে চললে ফেল, একা চালালে পাস। অর্থাৎ ডেটা বা অবস্থা লিক করছে।
- ধীর পরিবেশে টাইমআউট।
এজেন্ট এই নকশাগুলো ইতিহাসে খুঁজে দেখে। সে বলতে পারে "এটা ফ্লেকির মতো দেখতে", কিন্তু "এটা ফ্লেকি" বলতে পারে না, কারণ কারণটা সে নিজে খুঁজে বের করেনি।
রুমি আসলে কী করল(What Rumi Actually Did)
ঝুড়ি ক-এর টেস্ট রুমি নিজে চালাল, কমিটটা পড়ল। সাকিব ভাই স্বীকার করলেন, রাউন্ডিংয়ের একটা বদল ঢুকেছে। আসল বাগ, টেস্ট ঠিক ছিল। রিপোর্ট লেখা হলো প্রমাণসহ।
ঝুড়ি খ-এর দুটোর জন্য রুমি টিকিট খুলল, কিন্তু মুছে দিল না, "ফ্লেকি" লেবেলও লাগাল না, যতক্ষণ কারণ জানা না যায়। ঝুড়ি গ-এর জন্য পরিবেশের দায়িত্বে থাকা মানুষকে বলল।
রুমি পরে ফারদিনকে বলল, এজেন্টের ঝুড়ি দেখে সব ফেল পুনরায় চালানো সবচেয়ে সহজ রাস্তা, আর সবচেয়ে বিপজ্জনকও। রি-রানে একবার সবুজ হলে মনে হয় সমস্যা মিটেছে, অথচ ফেলটা কেবল লুকিয়েছে। তাই সে প্রতিটি ঝুড়ির জন্য আলাদা প্রশ্ন লিখে রাখে: কী দেখলে বুঝব এটা আসল, কী দেখলে বুঝব এটা ফ্লেকি।
যেসব ভুল সহজে হয়(Mistakes That Come Easily)
- ফ্লেকি ট্যাগকে ফেলে দেওয়ার অজুহাত বানানো। ফ্লেকি মানে এখনো কারণ জানা যায়নি।
- এজেন্টকে বলা, ফেল হওয়া টেস্ট বদলে পাস করাতে। টেস্ট কী প্রত্যাশা করে, তা এজেন্ট বদলাতে পারে না।
- আত্মবিশ্বাসের সংখ্যাকে পরিমাপ ধরা। ওটা এজেন্টের অনুমান।
- ইতিহাস ছাড়া ট্রায়াজ। পুরোনো রান না থাকলে সে নকশা দেখতে পায় না।
নিজেকে যাচাই করুন
একটি টেস্ট একই কোডে তিনবার রি-রানে প্রতিবারই ফেল করল, আর গতকাল সংশ্লিষ্ট ফাংশনে কমিট হয়েছে। অ্যাপের নিয়ম ইচ্ছা করে বদলায়নি। ঝুড়ি কোনটি হওয়া উচিত?