A/B test মানে দুইটি সম্পূর্ণ আলাদা message পাঠিয়ে যেটিতে বেশি click সেটিকে winner বলা নয়। অর্থপূর্ণ experiment-এ একটি hypothesis, একটি প্রধান variable, comparable audience এবং আগে নির্ধারিত success metric থাকে। Bartago দুই থেকে পাঁচটি weighted variant recipient level-এ assign করতে পারে এবং sent, unique click, conversion ও revenue তুলনা করে। ছোট sample-এ সামান্য পার্থক্যকে certainty ধরে নেওয়া ঠিক নয়।
একটি hypothesis লিখুন
কী বদলালে কেন ফল বদলাবে
উদাহরণ: “deadline উল্লেখ করলে click বাড়বে।” তখন A ও B-তে শুধু deadline copy বদলান; offer, segment, time ও link একই রাখুন।
Metric ও sample আগেই ঠিক করুন
Result দেখার পর rule বদলাবেন না
CTA campaign-এ unique click বা conversion primary metric হতে পারে। delivery failure বেশি হলে আগে device/channel সমস্যা ঠিক করুন। খুব ছোট audience-এ directional learning হিসেবে result নিন।
- One primary metric
- Same audience window
- Minimum observation time
- Opt-out guardrail
Winner rollout নিরাপদ করুন
Pending recipients-এই শুধু reassign
Winner নির্বাচনের পর ইতিমধ্যে sent log বদলাবেন না। pending audience reassign করে tracking link regenerate করুন এবং variant history audit log-এ রাখুন।
ব্যবহারিক checklist
- Hypothesis
- Single variable
- Primary metric
- Stop condition
- Guardrail review
মূল takeaway
A/B test-এর লক্ষ্য winner বানানো নয়; পরের campaign-এর জন্য বিশ্বাসযোগ্য learning তৈরি করা।
শেষ কথা
প্রথম test-এ CTA wording বা offer framing-এর মতো একটি স্পষ্ট variable নিন। Result-এর সঙ্গে failure, opt-out ও complaint signal দেখুন। বড় ব্যবধান পেলেও পরের campaign-এ পুনরায় যাচাই করুন—audience ও season বদলালে winner-ও বদলাতে পারে।
Campaign চালুর আগে consent, mobile operator policy এবং প্রযোজ্য current নিয়ম যাচাই করুন।
১০০ free automation credit দিয়ে শুরু করুন →সাধারণ প্রশ্ন
কতটি variant ব্যবহার করব?
শুরুতে দুইটি variant সবচেয়ে সহজ; audience বড় এবং hypothesis আলাদা হলে পরে বাড়ান।
Winner কেবল click দিয়ে ঠিক করব?
Campaign goal অনুযায়ী conversion বা revenue ভালো metric হতে পারে; opt-out ও failure guardrail হিসেবেও দেখুন।
Sources ও editorial note
সর্বশেষ editorial review: ২৮ জুলাই, ২০২৬। Product behavior release অনুযায়ী বদলাতে পারে; current documentation দেখুন।