آمار و طراحی آزمایش

دوره‌ی آزمون A/B و طراحی آزمایش

A/B Testing & Experimentation

آموزش طراحی و تحلیل آزمایش‌های کنترل‌شده، از تصادفی‌سازی و توان آزمون تا تعیین حجم نمونه و تحلیل نسبت‌ها و میانگین‌ها؛ همراه با تمرین عملی در پایتون و بررسی خطاهایی که اعتبار نتیجه را کاهش می‌دهند. این دوره به زبان فارسی و به‌صورت حضوری یا آنلاین برای تیم‌های سازمانی برگزار می‌شود.

سطح
متوسط
مدت پیشنهادی
۳ روز (۲۴ ساعت)
درس در ۸ بخش
۴۰
شیوه‌ی برگزاری
حضوری یا آنلاین

آنچه شرکت‌کنندگان می‌آموزند

  • طراحی آزمایش کنترل‌شده‌ای که دقیقاً به پرسش مطرح‌شده پاسخ دهد
  • محاسبه‌ی حجم نمونه و توان آزمون پیش از اجرای آزمایش
  • تحلیل شاخص‌های نرخ تبدیل و درآمد با آزمون مناسب هر کدام
  • شناخت خطاهایی که نتیجه را بی‌اعتبار می‌کنند؛ مانند نگاه زودهنگام به نتایج، مقایسه‌های چندگانه و تصادفی‌سازی معیوب

کار عملی: طراحی و تحلیل کامل یک آزمایش

سرفصل دوره

سرفصل شامل ۸ بخش و ۴۰ درس است. برنامه‌ی پیشنهادی ۳ روز آموزشی (۲۴ ساعت) است؛ مدت نهایی، تمرین‌ها و شیوه‌ی ارزیابی بر اساس سطح و نیاز تیم پیش از برگزاری تعیین می‌شوند.

  1. ۱

    منطق آزمایش

    ۵ درس
    • چرا آزمایش انجام می‌دهیم
    • گروه کنترل و گروه آزمایش
    • چرا تصادفی‌سازی جواب می‌دهد
    • ساختار یک آزمون A/B
    • پروژه‌ی راهنمادار: اولین آزمایش روی محصول Lumen
  2. ۲

    طراحی آزمایش

    ۵ درس
    • از پرسش تا فرضیه
    • انتخاب شاخص‌ها
    • واحد تصادفی‌سازی
    • کمینه‌ی اثر قابل تشخیص
    • پروژه‌ی راهنمادار: طراحی آزمایش قیمت‌گذاری Lumen
  3. ۳

    توان آزمون و حجم نمونه

    ۵ درس
    • سطح معناداری و دو نوع خطا
    • توان آماری
    • محاسبه‌ی حجم نمونه
    • منحنی توان و شبیه‌سازی
    • پروژه‌ی راهنمادار: تعیین حجم نمونه‌ی آزمایش Lumen
  4. ۴

    تحلیل شاخص‌های نسبتی

    ۵ درس
    • آزمون Z دو نسبت
    • تفسیر مقدار p
    • بازه‌ی اطمینان برای تفاوت
    • تصمیم‌گیری برای انتشار تغییر
    • پروژه‌ی راهنمادار: تحلیل آزمایش ثبت‌نام Lumen
  5. ۵

    تحلیل شاخص‌های میانگین

    ۵ درس
    • آزمون t دو نمونه‌ای
    • آزمون t ولش و واریانس‌های نابرابر
    • شاخص‌های چوله و آزمون من–ویتنی
    • بازه‌ی اطمینان برای تفاوت میانگین‌ها
    • پروژه‌ی راهنمادار: آزمایش درآمد Lumen
  6. ۶

    خطاها و اعتبار نتایج

    ۵ درس
    • نگاه زودهنگام و توقف اختیاری
    • مقایسه‌های چندگانه
    • پارادوکس سیمپسون
    • بررسی‌های صحت و تهدیدهای اعتبار
    • پروژه‌ی راهنمادار: ممیزی یک آزمایش Lumen
  7. ۷

    فراتر از آزمون A/B پایه

    ۵ درس
    • کاهش واریانس با CUPED
    • آزمون ترتیبی
    • آزمون A/B بیزی
    • راهزن‌های چنددسته (Multi-Armed Bandit)
    • پروژه‌ی راهنمادار: آزمایشی هوشمندتر برای Lumen
  8. ۸

    پروژه‌ی پایانی

    ۵ درس
    • شرح مسئله و طراحی آزمایش
    • اجرا و اعتبارسنجی آزمایش
    • تحلیل نتایج
    • بررسی متقابل و تصمیم‌گیری
    • گزارش کامل نتایج و جمع‌بندی دوره

شیوه‌های برگزاری

حضوری در محل سازمان

برگزاری در محل سازمان، همراه با تمرین روی ابزارها و نمونه‌های مرتبط با کار تیم. زمان و مکان با هماهنگی تعیین می‌شود.

آنلاین و زنده

کلاس تعاملی آنلاین همراه با پرسش و پاسخ، تمرین گروهی و بازخورد مستقیم؛ مناسب تیم‌های دورکار یا پراکنده در چند شهر.

کارگاه کوتاه یا دوره‌ی جامع

از کارگاه یک‌روزه برای یک موضوع مشخص تا برنامه‌ی چندماهه برای آماده‌سازی تیم در یک مسیر تخصصی.

دوره‌های مرتبط

همه‌ی دوره‌ها

برگزاری دوره‌ی آزمون A/B و طراحی آزمایش برای تیم سازمان

تعداد و سطح شرکت‌کنندگان و زمان‌بندی مدنظر را ارسال کنید تا برنامه‌ی دوره بر همان اساس تنظیم شود.