Екі үлгіге арналған T-тест не істейді
Екі үлгіге арналған T-тест калькуляторы екі тәуелсіз үлгі арасындағы айырмашылықтың статистикалық тұрғыдан маңызды екенін немесе оны кездейсоқ ауытқулармен түсіндіруге болатынын анықтауға көмектеседі.
Құрал t-статистикасын, p-value, сенімділік интервалдарын, әсер көлемін (effect size) есептейді және үлгілердің таралуын көрнекі түрде көрсетеді. Бұл арнайы статистикалық бағдарламалық жасақтамасыз эксперимент нәтижелерін түсіндіруге мүмкіндік береді.
Ол A/B тесттерін, өнім аналитикасын, маркетингтік зерттеулерді, ғылыми эксперименттерді және кез келген сандық деректерді салыстыруды талдау үшін қолайлы.
Құрал қандай көрсеткіштерді есептейді
Есептеу аяқталғаннан кейін келесі көрсеткіштер көрсетіледі:
Көрсеткіш | Сипаттамасы |
|---|
Үлгілердің орташа мәндері | Әр үлгінің орташа мәні |
Орташа мәндер айырмасы (d) | Екі үлгінің орташа мәндері арасындағы айырмашылық |
Стандартты қате (SE) | Есептелген орташа айырманың дәлдігін бағалау |
p-value | Бақыланған айырмашылықтың кездейсоқ пайда болу ықтималдығы |
Сенімділік интервалдары | Орташа мәндердің нақты айырмасы болуы мүмкін мәндер аралығы |
Таралу графиктері | Екі үлгінің және олардың сенімділік интервалдарының көрнекі салыстырылуы |
Құралды қалай пайдалану керек
Бірінші үлгінің мәндерін енгізіңіз.
Екінші үлгінің мәндерін енгізіңіз.
Сенімділік деңгейін таңдаңыз (әдетте 95%).
Есептеуді іске қосыңыз.
Алынған көрсеткіштер мен графиктерді талдаңыз.
Әрбір бақылауды жеке жолға енгізіңіз. Үлгілердің көлемі бірдей болуы міндетті емес.
Нәтижелерді қалай түсіндіруге болады
Негізгі көрсеткіш — p-value. Егер p-value таңдалған маңыздылық деңгейінен (α) кіші болса, айырмашылық статистикалық тұрғыдан маңызды деп есептеледі.
Нәтиже | Түсіндірме |
|---|
p-value < α | Айырмашылық статистикалық тұрғыдан маңызды |
p-value ≥ α | Нөлдік гипотезаны жоққа шығаруға жеткілікті дәлел жоқ |
Мұнда α — таңдалған сенімділік деңгейіне сәйкес анықталатын маңыздылық деңгейі.
Сондай-ақ келесі көрсеткіштерге назар аудару ұсынылады:
Орташа мәндер айырмасы (d) — топтар арасындағы айырмашылықтың шамасын көрсетеді;
Стандартты қате (SE) — айырмашылық бағасының дәлдігін сипаттайды;
Сенімділік интервалы — нақты орташа айырма болуы ықтимал аралықты көрсетеді.
Екі үлгіге арналған T-тестті қашан қолдану керек
Құрал келесі көрсеткіштерді салыстыру үшін қолайлы:
пайдаланушының орташа табысы;
тапсырыстың орташа құны;
тапсырманы орындау уақыты;
беттің жүктелу уақыты;
пайдаланушы әрекеттерінің саны;
сессия ұзақтығы;
өнімдік эксперименттердің нәтижелері;
екі тәуелсіз топта өлшенген кез келген сандық көрсеткіш.
T-тесттің алғышарттары
Нәтижелерді сенімді түсіндіру үшін, әдетте, келесі шарттардың орындалғаны жөн:
үлгілер тәуелсіз болуы керек;
бақылаулар кездейсоқ жиналуы керек;
деректер сандық болуы керек;
үлестірім қалыпты үлестірімге жуық болуы немесе үлгі көлемі жеткілікті үлкен болуы керек;
орташа мәндерге айтарлықтай әсер ететін шектен тыс ауытқулар болмауы керек.
Үлгі көлемі жеткілікті үлкен болған жағдайда, T-тест қалыпты үлестірімнен орташа ауытқуларға әдетте төзімді болады.
Практикалық ұсыныстар
Экспериментті бастамас бұрын қажетті үлгі көлемін есептеңіз.
Тек p-value емес, орташа мәндер айырмасының шамасын да бағалаңыз.
Сенімділік интервалына назар аударыңыз, себебі ол нақты әсердің ықтимал ауқымын бағалауға көмектеседі.
Екі үлгі үшін де деректерді дайындаудың бірдей ережелерін қолданыңыз.
Статистикалық нәтижелерді бизнес көрсеткіштерімен бірге талдаңыз.
Статистикалық маңыздылық анықталған айырмашылықтың міндетті түрде практикалық немесе коммерциялық тұрғыдан маңызды екенін білдірмейді.
Жиі кездесетін қателер
Статистикалық маңызды нәтиже алынғаннан кейін экспериментті бірден тоқтату.
Талдау әдістемесін түзетпей бірнеше рет қайталама маңыздылық тесттерін жүргізу.
Сенімділік интервалдарын елемеу.
Екі үлгіге арналған T-тестті жұпталған немесе тәуелді үлгілерге қолдану.
Санаттық деректер үшін арнайы статистикалық тесттердің орнына T-тестті пайдалану.
Құралдың шектеулері
Нәтижелер әрқашан зерттеу контекстін ескере отырып түсіндірілуі тиіс.
Қорытындыларға келесі факторлар әсер етуі мүмкін:
үлгі көлемінің жеткіліксіздігі;
шектен тыс ауытқулар;
кездейсоқ бөлудің бұзылуы;
деректерді жинау қателері;
жүйелі ығысулар.
Статистикалық тест бақыланған айырмашылықтың кездейсоқ пайда болу ықтималдығын бағалайды, бірақ себеп-салдарлық байланысты анықтамайды.
Қорытынды
Екі үлгіге арналған T-тест екі тәуелсіз үлгі арасындағы айырмашылықтың статистикалық тұрғыдан маңызды екенін анықтауға көмектеседі. Бұл A/B тесттерін, өнімдік эксперименттерді және сандық зерттеулерді талдауда қолданылатын негізгі құралдардың бірі.
Экспериментті бастамас бұрын қажетті үлгі көлемін Үлгі көлемінің калькуляторы арқылы есептеу ұсынылады. Егер эксперимент жинақталған деректер негізінде мерзімінен бұрын аяқталуы мүмкін болса, Sequential Sampling калькуляторын пайдаланыңыз. Нәтижелерді алғаннан кейін пайдаланушылардың эксперимент нұсқалары арасында дұрыс бөлінгенін Sample Ratio Mismatch (SRM) калькуляторы арқылы тексеру ұсынылады. Бұл статистикалық қорытындыларға әсер етуі мүмкін рандомизация мәселелерін анықтауға мүмкіндік береді.
