# A/B-testi olulisuse kalkulaator > Kas sinu A/B-testi tulemus on päris või lihtsalt juhus? A/B-testi konversioonimäärad, kasv, p-väärtus ja usaldusvahemik koos vajaliku valimi suurusega. Kontrolli, kas variant B konverteerib tõesti paremini kui A: kasv, p-väärtus, erinevuse usaldusvahemik ja mitu külastajat test vajab. - Page: https://how.box/et/ab-test/ - Runs entirely in the browser. - License: HowToolbox's own text and data (titles, explanations, FAQs, tool descriptions and schemas, this file) are CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/); AI training and answers are welcome. Attribute "HowToolbox (how.box)" with a link to the page used. Third-party data keeps its own terms; the name and logo are not licensed. Publisher: HowToolbox, contact@how.box. Terms: https://how.box/et/about/terms/ ## Inputs Answer link: https://how.box/et/ab-test/?na={na}&ca={ca}&nb={nb}&cb={cb}&c={c}&h={h}&pw={pw} - `na` (whole number 1 to 1e9): Visitors in A. Example: `10000`. - `ca` (whole number 0 to 1e9): Conversions in A. Example: `400`. - `nb` (whole number 1 to 1e9): Visitors in B. Example: `10000`. - `cb` (whole number 0 to 1e9): Conversions in B. Example: `500`. - `c` (number 80 to 99.9): Confidence level in percent. Example: `95`. - `h` (two-sided, greater or less): two-sided, greater or less. Example: `two-sided`. - `pw` (number 50 to 99): Power for the sample-size hint, percent. Example: `80`. Example answer: https://how.box/et/ab-test/?na=10000&ca=400&nb=10000&cb=500&c=95&h=two-sided&pw=80 A complete link carries the primary answer in the page HTML; a missing or invalid value shows the default page. ## Agent tools - `ab_test_calculate`: A/B test of two conversion rates with the pooled two-proportion z-test (equal to Pearson's χ² without continuity correction). - MCP, one POST to https://how.box/mcp: `{"jsonrpc":"2.0","id":1,"method":"tools/call","params":{"name":"ab_test_calculate","arguments":{"visitors_a":10000,"conversions_a":400,"visitors_b":10000,"conversions_b":500,"confidence_percent":95,"alternative":"two-sided","power_percent":80}}}` - GET: https://how.box/mcp/run/ab_test_calculate?visitors_a=10000&conversions_a=400&visitors_b=10000&conversions_b=500&confidence_percent=95&alternative=two-sided&power_percent=80 ## How it works A/B-test näitab lehe kahte versiooni eri külastajatele ja võrdleb, kui sageli kumbki konverteerib. Isegi kaks identset lehte saavad harva täpselt sama määra, seega on küsimus selles, kas vahe on suurem, kui juhus üksi tavaliselt tekitaks. Test ühendab mõlemad rühmad üheks määraks p̂ ja võrdleb erinevust selle standardveaga: z = (p_B − p_A) ÷ √(p̂(1 − p̂)(1/n_A + 1/n_B)). p-väärtus on vähemalt nii suure vahe tõenäosus juhul, kui mõlemad versioonid konverteeriksid tegelikult võrdselt. Meetod järgib allikat NIST/SEMATECH e-Handbook; antud võimsuse jaoks vajalik valimi suurus järgib R-i funktsiooni power.prop.test. Olulisus pole efekti suurus: erinevuse vahemik näitab, kui suur või väike võib tegelik kasu usutavalt olla. Otsusta valimi suurus enne testi, lase sel joosta täisnädalaid ja ära peata seda kohe, kui see muutub oluliseks, muidu võidab juhus palju sagedamini, kui usaldusnivoo laseks arvata. ## FAQ **Mida tähendab p-väärtus 0,05?** Kui A ja B konverteeriksid tõesti sama määraga, ilmneks vähemalt nii suur erinevus umbes 5% testidest. See ei ole tõenäosus, et B on parem. **Mitu külastajat mu A/B-test vajab?** See sõltub määradest ja väikseimast kasvust, mida tasub tuvastada. Tõus 4%-lt 5%-le vajab 80% võimsuse ja 95% usaldusnivoo juures umbes 6745 külastajat variandi kohta; väiksemad kasvud vajavad palju rohkem. **Kas kasutada ühepoolset testi?** Ainult siis, kui otsustasid enne testi, et sind huvitab üks suund. Ühepoolne test jõuab olulisuseni kiiremini, kuid ei suuda öelda, et B tegi asja halvemaks. **Test ei ole oluline. Kas see tähendab, et A ja B on samad?** Ei. See tähendab, et andmed ei suuda neid veel eristada. Liiga väheste külastajatega paistab isegi tegelik erinevus sageli juhusena. **Kas saan võrrelda tulu külastaja kohta?** Ei. Test vajab kahendväljundit: iga külastaja kas teeb konversiooni või mitte. Rahasummad vajavad teistsugust statistilist testi. More: [HowToolbox index](https://how.box/llms.txt) · [Agent Skill](https://how.box/skill.md) · [agent terms](https://how.box/et/about/agents/)