يقارن اختبار z للفرق بين نسبتين نسبة النجاح في مجموعتين مستقلتين، مثل معدل التحويل لتصميمين لصفحة، أو معدل التعافي في علاجين. ينطلق من أربعة أرقام: النجاحات وحجم العينة لكل مجموعة. ينتج الاختبار إحصائية z وقيمة احتمالية p تبيّنان مدى اتساق البيانات مع افتراض تساوي نسبتي المجتمعين.

تنص الفرضية الصفرية على أن المجموعتين تتشاركان نسبة حقيقية واحدة. وبموجب هذا الافتراض، يكون أفضل تقدير لتلك القيمة المشتركة هو جمع كل النجاحات في المجموعتين: p̂ = (x₁ + x₂) / (n₁ + n₂). تُستخدم هذه النسبة المجمّعة لبناء الخطأ المعياري، فيُقيَّم الاختبار كما لو كانت المجموعتان من المجتمع نفسه.

أما عند بناء فترة ثقة للفرق فيُستخدم خطأ معياري مستقل غير مجمّع، لأن النسبتين لا تُفترضان متساويتين في هذه الحالة.

القيمة الاحتمالية p هي احتمال ملاحظة فرق بين النسبتين العيّنيتين متطرف بهذا القدر على الأقل، في اتجاه الفرضية البديلة، إذا كانت نسبتا المجتمعين متساويتين فعلًا. وهي ليست احتمال أن تكون الفرضية الصفرية صحيحة.

قارنها بمستوى دلالة α مُختار مسبقًا (عادةً 0.05): إذا كانت p أقل من α عُدّت النتيجة دالة إحصائيًا؛ وإلا فإن البيانات لا تقدّم دليلًا كافيًا لاستنتاج اختلاف النسبتين.

يسأل الاختبار ثنائي الطرف عمّا إذا كانت النسبتان تختلفان في أي اتجاه، بينما يسأل الأحادي عمّا إذا كانت الأولى أكبر (أيمن) أو أصغر (أيسر) فقط. والاختبار ثنائي الطرف هو الخيار المتعارف عليه افتراضيًا.

اختر اختبارًا أحادي الطرف فقط عند صياغة فرضية اتجاهية قبل جمع البيانات. القيمة الاحتمالية الأحادية نصف الثنائية، لكن التحول إلى الأحادي بعد رؤية البيانات يرفع معدل الإيجابيات الكاذبة ولا يُنصح به.