ค่า p คือความน่าจะเป็น — ภายใต้ข้อสมมติที่ว่าสมมติฐานว่าง เป็นจริง — ที่จะสังเกตข้อมูลที่มีความสุดขีดอย่างน้อยเท่ากับตัวอย่างที่แท้จริง ค่า p น้อยหมายความว่าข้อมูลที่สังเกตพบจะไม่น่าจะเกิดขึ้นหาก เป็นจริง จึงเป็นหลักฐานที่ต่อต้าน
ข้อตกลง: ปฏิเสธ ถ้า (ปกตินิยม ) ค่าเกณฑ์ คืออัตราข้อผิดพลาดประเภท I ที่คุณยอมรับ
ความเข้าใจผิดที่พบบ่อย (ที่ทุกอาจารย์สถิติเน้นย้ำ):
- ไม่ใช่ "ความน่าจะเป็นที่ เป็นจริง"
- ไม่ใช่ "ความน่าจะเป็นที่ผลลัพธ์เกิดจากความบังเอิญ"
- ค่า น้อยไม่ได้หมายความว่าผลกระทบมาก — เพียงแต่ผลกระทบที่ไม่น่าจะเกิดขึ้นภายใต้ เมื่อตัวอย่างมีขนาดใหญ่มาก ผลกระทบที่เล็กน้อยก็กลายเป็น "มีนัยสำคัญทางสถิติ"
- ไม่ใช่หลักฐานว่า เป็นจริง — เป็นเพียงหลักฐานที่ไม่เพียงพอในการปฏิเสธ
American Statistical Association (2016) ได้เตือนอย่างชัดเจนไม่ให้ปฏิบัติต่อค่า p ราวกับเป็นการตัดสินใจแบบไบนารี "มีนัยสำคัญ / ไม่มีนัยสำคัญ" ให้รายงานขนาดผลกระทบและช่วงความเชื่อมั่นควบคู่กันไปด้วย