شغّل اختبار t لعيّنة واحدة في مِنصّة القوة، وتوقَّع — قبل أن تقرأ من الشاشة — حجم الأثر d، والقيمة الحرجة، والقوة عند حجمَي عيّنة، ومعدّل الإيجابية الكاذبة الذي يجعل تصيُّد الدلالة (p-hacking) ممكنًا.
القيمة الاحتمالية الصغيرة تخبرك فقط بأنّ البيانات كانت مفاجئة في ظلّ H₀. لا تخبرك بأنّ الأثر حقيقي، أو كبير، أو أنّ دراستك كان بمقدورها أصلًا أن تجده. والقوة — احتمال رفض H₀ حين يكون الأثر حقيقيًّا — هي الرقم الذي يقول إن كانت التجربة تستحقّ التشغيل. وعند أثرٍ حقيقي مقداره صفر، يكون معدّل الرفض مساويًا تمامًا لـα: شغّل ما يكفي من الاختبارات وسيبدو أحدها ذا دلالة بالصدفة، وهذا هو محرّك تصيُّد الدلالة كلّه.
افتح المِنصّة. تُسمّي كل خطوة المؤشّر الوحيد الذي تُغيّره؛ واترك ما عداه عند هذه القيم. تطبع القراءات واللوحات كل رقم تتوقّعه.
Test statistic -> One-sample t Tails -> Two-tailed
True effect -> 0.5 Population SD -> 1 n -> 20 alpha -> 0.05
راقب قراءات حجم الأثر d والقيمة الحرجة والقوة — ومنحنيَي الفرضية الصفرية والبديلة المظلَّلين اللذين يلتقيان عند القيمة الحرجة.
مع الأثر الحقيقي عند μ − μ₀ = 0.5 والانحراف المعياري للمجتمع عند σ = 1، يكون d = (μ − μ₀)/σ (د كوهين). توقَّع d ثم اقرأ قراءة حجم الأثر.
تُظهر القراءة d = 0.50 — أثرٌ «متوسّط» بمعايير كوهين. ولاحظ أنّه لا يحوي n: حجم الأثر هو ما تحاول كشفه، مستقلًّا عن حجم العيّنة.
أبقِ اختبار t لعيّنة واحدة، وn = 20، وα = 0.05، وذا الذيلين. القيمة الحرجة هي كمّيّة 0.975 من توزيع t عند n − 1 = 19 درجة حرّية. توقَّعها ثم اقرأ قراءة القيمة الحرجة.
القيمة الحرجة هي 2.093 — فقيمة t للعيّنة تتجاوز ±2.093 هي ما يعطي p < 0.05 ويرفض H₀.
المؤشّرات نفسها: اختبار t، وn = 20، وα = 0.05، وذو الذيلين، وd = 0.5. القوة هي P(reject H₀ | the effect is real). توقَّع القوة ثم اقرأ قراءة القوة.
تقرأ القوة 0.565 — نحو 56.5%. فحتى مع أثرٍ متوسّطٍ حقيقي، تُخطئه هذه الدراسة قرابة 44% من المرّات. ونتيجة غير دالّة هنا لا تُثبت شيئًا.
اسحب n من 20 إلى 80، مع ترك كل مؤشّر آخر كما هو. توقَّع القوة الجديدة ثم اقرأها — وقارنها بـ0.565 التي رأيتها عند n = 20.
تقفز القوة إلى 0.993 — نحو 99.3%. فمضاعفة n أربع مرّات (20 → 80) حوّلت دراسةً أقرب إلى رمي عملة إلى دراسةٍ شبه مؤكّدة، لأنّ اللامركزية δ = d√n تنمو مع √n.
الآن اضبط الأثر الحقيقي على μ − μ₀ = 0، فتصبح H₀ صحيحة. تتحوّل قراءة القوة إلى معدّل الإيجابية الكاذبة. توقَّع نسبة الاختبارات التي ما تزال ترفض H₀، ثم اقرأها.
معدّل الرفض هو 0.05 — أي α تمامًا. فعند أثرٍ حقيقي مقداره صفر، يكون اختبارٌ واحد من كل 20 ذا دلالة بالصدفة. شغّل 20 اختبارًا، واحتفظ بالدالّ منها فقط، تكن قد صنعتَ اكتشافًا كاذبًا — وذلك هو تصيُّد الدلالة (p-hacking).
كل ما سبق ينتظرك في المِنصّة. حرّك الأثر الحقيقي وn وراقب المنحنيين يضيقان ويتباعدان، واسحب α لترى القيمة الحرجة والمساحات المظلَّلة تتبادل الحجم، واضغط «تشغيل» لتَعُدّ الرفوض الحقيقية مقابل النظرية.
- قرأتَ حجم الأثر d = 0.50، وهو مقياسٌ للأثر خالٍ من n
- وجدتَ القيمة الحرجة ذات الذيلين عند 19 درجة حرّية: 2.093
- قِستَ القوة عند n = 20 — 0.565 فقط لأثرٍ متوسّطٍ حقيقي
- راقبتَ القوة تتسلّق إلى 0.993 عند n = 80، لأنّ δ = d√n
- رأيتَ معدّل الإيجابية الكاذبة يستقرّ عند α = 0.05 حين تكون H₀ صحيحة — محرّك تصيُّد الدلالة (p-hacking)