私が製品開発に携わったとき、私は実用的なデザイナー、つまり統計的研究だけに基づいてすべてをやろうとしたデザイナーにひどく激怒しました。
だから私はそれがもっと好きだからという理由だけで、ボタンを緑色にしたいのです。そして、デザイナーは、「問題ではありません。ABテストでは、下痢の色のボタンが0.2％頻繁にクリックされることが示されています」と述べています。主よ、相棒、あなたは10年間あなたの好みと経験を刺激してきました、それで、何ですか？私たちの製品を鳥のうんちのように見せるために？しかし、ビジネスは言う-数字があるので、それですべてをカバーします。
私は人々がお金を稼ぎたいと思っていることを理解しています。群衆の満足度に関しては、彼らは自分たちの好みを信頼したくありません。しかし今、私は問題が数ではなく、統計的テストの使い方を知らない人々にあるかもしれないことを知っています。
先週のポッドキャストでは、物理学と数学の博士号を取得し、パフォーマンス分析の専門家であるAndreyAkinshinが参加しました。彼もまた、現代の数学的統計に爆撃されている理由を私たちに語った。
. — .
, . « ». , , , . – . , , , .
« » — . . , , P-value, . P-value , , . , ( « » ).
- , . — . - . . P-value , . , .
, -, , . , – , : , , , . , ! .
– 0,05. ? , 30- , , – , — . 20 , , , .
0,05. — , . Qwerty, , . Qwerty .
. 80- , , . – . , , - , , – «false positive». . , , – «false negative».
0.2. . : «, , , , . – 0.05. ». , , 0.2 – , , .
: «, , , , , . , , 0.2, ». , . , . -, . , ?
, , - .
. , , , , , . . .
, – . , . P-value. – P-value , 0.05. 0.049 0.051, : «! !».
0.9, , . «» , 20 , P-value , . , .
, . , – -, , . , . - , , , .
— -. — , -.
: ? -, -, P-value . : «, - , , ». , . , – .
– , .
, , , .
, : « ?» ( ), : « !».
– 0 1. . , . , , , , , . . – . : « » « - » — .
. — ? -, , . ; , – P-value – .
, .
, , - — « , . ». , . . . — -, , . , , P-value, — , ! - .
, . , , .
, , . , . . « - , , , , ».
— -, , . , . , — - .
Harlow, Lisa L., Stanley A. Mulaik, and James H. Steiger, eds. What if there were no significance tests? Routledge, 2016.
Cohen, Jacob. "The earth is round (p<. 05)." In What if there were no significance tests?, pp. 69-82. Routledge, 2016.
Amrhein, Valentin, Fränzi Korner-Nievergelt, and Tobias Roth. "The earth is flat (p> 0.05): significance thresholds and the crisis of unreplicable research." PeerJ 5 (2017): e3544.
Wasserstein, Ronald L., Allen L. Schirm, and Nicole A. Lazar. "Moving to a world beyond “p< 0.05”." (2019): 1-19.
Winder, W. C. "What you always wanted to know about testing but were afraid to ask." American dairy review (1973).
Grieve, Andrew P. "How to test hypotheses if you must." Pharmaceutical statistics 14, no. 2 (2015): 139-150.
Krawczyk、Michał。「重要性の探求：実験心理学の文献におけるP値の分布におけるいくつかの特異性。」PloS one 10、いいえ。6（2015）。
そして、アンドレイによるもう1つのスピーチで、彼は問題についてより詳細に話します。