OKIYUKI99 Blog

データ分析や日常に関するブログ

2019-07-03から1日間の記事一覧

逐次的に検定を行っていると第一種過誤が増幅してしまう例(KDD 2017 : Peeking at A/B Tests より)

最近KDD 2017のPeeking at A/B Testsの論文を読んでいました。 www.kdd.org その論文の問題設定に関わるこの図が少し気になっていました。 これは何かというと、 このシミュレーションでは、サンプルサイズ10,000のA/B Test(仮にAが5,000、Bが5,000の対象が…