suzuderu

同じデータで何通り試したかを残す、集計の試行ログのつけ方

同じデータを眺めていると、開催場、天候、クラス、時期と、切り口をつい次々に変えたくなります。気づけば何十通りも集計していて、目を引いた一つだけが手元に残る。この「何通り試したか」は、あとで結果を読み返すときの大きな手がかりになります。ここでは、試行そのものを記録する方法を書きます。

試した切り口を全部書き出す

結果が出た集計だけでなく、見て捨てたものも一行ずつ残します。列は日付、切り口、対象期間、見えたこと、採用したかどうかの五つ程度で足ります。表計算ソフトなら、集計表とは別のシートにするだけで始められます。

採用しなかった理由も一言添える

差が見えなかった、件数が少なすぎた、定義を取り違えていた。理由は短くて構いません。数週間後に読み返すと、同じ行き止まりに入り込まずに済みますし、捨てた判断の根拠も自分で確かめられます。

切り口の本数を結果の横に置く

ある傾向を文章にするときは、それが何通り試した中の一つなのかを併記します。一通りだけ見て出た傾向と、二十通り見た中で目立った傾向とでは、読む側の受け取り方が変わるはずです。本数が分かるだけで、書き手も言い過ぎを避けやすくなります。

見る前に切り口の範囲を決めておく

分析を始める前に、今回見る切り口の一覧を先に書いておきます。一覧にない切り口を試すときは、その場で行を足す。それだけで、途中で方針がずれていく様子が記録に残ります。

後から足した切り口に印を付ける

最初の一覧になかった切り口には、追加の印を付けます。追加が悪いわけではなく、きっかけが何だったのかを辿れるようにするためです。たいていは、直前の集計で見えた偏りがきっかけになっています。

探索と確認を分けて書く

データを眺めて候補を探した集計と、別の期間で改めて確かめた集計とは、ログの上でも分けて記します。探索の段階で見えた傾向は、確認の段階を経ていない、と一言添えておくと読み違いが減ります。

月に一度ログを読み返す

試行ログは書いて終わりにせず、区切りの日に読み返します。何本試して、いくつ残したか。偏った切り口ばかり試していないか。自分の癖が見えてくると、次の分析の組み立て方も変わります。こうした記録の付け方や集計の考え方は、公営競技データ分析ノートでも扱っています。