良いPoCとは
結果が意思決定の材料となるもの。とりあえずこれを達成すれば前には進む。
アンチパターン一覧
参考
ドメイン、タスク、リソースの関係性を把握できていない
解法が変な方向に行く。
過度なリップサービスによる失敗
検証方法を期間中に変えると結果の解釈が難しくなる。
解決方法を不必要に複雑にする
これに陥る場合、多くの場合仮説が間違っている。
簡単な対策
事前登録制度を真似するだけでいい。
- 実施目的を事細かく書く
- 仮説の内容とその根拠を明確にする
- 「AIだからできそう」は仮設の根拠にならない
- 実施方法をガチガチに固めて変更しない
- 材料が調達できない場合は素直にあきらめる
- 本開発に進む条件設定を事前に行う
絶対避けよう
- 多重検定
- その試行錯誤、多重検定になってない？
- データリーク
- あまりに良すぎる結果は疑おう