【それを言ってはいけない！を言う】「データ分析失敗事例集」を読んで

はじめに

2023/08/03発売の「データ分析失敗事例集 ―失敗から学び、成功を手にする―」を知り合いのご厚意により頂いたので、読んでみたところ非常に面白かったので、感想をブログにまとめようと思います。

www.kyoritsu-pub.co.jp

全編通していい意味で社会性フィルターが外れていて、これを出版することは非常な苦労があったと察します。著者に敬意を評して、本ブログでも特に配慮などはせずに感想を書いていこうと思います。(何か問題があったらコメント欄で教えてください。コメントは公開前に自分にメールが来るようになってます。)

本書の概要

本書ではデータ分析の失敗談を短編小説のように楽しむことができる。
技術的な話はあまりないが、一部の専門用語については基本的な理解があると読みやすい。
- 例えば、BERT, 傾向スコア, Redshift, Tydyverseと聞いて、どういうものでどういう使われ方をするのか知っているとより良い。
著者は社会性フィルターを外し、物事をオブラートに包まずに記述している。この点が本書の価値でもあると感じた。
- 本書の冒頭に「ビジネス側を非難するような内容が含まれる」と書いてある。
- 全体を通じてビジネス側だけでなく、分析側の問題点も明確に指摘している。
データ分析の具体的な手法の詳細やシステムの構成・実装の方法については言及されていない。
大体十数時間で読める分量である。ただし自分は読むのが遅い方なので、人によっては10時間もかからないかもしれない。

読むべき対象者

データ分析の失敗あるあるを把握しておきたい学生
失敗を予め知り、自分の分析に活かしたい人
短編小説のような形でデータ分析の失敗談を楽しみたい人

本書の内容と特徴

本書は失敗談の短編集で、合計25個の事例が紹介されている。1事例は8から10ページで説明されていて、テンポよく読むことができる。各事例の冒頭では、登場人物の立場や所属会社がイラストで整理されているため、各事例の背景がわかりやすい。各事例では内容をオブラートに包まずに、失敗の原因を明確に指摘しているので痛快な文章である。一部を抜粋すると、以下のような内容である。

「調整役ばかりでものづくりをリードする人物がいない」
「そのような理由ではBERTをやめられるわけがなかった。このプロジェクトはY氏による『BERTを使ってなにかできないか』プロジェクトだからである。」
「半年後には想定以上の値を示すことができた。しかし一旦ダウンした査定が回復することはなく担当データサイエンティストは退職した。」
「効果検証分析の真の目的はすでに決定済みの社内意志の統一化であり、新たな意思決定に寄与することではなかった。」(意訳)

データ分析の失敗事例だけでなく、データサイエンティストの人事事情などもコラムとして紹介されていて興味深かった。「コラムデータサイエンティストの人事事情」は皆様も気になるところではないだろうか？

印象に残った事例

以下の事例が特に印象的であった。

CASE9 そんな目的変数で大丈夫か？
CASE15 プロダクトアウトでもドメイン知識は大事
CASE21 頑張って予測していたのは...
コラム絶対失敗しないデータ分析
CASE10 成功した報告しか聞きたくない

上4つに関しては、個人的に学びが多いという点で印象に残った。ネタバレは避けるが「そんなところに分析上の罠が...」といった感想だ。特に「コラム絶対失敗しないデータ分析」は本書の最終章であるが、今までとは異なり非常に真面目な文章で(いやずっと真面目だったろ)、データ分析にかける思いがアツく書かれている。

最後の一つCASE10に関しては、あまりにもデータサイエンティストが不遇で読んでてお腹が痛くなる感じがした。そういう意味で印象に残った。

学習する天然ニューラルネット

主に機械学習に関する覚書や情報の整理。競プロ水色→Kaggle Master→？