データマイナーの思い込み 〜データマイニングの神話と思い込み〜をみて

ふとしたところから、SPSSさんのホワイトペーパーを見つけた。

・データマイナーの思い込み　〜データマイニングの神話と思い込み〜
PDF注意


これ読んで、いろいろと感慨深かったので、エントリにしたためることにした。

ちなみに、PCを代え、MBPからの初投稿であるのも感慨深い。

さて、本題に戻ろう。

まずね、導入部分がすばらしい

勇敢なデータマイナーたちは常に危険と隣り合わせである。例えばデータの山にうずもれてしまったり、大量のデータがなぜか消えてしまったり‥
このエッセイでは、データマイニングにまつわる神話とデータマイナーたちの思い込みの正体を暴いてみたい。

おお！それは楽しみですね！
最近、いろいろデータへの悩みはつきないので、わくわくしながら読むわけです。

■データマイニングの神話と誤解
　神話１：データマイニングは分析手法　アルゴリズムがすべて
　神話２：データマイニングは予測精度がすべて
　神話３：データマイニングにはDWHが必要
　神話４：データマイニングには膨大なデータが必須
　神話５：データマイニングは分析の専門家にしかできない
　神話６：ニューラルネットワークは不透明なので使えない。

　落とし穴１：データの山に埋もれる
　落とし穴２：テラバイトの不可思議な消失
　落とし穴３：ビジネスを知らない
　落とし穴４：データを知らない
　落とし穴５：誤った前提：エキスパートに対する過度な礼儀ただしさ
　落とし穴６：データマイニングツールの非互換性
　落とし穴７：データの牢獄に閉じ込められる
　落とし穴８：まとまりのないデータマイニング

詳細はPDFがDLフリーなので、興味のある方はみてほしいです。

もう、１つ１つが耳にいたいわ、胸に刺さるわでしたw

僕は営業サイドからきた分析見習い（現状）ですが、データ量のことやアルゴリズムは本当にこう思っていた節があります。
言い訳にすぎないのかなーって感じでした。
がんばります。

あと、前回のTokyoWebminingで話が少し出てましたけど、エンジニアがビジネスのことをあまり知らないケースはむしろ普通の状況だと思います。
でも、このホワイトペーパーによると、データマイニングはビジネスプロセスと密接に関わっているので、ビジネスを知らないのはだめだと書いてあります。

そういう意味で、ああいう勉強会の場で、我々のような現場上がりの人間の情報を共有することは大変意味のあることなんだと思いました。
最近のソーシャルメディアの文脈で語られているのですが、「知」ということはまさに関連性に意味があるわけです。

どんなに優れた知でも、いろんな人が知らない、共感しないようなものでは意味がない。

今回、いろいろと思い知らされたので、ご紹介しました！