データ分析とインテリジェンス

「データを使いやすくする人」たまに「データを分析してインテリジェンスを提供する人」。そ…

データ分析とインテリジェンス

「データを使いやすくする人」たまに「データを分析してインテリジェンスを提供する人」。その実態は謎の業界ウォッチャー。

マガジン

最近の記事

みんながSQLを書ける(データを民主化する)メリットとデメリット

「データの民主化」はSQLだけの話ではないのだけれども「データの民主化」という言葉は定期的に聞こえるが、定義がどうもつかめない。考えたところでわからないので具体的にそのうちの一部を構成していると思われる「データ抽出」を取り上げる。一応題名には入れておいたが、以降「データの民主化」は使わない。 「データ抽出」は大きく分けて「入手する」「加工する」の2つに分かれる。前者の代表例が「データベースからSQLを使ってデータを入手する」になる。 「入手する」には他にも「他部署になぜ必

    • SQLが書けたら分析ができるようになるのか

      「みんなSQLが書けるようになる」ことは本当にいいことなのかPdM・PM・営業・デザイナーなど、エンジニアやデータ分析者以外の人でもSQLを書くことを奨励している企業を時折見かける。極端な話ではみんながSQLを書けるなんて話もある。そういう話を見るたびに「本当にそれが一番いい方法なのだろうか」と気になっている。 全ての人が全ての仕事ができる、は理想だがそれが無理だから役割を分担しているはずだ。なのになぜかSQLについては誰でもできる、みたいな話になっているのは不思議でならな

      • いらないダッシュボードやデータはなぜ作られ続けるのか

        無駄な抽出で時間を浪費したくないいらないダッシュボードを作らないようにしようは多くの人に読んでもらったようだ。この時は抽出者側としての心がけ、みたいなのを書いたのだがそれだけではいらないデータが作られるのを止めることはできない。 そこで、いらないデータが作られてしまう原因についての全体を考えてみた。ダッシュボードを作ることが活動の中心の人は「いらないダッシュボード」として読んでもらってかまわない。 前提として、抽出担当者が別にいて役割分担とコミュニケーションが発生する場合

        • 分析は先にやればやるほど効果がある理由

          最初が間違えていたら元も子もない戦略(あるいは目標、KGI/KPI、企画、施策、アイデア、方針その他もろもろ)を決めても、実はそれが正しくないのであればどんなに実行されていようが正しい結果に繋がらない。 もしも最初から間違えていたとしたら、どんなに正しく実行されているかをチェックしても「間違えている方向に正しく進んでいるか」をチェックしているだけにすぎない。 だからこそ、正しい(あるいは、よりよい)方法を選ぶことが必要だ。そのためには調べて考える、つまり”分析”が必要で、

        みんながSQLを書ける(データを民主化する)メリットとデメリット

        マガジン

        • データ整備
          9本
        • データ分析
          27本
        • お知らせ
          6本
        • (旧)データ分析の基本をまとめてみる
          10本

        記事

          「データ分析」をやめよう

          「データ分析」をどんな意味で使っているか答えられますか「データ分析」という言葉はずいぶんと広まった。仕事をしていれば聞かない日はないぐらいだ。 ところが「データ分析」が何を意味しているのかがはっきしりない。何となくやっていることに対して何となく使っているのではと思うことも度々ある。 そこで、「データ分析」という言葉の使い方にどのような問題があり、代わりにどうしたらいいかについて書いてみる。 「データ分析をする」はサッカーでいえば「ボールを扱う」ぐらいの表現「データ分析」

          「データ分析」をやめよう

          なぜ「データの依頼のやり方」を知る必要があるのか

          「データの依頼のやり方」はどう学んでいるのかまとめられた知識がないので、個人の経験に基づいて行っている場合が多いだろう。しかしそれでは社会全体で考えると非常に効率が悪いと考えている。そこで、データの依頼のやり方についてまとめている。 しかし、完成にはまだかかりそう。なのでまずデータの依頼のやり方を知るべき理由について記事にした。 なぜ「データの依頼のやり方」を知る必要があるのか自分でデータを集める時間はないから もし自分でデータを集めようとすると、データの場所や、データ

          なぜ「データの依頼のやり方」を知る必要があるのか

          「仮説」には「どうやるか」ではない仮説があるのかもしれない

          どう実現するかではなく、何をするかのための仮説もあるのではないかやるべきことがあり、それを「どうやって実現するか」をあれこれ考える、というのはみんな日頃から行っていることだ。この時に出てくる案のことを「どうやるかの仮説」と呼ぶことにしよう。 それ以外にも、「何をするか」や「あるべき姿」を考える場合がある。こちらは「どうあるかの仮説」と呼ぼう。例えば、人生の目標とか、会社の長期的な戦略を決めるような場合を考えるのがよいだろう。 ここで疑問に思ったことがある。果たして、「どう

          「仮説」には「どうやるか」ではない仮説があるのかもしれない

          「仮説」を気軽に使うと事故になるので気を付けていること

          「仮説」を気軽に使っているけど、大丈夫?データ分析では「仮説」が良く話題にのぼるが、筆者は仮説という言葉があまり好きではない。 なぜならば、「仮説」というのは今そう思うことやすぐに思いつくこと、あるいはそうなって欲しいことになりがちだからだ。 「仮説を証明する」とか「〇〇がうまくいったか調べたい」なんてよく言われるが、これは仮説の間違えた使い方だ。仮説も考えるための道具であり、正しく使わないと事故につながる。 なので仮説は無暗に立てないのが一番いいと思う。しかし、すべて

          「仮説」を気軽に使うと事故になるので気を付けていること

          データ基盤を作ってもデータ分析ができるようにはならないので、作るのと使うのは一緒に考えよう

          データ基盤は令和の箱物行政にしないためにどうもデータ基盤を作ったりするのに比べると、データを使う話、特に意思決定のための分析について語られることが少ない。 もちろん単純に比較できるような話ではなく、データ基盤が不要だという話でもない。それにしても偏りすぎであり、この10数年(どころかずっと前から)かわらない。 その理由の1つには「データ基盤を作ってデータを集めておけば、あとはデータが活用できる」という考えがある気がしている。今回は、それは間違いであり、正しく使うためのスキ

          データ基盤を作ってもデータ分析ができるようにはならないので、作るのと使うのは一緒に考えよう

          データアナリストとは何をしている人なのか

          データアナリスト≒ビジネスマンなのかデータアナリストは「分析に責任がある人」ではなく「分析のスキルがある人」で定着している、という話を「データアナリスト」の違和感の正体では書いた。 ところで、データを収集し、分析し、意思決定するというのはだれでも行っている行為である。勘と経験もその人の持っているデータのみを使うというだけで分析だ。つまり「分析のスキルがある人」=ビジネスマンということでもある。ということは、データアナリスト=ビジネスマンとなってしまうがそれではまったく意味を

          データアナリストとは何をしている人なのか

          データの公開について行政に望むこと

          ダッシュボードを作るならデータも公開してくれたらいいのに行政がダッシュボードという形でデータを公開する事例が増えてきた。 見かける度に「ダッシュボードを作るにはデータを集めるだけでなく整備した上で使っているのだから、同時にデータも公開してくれたらいいのに」と思っている。 本記事では、集計前データを公開して欲しい理由と、データについて行政に望むことについて書く。 ダッシュボードとは「データ」の一部本記事ではダッシュボードに表示するために使われているデータを「集計前データ」

          データの公開について行政に望むこと

          「データアナリスト」の混乱は「インテリジェンス」の認識不足が原因なのかもしれない

          「データアナリスト」はもはや意味を成していないのでは?最近はデータ活用の意識が高まり始め、ここ数年は「データアナリスト」という職名もよく聞くようになってきた。 ところが、この「データアナリスト」もその定義や使い方が人によって違い混乱が見られる。それも名乗っている当人達を含めて曖昧になっていると見受けられる。 そこで、この記事ではなぜ「データアナリスト」について混乱が生じているのかを考察する。「データアナリスト」について思うところを書き始めたのだが、とても長くなってきたので

          「データアナリスト」の混乱は「インテリジェンス」の認識不足が原因なのかもしれない

          データ分析を始めるにあたり最低限知っておくべきこと

          まずやってみるのはいいけれども限度はあるはず。それはどこだサッカーに興味があるならば、ルールブックを熟読するよりも先にとにかくサッカーをやってみるのがいい、ということに反対する人はあまりいないと思う。 とはいえ全く何も知らないのではゲームが成立しなくなってしまうので、最低限知っておくべきことはあるはずだ。例えば、どうなったら得点になるのかは必須だろう。あとはゴールキーパー以外は手を使ってはいけないとか、範囲を出たらスローインになるとかだろうか。 では「データ分析」における

          データ分析を始めるにあたり最低限知っておくべきこと

          始まる前から失敗しているデータ分析

          データ分析の失敗にもいろいろある「データ分析」といっても範囲は広い。ある意思決定のためのプロセス1つだけでもたくさんのフェーズがあり、それぞれにまたたくさん失敗する要因がある。 そんな中でも「プロセスを始める前に失敗が約束されているデータ分析」になる要因は共通していると考えられるので、まとめてみる。 こんな「データ分析」では始める前から失敗している決めてから始める 行動した後に始める 目的がない いきなりデータを見る 丸投げする 自分だけで出来る範囲のことをやろ

          始まる前から失敗しているデータ分析

          理想的なメタデータ管理ツールはどんなものか

          まずはどうあるのがいいかを考えるメタデータを記録して管理するためのツールはどうあれば使いやすく、更新し続けられるのかを考えてみたい。 実務ではデータやシステムに対応している必要はなく利用しているデータやツールを具体的に想定して、その上で何がどこまでできるかの検討をすることになるが、今回は前提は一切おかずに思うままに欲しいことを書いていく。 理想的なメタデータ管理ツールにあって欲しい機能”全ての”メタデータが含まれ、相互に行き来ができる メタデータはデータベースに入ってい

          理想的なメタデータ管理ツールはどんなものか

          ダッシュボードを使う時の注意点

          意思決定に寄与しないならばダッシュボードを見るだけ時間の無駄大前提として、分析を行うためにデータを収集する目的は意思決定にあり、目的無きデータ分析は無駄である。ダッシュボードは収集するデータの一部であるので、やはり意思決定に繋がらないならば意味がない。 いらないダッシュボードを作らないようにしようとするのが一番であるが、必要だと思って作ったダッシュボードも使い方を間違えれば無駄になるどころか機会損失を招く。そこで、今回はダッシュボードの使い方に焦点をあてる。 ダッシュボー

          ダッシュボードを使う時の注意点