即時的データ分析・活用 データ分析講座(その170)

更新日

投稿日

情報

 

◆ 先行き不透明な時代に求められる”即時的”データ分析・活用

 データ分析なり予測モデル構築をする際「これまでの傾向がこれからも続く」ということを前提で実施している人が多い気がします。例えば「昨年の同時期に売れた商品と、今年の同時期の売れる商品はほぼ同じであろう」と推測する感じです。しかし新型コロナ騒動をみていると「このような過去の傾向が未来にも通用する」といった見方(データ分析・活用)だけでは限界もあると思います。今回は「変化が激しく、先行き不透明な時代に求められる”即時的”データ分析・活用」をテーマにお話します。

【目次】

1. データは所詮過去のものに過ぎない
 (1)先行きが見えないときこそ威力を発揮すべき
 (2)“即時的”データ分析の考え方
 (3)古典的にはベイズ方式
2. シンプルなのはウエイトバック方式
3. 今回のまとめ

 

1. データは所詮過去のものに過ぎない

 データは、過去の事象を記録したものです。商品が売れたという事象を、売上という形でデータで記録するものです。要するに「データは過去のことであって未来のことではない」ということです。このような前提の中で、データを活用し未来の見通しを良くしようと考えたり、今を過去のデータをもとにどうにかしようとしています。

(1)先行きが見えないときこそ威力を発揮すべき

 過去と未来はつながっています。劇的な天変地異が起こらなければ、過去と未来に大きな変化がないと考え、データ分析・活用を考えられています。ここに自己矛盾(むじゅん)というか、ある種のジレンマが内在しています。

 「過去と未来に大きな変化がないならば、データを見るまでもなく、過去と同様のことを繰り返し実施すれば十分ではないか」というものと「過去と未来に断絶が起こり、先行きが見えないからこそ、データの力を使い闇にロウソクの明かりを灯したい」というものです。「データ分析・活用は、先行きが見えないときこそ威力を発揮すべきであり、過去と未来に大きな変化があるためデータ分析・活用は無力です」とはなりません。要は、過去と未来に大きな変化がない“閉じた世界”を前提にしてはいけないということです。

(2)“即時的”データ分析の考え方

 そこで求められるのが、“即時的”データ分析・活用です。非常にシンプルなもので、直近のデータほど重視し、データ分析なり予測モデル構築をしましょう! ということです。ここでデータ量に、ある種のアンバランスな状況が生まれます。「直近」というぐらいなので「最近の大きな変化が起こった後のデータ量は少なく、大きな変化が起こる前の(過去の)データ量が多い」ということになることでしょう。しかしながら、過去と未来に大きな変化があったといっても、ある種の傾向は保っているケースが多いのです。

 新型コロナが流行しても、春先には花粉症、夏になれば暑くなります。暑くなれば、涼を求め冷たいアイスクリームなどの商品が売れることでしょう。過去に比べて売り上げは落ちるかもしれませんが、春に比べれば売れると思います。

 要は、ある種の傾向を保ちつつ、直近の事象によって影響を受けるデータ分析なり予測モデル構築を行う、ということです。

(3)古典的にはベイズ方式

 統計学には日本の学校や大学の多くでメインに学ぶネイマン・ピアソン流の統計学と、ベイズの定理を活用したベイズ流の統計学があります。

 ベイズ統計学は、確率という概念を未来視点で縛るとおかしなことをしていると感じますが、過去や未来という時間の概念的な縛りをなくすと、便利な道具であることに気が付きます。過去に起こった事象にも確率という概念を導入します。過去に起こったかどうかは既に分かっているので、確率的には0 or 1しかありえませんが、ベイズ統計学の世界では主観確率という概念を用いることで、すでに起こったことに対し確率0.3(30%)であるといったりします。このようなややこしい議論は先に置いておきます。

 ベイズ統計学は、事前に持っているある事象の起こる確率を、新しい情報(データ)を得るたびに更新していきます。

 分かりやすくいうと「大きな変化の起こる前の過去の傾向を、大きな変化の起こった後のデータで更新する」ということです。この更新頻度を高めていけば、今起こっていることをデータ化しておくことで、即自的に今を反映したデータ分析や予測モデル構築が可能となります。「ベイズ」というキーワードから難しく感じるかもしれませんが、それほど難しいものではありません。

 ベイズ統計学の面白いところは、現場の人の知見を、新しいデータを得るたびに更新することができるところにあります。このような使い方は、データ量が不十分なときに生きます。例えば、まずは現場の知見(思い込みでもOK)の力を借りてモデルを構築し、客観的なデータを入手するたびに更新する、という感じです。

 

2. シンプルなのはウエイトバック方式

 ある種の変わらない傾向を保ちつつ、直近の事象によって影響を受けて進化させるデータ分析なり予測モデル構築を行えばいい、ということであれば、もっと簡単な方法があります。こちらも古典的ですが、ウエイトバックを利用するというものです。簡単に説明すると、直近のデータほど重視するため、直近のデータには大きなウエイトを付け、データ分析や予測モデルを構築を行います。

 データ分析ツールの多くは、例えば回帰モデルを構築するときに、このウエイト付けをする機能が備わっていますの...

情報

 

◆ 先行き不透明な時代に求められる”即時的”データ分析・活用

 データ分析なり予測モデル構築をする際「これまでの傾向がこれからも続く」ということを前提で実施している人が多い気がします。例えば「昨年の同時期に売れた商品と、今年の同時期の売れる商品はほぼ同じであろう」と推測する感じです。しかし新型コロナ騒動をみていると「このような過去の傾向が未来にも通用する」といった見方(データ分析・活用)だけでは限界もあると思います。今回は「変化が激しく、先行き不透明な時代に求められる”即時的”データ分析・活用」をテーマにお話します。

【目次】

1. データは所詮過去のものに過ぎない
 (1)先行きが見えないときこそ威力を発揮すべき
 (2)“即時的”データ分析の考え方
 (3)古典的にはベイズ方式
2. シンプルなのはウエイトバック方式
3. 今回のまとめ

 

1. データは所詮過去のものに過ぎない

 データは、過去の事象を記録したものです。商品が売れたという事象を、売上という形でデータで記録するものです。要するに「データは過去のことであって未来のことではない」ということです。このような前提の中で、データを活用し未来の見通しを良くしようと考えたり、今を過去のデータをもとにどうにかしようとしています。

(1)先行きが見えないときこそ威力を発揮すべき

 過去と未来はつながっています。劇的な天変地異が起こらなければ、過去と未来に大きな変化がないと考え、データ分析・活用を考えられています。ここに自己矛盾(むじゅん)というか、ある種のジレンマが内在しています。

 「過去と未来に大きな変化がないならば、データを見るまでもなく、過去と同様のことを繰り返し実施すれば十分ではないか」というものと「過去と未来に断絶が起こり、先行きが見えないからこそ、データの力を使い闇にロウソクの明かりを灯したい」というものです。「データ分析・活用は、先行きが見えないときこそ威力を発揮すべきであり、過去と未来に大きな変化があるためデータ分析・活用は無力です」とはなりません。要は、過去と未来に大きな変化がない“閉じた世界”を前提にしてはいけないということです。

(2)“即時的”データ分析の考え方

 そこで求められるのが、“即時的”データ分析・活用です。非常にシンプルなもので、直近のデータほど重視し、データ分析なり予測モデル構築をしましょう! ということです。ここでデータ量に、ある種のアンバランスな状況が生まれます。「直近」というぐらいなので「最近の大きな変化が起こった後のデータ量は少なく、大きな変化が起こる前の(過去の)データ量が多い」ということになることでしょう。しかしながら、過去と未来に大きな変化があったといっても、ある種の傾向は保っているケースが多いのです。

 新型コロナが流行しても、春先には花粉症、夏になれば暑くなります。暑くなれば、涼を求め冷たいアイスクリームなどの商品が売れることでしょう。過去に比べて売り上げは落ちるかもしれませんが、春に比べれば売れると思います。

 要は、ある種の傾向を保ちつつ、直近の事象によって影響を受けるデータ分析なり予測モデル構築を行う、ということです。

(3)古典的にはベイズ方式

 統計学には日本の学校や大学の多くでメインに学ぶネイマン・ピアソン流の統計学と、ベイズの定理を活用したベイズ流の統計学があります。

 ベイズ統計学は、確率という概念を未来視点で縛るとおかしなことをしていると感じますが、過去や未来という時間の概念的な縛りをなくすと、便利な道具であることに気が付きます。過去に起こった事象にも確率という概念を導入します。過去に起こったかどうかは既に分かっているので、確率的には0 or 1しかありえませんが、ベイズ統計学の世界では主観確率という概念を用いることで、すでに起こったことに対し確率0.3(30%)であるといったりします。このようなややこしい議論は先に置いておきます。

 ベイズ統計学は、事前に持っているある事象の起こる確率を、新しい情報(データ)を得るたびに更新していきます。

 分かりやすくいうと「大きな変化の起こる前の過去の傾向を、大きな変化の起こった後のデータで更新する」ということです。この更新頻度を高めていけば、今起こっていることをデータ化しておくことで、即自的に今を反映したデータ分析や予測モデル構築が可能となります。「ベイズ」というキーワードから難しく感じるかもしれませんが、それほど難しいものではありません。

 ベイズ統計学の面白いところは、現場の人の知見を、新しいデータを得るたびに更新することができるところにあります。このような使い方は、データ量が不十分なときに生きます。例えば、まずは現場の知見(思い込みでもOK)の力を借りてモデルを構築し、客観的なデータを入手するたびに更新する、という感じです。

 

2. シンプルなのはウエイトバック方式

 ある種の変わらない傾向を保ちつつ、直近の事象によって影響を受けて進化させるデータ分析なり予測モデル構築を行えばいい、ということであれば、もっと簡単な方法があります。こちらも古典的ですが、ウエイトバックを利用するというものです。簡単に説明すると、直近のデータほど重視するため、直近のデータには大きなウエイトを付け、データ分析や予測モデルを構築を行います。

 データ分析ツールの多くは、例えば回帰モデルを構築するときに、このウエイト付けをする機能が備わっていますので、この機能を利用すると簡単に、ある種の変わらない傾向を保ちつつ、直近の事象によって影響を受けて進化させるデータ分析なり予測モデル構築を実現することができます。つまりこれが「直近の激しい変化に追随する“即時的”データ分析・活用」です。もちろん、リアルタイムに追随するするというのではなく、ワンテンポ遅れた追随になります。

 

3. 今回のまとめ

 今回は「変化の激しく先の見えない時代に求められる”即時的”データ分析・活用」というお話しをしました。データ分析なり予測モデル構築を行う際「これまでの傾向がこれからも続く」ということを前提で実施している人が多い気がしますが、ここ数か月間の新型コロナ騒動をみていると、このような過去の傾向が未来にも通用する、という見方(データ分析・活用)だけでは限界があると思います。そこで、“即時的”データ分析・活用です。古典的になベイズ統計学の考え方の活用、シンプルなのはウエイトバック方式がお勧めです。どちらも簡単に実現できますので、興味のある方は試してみてはいかがでしょうか。

   続きを読むには・・・


この記事の著者

高橋 威知郎

データネクロマンサー/データ分析・活用コンサルタント (埋もれたデータに花を咲かせる、データ分析界の花咲じじい。それほど年齢は重ねてないけど)

データネクロマンサー/データ分析・活用コンサルタント (埋もれたデータに花を咲かせる、データ分析界の花咲じじい。それほど年齢は重ねてないけど)


「情報マネジメント一般」の他のキーワード解説記事

もっと見る
管理会計の5つの指標を出発点に指標設計 データ分析講座(その21)

  ◆ データ分析が上手くいかないなと感じたら、管理会計視点で指標(KPIやKGIなど)を見直そう  最近いくつかの企業の方からよく聞く...

  ◆ データ分析が上手くいかないなと感じたら、管理会計視点で指標(KPIやKGIなど)を見直そう  最近いくつかの企業の方からよく聞く...


教師あり・なし学習による異常検知とは:データ分析講座(その315)

  データサイエンスのビジネス活用が広まる中、最も活用されているものの1つが異常検知です。異常検知とは、膨大なデータの中から通常とは異なる...

  データサイエンスのビジネス活用が広まる中、最も活用されているものの1つが異常検知です。異常検知とは、膨大なデータの中から通常とは異なる...


最近多いケーススタディ⑥「モニタリング指標の異常検知」 データ分析講座(その193)

    データを使い販売力を効率的に高めるセールスアナリティクスには、3つの典型的なテーマがあります。 新規顧客の獲得 既...

    データを使い販売力を効率的に高めるセールスアナリティクスには、3つの典型的なテーマがあります。 新規顧客の獲得 既...


「情報マネジメント一般」の活用事例

もっと見る
‐クレ-ム情報を開発に活用‐  製品・技術開発力強化策の事例(その13)

 前回の事例その12に続いて解説します。顧客から出されたクレ-ムは、技術開発や、関連製品の開発の可能性を潜在させている場合が多いようです。その視点からクレ...

 前回の事例その12に続いて解説します。顧客から出されたクレ-ムは、技術開発や、関連製品の開発の可能性を潜在させている場合が多いようです。その視点からクレ...


既存コア技術強化のためのオープン・イノベーション:富士フイルムの例

 2015年7月20日号の日経ビジネスに、富士フイルムの特集が掲載されました。富士フイルムは、既存コア技術強化のためにオープン・イノベーションを果敢に...

 2015年7月20日号の日経ビジネスに、富士フイルムの特集が掲載されました。富士フイルムは、既存コア技術強化のためにオープン・イノベーションを果敢に...


中小製造業のウェブ戦略

 中小製造業がウェブサイトを立ち上げる際、その目的として「自社の信用力を高めるための会社概要的な役割」と考える経営者も少なくない。しかし、当社のクライアン...

 中小製造業がウェブサイトを立ち上げる際、その目的として「自社の信用力を高めるための会社概要的な役割」と考える経営者も少なくない。しかし、当社のクライアン...