スモールデータとビッグデータの違いとは

更新日

投稿日

 

情報マネジメント

 ビッグデータの活用と声高に叫ばれています。無論、自動的にビッグデータが取れれば多いに越したことはありませんが、スモールデータでも十分に検証できます。

 私は顧客アンケート調査の設計から実査、分析までを頻繁に行っていますが、今回は最適な回収データ数について解説します。

 よく、データを何人取ったら有効でしょうか?と質問を受けます。データはたくさん取った方がいいなど、いろいろな意見が飛び交いますが。データ数50人よりデータ数100人。三桁のデータを扱うことを目標にしましょう。特に根拠はありませんが、調査データが 50人よりは 100人の方がよさそうです。

 100人と200人となると、多い方がいいですが、人数が多くなるとそのための工数や費用が掛かります。そこで、統計解析には誤差を推定することが可能です。この考え方から必要なデータ数を考えて見ましょう。

 統計学の中に少ないデータで全体を推定することができます。その時の前提としては

  • データが少ないと全体の誤差が大きい。
  • データが多いと全体の誤差は少ない。

 ではどの程度でしょうか。比率の誤差は簡便法で 1/ √nで推定できるのです。

 100人の比率の誤差は 最大 10%、400人の比率の誤差は最大 5%、1万人の比率の誤差は最大 1%になります。

 例としてアンケート調査等で回答の比率の結果:男性 50%と結果が出ました。

 その時、100人の場合は ± 10%、400人の場合は ± 5%、1万人の場合は ± 1%。

 100人ですと、± 10%も誤差があるので、問題が出てきます。400人ですと、± 5%の誤差なので、統計でよく使う95%の許容範囲に入ってきます。

 また、アンケート調査の段階評価や得点評価において平均値を使うことも多いでしょう。

 平均値の誤差は、簡便法で 2/ √nで推定できます。

 100人の場合、誤差は ± 0.2点、400人の場合、誤差は ± 0.1点、1万人の場合、誤差は ± 0.02点になります。

 400人ですと、平均値 3.5点の結果は全体では 3.4点 ~ 3.6点 にあることが推...

 

情報マネジメント

 ビッグデータの活用と声高に叫ばれています。無論、自動的にビッグデータが取れれば多いに越したことはありませんが、スモールデータでも十分に検証できます。

 私は顧客アンケート調査の設計から実査、分析までを頻繁に行っていますが、今回は最適な回収データ数について解説します。

 よく、データを何人取ったら有効でしょうか?と質問を受けます。データはたくさん取った方がいいなど、いろいろな意見が飛び交いますが。データ数50人よりデータ数100人。三桁のデータを扱うことを目標にしましょう。特に根拠はありませんが、調査データが 50人よりは 100人の方がよさそうです。

 100人と200人となると、多い方がいいですが、人数が多くなるとそのための工数や費用が掛かります。そこで、統計解析には誤差を推定することが可能です。この考え方から必要なデータ数を考えて見ましょう。

 統計学の中に少ないデータで全体を推定することができます。その時の前提としては

  • データが少ないと全体の誤差が大きい。
  • データが多いと全体の誤差は少ない。

 ではどの程度でしょうか。比率の誤差は簡便法で 1/ √nで推定できるのです。

 100人の比率の誤差は 最大 10%、400人の比率の誤差は最大 5%、1万人の比率の誤差は最大 1%になります。

 例としてアンケート調査等で回答の比率の結果:男性 50%と結果が出ました。

 その時、100人の場合は ± 10%、400人の場合は ± 5%、1万人の場合は ± 1%。

 100人ですと、± 10%も誤差があるので、問題が出てきます。400人ですと、± 5%の誤差なので、統計でよく使う95%の許容範囲に入ってきます。

 また、アンケート調査の段階評価や得点評価において平均値を使うことも多いでしょう。

 平均値の誤差は、簡便法で 2/ √nで推定できます。

 100人の場合、誤差は ± 0.2点、400人の場合、誤差は ± 0.1点、1万人の場合、誤差は ± 0.02点になります。

 400人ですと、平均値 3.5点の結果は全体では 3.4点 ~ 3.6点 にあることが推定できます。

 一方費用の観点で見ると、400人と1万人で人数は 25倍にも関わらず。精度は 5倍しか上がりません。となると、闇雲にデータをたくさん取ると、費用対精度で大きく差が開いてきます。これらの観点で、私はアンケート調査で最適回収データ数は 500人と伝えます。

 

   続きを読むには・・・


この記事の著者

石川 朋雄

日本のものづくりは品質向上に切磋琢磨し,高品質な商品を開発しました。高品質商品と顧客価値創造を融合する商品企画のシステム化を提案します。

日本のものづくりは品質向上に切磋琢磨し,高品質な商品を開発しました。高品質商品と顧客価値創造を融合する商品企画のシステム化を提案します。


「情報マネジメント一般」の他のキーワード解説記事

もっと見る
データで表層課題を見える化する:データ分析講座(その338)

【目次】 仕事で難題に直面したとき、何かしら課題解決フレームワークを知っていると便利です。何をすべきか分からない状態から、少し解放さ...

【目次】 仕事で難題に直面したとき、何かしら課題解決フレームワークを知っていると便利です。何をすべきか分からない状態から、少し解放さ...


見える化の魔力 データ分析講座(その218)

  【この連載の前回:データ分析講座(その217)なぜ、開票率数%で当確なのか?へのリンク】 データ活用をするとき、「見える化」というキ...

  【この連載の前回:データ分析講座(その217)なぜ、開票率数%で当確なのか?へのリンク】 データ活用をするとき、「見える化」というキ...


SOR理論とデータ分析の「XYZフレームワーク」 データ分析講座(その158)

  ♦ レコメンド情報示し、確実なアクションを導く  今回は「SOR理論とデータ分析の『XYZフレームワーク』」の解説です。 ...

  ♦ レコメンド情報示し、確実なアクションを導く  今回は「SOR理論とデータ分析の『XYZフレームワーク』」の解説です。 ...


「情報マネジメント一般」の活用事例

もっと見る
既存コア技術強化のためのオープン・イノベーション:富士フイルムの例

 2015年7月20日号の日経ビジネスに、富士フイルムの特集が掲載されました。富士フイルムは、既存コア技術強化のためにオープン・イノベーションを果敢に...

 2015年7月20日号の日経ビジネスに、富士フイルムの特集が掲載されました。富士フイルムは、既存コア技術強化のためにオープン・イノベーションを果敢に...


‐社内の問題克服による開発活動‐  製品・技術開発力強化策の事例(その14)

 前回の事例その13に続いて解説します。社内における様々な問題を高いレベルで深く追及して解決することが、競争力のある技術を育成し、売れる製品を生み出す事に...

 前回の事例その13に続いて解説します。社内における様々な問題を高いレベルで深く追及して解決することが、競争力のある技術を育成し、売れる製品を生み出す事に...


現場のExcel依存に注意しよう

 マイクロソフトの「Excel」は企業の業務遂行にとって欠かせないツールになりました。数字の集計、グラフの作成にとどまらず、作業伝票の発行、作業の管理、資...

 マイクロソフトの「Excel」は企業の業務遂行にとって欠かせないツールになりました。数字の集計、グラフの作成にとどまらず、作業伝票の発行、作業の管理、資...