ディープラーニング 機械学習(その4)

更新日

投稿日

【機械学習とは 連載目次】

 

 前回のその3に続いて解説を続けます。

1. ディープラーニング

 ディープラーニング(深層学習)の名前が知られるようになってきたのは2000年代と記憶しています。大元になっているのはニューラルネットワークであり、実は日本人の福島さんという方が1980年代に考案したネオコグニトロンが発祥といわれています。

機械学習

 現在では、この中間ノード層(隠れ層)のノード数、階層の数も多くなってきました。2012年に googleの猫で話題になったときの構造 GoogleNetは次のようなもので、バックプロパゲーションでの勾配消失を防ぎ、特徴を検出するために1レイヤ中でいくつかのフィルタリングを並行的に行なっているなどの工夫がなされているのが分かります。

機械学習

2. 基本的処理は四則演算

 ディープラーニングは一体何をしているのでしょう。これを理解するために今、次のような簡単なニューラルネットワークがあるとします。

機械学習

 ここで計算がどのように行われてゆくかを下記に示します。

機械学習

 最後の出力層では次のようになります。

機械学習

 隠れ層のノードに対して左から右に向かって計算をしますが、基本的に掛け算と足し算というような単純な計算の繰り返しになります。左側からデータを入れて出力計算をしますが、教師あり学習の場合、出力結果、つまり答えがどれになるのかが分かっていますから、その答えになるようにw11などの重み係数を調整し...

【機械学習とは 連載目次】

 

 前回のその3に続いて解説を続けます。

1. ディープラーニング

 ディープラーニング(深層学習)の名前が知られるようになってきたのは2000年代と記憶しています。大元になっているのはニューラルネットワークであり、実は日本人の福島さんという方が1980年代に考案したネオコグニトロンが発祥といわれています。

機械学習

 現在では、この中間ノード層(隠れ層)のノード数、階層の数も多くなってきました。2012年に googleの猫で話題になったときの構造 GoogleNetは次のようなもので、バックプロパゲーションでの勾配消失を防ぎ、特徴を検出するために1レイヤ中でいくつかのフィルタリングを並行的に行なっているなどの工夫がなされているのが分かります。

機械学習

2. 基本的処理は四則演算

 ディープラーニングは一体何をしているのでしょう。これを理解するために今、次のような簡単なニューラルネットワークがあるとします。

機械学習

 ここで計算がどのように行われてゆくかを下記に示します。

機械学習

 最後の出力層では次のようになります。

機械学習

 隠れ層のノードに対して左から右に向かって計算をしますが、基本的に掛け算と足し算というような単純な計算の繰り返しになります。左側からデータを入れて出力計算をしますが、教師あり学習の場合、出力結果、つまり答えがどれになるのかが分かっていますから、その答えになるようにw11などの重み係数を調整してゆくわけです。

 上図の場合、例えば答えが y1が正解で y2は不正解とすると、最終的に得られる y1=1、y2=0になるように、w11、w21など途中段階の係数を微調整してゆくというイメージです。その微調整をどう行うのかというところが、ディープラーニング発展の歴史の中で考え出されてきた様々な工夫ということになります。バックプロパゲーションがその代表です。

   続きを読むには・・・


この記事の著者

石田 茂

ものづくりの基本は人づくりをモットーに、技術者の持つ力を会社の組織力につなげるための仕組みづくりの伴奏支援を行います。

ものづくりの基本は人づくりをモットーに、技術者の持つ力を会社の組織力につなげるための仕組みづくりの伴奏支援を行います。


「機械学習・ディープラーニング」の他のキーワード解説記事

もっと見る
歴史と現状 機械学習(その1)

【機械学習とは 連載目次】 1. 機械学習(その1) 歴史と現状 2. 機械学習(その2) 機械学習手法の概要 3. 機械学習(その3) 異常検...

【機械学習とは 連載目次】 1. 機械学習(その1) 歴史と現状 2. 機械学習(その2) 機械学習手法の概要 3. 機械学習(その3) 異常検...


機械学習手法の概要 機械学習(その2)

【機械学習とは 連載目次】 1. 機械学習(その1) 歴史と現状 2. 機械学習(その2) 機械学習手法の概要 3. 機械学習(その3) 異常検...

【機械学習とは 連載目次】 1. 機械学習(その1) 歴史と現状 2. 機械学習(その2) 機械学習手法の概要 3. 機械学習(その3) 異常検...


機械学習とフレーム問題

   近ごろ機械学習を勉強しながらそれを業務に活用するよう努力しているせいか、機械学習、もしくは人口知能(AI)に関する記事がよく目に留まるよ...

   近ごろ機械学習を勉強しながらそれを業務に活用するよう努力しているせいか、機械学習、もしくは人口知能(AI)に関する記事がよく目に留まるよ...