微分積分で必要な知識はいくらかありますが,先ずは高校数学のおさらいから始めたいと思います.これらの基本的な知識は現在の人工知能に使われているアルゴリズム理解にとって必要不可欠な存在です.中で何が行われているかを知りたい人は,ゆっくり学んでいきましょう.
目次
微分
微分と聞いて,接線の事を思い浮かべる人が多いと思います.これは微分係数が平均変化率の極限で求まることに起因するものです.
平均変化率とは…
「 が変化した時に がどれほど変化するか」
ということです.
が から に変化したとします. とすると,平均変化率は次のように表せます.
図で理解すると,AとBを結んだ線の傾きということになります.
この状態で,極限まで を に近づけた時,微分係数が求まります.微分係数は次の式で与えられます.
※どちらも同じ意味です.
図で理解すると,次のようになります.
⬇️
接線になりました!! まとめると,
となります!
n次関数の微分
さて,一般的な表記が求まったところで,実際の関数 に当てはめて考えてみましょう.
( は定数) の時,上記の式の分子は必ず0になります.この事を利用して,次の式が導けます.
では が 次関数の場合について解いていきましょう.
のとき
二項定理より,
となる事を利用して,
よって,
有名な公式が求まりました!
合成関数の微分
少しだけ発展的な内容になります.次のような関数を考えます.
つまり, の 部分が他の関数 で表現できるような関数( と の合成関数)の微分を考えます.
まとめると
となります.意外と便利な公式です.違う表記を取ると,次のようにも表現できます.
の部分が に相当する部分です.実際に計算してみましょう.
のとき, とすると
となります.便利さがわかっていただけたでしょうか.
積と商の微分
まず積の微分を考えます.具体的には次のような関数の微分を考えます.
微分すると,
とおくと,
となります. について解くと,
まとめると
これにて完了です.お疲れ様でした.
思い出すのに苦労しますが,導出できるようになれば確認できます.覚えておきましょう!