Chainer Dropoutによる近似ベイズ推論について２
以前に、Dropoutによる近似ベイズ推論に関する記事をあげました。
上記では、ソフトマックス関数の出力値の平均を、カテゴリカル分布のパラメータと見て、その不確実性をエントロピーとして算出していました。
Chainer
Chainer Chainer Dropoutによる近似ベイズ推論について
割と今更ですが、深層学習において、汎化性能を保つための工夫の一つであるDropoutを使って推論を行うことが、近似的にベイズ推論になっているという論文がありますので、それについて記します。
また、実際に試験的にMNIST画像分類で推論をしてみて、様子について確認してみようと思います。
Chainer Chainerによる転移学習とファインチューニングについて（VGG16、ResNet、GoogLeNet）
画像系の深層学習では、学習済みモデルの重みを利用する「転移学習」や「ファインチューニング」と呼ばれる手法がよく利用されます。
ILSVRCなどの画像認識コンペで優秀な成績を収めたモデルのネットワークアーキテクチャを深層学習のライブラリで構築し、公開されている学習済みの重みファイルを読み込ませて利用するという流れで実装します。
Chainer 深層強化学習でシステムトレードしてみたかった
今回は以下のアルゴリズムで、株価のデータから、システムトレードをするエージェントを学習させてみました。
DQN Double DQN Dueling Double DQN Dueling Double DQN + Prioritized Experience Replay
Chainer Kaggleの氷山コンペに参加してみた
表題の通り、Kaggleの氷山コンペにソロで参加していましたので、簡単にですが、その時の手法とか結果とか書いてみます。
コンペ自体は、１月末の時点で終了しています。
簡単にいえば、人工衛星から撮られた海の写真に、船か氷山かが写っており、それがどちらなのかを分類するタスクです。
Chainer Chainerでファインチューニングして特徴量抽出してみた
前回は、花の画像データセットで、VGG16の学習済みモデルを使って特徴量を抽出してみました。
今回は表題の通り、タグ付け情報を用いてファインチューニングを行った後に、特徴量を抽出して様子を見てみようと思います。
Chainer Chainerで転移学習・特徴量抽出して類似度を測ってみた
前回は自己符号化器で画像の画素値を次元圧縮し、得られた特徴量を使って類似度計算を行ってみました。
今回は、モデルを一から学習するのではなく、転移学習で得られた特徴量を使って類似度計算してみます。
深層学習のライブラリは、実装が楽だったため、Chainerを使いました。
Chainer 畳み込みニューラルネットワークで為替予測してみたかった
(adsbygoogle = window.adsbygoogle || []).push({});
タイトルの通り、為替データを畳み込みニューラルネットワーク（CNN）で読み込んで予測させるまでを、Chainerで実装してみま...
Chainer CNN、RNNで文章分類を実装してみた
(adsbygoogle = window.adsbygoogle || []).push({});
深層学習において文脈情報を学習させる方法としては、再帰的ニューラルネットワーク（RNN）を用いる方法と畳み込みニューラルネット...
Chainer Attention Seq2Seqで対話モデルを実装してみた
(adsbygoogle = window.adsbygoogle || []).push({});
MLPシリーズの「深層学習による自然言語処理」を読みました。
深層学習による自然言語処理 (機械学習プロフェッショナルシリーズ...
Chainer Chainerでニューラルネットワーク、RNN、CNNを実装してみた
(adsbygoogle = window.adsbygoogle || []).push({});
RNNの実装の勉強もしました。
今回は整理と備忘録も込めて、Chainerでニューラルネットワーク、リカレントニューラルネット...
Chainer Open AI GymのFrozenLakeを深層強化学習（DeepQ-Network）で解いてみた
(adsbygoogle = window.adsbygoogle || []).push({});
前回、強化学習で解いた問題を、今回は深層強化学習（Deep Q-Network、以降DQN）で解いてみます。
DQNを使う...
Chainer Chainerでニューラルネットワーク及び畳み込みニューラルネットワークを実装してみた
(adsbygoogle = window.adsbygoogle || []).push({});
追記（2017-06-20）
再帰的ニューラルネットワークも実装してみて、再度まとめました。
明けました。
本年もどうぞ、よ...