*

C言語でEV3開発(25)-Q_Learningを実装してみた…が!?

公開日: : 最終更新日:2018/02/05 C言語, マインドストーム/EV3, 開発

どもです。
今回の内容は、「失敗しました」という内容です。

最近、流行になっている深層学習/強化学習のお勉強を始めました。
で。
やっぱりお勉強したら、実践したくなるのが人間の性です。
(ただし、エンジニアに限る…かも?)

1.やってみようとした内容
EV3本体での強化学習/Q-Learningを実装、実施してみようとしました。
入力としては、

・モーターの出力値(出力目標) x2
・超音波センサーの距離値

を選択しました。
これらのセンサー入力値を元に、自動で衝突回避を学習するようなシステムの実装を行ってみました。

2.やってみた結果
上記内容を実装、実機で動作させようとしたのですが、アプリケーションをロードすると

「Failed to load application」

と、液晶に表示されてしまいました。
次に、「EV3RT Console」でのログ内容を確認すると、

と表示されていました。
最後のercdを調べてみると、「t_stddef.h」において

と定義されています。
…えー…、単にメモリ不足ということ?
作ったアプリが使用するメモリを確保できない、ということ?
…だそうです。

3.原因は?
ざっくり調べてみました。
今回作成したアプリケーションでは、Q-Learningの値を保持するために、大量のメモリを必要としています。
具体的なメモリ量は、「32936220バイト」つまり「約32MB」になります。
そのため、この領域がメモリを圧迫していることが分かります。

以上、Q値を格納するための領域が、「Fail」の原因であることが判明しました。

4.対策は
…さて、どうしよう。
対策の検討と実装は、次回に。

ではっ!

2018/02/05 追記
うまくいかなかった例ですが、一応GitHubにソースコードを上げてみました。
EV3上で動作しないので、PC上で動作するバイナリファイルを作成、一緒にコミットしています。
なお、cygwin上でビルド、動作するようになっています。

関連記事

python

Ev3開発サポートツール(4)-Pythonによるグラフ表示

どもです。 前回のエントリーで、VisualStudioCommunityでのPythonの開発環

記事を読む

no image

C言語でEV3開発(17)-コマンドによるTOPPERS/HRP2 EV3RT アプリケーションの制御(コントロール)

どもです。 今回は、TOPPERS/HRP2 EV3RT で作成したアプリをPC上から操作するため

記事を読む

eclipse_4.3_kepler

eclipse/CDTにおけるgdbでのデバッグ中に発生するpythonのエラー

どもです。 今回のエントリーは、Eclipse上でのデバッグの際に「pythonのエンコードエラー

記事を読む

toppers

C言語でEV3開発(22)-ロギング機能

どもです。 前回は、モーターの出力を制御する方法について記載しました。その際に、モータ/車体が期待

記事を読む

eclipse-juno-logo

C言語でEV3開発(1)

どもです。 2回目の投稿。 本格的な投稿としては、初めての投稿になります。 内容は、LEG

記事を読む

google_test

C言語でEV3開発(6)

どもです。 今回のエントリーは、前回のエントリーの続き、google testでの単体テスト環境に

記事を読む

no image

C言語でEV3開発(4)

どもです。 今回のエントリーは、前回のエントリー内容/EclipseでEV3の実行ファイルをビルド

記事を読む

toppers

C言語でEV3開発(18)-モードの遷移の設計-コマンド通信処理の準備

 どもです。  今回は、前回紹介したEv3とBluetoothで通信する機能を

記事を読む

no image

C言語でEV3開発(10)-opOUTPUT_CLEAR_COUNTコマンド

どもです。 前回のエントリーのラストで、「モーターを動かすコマンド」と書きましたが、今回紹介するコ

記事を読む

no image

C言語でEV3開発(13)-opOUTPUT_STEP_SPEEDコマンド

どもです。 今回のエントリーは、モーターを動かすコマンドである 「opOUTPUT_STEP_S

記事を読む

Message

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です

CAPTCHA


次のHTML タグと属性が使えます: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code class="" title="" data-url=""> <del datetime=""> <em> <i> <q cite=""> <strike> <strong> <pre class="" title="" data-url=""> <span class="" title="" data-url="">

eclipse_oxygen
Linux/EclipseでRaspberryPiのクロス環境を構築してみた…がっ!

どもです。 前回のエントリでは、WindowsにRaspberryP

no image
Windows/EclipseでRaspberryPiのクロス環境を構築してみた

どもです。 今回は、Windows/EclipseでRaspberr

eclipse_oxygen
Eclipse/CrossCompile環境でプロジェクトをクリーンできない

どもです。 今回は、Eclipseでクロスコンパイル環境を作成した場

raspberry-pi
RaspberryPi3を購入しました

どもです。 突然ですが、「Raspberry Pi3 model B

toppers
C言語でEV3開発(28)-EV3の移動距離を計算できるようにしてみた

(テーマ) C言語でEV3開発(28)-EV3の移動距離を計算できる

→もっと見る

PAGE TOP ↑