2021年8月26日木曜日

Running Q-Learning on your palm (Part1)

›
Japanese summary 　このアプリは、人工知能技術の一分野である「強化学習（特にQ-Learning）」の基本的な考え方と仕組みを、簡単な例を動かしながら学ぶものです。強化学習は、AlphaGo（囲碁）や自動運転、自律制御ロボットなどで使われ、注目を集めています。ここ...
2021年8月17日火曜日

スマホアプリで「強化学習」を学ぶ魅力！

›
【what is this】 最近の日経ソフトウェア誌に、「Pythonで強化学習を学ぶ」の解説記事がありました。丁寧に書かれていて分かりやすく、提供されているPythonプログラムも完全に動かすことができました。しかし、ここで留まらずに、理解をさらに深めるため、別のプラットフォ...
2021年8月11日水曜日

生徒・学生のための２つのITコンテストを応援しよう！

›
　すでに募集は締め切られていますが、生徒・学生のためのIT関連コンテストがありますので、ご紹介します。以下の２つは、いずれも小生が応援しているものです。 ● U18 IT夢コンテスト （神奈川工科大学主催） ● MIT App Inventor Summer Appathon （...
2021年8月7日土曜日

Scratchプログラミングで強化学習の基礎(3)

›
【what is this】 前回の「 Scratch で強化学習(2)」 の続編です。伊藤真著 [1] にある、レベル３の例題を検討します。前回のレベル２では、開始状態から最終状態までの「エピソード」を扱いましたが、今回の例題は最終状態の無いゲームでの得点（報酬）を競うものです...
2021年8月4日水曜日

A scene with a slide rule

›
Sometimes I write old, nostalgic articles. The following is what happened when I went to the United States in July 2014, seven years ago, to...
2021年8月2日月曜日

Scratchプログラミングで強化学習の基礎(2)

›
  【what is this】 前回の「 Scratch で強化学習」 の続編です。伊藤真著 [1] にある、レベル２の例題を検討します。前回のレベル１では、「行動、報酬」だけでしたが、今回は「状態、行動、報酬」を扱う本格的な強化学習の仕組みが入っています。そこにおいて、各状態...
2021年7月26日月曜日

Scratchプログラミングで強化学習の基礎(1)

›
【what is this】 子供向けと言われる Scratch ですが、伊藤真著 [1] にはゲームの形で、 強化学習 （３段階に分けたQ学習）が、実に丁寧に説明されています。大人にも有用と思われます。本記事では、このうちの最初の例題（レベル１）を対象として、（小生独自の改造も...
2021年7月10日土曜日

今いちど強化学習のCartPole（倒立振子）問題

›
【what is this】 強化学習の定番例題のひとつに、CartPole（倒立振子）があります。多くの場合、ポールの初期状態をほぼ真上（北向き）にしていますが、完全に倒れた真下（南向き）にした場合でも、うまく学習できて、長時間ポールを立て続けることができます。 ■  Cart...
2021年6月28日月曜日

梅雨の合間の小さな生き物

›
　このコロナ禍、気軽に旅行にも行けません。暫し、近所のちょっとした水場を散策する日々です。そんな時に出会った小さな生き物たち、何か安らぎを与えてくれます。以下の写真は、ニホンアマガエルとハグロトンボと思われます。 こんな石柱を登って何処へ行くの（厚木市郊外にて） おーい、そんな高...
2021年6月20日日曜日

A list of my articles about MIT App Inventor apps

›
I have written about 300 posts on this blog, including articles on computer science and smart phone applications. Most of them are written i...