きゅんどう @ksyundo
A keen maker, programmer and an Instructables author.

apache arduino beagleboneblack bluetooth cnc cnc3020 cpp ddp esp32 foxy-fitzroy haskell hew hugo ilqr imitation-learning imu inventor m5stack m5stack-gray mpu-9250 pepper pipenv python ramデバッグ reinforcement-learning ros2 sh7125 slq ひずみゲージ アナスタシア ジャイロセンサ センサ 技術書展7 距離センサ
ros

macOS 10.15 Catalina に ROS2 Foxy Fitzroyをインストールする

まとめ

Differential Dynamic Programming(DDP)/iterative LQR(iLQR)/Sequential LQR(SLQ)

強化学習についてまとめる

強化学習についてまとめる(7) DQNとDDQN

強化学習についてまとめる(6) モデルベース強化学習

強化学習についてまとめる(5) 自然方策勾配法とTRPO, PPO

強化学習についてまとめる(4) 方策勾配に基づくアルゴリズム、Actor-Critic

強化学習についてまとめる(3) 方策勾配

強化学習についてまとめる(2) 反復による価値の推定

強化学習についてまとめる(1) MDPとベルマン方程式

Haskellで高階関数を組み合わせて部分文字列を作る例が全然わからなかったから考えた

できるだけconstexprを使おう

ひずみゲージとその利用法

距離センサ

ジャイロセンサ

加速度センサ

ソフトウェア

Pipenvを使う

WordpressをロリポップからDigital Oceanに移した

XAMPPのエイリアス設定

InventorのシートメタルからDXFの書き出し

ルネサスHEWの使い方

未分類

ドコモを解約してIIJのみおふぉんにMNP転入した

最近どうしているかということとROBO-ONEはどうだったかという話

機械学習プロフェッショナルシリーズ第1弾から2冊買った

2013年の振り返り

第23回ROBO-ONEに行ってきました

第22回ROBO-ONE

あけましておめでとうございます

今年

[C++]CSVファイルの読み込み

[C++]1次元配列を3次元配列に整形する

倒立振子など

2012謹賀新年

ロボットバトルin名古屋モーターショー観戦、中部ロボット忘年会

作業進んでなくても記事が書ける、だってASIMOの新型が出たんだもの

鳥人間→船場ロボコン

あおいは!

人形みたいな写真とかあるから注意

C言語のポインタについてまとめ

サーボQ

SH7125でPWM12本生成

非直交軸の逆キネ

掲載場所移動のおしらせ

2足歩行ロボットキット一覧

ロボットの構成要素

うっうー

あけましておめでとうございます2011

OH~波、ばんばばんばん

ミニミニミクロ電子・・・

溢れてくるのはこの気持ち

ぐるぐる使い

山河あり

your best clock

最近怠けすぎ

この気持ちを今あえて言葉にするなら・・・

記者の善永と申します

角度計測

縮小粘土物語

パブロフの犬だ!パブロフの犬だ!

おお

部屋中粉だらけ

船場ロボットファッションコンテスト及びパレード

船場ロボコン・パレード

いてきま

せんばろぼこん

お洋服買った

外装被せてみた。

お人形制作過程5

お人形制作過程4

お人形制作過程3

お人形制作過程2

お人形制作過程

設計だす

はじまり

絶望した

ロボットのためのC言語

首が無いんだ

動画紹介

辛いが旨い

やがて洪水がすべて夜の青の色に染めていくように

サーボ描いた

仮想パーティ

最近読んだ本

泥沼から逃れる

倉庫

ゾロ目見過ごし

メリクリ

あわや

ビルドできないとき

やりたくねーったらやりたくねー

算数のお時間

うわー全然更新してない

Vstone速すぎ

やっぱギリギリ(笑

なんかギリギリ

更新したお

ちょwwwローゼン凄すぎww

あまりにもショックだったから試験期間中のブログ更新禁止ルールを破った

まいっちんぐ

アニメじゃなくないしホントのことでもない

おお眠い

届いた

雛[hina]ちゃん週間ランク1位!!!!

なんというかデカルチャー

頭が無いのは自分

なかなか進まぬ

3DCAD

まさにムダ状態!!

RAMデバッグとか

HEW・・・・・・なんて頼もしいの!!

アルミ塗装法

RCB-1を攻略しようぜ

戦力確認

釈迦はいいひとだったから!

仮定

帯鋸

うまくいきました・・・・・・が

うんざり

RCB-1を攻略しようぜまたーりと(5)

KRC-1+KRR-1からの信号読み取り成功

つーてんかくの本棚

さようならさようならこんな遠い異国の果てでお別れするなんて本当に辛い

宿題が倒せない

自重汁!!

遅れた

いってくるお

RCB-1を攻略しようぜまたーりと(4)

月曜日なのに機嫌悪いのどうするよ

とっぷらんなー

なんか出るココ!

訂正

バッテリー(あさのあつこ著ではない)

RCB-1を攻略しようぜまた-りと(3)

色ついた

RCB-1を攻略しようぜまた-りと(2)

RCB-1を攻略しようぜまた-りと

届いた

黄泉かえる

本

生存報告

ひとよひとよに

新兵器は化けも!!

無題です

ひさし

あけましておめでとうございます

ぺ

とほほ

なぜなぜ?

涼宮ハルヒのKHR-1

いいタイトル思いつかない

ぬーん

やっと終わったぜ・・・

はぁ・・・

先生

近状

RCB 動いた

フフフ・・・(なにやら不敵な笑み)

あ、でけた

あふああ

こ・ま・ん・ど?

誕生日

なぜ?

いっきに

野望(なんだか恥ずかしくなってきたので改題

プログラムしてみたお

初めてユニバーサル基盤で

もうすこし

超入門で・・・

プレセット電圧に注意

ロボットってそもそも・・・・・・

報告

ロボットの進化

はじめまして

機械

ロボットを吊るアームを作った

中華CNC CNC3020導入記 USBCNCで使う

中華CNC CNC3020導入記 設定編2

中華CNC CNC3020導入記 設定編

中華CNC CNC3020導入記 購入編

紹介記事

C++初心者会に参加してきた

Pepper Tech Festival 2014に行ってきた

正直舐めてた「X-RHex」

6足ロボット「X-RHex」

論文読み

論文 Exploration by Random Network Distillation

論文 Asynchronous Methods for Deep Reinforcement Learning

論文 Learning Complex Dexterous Manipulation With Deep Reinforcement Learning and Demonstrations

開発日誌

ブログも静的ページにしたらどうか

Haskellを入れる

形がみえてきた

届いた

加工経路

やっと

軌道戦士バンナム

雑記

強化学習 基礎から実践 PyTorchとmachinaで二足歩行エージェントをつくる を書きました

あけましておめでとうございます

お掃除ロボットルンバ購入ガイド

NINTENDO3DSレビュー

電子工作

M5stack Gray で MPU9250 で取得した角度を Bluetooth SPPで送る

Beagle Bone Blackにカメラを繋げてOpenCVで顔検出した

Beagle Bone BlackにUbuntu14.04とデスクトップ環境をインストールした

RAMデバッグ(sh7125)

© 2020 ROBO LOG

Powered by Hugo with Dream Plus theme.

きゅんどう @ksyundo
A keen maker, programmer and an Instructables author.

apache arduino beagleboneblack bluetooth cnc cnc3020 cpp ddp esp32 foxy-fitzroy haskell hew hugo ilqr imitation-learning imu inventor m5stack m5stack-gray mpu-9250 pepper pipenv python ramデバッグ reinforcement-learning ros2 sh7125 slq ひずみゲージ アナスタシア ジャイロセンサ センサ 技術書展7 距離センサ
ros

macOS 10.15 Catalina に ROS2 Foxy Fitzroyをインストールする

まとめ

Differential Dynamic Programming(DDP)/iterative LQR(iLQR)/Sequential LQR(SLQ)

強化学習についてまとめる

強化学習についてまとめる(7) DQNとDDQN

強化学習についてまとめる(6) モデルベース強化学習

強化学習についてまとめる(5) 自然方策勾配法とTRPO, PPO

強化学習についてまとめる(4) 方策勾配に基づくアルゴリズム、Actor-Critic

強化学習についてまとめる(3) 方策勾配

強化学習についてまとめる(2) 反復による価値の推定

強化学習についてまとめる(1) MDPとベルマン方程式

Haskellで高階関数を組み合わせて部分文字列を作る例が全然わからなかったから考えた

できるだけconstexprを使おう

ひずみゲージとその利用法

距離センサ

ジャイロセンサ

加速度センサ

ソフトウェア

Pipenvを使う

WordpressをロリポップからDigital Oceanに移した

XAMPPのエイリアス設定

InventorのシートメタルからDXFの書き出し

ルネサスHEWの使い方

未分類

ドコモを解約してIIJのみおふぉんにMNP転入した

最近どうしているかということとROBO-ONEはどうだったかという話

機械学習プロフェッショナルシリーズ第1弾から2冊買った

2013年の振り返り

第23回ROBO-ONEに行ってきました

第22回ROBO-ONE

あけましておめでとうございます

今年

[C++]CSVファイルの読み込み

[C++]1次元配列を3次元配列に整形する

倒立振子など

2012謹賀新年

ロボットバトルin名古屋モーターショー観戦、中部ロボット忘年会

作業進んでなくても記事が書ける、だってASIMOの新型が出たんだもの

鳥人間→船場ロボコン

あおいは!

人形みたいな写真とかあるから注意

C言語のポインタについてまとめ

サーボQ

SH7125でPWM12本生成

非直交軸の逆キネ

掲載場所移動のおしらせ

2足歩行ロボットキット一覧

ロボットの構成要素

うっうー

あけましておめでとうございます2011

OH~波、ばんばばんばん

ミニミニミクロ電子・・・

溢れてくるのはこの気持ち

ぐるぐる使い

山河あり

your best clock

最近怠けすぎ

この気持ちを今あえて言葉にするなら・・・

記者の善永と申します

角度計測

縮小粘土物語

パブロフの犬だ!パブロフの犬だ!

おお

部屋中粉だらけ

船場ロボットファッションコンテスト及びパレード

船場ロボコン・パレード

いてきま

せんばろぼこん

お洋服買った

外装被せてみた。

お人形制作過程5

お人形制作過程4

お人形制作過程3

お人形制作過程2

お人形制作過程

設計だす

はじまり

絶望した

ロボットのためのC言語

首が無いんだ

動画紹介

辛いが旨い

やがて洪水がすべて夜の青の色に染めていくように

サーボ描いた

仮想パーティ

最近読んだ本

泥沼から逃れる

倉庫

ゾロ目見過ごし

メリクリ

あわや

ビルドできないとき

やりたくねーったらやりたくねー

算数のお時間

うわー全然更新してない

Vstone速すぎ

やっぱギリギリ(笑

なんかギリギリ

更新したお

ちょwwwローゼン凄すぎww

あまりにもショックだったから試験期間中のブログ更新禁止ルールを破った

まいっちんぐ

アニメじゃなくないしホントのことでもない

おお眠い

届いた

雛[hina]ちゃん週間ランク1位!!!!

なんというかデカルチャー

頭が無いのは自分

なかなか進まぬ

3DCAD

まさにムダ状態!!

RAMデバッグとか

HEW・・・・・・なんて頼もしいの!!

アルミ塗装法

RCB-1を攻略しようぜ

戦力確認

釈迦はいいひとだったから!

仮定

帯鋸

うまくいきました・・・・・・が

うんざり

RCB-1を攻略しようぜまたーりと(5)

KRC-1+KRR-1からの信号読み取り成功

つーてんかくの本棚

さようならさようならこんな遠い異国の果てでお別れするなんて本当に辛い

宿題が倒せない

自重汁!!

遅れた

いってくるお

RCB-1を攻略しようぜまたーりと(4)

月曜日なのに機嫌悪いのどうするよ

とっぷらんなー

なんか出るココ!

訂正

バッテリー(あさのあつこ著ではない)

RCB-1を攻略しようぜまた-りと(3)

色ついた

RCB-1を攻略しようぜまた-りと(2)

RCB-1を攻略しようぜまた-りと

届いた

黄泉かえる

本

生存報告

ひとよひとよに

新兵器は化けも!!

無題です

ひさし

あけましておめでとうございます

ぺ

とほほ

なぜなぜ?

涼宮ハルヒのKHR-1

いいタイトル思いつかない

ぬーん

やっと終わったぜ・・・

はぁ・・・

先生

近状

RCB 動いた

フフフ・・・(なにやら不敵な笑み)

あ、でけた

あふああ

こ・ま・ん・ど?

誕生日

なぜ?

いっきに

野望(なんだか恥ずかしくなってきたので改題

プログラムしてみたお

初めてユニバーサル基盤で

もうすこし

超入門で・・・

プレセット電圧に注意

ロボットってそもそも・・・・・・

報告

ロボットの進化

はじめまして

機械

ロボットを吊るアームを作った

中華CNC CNC3020導入記 USBCNCで使う

中華CNC CNC3020導入記 設定編2

中華CNC CNC3020導入記 設定編

中華CNC CNC3020導入記 購入編

紹介記事

C++初心者会に参加してきた

Pepper Tech Festival 2014に行ってきた

正直舐めてた「X-RHex」

6足ロボット「X-RHex」

論文読み

論文 Exploration by Random Network Distillation

論文 Asynchronous Methods for Deep Reinforcement Learning

論文 Learning Complex Dexterous Manipulation With Deep Reinforcement Learning and Demonstrations

開発日誌

ブログも静的ページにしたらどうか

Haskellを入れる

形がみえてきた

届いた

加工経路

やっと

軌道戦士バンナム

雑記

強化学習 基礎から実践 PyTorchとmachinaで二足歩行エージェントをつくる を書きました

あけましておめでとうございます

お掃除ロボットルンバ購入ガイド

NINTENDO3DSレビュー

電子工作

M5stack Gray で MPU9250 で取得した角度を Bluetooth SPPで送る

Beagle Bone Blackにカメラを繋げてOpenCVで顔検出した

Beagle Bone BlackにUbuntu14.04とデスクトップ環境をインストールした

RAMデバッグ(sh7125)

© 2020 ROBO LOG

Powered by Hugo with Dream Plus theme.

強化学習についてまとめる(3) 方策勾配



    Nov 17, 2017
    2 min read

強化学習についてまとめる(2) 反復による価値の推定



    Nov 10, 2017
    1 min read

強化学習についてまとめる(1) MDPとベルマン方程式



    Apr 10, 2016
    2 min read

So, Who Am I?


I’m ksyundo. My Site: http://syundo.org