[強化学習] いつの間にか OpenAI Gym が終焉していた
前提 強化学習で利用する環境Env（を集めたライブラリ）では、OpenAI Gymが有名でよく使われてきました。 私もいくつか記事を書いたり、スクラップにまとめたりしてきました。 上の記事でも取り上げたように、2021年7月にメンテナーが交代し、その後APIや利用できるEnvが頻繁に変更されるようになりました。 変更が頻繁だったため、Gymと一緒に使う拙作のライブラリはだんだん更新が手間になって止まってしまいました。（すみません。） 本題: Gym の終焉 そしてつい先日以下の記事を読みました。 私が書いたGymの記事への言及があり、残念ながら内容が古くなっているとのことでした。 そろそろ重い腰を上げて確認するかとGymのページを見に行ったところ以下のような文言が表示されていました。 引用: https://github.com/openai/gym 引用: https://www.gym
![[強化学習] いつの間にか OpenAI Gym が終焉していた](https://cdn-ak-scissors.b.st-hatena.com/image/square/2f7e01e964ffa7d9c2b57e23462b408c8e9392d5/height=288;version=1;width=512/https%3A%2F%2Fres.cloudinary.com%2Fzenn%2Fimage%2Fupload%2Fs--lohGNZ7f--%2Fc_fit%252Cg_north_west%252Cl_text%3Anotosansjp-medium.otf_55%3A%25255B%2525E5%2525BC%2525B7%2525E5%25258C%252596%2525E5%2525AD%2525A6%2525E7%2525BF%252592%25255D%252520%2525E3%252581%252584%2525E3%252581%2525A4%2525E3%252581%2525AE%2525E9%252596%252593%2525E3%252581%2525AB%2525E3%252581%25258B%252520OpenAI%252520Gym%252520%2525E3%252581%25258C%2525E7%2525B5%252582%2525E7%252584%252589%2525E3%252581%252597%2525E3%252581%2525A6%2525E3%252581%252584%2525E3%252581%25259F%252Cw_1010%252Cx_90%252Cy_100%2Fg_south_west%252Cl_text%3Anotosansjp-medium.otf_37%3A%2525E5%2525B1%2525B1%2525E7%252594%2525B0%252528ymd%252529%252Cx_203%252Cy_121%2Fg_south_west%252Ch_90%252Cl_fetch%3AaHR0cHM6Ly9zdG9yYWdlLmdvb2dsZWFwaXMuY29tL3plbm4tdXNlci11cGxvYWQvYXZhdGFyLzQyYzJhN2RkZDAuanBlZw%3D%3D%252Cr_max%252Cw_90%252Cx_87%252Cy_95%2Fv1627283836%2Fdefault%2Fog-base-w1200-v2.png)
CoffeeScriptは自分にとっては有益だった
programming notes. mainly about JavaScript / jQuery. [@Takazudo] [takazudo@gmail.com] Hint: alt + / CoffeeScriptは是か否かという話は、CoffeeScriptを調べていれば否応なしに引っかかる話題で、自分もそれについてはかなり考えさせられた。何回かこのブログでも書いたとおり、CoffeeScriptいいなーと思ってはいて、ここ１，２ヶ月はずっとCoffeeScriptでJavaScriptを書いているんだけども、いい点はもちろんあるにせよ、書いているうちに、最初は見えてなかった問題も見えてきたりした感じがするので、その点について少し書きます。 なぜ CoffeeScript がよいか - 0xff.toBlog()なぜ CoffeeScript がダメか - 冬通りに消え行く制服
「脱COBOL」が示す生成AIによるレガシープログラミング言語からの移行
製造業の基幹システムのプログラミングにも広く用いられてきたCOBOLからの移行を模索する「脱COBOL」の動きが活発になっている。このCOBOLに代表されるレガシープログラミング言語からの移行において力を発揮するのが、生成AI技術を活用した「ぺアプログラミングツール」や「Copilot」と呼ばれる支援ツールだろう。 基幹システムの「脱COBOL」の動きが、ここ数年で活発化してきています。2023年には、旭化成建材が汎用機で稼働する基幹システムにおいて、技術者の多いJavaへの変更による脱COBOLを実現し、工場のDX（デジタルトランスフォーメーション）に向けた基盤整備に成功したと報道されていました。では、脱COBOLに踏み切ったのはなぜなのか、また何が課題となっていたのでしょうか。 1959年に登場したCOBOL。その拡張性と可読性の高さから、生産管理や製造業のシステム開発でも広く使われて
KMC Staff Blog:return 文に括弧を付ける（た）理由
2009年08月03日 return 文に括弧を付ける（た）理由 また pre K&R C の話です。 pre K&R C の時代は、return 文が取る式を () で囲むことが文法上必須でした。その時代の習慣を引きずったためか、K&R (第1版) でも return 文の後の式を括弧で囲っていたようです。（私は第2版しか所有していないので確認できないのですが。） そのため、今でも括弧を付ける人もいるようです。一方、括弧を付けると return を retuan のようにタイプミスした時に関数呼び出しとして解釈されてしまい、コンパイルエラーにならない（リンク時にはエラーになる）ために良くないと主張する人などもいるようです。いずれにせよここらへんの話は、IDE やエディタがキーワードをハイライトしてくれるようになった現在では、好みの問題の範囲と言えるでしょう。 http://www.mat
PEP572とGuido van RossumのBDFL引退 - Qiita
普段はPythonの最新の開発動向は追いかけていない私ですが、たまたまTwitterで Pythonの生みの親Guido van Rossumの下記のツイートを目にしました。 PEP 572 accepted. https://t.co/N9lKeDs7e5 — Guido van Rossum (@gvanrossum) July 12, 2018 何気なくこのPEP 572を斜め読んで、結構大胆な拡張だなぁ、などとその時は思っていました。 今日たまたま、Rubyの生みの親まつもとゆきひろ氏がこんなツイート BFDL引退して、大食いユーチューバーを見てるってのは、それはそれで正しい生き方だな — Yukihiro Matsumoto (@yukihiro_matz) July 13, 2018 をしているのを見つけて、YoutuberっていうのはGuidoのこのツイート My new f
inforno :: マシン語とか
最近の若いもんはマシン語をしらん、けしからん、みたいな話が盛り上がってますね。 そんな若くもないのですが(22歳)、中学のころにはWindows95があって、携帯電話を持っていて、高校生のころには既にADSLなどの高速回線を普通に使っていた、そんな世代の俺の考え。まぁ俺はプログラマでもなんでもないんだけど。 全体的な結論 全体的な結論を先に言うと、個人的にこういう原点回帰的な話というのはそんなに好きじゃない。もっと高次で活躍する人が増えてもいい、と思っているから。一人の人間の時間は有限で、それを高次レイヤにつぎ込んでもっとおもしろいことができるなら、そっちにつぎこめばいいんじゃないかな。俺はそれは全然アリ派。たとえば、音楽でいうと、DTMしかできないやつは音楽できる顔すんな、みたいなのが嫌い。DTMしかできなくてもいい曲かく人なんていっぱいいるし、それでいいと思う。なんていうか、努力とかよ
プログラミングを始めたきっかけと回想
この記事は Kyoto University Advent Calendar 2019 の 22 日目の記事です。 最近ブログを新しくしました。このブログの最初の記事は 「Web Frontend Challenge」参加記 なのですが、 今日は #kuac2019 の投稿として、 その記事よりも前の話、そもそも自分がプログラミングや Web の分野に興味を持った経緯を小学生時代から振り返ってみたいと思います。 先に断っておきますが、特殊な経緯がたくさんあるので他の人に参考にしてほしいとは全く思っていません。 ただの回想なので有益な情報は特にないですが、読んでいただけたらと思います。 ネット環境がない 今年の4月まで、実家にインターネットの固定回線は引かれていませんでした。山間部で、そもそも一昨年くらいまで光回線のエリア外だったことや、両親にとって必要なかったことが主な理由です。 （小中学
Fuji Xerox 1121、Smalltalk-80、Interlisp-Dの話 - スティルハウスの書庫の書庫
最近なぜか私のTLにはマニアックな若者が増えてきて、Smalltalk／Lispマシンの話とかすると妙に反応があったので、まとめ。 私とSmalltalk-80との運命的な出会い（いやほんと人生が変わった）は、マイコン雑誌「I/O」のSmalltalk-80紹介記事でした。1985年ごろに当時プログラミング好き（Z80、Fortran、BASICとか）の高校生でMZ-2000のテキスト画面しか知らなかった私は、「マウス」なるもので操作するマルチウィンドウや、白地に黒いマルチフォントを描けるビットマップディスプレイ、WYSIWYGエディタ、カット＆ペースト等、いまのあらゆるGUIの原型（MacやWindowsの元ネタ）を見て、さらにその言語が「3+4て書くと3が+4てメッセージを解釈実行するんだよ」とかいう意味不明なパラダイムで、それ何て並行世界？オーパーツ？位の衝撃を受けました。そこから数
私は如何にして心配するのを止めてPyTorchを愛するようになったか
CSUC - Consorci de Serveis Universitaris de Catalunya•170 views
プログラミング，どうやって学んだっけな - 表道具
note.mu が話題になり，様々な意見が飛び交う中，そういえば自分はどうやってプログラミングを学んだかなと考えていた。ここでいう「プログラミングを学んだ」は仕事で売れるレベルのプログラムを書けることを指す。私は今プログラミングを仕事にしており，死んでいないので，「学んだ」といえるだろう。 結論から言うと，完全な独学でもないし，学校での演習にも限界があった。しかしいろいろな積み重ねが現場での経験でコードに結びついたような感じだ。 最初にプログラミングに触れたのは中学に入る直前の98年だった。プログラミングに興味はあったのだが，親が厳しかったのでパソコンは実質的に使うことができなかった。このため，親にとって意味不明な機械であるポケコンを買ってもらった。当時既にポケコンはひどい時代遅れで，電気屋では「こういうのは買わないほうがいいと思いますよ」と言われた。工業高校では生き残っていた。ポケコンに
Island Life - 『プログラミングClojure』のできるまで (訳者サイド)
About 南の島のプログラマ。 たまに役者。 Practical Schemeの主。 WiLiKi:Shiro 最近のエントリ 無限cxr高校受験Defense振り返ってみると2019年は色々学んで楽...覚えるより忘れる方が難しい(こともある)眼鏡のつると3DプリンタIris Klein Acting ClassSAG-AFTRA conservatory: Voice Acting創作活動って自分を晒け出さねばならないと...ループを使わずに1から100までMore... 最近のコメント shiro on 歳を取ると時間が速く過ぎるのは、新しいことに挑戦しないから? (2023/03/14)1357 on 歳を取ると時間が速く過ぎるのは、新しいことに挑戦しないから? (2023/03/01)ベアトリーチェ on ハイポハイポハイポのシューリンガン (2022/04/02)ベアトリーチ
Symfonyの歴史を振り返ってみる - ぷぎがぽぎ
こんにちは。Symfony Advent Calender 2019 の 7日目です。 (すでに8日目になってしまいましたが気にせず書いていきます。) 昨日は 【初心者向け】よく使うSymfonyコマンド集でした。自分がよく使うコマンドは debug:router かな。コマンド多くて便利なところは Symfony の特徴ですよね。 自分がSymfonyと関わりはじめてから約12年ぐらいたちました。 今日は Symfony の懐かしい思い出話をしてみたいと思います。 connect.symfony.com Symfony は symfony だった 2007年1月。symfony1がリリースされました。 2系からは大文字になりましたが、1系のころはsymfonyと小文字でしたね。そんなsymfonyを初めてしった理由はその当時の所属していた会社で使っていた共通のフレームワークはMojavi
PHP7.4ではPEARがインストールされなくなる - Qiita
Disable PEAR 2019/02/01にDisable PEAR by defaultというプルリクが提出され、2019/02/11にマージされました。 commitからmerge日はどうすればわかるのだろう？ 内容 Installation of PEAR (including PECL) is no longer enabled by default. It can be explicitly enabled using --with-pear. This option is deprecated and may be removed in the future. PEAR(PECLを含む)は、デフォルトではインストールされなくなりました。 --with-pearで明示的に有効にしなければなりません。 このオプションは非推奨であり、将来削除される可能性があります。 これまではP
⚰️C++的ゾンビのお名前🧟 - Qiita
“こんなゾンビだらけの言語に居られるか！俺は他の言語に出て行くぜ！” -- 行方知れずのプログラマー 🧟Zombie Names📛 C++17標準ライブラリ仕様から「Zombie names」というセクションが追加され、過去バージョンで利用していた識別子（クラス名や関数名など）が予約済みとして列挙されるようになりました。1 ...嘘じゃないよ：https://eel.is/c++draft/zombie.names C互換ライブラリ［C++11で非推奨, C++14で削除］ gets バッファオーバーラン脆弱性につながるため、今すぐ利用停止してください。バッファサイズを明示指定するfgets関数で代替可能です。 スマートポインタauto_ptr<T>［C++11で非推奨, C++17で削除］ auto_ptr auto_ptr_ref C++11以降はunique_ptrクラスで代替可
Distributed Control Break - 急がば回れ、選ぶなら近道
まず始めに断っておきますが、このワードの発案は@marblejenkaさんによるものです。個人的には、言い得て妙だと思っています。この手の言葉の使い方のセンスはマーブル先生は時々天才な時があり、このワーディングもそれに属します。尚、社内では「この言い方は若干、一種の中二病的な側面もある」という意見のため、公式のドキュメントから削除されています。残念です。よってブログに残す。 まずもってControl Breakですが、COBOLの必殺技のひとつで最上位古代魔法(ハイ・エンシェント・ロア)のひとつに属します。JavaとかJavaとかJavaとか、な人たちにはちょっと意味がわからない感じになりますが、ある一定の処理の固まりを順におこなっている時に、なにかのタイミングで（大抵はキーの切り替え）で別の処理を一時的に行う（コントロールがブレイクする）ことを言います。 まず単純な例では、例えば、明細が
テスト駆動開発の第2章は"なぜxUnitなのか"？ - Qiita
「テスト駆動開発」を読んだ違和感 私は社内でテスト駆動を布教してしまう程度には、テスト駆動が好きです。そのため、ことあるごとに色んな人にテスト駆動開発の本を勧めているのですが、テスト駆動開発には独特の読みにくさがあります。 その"読みにくさ"というのは、どういうことなのか？KentBeckのテスト駆動開発は、3部から構成されています。 第1部 多国通貨 第2部 xUnit 第3部 テスト駆動開発のパターン 第1部の「多国通貨」はテスト駆動の入門の章です。ドルやフランなど複数の通貨単位を相互に変換したり、足し算や、掛け算を行うロジックを、テストファーストで構築していきます。 第2部の「xUnit」は、その名の通り、xUnit自身をテスト駆動開発で作っていきます。少し文章で表現するのが難しい内容ですが、例えば、pythonには標準でunittestというテストのフレームワークが存在します。この
「リアクティブ・バックエンドにはScala」、または、プログラミング言語はターゲットとする新プラットフォームの普及とともに普及するものだ、という話 - たなかこういちの開発ノート
2015年現在、関数型言語が勃興しつつあります。エンタープライズ分野で関数型言語が次世代のプログラミング言語マーケットの覇権を握ることとなるのだとしたら、いつどのように握るのか、それはどの関数型言語なのか、その動向が大いに気になるところです。 ・ 関数型言語の行く末を見定めるにおいて、過去のプログラミング言語興隆の歴史はどうだったのか、エンタープライズにおける主たるプラットフォーム・アーキテクチャーの変遷に絡めつつ振り返ってみます。 今から40〜50年程前のメインフレームの時代、そのメインフレームをターゲットとしたプログラミング言語、COBOLが覇権を握っていました。 時代を下って20数年前程になるとWindowsを始めとするGUIそしてクライアント／サーバー・システム開発用として、次にはC++が覇権を握ることとなります。そしてJavaが登場しました。Javaは当初Microsoft社のW
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Web技術年表 - 角谷鵜技術五十三次
大昔のgccのプリプロセッサに関する、極めてどうでもよい話 - のらりくらり
うるう秒補正バグでHBaseクラスタがダウンしたお話 / HBase cluster goes down by leap second bug of Linux kernel
