OCR処理プログラム及び学習用データセットの公開について | NDLラボ
2022年04月25日 NDLラボのGitHubから、次の2件を公開しました。ライセンスや詳細については、各リポジトリのREADMEをご参照ください。 NDLOCR 国立国会図書館（以下、「当館」とします。）が令和3年度に株式会社モルフォAIソリューションズに委託して実施したOCR処理プログラムの研究開発事業の成果である、日本語のOCR処理プログラムです。 このプログラムは、国立国会図書館がCC BY 4.0ライセンスで公開するものです。なお、既存のライブラリ等を利用している部分については寛容型オープンライセンスのものを採用しているため、商用非商用を問わず自由な改変、利用が可能です。 機能ごとに7つのリポジトリに分かれていますが、下記リポジトリの手順に従うことで、Dockerコンテナとして構築・利用することができます。 リポジトリ : https://github.com/ndl-lab/
「本」を読まないエンジニアはたぶん進化しないと思う
バグとグリッチ 最近、私が気に入っている神田神保町の「GLITCH・COFFE＆ROASTERS」（グリッチ・コーヒー＆ロースターズ）というカフェがある。狭い店内の5分の1は占めてしまう巨大な焙煎器もだが、なんといっても「GLITCH」という名前がいい。（今回は「週刊アスキー連載中の『神は雲の中にあられる』より転載です） “GLITCH”というのは「 【名詞】【可算名詞】《口語》1（機械・計画などの）欠陥、故障 〔in〕。2電力の突然の異常」（Weblio）という意味だが、私的には「millennium glitch」（2000年問題）がすぐに頭にうかんだ。 要するに、“Bug”（バグ）が、プログラムやハードウェアの欠陥のことだとすると、それの発症が“Glitch”（グリッチ）なのだ。バグについては、よく語られているし私も『近代プログラマの夕』（拙著＝ホーテンス・S・エンドウ名で絶版だが）
word2vecのソースを読んでみた - Qiita
単語の意味をベクトルで表現する手法であるword2vec。検索するといろんな方の解説が見つかります。その解説とソースコードを見比べながら、自分なりに勉強してみました。 今回はword2vecのC#実装であるWord2Vec.Netのソースで勉強しました。ロジックは元々のC言語による実装とほとんど同じなので、このソースで勉強しても問題ありません。また、この方がVisualStudioのデバッガが使えるので追いやすいです。 word2vecには学習アルゴリズムとして「C-BOW」と「Skip-gram」の２種類の手法が紹介されていますが、今回は「Skip-gram」について勉強しました。計算量を抑えるやり方としては「階層的ソフトマックス」と「Negative Sampling」の２種類がword2vecのプログラム中に実装されていますが、今回は「Negative Sampling」を勉強しまし
「パナマ文書」解析の技術的側面
世界中で話題になっているパナマ文書。各国で政権を揺るがすような事態にもなっていますが、純粋にデータとしてみた場合、これは計算機やデータ解析に関わる人々にも面白いものだと思います。データの中身や背景などについてはさんざん報道されていますのでここでは触れません。一方、現場でどのような作業が行われているのかはあまり報道されていません。現実的な問題として、人力ではどうしようもない量のリークデータを手に入れた場合、調査報道機関はどんなことを行っているのでしょうか？私も以前から疑問に思っていたのですが、先日あるデータベース企業と、データ分析アプリケーションを作成する会社のブログにて、その実際の一端を窺うことができる投稿がありました: Panama Papers: How Linkurious enables ICIJ to investigate the massive Mossack Fonseca
日本のWebエンジニアの大半が、変化に対応しきれなくなっている件について。 - 日々、とんは語る。
先週書いた10年のツケを支払ったフロント界隈におけるJavaScript開発環境（2016年4月現在）。という記事がまずまずの反響を得たのですが、僕の予想とは異なり、「こんなに多くのツールやフレームワークを必要とする現状はおかしい」といった、状況批判の意見が多く集まりました。 Mediumなど海外メディアでは、もはやこの種のツールを組み合わせたフロントエンド開発が当たり前として受け入れらており、この半年間ほどは「実際にどの組み合わせがベストか」という議論が行われていました。そして、そういった議論もようやく落ち着きを見せ、おおよそ僕が書いたような組み合わせに帰結しつつあります。 そのため、まさか「フロントは変化が激し過ぎる」とか「保守が大変そう」などといったような、1年くらい前に言われていた意見が、いまだに多くを占めるとは、まったく予想していなかったというのが正直な意見です。ひと昔まえであれ
「給料が多いほど仕事が好き」「よく使うプログラミング言語」「開発環境」「開発者歴」「OS」など世界中の開発者の統計をまとめた「Stack Overflow Developer Survey 2016」
By Alper Çuğun コンピューターやプログラミングの情報交換を行う「ナレッジコミュニティ」であるStack Overflowには常に世界中から多くの質問が寄せられ、さらにはそれに回答する書き込みが多く投稿されています。サイトでは8秒に1個の割合で質問が寄せられ、2015年には5万6033人もの開発者が質問に答えているのですが、Stack Overflowではそれら回答者に対して45個のアンケート調査を実施して、どのようなユーザーがサービスを利用しているのか調査を行いました。 Stack Overflow Developer Survey 2016 Results http://stackoverflow.com/research/developer-survey-2016 この統計を発表するにあたりStack Overflowは「調査は完璧というわけではありません。サンプル数が多
囲碁チャンピオンを打ち破ったGoogleの人工知能「AlphaGo」を作った天才デミス・ハサビスが人工知能を語る
Googleが500億円以上で買収した謎のスタートアップ「DeepMind」。当時、無名の人工知能(AI)開発ベンチャーのDeepMindをGoogleが買収した目的は、天才デミス・ハサビス氏を手中に収めたいからと噂されていました。Googleの期待通りDeepMindはAI技術を磨き上げ、学習してゲームの腕をメキメキ上げるアルゴリズム「DQN」を発表して一躍有名になり、人工知能ソフト「AlphaGo」を開発してこれまで難攻不落と考えられてきた囲碁の世界最強棋士を破るのに成功するなど、世間をあっと驚かせています。 そのDeepMindを率いるハサビス氏にThe Vergeが、AlphaGo VS 囲碁界の魔王イ・セドル(李世乭)九段の世紀の対決の第1戦が終了した翌日の第2戦が始まる前にインタビューしています。 DeepMind founder Demis Hassabis on how A
4chan創業者がGoogle入り「オンラインコミュニティ構築の経験を生かしたい」
15歳で匿名掲示板を立ち上げ、月間ページビュー約6億のコミュニティに育て上げたMootことクリス・プール氏がGoogle入りし、ソーシャルチームに参加する。 米匿名掲示板4chanを立ち上げたMootことクリス・プール氏（27）は3月7日（現地時間）、米Google入りしたことを自身のブログで発表した。 Googleでどのような仕事をするのかは不明だが、「私の十数年にわたるオンラインコミュニティ構築の経験を生かせるようになるのが待ち切れない」としている。 また、Googleで「Googleフォト」や「Google+」を統括するブラッドリー・ホロヴィッツ副社長が自身のTwitterアカウントで「@mootからの通知を見た？ 彼がうちのチームに参加するのが嬉しいよ。ようこそ、クリス！」とツイートした。プール氏はホロヴィッツ氏のチームでソーシャル関連の仕事に従事するようだ。 Googleは「Go
普通のコンピューターからAMラジオを鳴らそう
読者の持っている至って普通のコンピューターは、実はAMラジオを鳴らす発信装置が備わっている。 ラジオを鳴らすコードは以下にある。 https://github.com/fulldecent/system-bus-radio ただしこれはMac OS Xでしか動かないので、C++11に移植したコードが以下になる。また、このコードはスレッドを回して消費電力を上げることにより、オリジナルより出力も上げてある。 https://github.com/EzoeRyou/system-bus-radio 動かし方(GCCの場合) git clone git@github.com:EzoeRyou/system-bus-radio.git cd system-bus-radio make gmain make grun Clangの場合、以下のようにする。 make cmain make crun そし
なんでも自動化するエンジニアが残していったライフハック・スクリプト
元々はロシア語の掲示板に出ていた、職場での小さなことをなんでも自動化していたハッカーの話が英語に翻訳され、Hacker News等で話題になっています。 xxx(ハンドル名): オーケー、ビルド担当エンジニアが転職で辞め […] 元々はロシア語の掲示板に出ていた、職場での小さなことをなんでも自動化していたハッカーの話が英語に翻訳され、Hacker News等で話題になっています。 xxx(ハンドル名): オーケー、ビルド担当エンジニアが転職で辞めちまった。本当にターミナルに住んでるようなやつだった。わかるだろ、Vimが大好きで、.dotファイルで図を描いて、Markdownでwikiに投稿するようなタイプさ… もし何か、そう何でも、90秒以上掛かるようなことがあったら、スクリプトで自動化しちゃうんだ。 xxx: そういうわけで我々はここにいて、彼の、そう、「遺産」を見てるところだ。 xxx
ずっと社内で放置されていた…「調整さん」10年目の本気 | HRナビ by リクルート
2006年にリリースされ、今年で10年目を迎えた日程調整ツール「調整さん」。イベントの幹事はメンバーにURLを送るだけで、出欠確認や日程調整が行えるサービスだ。20代以上のネットユーザーなら一度は利用したことがあるのではないだろうか。無料で簡単に使えて、当たり前のようにインターネット上に存在していた調整さんだが、2015年に入ってから密かに、驚くべき成長を遂げていた。 調整さんのMAU（Month Active User、月間利用者数）は2014年の7月時点で50万人ほどだった。これが、2015年3月には100万人、9月には200万人にまで伸びているのだ。シンプルな機能しか持たない古株のWebサービスに、この1年で一体何が起きたのだろうか。調整さんの開発チームを率いるリクルートホールディングス・MTL（メディアテクノロジーラボ）の山本一誠さんにお話を伺った。 手付かずで5年以上放置されてい
3割の力で作って、新聞やテレビで紹介され、生活費くらいのお金が入るネタサイトの作り方【連載:村上福之】 - エンジニアtype | 転職type
DB設計のメモ。ネタサイトのレベルであれば、これくらいで問題がないと思う ネタサイトの作り方その2: コードをもりもり書く。なるべくPHPで ある程度設計が固まったら、ブラウザでCloud9を起動して、いきなりコードをもりもり書きます。 サーバの言語はPHPが多いです。運良くヒットした時、日本の大きな会社にサービスを売却するのに便利なのはPHPだからです。 Cloud9は素晴らしいです。感動します。無料でいきなりクラウド上のオンラインIDEとサーバを用意してくれます。ApacheとMySQLとRubyとPHPとGitくらいは普通に入っています。 昔は、オンラインIDEは遅くてダメなものが多かったのですが、Cloud9だけは別格です。テキストエディタすら立ち上げません。3割くらいの力でネタサービスを作るには最強の環境です。 オンラインIDEでは珍しく、ターミナルも叩けますので、普通にGitも
ゲームエンジン「Unity」に「VOCALOID」が対応。12月にUnity向け統合開発環境と「ユニティちゃん」歌声ライブラリを公開予定 - ニュースリリース - ヤマハ株式会社
ゲームエンジン「Unity」に「VOCALOID™」が対応。 12月に統合開発環境を提供予定 『VOCALOID for Unity』に関するお知らせ − ユニティ・テクノロジーズ・ジャパン公式キャラクター「ユニティちゃん」のオリジナルボイスも制作 − ヤマハ株式会社 ユニティ・テクノロジーズ・ジャパン合同会社 ヤマハ株式会社（以下、ヤマハ）とユニティ・テクノロジーズ・ジャパン合同会社（以下、ユニティ・テクノロジーズ・ジャパン）は、現在、合同で取り組んでいる『VOCALOID for Unity』についてお知らせします。 『VOCALOID for Unity』は、ユニティ・テクノロジーズ・ジャパンが提供する世界で極めて高いシェア（参考：http://unity3d.com/public-relations）を誇るゲームエンジン「Unity」で、ヤマハが開発した歌声合成技術「VOCAL
Deep Learningを用いた将棋プログラムGunyanzaを公開しました
ディープラーニング(深層学習)というのが流行っているそうです。すべての人類はディープラーニングによって実現されたAIに隷属する未来なんですってよ!!! こわーい。 そんなバラ色の技術、いっちょかみしておきたいですよね。 さて、オフィスで社長とダベっていたところ、「将棋プログラム面白そうだよね」という話になりました。お互将棋プログラムを作って闘わせようぜ、いぇー、と盛り上がり、勢いでコンピュータ将棋選手権に申し込みまでしてしまいました。 そんな経緯で、ディープラーニングをミリしら(=1ミリも知らない)な僕が、試しにディープラーニングを使って将棋のAIを書いてみたらいいやん、と思いついたのでした。将棋も、ハム将棋でハム8枚落ちで負けるレベルくらい。ダメじゃん。 ミリしらなので、「チェスで何かやってるヤツがいるだろう」とアタリをつけてググった結果、Erik Bernhardssonさんによる d
日曜ドラマ「デスノート」のリュークやレム、その正体はEpic Gamesの“Unreal Engine 4” - AUTOMATON
株式会社デジタル・フロンティアのCGプロデューサー豊嶋勇作氏は、日曜ドラマ「デスノート」にて登場しているキャラクターが、Epic Gamesの「Unreal Engine 4」で制作されていることを明らかにした。月間TVガイド9月号に掲載されるメイキング特集の紹介とともにTwitter上にて明らかにしている。 日曜ドラマ「デスノート」は、日本テレビ系で7月5日から放送されている同名漫画を題材としたテレビドラマだ。今作では主人公の夜神月などを筆頭に、キャラクターに大きな改変が入れられており、ストーリーも独自のものが展開されている。このなかに登場する死神のキャラクター「リューク」や「レム」はCGにて描かれているが、この両キャラクターはUnreal Engine 4にて描かれていると豊嶋氏はTwitter上で報告している。 おそらくこれが初情報解禁になると思いますが、「デスノート」に登場する死神
バグをドラゴンと呼ぶ運用を始めて1ヶ月くらいたった - Konifar's WIP
1ヶ月くらい前、 「バグをドラゴンと呼んだらどうなるか」というTweetを見ました。 確かに、バグをドラゴンと読んだ場合「Sクラスのドラゴンが出ました！」「Aクラスのドラゴンを相手にしてる最中だってのに！」って会話になるし、ドラゴンは結局人の手で生み出されたものってところが中二ファンタジーっぽくて良い— 尾野（しっぽ） (@tail_y) March 18, 2015 これは天才的発想だなと思って職場で雑談で話してみたところ、 同僚のスペイン人エンジニアにバカウケしまして、 それからちょいちょいバグのことをドラゴンと呼ぶようになりました。 せっかくなので、どんな雰囲気になるのかまとめてみようと思います。 先に言っておくと、自分ともう1人スペイン人エンジニアが時々チャット上で使っているだけで、 正直そんなに流行ってないです。 なんかテンションが上がる バグ修正ってマイナスをゼロにするだけで何
読者評をコンピューターが書く時代に - 文芸同志会通信
文芸同志会（伊藤昭一主宰）★連絡所＝本部・詩人回廊」北一郎（正会員担当）★ー★今、話題の純文学、ミステリーなどエンターテインメントから、同人誌・単行本のマイナー作品まで、現代文芸界の動向がわかるコーナー。 書き手はいるが読者がいない。これがアマチュア作家の現状で、なんとか読者の評がえられないか、あるいは作れないかというのは、現在と将来にわたる課題である。すでにコミックや大衆小説の創作には、骨格をコンピューターがつくるシステムが出来ている。大塚英志「キャラクター小説の作り方」などは、その思想が色濃く反映されている。書き方は違っても作り方は同じということだ。文学フリマでも７００超えるグループがあるが、そこの希望は、批評して欲しいというのが一番多いはずだ。 そこで、コンピューターで読者評ができないか、ということになる。 小説ネット公開システムひとつに「インターネット文芸誌『クランチマガジン』」（
世界のメールの暗号化はたった一人の男に依存しており、開発資金はゼロになってしまっているという衝撃の事実が判明
世界中のジャーナリストやセキュリティ関連に敏感な人、さらにはエドワード・スノーデン氏のような内部告発者までもが使用している、無料のメール暗号化ソフトウェアが「GNU Privacy Guard(GPG)」です。この暗号化ソフトを1997年からたった一人で開発してきたのがヴェルナー・コッホ氏で、彼が置かれている厳しい現状をProPublicaが明かしています。 The World’s Email Encryption Software Relies on One Guy, Who is Going Broke - ProPublica http://www.propublica.org/article/the-worlds-email-encryption-software-relies-on-one-guy-who-is-going-broke ソフトウェアエンジニアのコッホ氏がGPGの開
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Engadget | Technology News & Reviews
Oktavia全文検索エンジン - SphinxCon JP 2014
