100万件ぐらいのレコードを扱ったらOOMEが出た話。 - 谷本 心 in せろ部屋
要約 技術的な話だけ教えて、という方のために先に結論だけ書いておきますと、PostgreSQLはクエリを実行した時点で全レコードの情報を一気に読んできてヒープを埋めてしまう場合がある、ということ話です。 たとえば、ResultSet#nextメソッドを使いながら処理を回すようなコードを書いて、少ないヒープでも処理できるようにするのは常套手段だと思いますが、そういうコードを書いていても一気にヒープを消費してしまうことがあるのです。詳しくはこのドキュメントを見てください。 https://jdbc.postgresql.org/documentation/head/query.html#query-with-cursor ことの発端 ちょっと仕事でJava + jOOQ + PostgreSQLで、DBのデータを集計するようなバッチ処理を書いてまして、もちろん俺様の書いたコードにバグなんてある
(速報)Javaでディープラーニング！Deep Java Libraryがリリースされました #reinvent | DevelopersIO
はじめに ご紹介するアップデートはこちら！ Introducing Deep Java Library: Develop and deploy Machine Learning models in Java 内容 Javaでディープラーニングモデルを開発するためのオープンソースライブラリ、Deep Java Library(DJL)がリリースされました。 DJLでは、ディープラーニングモデルのトレーニング、テスト、リリースするためのAPIが提供されます。各種ドキュメントは以下。 JavaDoc Documentation Github: awslabs/djl Github: aws-samples/djl-demo では実際にGithub: DJL - examplesをやってみましょう。 まずはDJLをgit cloneします。 $ git clone https://github.c
Javaのコンテナのメモリ割り当ての考え方をまきさんに教えていただいたので記録 - Mitsuyuki.Shiiba
何度か教えていただいているので、今度こそしっかり覚えておきたくて、まきさんからのコメントを記録。 ## メモリサイズの考え方 SpringBootのアプリをコンテナとして動かす場合には768MB以上必要で、1GBくらいは割り当てる必要があるのではないかという僕のコメントに対していただいたコメント。 それは不正確..Tomcatを使う場合は最大コネクション(スレッド)がデフォルト200で+50スレッドくらい余裕を見ると250M (-Xss1M）でデフォルトのReservervedCodeCacheSize 240MとDirectMemorySize 10M加えた上にMaxMetaSpaceSizeがざっくり50Mくらい足すと550Mくらい使ってこれHeapを足すとコンテナサイズ— Toshiaki Maki (@making) November 16, 2019 その前提であればHeap 2
ドメイン駆動設計、どこまでやるべき？ 開発現場の“問題”を乗り越えるためにできること
ゲーム開発におけるドメイン駆動設計とサーバレスアーキテクチャ 佃松三郎氏（以下、佃）：みなさん、こんにちは。最初に「TECH × GAME COLLEGE」についてお話しさせてもらいたいと思います。 私はテクロスCTOの佃と申します。 ゲーム会社が主催する勉強会というのは数多くありますが、ゲームに特化した、もしくは「ゲームっていろんな技術を使ってるよね」という話があるなかで、「本当にゲームにフォーカスするオープンなコミュニティがないな」というところで、去年の8月からこの勉強会がスタートしました。 そこで「DDD」と呼ばれる開発手法について増田さんに登壇いただいたところからスタートしました。今回、ちょうど半年ということで、1つ区切りのイベントとして今回は開かせていただきました。 それでは、今日パネラーとして参加していただく増田さん、まずは簡単に自己紹介と最近取り組まれていることなどをお
MXBean から取得できる情報あれこれ - A Memorandum
Java Management Extensions の主要どころの簡単なまとめです。 RuntimeMXBean CompilationMXBean OperatingSystemMXBean MemoryMXBean MemoryPoolMXBean ThreadMXBean ClassLoadingMXBean GarbageCollectorMXBean サンプル Java1.6 時代のCPU使用率 RuntimeMXBean ランタイム関連情報の取得。 RuntimeMXBean runtimeMx = ManagementFactory.getRuntimeMXBean(); 以下のような情報が取得できます。 メソッド 出力例 説明 getVmName() Java HotSpot(TM) 64-Bit Server VM VM名 getVmVersion() 25.102-b
みずほリサーチ&テクノロジーズ ： 第三の選択肢
2019年1月、Oracle Java SE 8の公式アップデート（無償サポート）が終了した。 Oracle社のJavaサポート方針変更に関する発表（*1）は2017年9月に遡るが、官公庁や企業の基幹系業務システムをはじめ、世の中の多くの情報システムがOracle Javaを使って開発されているため、強い衝撃を受けたことを思い出す。身近なところではTwitterのサイトもJavaで開発されている。筆者らが開発に携わっているWebシステムもOracle Java SE 8を使っていたため、無償サポート終了への対応をおこなった。 本稿では、筆者らが採用した対応方法を紹介したいと思う。既に対応を終えた方にとっては今さらの情報であり、また、筆者らと同様に対応を検討した多くの開発者にとっては既知の情報であるが、これから対応を検討される方の参考となれば幸いである。 本題に入る前にJavaの魅力について
Twilioを使ってJavaで電話をかけて音声を流す - Challenge Engineer Life !
ご存知の方も多いかと思いますが、SendGridは2/1に正式にTwilioの中に入りました。 Ahoy, Twilio SendGrid! 🎉 We're excited to share that @SendGrid officially becomes Twilio SendGrid today, creating the unquestioned and most trusted customer engagement platform for developers and companies! ☎️ ✉️ ♥️ https://t.co/RuQyoybsuM— twilio (@twilio) 2019年2月1日 せっかくなのでTwilioを触ってみようと思って、早速Javaを使って遊んでみました。びっくりするぐらい簡単に自分の携帯へ電話をかけて、音声を流すことができたのでまと
Spring Bootで静的コンテンツにフィンガープリントをつける
Spring BootではRuby on Railsのアセットパイプラインのようなものをどうやって実現するのか？というのを調べていた。 Sprinb Bootのバージョンは1.2.3-RELEASE。 以下のSpringのブログによれば、静的コンテンツのハンドリングはSpring Framework 4.1で改善されたらしい。 Spring Framework 4.1 - handling static web resources JavaScriptの開発については、grunt、gulp、Dart、TypeScriptなどネイティブのものを使ってくれ、とある。 確かに、こちらの進化の速度は速いので直接こういったツール等を使う方がいい。結合・圧縮はこちらでできる。 あとは、リソースにフィンガープリントをつける(app-ハッシュ値.cssなど)方法だが、これは"Resource versio
JavaエンジニアのためのDocker入門 #jjug_ccc #ccc_e5 // Speaker Deck
All slide content and descriptions are owned by their creators.
タイムゾーン呪いの書 - Qiita
コメント欄で「Software Design 誌 (2018/12) に寄稿した内容や修正などをこちらの記事にも適用したい」と言ったあと、やるやる詐欺でずっと放置していましたが、三年近く経ってようやく 2021年 7月に大幅に改訂し、同時に Zenn に引っ越すことにしました。 タイムゾーン呪いの書 (知識編) タイムゾーン呪いの書 (実装編) タイムゾーン呪いの書 (Java 編) なにやら長くなりすぎたので三部構成になっています。 この Qiita 版は、しばらく (最低一年は) 改訂前のまま残しておきます。 タイムゾーンの存在はほぼ全ての人が知っていると思います。ソフトウェア・エンジニアなら多くの方が、自分の得意な言語で、タイムゾーンが関わるなにかしらのコードを書いたことがあるでしょう。ですが、日本に住んで日本の仕事をしていると国内時差もなく1 夏時間もない2 日本標準時 (Japa
Spring Framework Advent Calendar 2011 part.7 - Spring Security で認証成功時に条件によって遷移先を変える - 倖せの迷う森
Spring Framework Advent Calendar の 7 日目です。今日はふたたび Spring Security の話です。小出しにしているような感もありますが、気にせずいきましょう。 以前 Spring Security でアカウントロック機構を実現する - 倖せの迷う森 にて、Spring Security では認証の成功や失敗に対応するイベントハンドラがあり、それらのイベントに対応する Listener を書いて Bean 登録しておけば自動的にそれが呼び出される、という話をしました。 さて、あなたが現在作成中の Web システムにこのような認証に関する要件が与えられたとします。 認証はIDとパスワードで行う パスワードには有効期限がある 有効期限を過ぎたパスワードでログインした場合、パスワード強制変更画面に飛ばす 以前紹介した ApplicationListene
Spring Securityのお話 - シスアーキ in はてな
ハーイ！僕です。 最近、Spring Securityと戦っています。今のプロジェクトでセキュリティまわりを僕が担当しているのでね。 Spring Frameworkを勉強しはじめて、最初につまづいたのがSpring Securityです。いやね、これね、ちょっと僕には難しすぎるんじゃない？ 「人類には早すぎたのだ！！*1」 と、突然机の前で発狂しながら仕事してます。周りの人はびっくりさせてごめんなさい。 これ以上暴れてまわりの人から変人扱いされても困るので、自分なりにSpring Securityについて纏めてみようと思います。 SpringSecurityを理解する上では、 Filterのお話 Configのお話 Configurationのお話 がそれぞれあると思っているので、その順番で〜 Filterのお話 Spring Securityは主にサーブレットフィルターをもちいてWeb
Spring Boot で Boot した後に作る Web アプリケーション基盤/spring-boot-application-infrastructure
JJUG CCC 2016 Spring で発表した時の資料です。
Apache Camelに関する機能のまとめ (ドキュメントへのリンク集) - Qiita
Apache Camelに関して ダウンロード http://camel.apache.org/download.html 軽量なEIPフレームワーク（メッセージ処理フレームワーク）。 http://www.eaipatterns.com/toc.html 色々な処理に関して考慮されたフレームワーク。 MVCが画面系の表なフレームワークで、EIPフレームワークは裏方のフレームワーク。 画面処理がないのに頑張ってMVCフレームワークで裏方なプログラムを書いている？ （逆にCamelはViewという概念が無いので画面系は弱い） SAP HANA Cloud Integration という製品とかでも Apache Camelベースで作られてたりする。 Camel dev認定試験もあったり http://www.redhat.com/ja/services/certification/rhcoe
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ふつうのJavaアプリ開発のための自動テスト戦略 / JJUG CCC 2018 Fall - Speaker Deck
どの文字が化けるのかわからない？Javaプログラムを作って調査してみよう。 : Javaありがたや
JPAの同時実行制御とロック20140518 #ccc_r15 #jjug_ccc
【java8 勉強会】 怖くない！ラムダ式, Stream API
ほんとうに便利だった業務で使えるJava SE8新機能（JJUG CCC 2015 Spring）
Spring Bootをはじめる時にやるべき10のこと
