[B! database] UhoNiceGuyのブックマーク

UhoNiceGuy id:UhoNiceGuy

databaseに関するUhoNiceGuyのブックマーク (2)

100万件ぐらいのレコードを扱ったらOOMEが出た話。 - 谷本心 in せろ部屋
要約技術的な話だけ教えて、という方のために先に結論だけ書いておきますと、PostgreSQLはクエリを実行した時点で全レコードの情報を一気に読んできてヒープを埋めてしまう場合がある、ということ話です。たとえば、ResultSet#nextメソッドを使いながら処理を回すようなコードを書いて、少ないヒープでも処理できるようにするのは常套手段だと思いますが、そういうコードを書いていても一気にヒープを消費してしまうことがあるのです。詳しくはこのドキュメントを見てください。 https://jdbc.postgresql.org/documentation/head/query.html#query-with-cursor ことの発端ちょっと仕事でJava + jOOQ + PostgreSQLで、DBのデータを集計するようなバッチ処理を書いてまして、もちろん俺様の書いたコードにバグなんてある
UhoNiceGuy 2020/08/13
こういう処理するのはバッチ処理くらいで、その場合、ヒープメモリ増やして解決としちゃうのであまり問題にならない、問題解決のインセンティブが湧かないということか

postgresql

java

database

プログラミング
リンク
MySQLの0000-00-00 00:00:00は使ってはならない - そーだいなるらくがき帳
結論何がいいたいかといいますと0000-00-00 00:00:00があるとORMも死ぬし、DBマイグレーションツールも死ぬし、そもそもMySQLからポスグレにデータを持っていくこともFDWをすることも出来なくて死ぬのじゃ。— そーだい@初代ALF (@soudai1025) 2018年4月25日色々困るので使わない。理由以下に理由を述べる SQL標準ではない正論で殴った場合。 0000-00-00 00:00:00の仕様が難しい 0000-00-00 00:00:00 はMySQLの独自な仕様で NOT NULL制約のカラムではNULLと等価であり、NULLではないという仕様がある。 "NOT NULL として宣言された DATE および DATETIME カラムでは、次のようなステートメントを使用することで、特殊な日付 '0000-00-00' を検索できます"https:
UhoNiceGuy 2018/05/13
PostgreSQLには最大の時刻と最小の時刻が存在するけど(±infinity) MySQLには無いんだね//データベースの偉い人がNULLデータを使いたくなったシチュエーションはどんなだろう。その辺の知見集はないのかな

MySQL

Database
リンク
1