今更聞けないDBMSのメモリ管理について
DBMSのメモリ管理について データベース管理システム（DBMS）の設計では、大量のデータと複雑なクエリを処理するために、ハードウェアの特性を最大限引き出すことが求められます。 この記事では、DBMSがどのようにメモリを使ってデータアクセスの速度を向上させ、同時にデータの安全性を確保しているのかを解説します。 DBMSと記憶装置の関係について DBMSが使う記憶装置は次の2つです。 HDD HDDは磁気ディスクを使用してデータを記録・読み取りする記憶装置です。その主な特徴は大容量であり、コスト効率が良いことです。DBMSでは、データの永続的な保存にHDDが用いられます。これにより、システムがシャットダウンされた後もデータが保持され、必要に応じて再びアクセス可能となります。 しかし、HDDのデータアクセス速度はメモリに比べて遅いため、リアルタイム処理や高速なトランザクションが求められるアプリ
今からゲーム業界の闇を話します、1970年代「メモリ足りねえ」→2000年代「メモリ足りねえ」→2020年代「メモリ足りねえ」
たいにゃん @bugnekotinyan 今からゲーム業界の闇を話します 1970年代「メモリ足りねえ」 1980年代「メモリ足りねえ」 1990年代「メモリ足りねえ」 2000年代「メモリ足りねえ」 2010年代「メモリ足りねえ」 2020年代「メモリ足りねえ」 2024-02-12 18:01:08
｢頭がいい人｣の頭の中を再現! ChatGPT活用法
ChatGPTはいまだに、単なる作業代替ツールと捉えられがちだ。 しかし、これはChatGPTの真の能力を過小評価している。ChatGPTの最大のメリットは、実は「認知限界の拡張」にある。 ChatGPTの本質は「認知拡張」にある 読者の中には、脳の「ワーキングメモリ」という概念をご存じの方もいるだろう。ワーキングメモリは、新しい情報を一時的に保持し、処理する脳の能力を指す。 心理学者のジョージ・A・ミラーは、彼の著名な論文「魔法の数字7±2」で、人間が一度に処理できる情報の単位（チャンク）の数は約7つと提唱した。これがワーキングメモリの容量の限界を示すものとされている。 認知心理学の研究によれば、この限界を超えると、情報の処理と保持が困難になり、思考や判断の効率が低下する。 複雑な問題の解決や難しい意思決定をする際には、多くの要素を考慮しなければならない。しかし、情報過多になると思考が停
不用意にサーバーでアプリを起動してハングアップさせてしまった話 - Qiita
はじめに この記事は、本番環境などでやらかしちゃった人 Advent Calendar 2023の18日目です。 もう何年も前のことなのでもうそろそろ時効だろうと思い、誰かの学びになればとここに供養します。 やらかしちゃった出来事 ある日の保守作業 保守管理しているWebシステムの調査のためにOracle Databaseが動いているWindows Serverにリモートデスクトップ接続していました。 調査の過程でデータベースインスタンスにアクセスして状態を確認する必要が生じました。 普段は自分のクライアントPCにインストールしたデータベースクライアントツールでつないで確認していたのですが、その時は横着してサーバーにインストールされていたSQL Developer（OracleのGUIデータベースクライアントアプリ）を起動してしまいました。 固まる画面 じんわり起動していくSQL Deve
メモリってややこしくない？
ワイの中でメモリって言ったらRAM（Random Access Memory）のことなんよ。 PCをかじってるハラペコ増田は大概そうやと思う。 これってたぶん超短期記憶媒体で大元の記憶媒体からちょちょっとデータを出す時に使うやつじゃん？ だからよくライトSF系のエンタメで「よかった、メモリは無事だ！」とか言われても メモリが無事だったところで、純粋に一部部品が生き残ってるだけであんま意味ないのでは？ と思ってしまうんだけど、 このメモリって昔あった「メモリーカード」とか「フラッシュメモリ」の 長期記憶媒体としてのメモリなんだよな？たぶん。 だからたぶん「よかった、メモリは無事だ」ってHDDとかSSDとかメモリーカードとかSDカードとか そういう記憶媒体が無事だったって認識でいいんだよな？ この辺が毎回よくわかんなくなってどういう話ー？ってなっちゃうんだよなぁ。 たぶんRAMのほうをもっとな
半導体の世界大手 キオクシアの中間決算 過去最大の赤字 | NHK
半導体・フラッシュメモリーの世界大手、キオクシアホールディングスのことし4月から9月まで半年間の決算は、世界的な市況の悪化で最終的な損益が1800億円余りの赤字となりました。会社が発足して以降で、この時期としては過去最大の赤字です。 キオクシアホールディングスは、ことし4月から9月までの半年間の決算を発表し、最終的な損益は1891億円の赤字となりました。 今の会社の前身となる「東芝メモリ」が発足した2017年以降で、この時期としては過去最大の赤字となります。 企業のIT投資の縮小や、パソコンやスマートフォン向けの需要の落ち込みで世界的に市況が悪化したことが大きく影響しています。 キオクシアの業績の悪化を受けて、約4割を出資する東芝のことし4月から9月までの半年間の決算も、最終的な損益が521億円の赤字となりました。 こうした中、キオクシアは、事業の立て直しに向けて、アメリカのウエスタンデジ
Intel Optane 905Pレビュー：3年経ってもライバル不在の異次元性能 | ちもろぐ
「Intel Optane 905P」は、インテルとMicronが共同開発した次世代メモリ「3D XPoint」を搭載します。 3D XPointメモリは、SSD市場で圧倒的主流を占めるNANDメモリと比較して、レイテンシ（応答時間）が約5～10倍も高速です。速さだけでなく、耐久性能もエンタープライズ製品顔負けの桁違いの数値を実現。 そして3D XPointメモリの持つ最大の強みが、普通のSSDにありがちな「不安定な性能」から完全に開放される点です。普通のSSDは空き容量が減ると性能が劣化しますし、大きいファイルを書き込むと公称スペックを維持できません。 一方、3D XPointを搭載するIntel Optane 905Pはそういった不安定な挙動とは無縁です。どれだけ大きいファイルを書き込もうが、常に一貫して公称スペックを維持し、たとえ空き容量が0%でも性能は一切劣化しないです。 まさに別
「キャッシュメモリーを作れって、アメリカの大学ではそんなことを言うんですか？」
12年働いた中堅システムインテグレーターをやめようと決心していたSEの後藤智彦。緊急トラブルの対応現場で出会ったすご腕の先輩SEの五十嵐優一と共に徹夜でトラブル対応にあたる過程で、後藤はSEの仕事への前向きな気持ちを取り戻していく。五十嵐はそんな後藤にあるアドバイスをする……。（この物語はフィクションです） 「ぼくの場合、もっともっと勉強が必要ですね」 どの分野でナンバーワンを目指すにしろ、今のぼくの知識や技術はまだまだ不十分だ。 「IT業界は成長スピードが速い。常に勉強していないとエンジニアとしての価値がなくなる。ドッグイヤーとかマウスイヤーなんて言葉くらいは聞いたことがあるだろ」 ドッグイヤーとは、犬の1年は人間の7年分で、それくらい速いという意味だ。マウスはおそらくもっと速いのだろう……。 「IT業界の進化は本当に速いと思います。特にAIの進化には驚きました」 「そう。だから勉強して
令和05年最新版 日本の半導体産業の現状について
台風で仕事が休みになりそうなので暇つぶしに。 3年くらい前に日本の半導体産業の近況をまとめたのですが、ここ数年で政治家の先生たちが何かに目覚めたらしく状況が大きく変わりつつあるので各社の状況をアップデート。 前回の記事 https://anond.hatelabo.jp/20200813115920 先端ロジック半導体■ JASM (TSMC日本法人) 熊本工場：28nm, 22nm (工場稼働時) / 16nm, 12nm (将来計画) 日本政府の補助金とソニー・デンソーの出資という離れ業により、業界人が誰も信じていなかったTSMCの工場進出が実現した。現在は建屋の建設が進んでおり、順調にいけば2024年内には量産開始となる。生産が予定されているプロセスはいずれも世界最先端に比べると古いものだが日本では最先端であり、HKMG(ハイケーメタルゲート、トランジスタの性能を上げる技術)やFin
プログラムを動かす時にメモリがどのように割り当て・解放されるのかをめちゃくちゃわかりやすいイメージ画像で解説してくれるサイト「Memory Allocation」
コンピューター上でプログラムを動作する際に必要になるのがメモリです。プログラム自体をメモリに読み込む必要があるのはもちろん、プログラムが行う動作はほとんど「メモリから値を取りだして計算し、メモリに保存する」であるといっても過言ではありません。プログラムが動作する際にメモリがどのように管理されているのかについて、ベテランプログラマーのサム・ローズさんがブログで解説しています。 Memory Allocation https://samwho.dev/memory-allocation/ C言語の標準ライブラリには「malloc」と「free」という2つの関数が用意されています。この2つはなんと1979年のUnix v7から存在している歴史ある関数で、mallocがメモリの割り当てを担当し、freeがメモリの解放を担当しています。サム・ローズさんの解説は「この2つの関数の中身を自分で実装する」
RWKVをローカルPCで動かす（pyenv/Docker）
OSはLinuxです。WindowsのWSL2で動かしている人もいるので、多分動くと思います。Linux/Windows(WSL2)のセットアップに関しては、以下記事参照ください。 CPUのみでも動かせるようですが、メモリが大量にいります。メインメモリが少なければ、とりあえずキャッシュ領域をアホほど（100GBとか）増やしておけば動くようです。足りないと途中でクラッシュします。 メモリが不足気味でしたら、以下記事参考に最初に設定しておいてください。 モデルダウンロード モデルをダウンロードします。好きなものをダウンロードしてください。初心者は、最初は小さいものを試して自信をつける（？）のがよいかもしれません。 14B バカでかモデル 7B デカいモデル 7B alpacaでファインチューニングされているのでちょっと賢い 3B 小さめモデル pyenv 事前準備 pyenvを使う方法です。ま
第52回 Linuxカーネルのコンテナ機能 ― cgroupを使ったI/O制限 | gihyo.jp
第37回で説明した通り、cgroup v1には様々な問題点が指摘されており、その問題を解決すべくcgroup v2が実装されました。 cgroup v1では、各コントローラがバラバラに実装されており、コントローラ間の連携が取れませんでした。これが原因で、リソースを制限するにあたって一番表面化していた問題が、ディスクI/Oに対して制限をかける際の問題でした。cgroup v1ではblkioコントローラでI/Oに対する制限をかけられましたが、限定的な制限しかかけられませんでした。 LinuxでのI/O コントローラ間で連携ができないため、blkioコントローラを使ったI/O制限が限定的になってしまう理由を説明するために、Linuxでディスクへファイル入出力する際の仕組みを簡単に説明しておきましょう。もう少し詳しい仕組みが知りたい方は『［試して理解］Linuxのしくみ』など、関連する書籍や文書を
『パソコン』CPUのコアが多いと嬉しい→「処理速度が速くなる」「Twitterがはかどる」
AVerMediaJP @AVerMediaJapan いっぱいコア使えるソフトとか、同時にいくつかの処理をする配信とかだとある程度CPUのコアいっぱいのがつよつよやで でも今はどちらかっていえばコアも大事だけど同じ価格なら世代が新しいCPUにしてメモリ周り強化した方が配信では強いかも 2023-03-07 12:27:03 AVerMediaJP @AVerMediaJapan 映像キャプチャー、ストリーミング機器を取り扱うAVerMediaの公式アカウントです。 アイコンは公式キャラエレーナとキャプメ！製品のお問い合わせはこちらavermedia.co.jp/support/servic… avermedia.co.jp
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
冬休みに作るミニPC自宅サーバー上級編、SSD＋メモリ増設で最新Proxmox VE 8.1環境を堪能する！【イニシャルB】
「メモリがニゴロ、イチニッパ」みたいな言い方が恥ずかしい
Samsung、SO-DIMMの半分以下の大きさのメモリ「LPCAMM」を製品化
PCIe接続でメモリを拡張する「CXLメモリ」、Micronがサンプル出荷
廃棄された中古メモリを分解して新品として販売か。かなりの量の再利用DDR4が出回っていると報じられる | ニッチなPCゲーマーの環境構築Z
【アップグレード後の性能が知りたい！】 メモリが買い時の今こそ16GBから増量する！32GBか64GBにすると性能は上がるのか？
半導体、メモリー不況鮮明 データ増も価格3割急落 技術革新も下げ圧力 - 日本経済新聞
