インフラストリーミングチームの近藤 (@udzura) です。今回は、ミラティブで内製しているオブジェクトストレージサーバ「b3」の紹介記事を書きたいと思います。 今回の記事は、6月にGopher Talkというイベントで発表した「Go製ミドルウェアを実践投入するにあたりやったこと」をベースに、内容を詳細にしたり直近の開発状況に合わせて更新したものです。一部内容はこの発表と重複していますがご了承ください。 オブジェクトストレージサーバを内製した背景 1. 大量オブジェクトの操作や増え続ける転送量に対応したい 2. 一定期間しかファイルの保持をしない 3. オンメモリ/SSD/HDDを組み合わせたチューニングがしたい オブジェクトストレージb3の特徴 S3 互換の基本的なAPIを実装 LSM-Tree index＋WALなDB/マージ操作に対応 I/O 帯域を制限可能 非同期レプリケーション

［インタビュー］位置情報ゲーム「信長の野望 出陣」は，コツコツやっても十分に楽しい，ずっと続けられるゲームにしたい―――歩くなど移動を起点にしているが，“信長の野望の楽しさの循環”を再現したかった 編集長：Kazuhisa カメラマン：佐々木秀二 2023年の“信長の野望40周年”と，3月30日の“信長の野望の日”※にちなんだタイミングで発表され，CBTでのフィードバックを反映させて，2023年8月31日に正式サービスが開始されたのが，信長の野望IPを使った位置情報ゲーム「信長の野望 出陣」（iOS / Android，以下「出陣」）だ。 同社初の位置情報ゲームだというのも注目だが，いままで登場した位置情報ゲームとは違って，リアルとゲームが密接に結びついているというのが大きなポイントだ。現実世界の城は，ゲームの世界でも城なのだ。 ※初代「信長の野望」の発売日である3月30日を記念した日。一

当サイトに掲載されている記事・写真の無断転載を禁じます。著作権は岐阜新聞社または配信元の通信社、情報提供者に帰属します。

三菱UFJ銀行など10金融機関で約250万件の送金が滞った全国銀行データ通信システム（全銀システム）の障害は、各金融機関と同システムをつなぐ機器の容量（メモリー）不足が要因だったことがわかった。機器の更新で処理量が増え、想定の容量を超えてパンクした。事前のテストが不十分だった可能性もあり、検証が求められる。 全銀システムを構築するNTTデータなどは16日までに中継コンピューターのメモリー不足が

Amazon Web Services（AWS）は、セキュリティの強化の一環として、AWS Organizations管理アカウントのrootユーザーでマネジメントコンソールにサインインする場合、2024年半ばから多要素認証を必須にすることを明らかにしました。 Not using MFA? You should be. Starting in 2024, we're enhancing our MFA requirements to further strengthen our customers' default security posture. Learn more in this blog post. #securebydesign #MFA #security #protect #shieldsuphttps://t.co/2nBtdxFoxj pic.twitter.com/E

最近麻雀にハマっていて、とはいってもネット麻雀しかやったことがないということで近所の雀荘に1人で向かうことにした。 雀荘の印象 自分は初心者なので、そういう時間帯を選んでいきました。「ノーレート」だとお金を賭けないのでそこは前提でその上で「健康麻雀」の時間帯でいくことにしました。健康麻雀だとお酒も飲まないしタバコも吸わないという感じらしく、シニア層や女性の方も多く平和です。 実際雀荘にいってみるとピリピリ感は皆無でみんな楽しく遊んでいる感じでした。また初めてですと伝えると丁寧にルールの説明や自分がネット麻雀しかやったことないということで牌の扱い方など含め教えてもらってよかったです。初心者1人で突然出向いてもかなり優しくしてもらってなんとかなってよかったです。卓に入るときも点数計算苦手です、リアル麻雀初めてですと言ったら大丈夫でしたし、そもそも自分よりも初心者っぽい雰囲気の人も他にもいたので

Mackerel Drink Up のご案内 サーバー監視サービス「Mackerel（マカレル）」の第11回目のDrink Upを、はてなの東京オフィスで開催します。 Drink Upは、日頃Mackerelを盛り上げてくださっているユーザーのみなさまとMackerelチームのメンバーがざっくばらんにプロダクトについて話し合える場として定期的に開催することを目標に運営しています。 以下のようなことに興味がある方は、ぜひ足をお運びください。 他のMackerelユーザーが、どういう活用をしているか知りたい 新しく出たMackerelの機能をどう使うか皆の意見を聞いてみたい Mackerelチームメンバーに要望を伝えたい Mackerelにまつわる苦労話がしたい／聞きたい はてな に寄り道して、Mackerel界隈の人と話をしながら、普段の気になりを共有したり次の勉強・検証ネタなどを探したりし

先々月、あるサーバベンダ主催のイベントで、最近のサーバにおける技術トレンドを紹介して欲しいという依頼を受けて、過去10年のサーバ技術のトレンドを振り返るという講演を行いました。 ほぼ10年前は「ムーアの法則が終わる」と本格的に言われ始めた頃で、そこから実はさまざまな技術、例えばストレージクラスメモリやFPGAやメモリドリブンコンピュータなどのプロセッサの回路の微細化以外の技術によるサーバの性能向上技術が注目され、その一部は市場に投入され定着しつつある一方で、商業的な成功を収められなかった多くの技術もありました。 それらをざっと振り返る内容にしたところ、現在のサーバ技術の方向性がなんとなく見えてきたのではないかと思うので、ここで記事として紹介します。 記事は前編と後編に分かれています。いまお読みの記事は前編です。 10年前、「ムーアの法則」が終わると言われ始めた 今から約10年ほど前、201

ラベル付きメトリックのチュートリアル このチュートリアルでは AWS の ECS 上で稼働している Nginx を対象に、ゼロからラベル付きメトリックを収集して Mackerel のダッシュボード上でグラフを表示するところまでをゴールとします。 なお、Mackerel のラベル付きメトリック機能は本記事執筆時点（2023 年 9月）でベータ版となっています。そのため、Mackerel のウェブコンソール上の画面は実際のものと異なる場合があります。 現在、「ラベル付きメトリック機能」ベータ版テストの参加者を募集しています。下記のフォームよりベータ版テストへの参加お申し込みをいただけます。 forms.gle ラベル付きメトリックのチュートリアル OpenTelemetry コレクターを設定する receivers processors exporters service OpenTeleme

ふじしゃんです。 8/21 ~ 9/8 の3週間、はてなリモートインターンシップ2023に参加してきました。 hatena.co.jp 今回はインターン参加記を書いていこうと思います。 応募 はてなリモートインターンシップの存在自体はかなり前から知っていましたが、実際に応募するのは初めてでした。 応募するときに募集ページを見ていて「はてなは2008年からインターンシップをしていたのか!」とびっくりしたのを覚えています。 「10年後の自分を作る」というなんだかカッコいいキャッチフレーズと、いつもお世話になっているはてなブログと Mackerel などの開発を体験し、実際にリリースしてユーザーからのフィードバックを得ることができるところに惹かれて応募を決めました。 はてなリモートインターンシップでは応募する前に簡単なクイズが毎年出題されます。 これを解かないと応募ページにたどり着くことができま

現在 Mackerel では、ラベル付きメトリックに対応するための開発を進めています。ラベル付きメトリックは、OpenTelemetry の仕様に準拠した Mackerel の新しい機能の名称であり、クエリを引く際には PromQL を使用できるといった特徴があります。 本日、この「ラベル付きメトリック機能」ベータ版テストの参加募集を開始します。詳細については後述いたしますので、まずはこの機能の背景についてご一読いただければと思います。 OpenTelemetry とは、メトリック・ログ・トレースなどのテレメトリーデータを収集し、任意のバックエンドへエクスポートすることを目指して標準規格を定めたオープンソースのプロジェクトです。詳しくは OpenTelemetry のドキュメントをご覧ください。 opentelemetry.io ホストやサービスのメトリックを収集するために、Mackere

私がWeb業界に入ったのは、ハッカーに対する憧れからです。その原体験を大事にしたいという気持ちを今でも強く持っています。 もう20年近く前になりますが、Web2.0の時代、私は傍観者でした。世界ではGoogleを筆頭として、日本でも、はてな社などが、エンジニアドリブンで個性的なサービスを生み出していました。他にもmiyagawaさんなど、個人で世界的に使われるようなOSSを開発している人もいました。書籍「ハッカーと画家」で描かれるような、ハッカーが個人技で大企業を出し抜く痛快さがありました。 そのように、WebサービスにせよOSSにせよ、同年代のハッカーが自分の技術でイノベーションを起こし、世の中に影響を及ぼしていることに羨望の眼差しを向けていたのです。 サブカル的な空気感も好ましく思っていました。西海岸のコンピュータ文化はヒッピーカルチャーの影響を受けていたのは間違いないでしょう。当時の

人工知能（AI）ブームでデータセンター向けの高性能半導体の需要が急伸している。CPU（中央演算処理装置）最大手の米インテルとGPU（画像処理半導体）最大手の米エヌビディアは性能向上を求めて互いの得意領域を侵食し始めた。半導体の2強が市場をすみ分ける時代は終わりを迎えつつある。「生成AI時代のまったく新しいプロセッサーを作り出した」――。8月上旬に米ロサンゼルスで開かれたCG（コンピューターグラ

Mackerel のサービスメトリックは時系列で値を持つものならなんでも扱うことが出来る。であればサーバやネットワーク以外のメトリックも監視してみよう。 Mackerel で監視することで、時系列数値をグラフ化することが出来る。つまり簡易 BI ツールとして使える。 Mackerel で監視することで、閾値を超えた際にアラートを出せる。 というような話です。 私は20年超の distributed.net ジャンキーですので(参考1、参考2)、RC5-72 の順位を Mackerel で監視してみようと思います。 まず Mackerel のサービスメトリックを送信する API を確認します。といっても API-key を添えて URL をたたくだけのシンプルなものとなっています。 監視対象となる私のの RC5-72 のランキングページはこちらです。 Rank: の右の「1500」という数値

不正アクセスによるIDとパスワードの漏洩を受けて、MD5によるハッシュ化について話題になっていました。システムを作る上で、パスワードの管理や認証はどう設計すべきかを考えるために、少し整理をしてみます。もし事実誤認があれば、どしどしご指摘ください。 == 2023/8/21追記 == この記事は、ハッシュの保存の仕方一つとっても、沢山の対策方法が必要であるということをお伝えするために記載しています。そして、これから紹介する手法を取れば安全とお勧めしている訳ではないので、その点をご留意いただければと思います。攻撃手法に応じての対応策の変遷を知っていただくことで、セキュリティ対策は一度行えば安全というものではないことを知って頂くキッカケになれば幸いです。 == 追記終わり == パスワードのハッシュ化 まず最初にパスワードの保存方法です。何も加工しないで平文で保存するのは駄目というのは、だいぶ認

新潟出張中は毎朝フルグラを食べていた。 コーンフレークやフルグラの袋には栄養バランスが完璧であることを示す多角形が載っている。 本当に栄養バランスは完璧なのだろうか。また、コーンフレークとフルグラはどちらがより栄養バランスが良いのだろうか。 代表的な商品であるケロッグコーンフロスティとカルビーフルグラについて、そのまま食べた場合、牛乳をかけた場合、低脂肪乳をかけた場合の計6通りの栄養成分を調査した。 （コーンフロスティは砂糖をまぶしたコーンフレークであり、厳密には別物なのだが、コーンフレークよりコーンフロスティの方がメジャーなので、コーンフロスティで検証した。） 商品が推奨する通り、コーンフロスティは30gに牛乳200g、フルグラは40gに牛乳200gかけた時の栄養成分を算出した。 牛乳と低脂肪乳の栄養成分は文部科学省の一般成分表を用いた。 過去記事と同様に30歳～49歳男性の必要量と比較