DMMはAWS“から”オンプレミス“に”切り替える サーバーとネットワークのコストから見直す適切な環境選び

DMM. comのITインフラ本部が今期に注力している取り組みについて、事例を紹介しつつ話す「DMM meetup #31 ～DMMのインフラを支えるITインフラ本部の取り組み紹介～」。ここでSRE部の松浦氏が登壇。WebRTCの配信システムについてと、配信サーバーをAWSからオンプレミスに切り替える理由を紹介します。 AWS“から”オンプレミス“に” 松浦庸介氏（以下、松浦）：SRE部の松浦から「WebRTCの配信システムをAWSからオンプレミスに切り替えている話」ということで発表したいと思います。 まず、簡単に自己紹介をしたいと思います。2020年の5月に入社して、それ以来WebRTCのリアルタイム配信システムの開発や運用を担当している、松浦と言います。本日はよろしくお願いします。 まずこのタイトル、みなさん「AWS“から”オンプレミス“に”」というところ、気になってる方がいるんじゃな

[masatomo-m]

扱ってるデータがエロだったりすると、国外基準で違法コンテンツ配信扱いされてインフラ止められる、とかのリスクがありそうなので、その辺りも勘案されてそう

[TakamoriTarou]

ライブチャット(要はネットテレクラ）という特殊な商売な上に、エロ動画配信で太い回線を持っているからできるということで、参考になる会社は国内には少ないんではないでしょうかね。

[Sephy]

ハウジング代とか運用管理費とかセキュリティ対策費とかオンプレの構築と運用にかかる諸費用について語られていないので通信コストについては納得するものの総費用と手間を考えるとどうなのかってところが気になる

[maninthemiddle]

AWSはとにかく通信費が割高なので、通信量が多くて一定以上規模であれば普通に合理的だと思う

[daishi_n]

これはAWSで育ったサービスが自社運営で損益分岐点を超えたので卒業、って感じだよね。dropboxもだけどオンプレが安くなるには規模が重要。今回だと手持ちのリソースも追加要素だね

[mohno]

当たり前だけど、そこそこの規模で運用し続けて、技術者を抱え続けられるなら、自前サーバーにする方が安上がりにはなるよね。DropBoxが典型的というか。 https://www.itmedia.co.jp/news/articles/2005/04/news002.html

[circled]

通信コストが流石に問題なのでAWSでしか出来ないこと以外はOracle Cloudに乗り換えてる。DMMもOracleのMySQLマネージドでHeatWave使ってるようなので、クラウドの引越し先としてもOracle Cloudは毎月転送量10TBまで無料なので有りか。

[dot]

オンプレの費用ってサーバと通信費以外にも保守運用とかの人件費もあるよなーというのが気になる。そういう可視化しずらいコストが嫌でクラウド選んでるところもある。

[vvvf]

価格交渉の余地があるならしておくべきだったんじゃないかな

[havanap]

DMMはBGPのAS番号持ってるようなとこなので

[hdkINO33]

“このシステムの稼働当初はスペックの想定が難しかったため、EC2のメリットも大きかったですが、安定してくると、このメリットは逆にあまり活かせなくなってきた経緯があります。”

[halfrack]

1:n の割合があまり大きく偏っていないというのが難しさだなぁ

[tmatsuu]

スモールスタートはクラウドで、規模が大きくなってコストがネックになってきたら勘案する、と。

[karkwind]

なるほどねぇ

[lackofxx]

よくある話だがいい話。万能ではなく使い分けですなぁ。

[ferrari458tukapai]

設計する時に抜けがちなトラフィック爆増によるネットワークコストの話 というかDMMって400Gbpsの帯域持ってるの⁉︎ 凄すぎ

[flont]

DMMほどの規模でなくても、大口契約で割引されてもなおオンプレの方が安くなるケースは結構ある

[ryunosinfx]

通信量の差額ですごい人を雇えるだけのサービスボリュームが有ればこそなんだよね。もし、AzureやGCPでこの差額が半分になる価格改定があったりすると厳しいことになるだろうなぁ

[nilab]

DMMはAWS“から”オンプレミス“に”切り替える　サーバーとネットワークのコストから見直す適切な環境選び - ログミーTech

[Dai44]

しょっちゅう家族構成や部屋割りが変わるなら賃貸、落ち着いてメンテもやれるなら持ち家、みたいなもんで(雑な例え

[ryuichi1208]

通信量高い話よねって話で導入見送られたのが5年前くらいにあったけど今そういうの多いのかな。

[chiba1008]

もう適当なサーバーにCloudFlare被せればいんじゃねって気になってる

[mouki0911]

クラウドは別に必ずしも安いわけじゃないってわかってない人多い。メリットは違うところなので。

[boomerangj]

交渉しなかったという部分が数年後に何かが起こるフラグになりそうで怖いな…これはWebRTCの配信システムって事で、CDN使えそうな動画配信はどこ使ってるんだろう。

[hate_nao]

DMMは日本のDropbox / DMMもクラウド事業始めてくれ。

[jtw]

サーバーやストレージの値段は規模のビジネスなので、OCPやれないような数ラックほどでおさまるシステムならクラウドの方が結果的に安くなることもある。クラウドでパフォーマンスは求められないし、使い分けだ。

[legoboku]

DropBoxみたいだ

[eichisanden]

“これはソフトウェアの開発元も気がつかなかった仕様で、CentOS7では非常にパフォーマンスが劣化することがあり、OSを切り替えています。” 本題じゃなけどこの話も気になる

[rti7743]

AWSは安くないからなあ。価格競争きたら面白いんたけどな。

[amemiyashiro]

「DMM DC」とか始まったら面白いんだけど……その布石だったらどうしよう。

[daichirata]

Dropboxの例というよりは、単に持ってた帯域の資産を活かしたという話かなと

[shikiarai]

AWSの通信コストは本当ね。調べた時たかっ……って思ったからね…….

[ext3]

🤔

[kuzumaji]

扱っているデータの特性上いきなり国外で扱い停止リスクとかもあるとかそんなとこかな。それか扱うデータが膨大なぶん単に自社で管理したほうが安価になったのか。

[gogatsu26]

“EC2の料金表に、「1ヶ月の転送量500TB超える人はお問い合わせください」とあるので、非常に多い場合は交渉もできるようではありますが、我々はそういう手をとりませんでした。”＜DMMならまずダメ元で交渉しそうだが

[gomer-pyle]

コストだけ見たらオンプレが安いとはDeNとかも言ってたような。ただそれだとエンジニアも入りたがらないし、k8sやらクラウドの良い所も取り入れていかないとおいて置かれるみたいな話だったような。

[ys0000]

なるほど面白い。ネットワーク帯域使いまくるとコストが段違いなのか。先に値下げ交渉してもよかったのかもね。向こうも元々高めに設定しているから交渉する窓口を用意しているのかも知れないし。

[naratas]

えっちなライブチャットの話！えっちなライブチャットの話だ！絶対そうだ！！！

[IGA-OS]

規模などによってはオンプレが有利な部分ある

[nakag0711]

しかし日本のサーバのipv6化は遠いようだ