「東京〜名古屋・大阪間で超大容量のデータを送信するならHDDを新幹線で持って行った方が早い」は本当か？計算してみる

☕ふらのさん𝕏🍬 @flano606 「東京から名古屋や大阪あたりの距離で超大容量のデータを送信する時はデータ通信よりHDDを新幹線で持って行った方が早い」って話すき 2020-08-01 11:49:15

[tigercaffe]

超大容量データをHDDに書き込む時間も考慮に入れないと駄目じゃない？

[imakita_corp]

データに豚まんやシュウマイの匂いが付きそう

[gomakyu]

amazon snowballはデータをamazonに渡してからアクセス可能になるまで時間がかかるんじゃ無い？公式では一週間程度、って書いているよ。

[whkr]

ここ10年間で、記録媒体の高密度化に比べて回線帯域がそれほど増強されていないので、今後、新幹線通信の重要性は大きくなっていくだろう。

[Adeptus]

それをクラウドサービスにしたのが aws snowball

[molytack]

1TB microSD（0.4g）の重量あたり容量は、16TB 3.5”HDD（670g）の100倍。60kgの手荷物制限で計算すると、15万個=150PBのmicroSDを運べるので2.7TB/sに達する。10tトラックで一晩なら860TB/s、コンテナ船で1週間なら655000TB/s。

[sun330]

数年前にAWS移行時にsnowballたのんだことある。アップロード速度考えたら書き出して送付した方が早そうという結論からだけど。なんか事務処理的にはまった記憶があるなあ…（もう忘れた）。

[lex010]

「江戸時代のデータ送信は、飛脚が運ぶ手紙で計算するとうんバイト」みたいな話も好き（追記:江戸-大阪を飛脚は最短3日、1文字2バイト100文字として、200byte÷ 259,200秒= 0.0007716bps）

[nost0nost]

データセンターで毎日やってる事だしわりと今更な話題な気がするが…「外部保管用のテープメディアへ2次バックアップを行い、テープメディアを遠隔地へ搬送します」https://jpn.nec.com/backup/netbackup/netbackup-sl-remotebackup.html

[dzod]

扉を開けたら新幹線のホームがある環境、newdaysとかベルマートかな

[at_yasu]

HDDより microSD のほうが効率良さそうだけど、書き出し時間がなぁ…

[UDONCHAN]

届けられたディスクの中身を読む時間が考慮されてない問題。SATAとかのスピードも実はそんなに早くないんだよねー

[taro-r]

ネットは，未だ新幹線を超えてないのか。

[gogatsu26]

“なるほどこれが“ひかり”通信を上回るのぞみ通信”

[DG-Law]

テラバイトの領域までいくとそういうことが起きるのねｗ

[adsty]

データ転送のみの時間を想定して比較。

[eru01]

LTOの方が重量比で容量稼げるからLTOにしろ

[haru-s]

ミラーリングしておいて、持ってくときは既に書き込まれてる状態にしとけば

[electrolite]

ネットワークの速度を測る時は、データをメモリー上においてディスクI/Oをボトルネックにしないのが定石。キャッシュが巨大なストレージシステムならできるかもだが、そもそもキャッシュに載せるのに時間がかかる。

[sweetandsalty]

くらうどの速さはどれくらい？

[doroyamada]

HDDにデータをコピーする時間、HDDからコピーする時間を考慮していないのでは。

[narwhal]

そういう話であればHDDをトラックに積んで走った方がずっと早いし、貨物船に積んでいけばさらに早いのである。

[synopses]

クラウド上にオンプレのデータを移行するのにHDD使うことがあるよね。AWSだとSnowballとか

[tohokuaiki]

ひかり🚅では遅すぎる。／まぁ、本当に急ぐなら不安定要素の大きいネット通信使うより実際に持って行くから、ケースバイケースかな。

[hathatchan]

新幹線は手間(新幹線発着駅を経由)もあるし交通費かかるんじゃ…

[mojimojikun]

そんな事を前に Postmanet って言ってた論文があったよなぁと思って探した。ああ、懐かしい。 http://conferences.sigcomm.org/sigcomm/2004/papers/p402-wang.pdf

[gyochan]

扱うデータのサイズと転送速度のギャップは今に始まったことではなくて、むかしも「ZIPメディアをバイク便」みたいなソリューションは普通にあった

[expajp]

データの上りが新幹線の下りでデータの下りが新幹線の上りだったらややこしいな

[PROOF]

コンテンツ等が超大容量化したら、新幹線通信が一般化するのかな？

[djshacho]

なぜ雪の玉と言うのだろう。

[hiroomi]

”都内でデータのやり取りをFTPでとかよくやってたけど、SSDにコピッてバイク便が一番速くて確実ですw ”何かのレプリカ前データだと持ち運んだな。

[rna]

はてなが引越しした時全サービス止めてたけどあれもHDD運んでたんかな？

[Wafer]

JR貨物が大容量・セキュリティ完璧のデータ配信サービスを開始できるのでは。そして駅ビルを軒並みデータセンター化する。停電にも強い（変電所・発電所持てば）

[ardarim]

レベルを上げて物理で送る

[kurotsuraherasagi]

重複排除して小さくなるたぐいのデータかもしれない

[y_maki]

ビールとシウマイ弁当も買おう

[pero_pero]

1時間程度のメリットに往復1万以上払えるか的な。

[sakuragaoka]

（自転車の）メッセンジャーの活用のヒントとなるのでは？

[stracciatella]

新幹線通信や飛行機通信はデータ容量に依らないO(1)なので、ある閾値でもって容量にO(N(^n))で依るデータ通信に勝つ。

[augsUK]

五分の距離だと10TB/300sec→266Gbpsで動けるけど、画像を大量にとる研究室だと実際にあるな