実際に運用してみてわかった、大規模Mastodonインスタンスを運用するコツ - pixiv inside
おはようございます、ImageFlux開発責任者のharukasanです。3日前の4月14日、ピクシブではPawooが急にリリースされることになりまして、ここ数日はずっとPawooサーバにログインしていました。このPawooサーバ、既にピクシブの監視体制に入っており、アラート受信後インフラエンジニアが障害対応できる仕組みを整えています。案の定、リリース直後の15、16日は週末にもかかわらずアラートを受け取ることになり、サーバにはりつくことになったわけです。どんなシステムであろうとアラートを受け取ったら対応する、それが我らインフラエンジニアです。 pawoo.netの構成 さて、それではまずPawooの構成を見ていきましょう。digすればわかりますがpawoo.netはAWS上に構成されています。数百台以上の物理サーバを常時運用しているピクシブであっても、さすがにこんなにはやく物理サーバは用
［速報］Amazonクラウド、S3より安価なEBSを含むビッグデータ向けのブロックストレージを2種類発表。AWS Summit 2016 Chicago
［速報］Amazonクラウド、S3より安価なEBSを含むビッグデータ向けのブロックストレージを2種類発表。AWS Summit 2016 Chicago Amazon Web Servicesは米シカゴでイベント「AWS Summit Chicago 2016」を開催。1日目の基調講演で、ビッグデータ向けの新しいストレージ、Amazon Elastic Block Storage（Amazon EBS）を2種類発表しました。 基調講演に登壇したのは、同社プロダクト戦略 ゼネラルマネージャ Dr. Matt Wood氏。 SSDによってストレージには多くの革新が起きた、ではもう磁気メディアではイノベーションを起こすことはできないのか。 磁気ディスクはとても安価で、シーケンシャルアクセスに強いという特性がある。そうした特性を活かした、新しいサービスはできないのだろうか。 そこでビッグデータに適
AWS Solutions Architect ブログ
SAの岩永です。AmazonのCTOのWernerが、先日非常に興味深いAmazon EC2 Container Service (Amazon ECS)に関する投稿をしていましたので、日本語に訳してみました。Amazon ECSがもたらす価値を感じ取るのに良い記事だと思いますのでぜひご覧ください。 なお、Amazon ECSについて質問や要望がありましたら、どのような手段でも構いませんのでぜひご連絡下さい！ 原文: Under the Hood of Amazon EC2 Container Service 過去のAmazon EC2 Container Service (Amazon ECS)に関する投稿の中で、私はクラスタ上でのモダンな分散アプリケーションの実行における2つの鍵となるコンポーネント「信頼できる状態管理」と「柔軟なスケジューリング」についてお話しました。Amazon E
AWS で不正アクセスされて凄い額の請求が来ていた件 - yoya's diary
情けない話ですが、自分の大チョンボで AWS の個人アカウントが第三者にアクセスされた結果 190万円相当のリソースが使われ、最終的に AWS さんに免除を頂きました。反省込みで本件のまとめを書きます。 自分が馬鹿を幾つも重ねた結果であって、AWS 自体は怖くないというのが伝われば幸いです はじめにまとめ S3 実験してた時に SECRET KEY を見える場所に貼っていた事があり、第三者がそれでアクセスし大量の高性能インスタンスを全力で回す (恐らくBitCoin採掘) AWS さんから不正アクセスの連絡があり、急いで ACCESS KEY 無効＆パスワード変更、インスタンス全停止、イメージ削除、ネットワーク削除 免除の承認フェーズを進めて、クレジットカードの引き落とし前に完了して助かる AWS さんのサポート AWS さんは最大限サポートしてくれました 承認フェーズが進まない時もあまり
あのXen「秋の再起動祭り」を振り返る〜クラウドサービスユーザー調査〜 | DevelopersIO
こんにちは、せーのです。 秋ですね。食欲の秋、芸術の秋、再起動の秋。 ということで先日、Xenに脆弱性が発見されセキュリティ対応のためにホストの再起動が必要となりました。 Xenを使用しているクラウドサービスは多く、AWSもその一つです。AWSは公式発表より前に順次対象のホストを使用しているEC2、RDSを緊急でリブートメンテナンスする対応を取りました。 さて、では実際のところ今回のリブート祭りでユーザーの影響はどのくらいあったのでしょうか。RIGHT SCALEが興味深いユーザー調査を行っていましたのでご紹介致します。 対象ユーザー 対象者はAWS、Rackspace、SofLayer、オンプレでXenを使用しているユーザー449名です（複数のクラウドを使用しているユーザーもいましたので延べ人数はそれ以上となります）。 リブートによるダウンタイム時間 まずはそれぞれのクラウドユーザーが今
Amazonは1時間に最大1000回もデプロイする。クラウドネイティブなデプロイとはどういうものか？ AWS re:Invent基調講演（Day2 AM）
Amazonは1時間に最大1000回もデプロイする。クラウドネイティブなデプロイとはどういうものか？ AWS re:Invent基調講演（Day2 AM） クラウドによってリソースの制約から解放され、サーバやネットワークを含む冗長性までプログラミング可能になった新しい世界では、どのような考えによってソフトウェアを構築すべきなのか。 Amazon.com CTOのWerner Vogels氏は、Amazon Web Servicesが先週ラスベガスで開催したイベント「AWS re:Invent」2日目午前中の基調講演で、新しい時代のアーキテクチャとはどういうものなのか、聴衆に向けてたっぷりと解説しました。 （本記事は「AmazonクラウドのCTO「クラウドネイティブなアーキテクチャには4つの戒律がある」。AWS re:Invent基調講演（Day2 AM）」の続きです。 戒律その2「リジリエ
東大、AWSによるビッグデータ解析で都市の人の流れを可視化
印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます 災害対策、市場開拓に役立つ「人の流れプロジェクト」 空間情報科学というと、耳慣れない人も多いかもしれないが、ある領域の地理情報にまつわるデータを収集、蓄積、分析し、体系化する学問である。空間情報科学から得られる知見はさまざまな分野に応用される。代表的なものの一つが、調査データから都市圏などでの人の流れ、動線をつかみ、都市整備やビジネスに役立てる試みである。 マスの人の流れをつかむことは、災害時の効率的な避難シミュレーションや、混雑解消などに役立てることができるし、屋外広告や新しい商圏開発にも欠かせない。2007年には、地理空間情報活用推進基本法が公布、施行され、国をあげて地理空間情報の活用を推進する動きも出ている。 東京大学空間情報科学
AWS ToolkitでTomcatクラスタをAmazon EC2上に楽々構築
AWS ToolkitでTomcatクラスタをAmazon EC2上に楽々構築：ユカイ、ツーカイ、カイハツ環境！（12）（1/3 ページ） 「AWS Toolkit for Eclipse」でツーカイAmazon EC2操作 クラウドプラットフォームの代表格であるAmazon EC2（Elastic Compute Cloud、以下、「EC2」）をEclipseから利用するプラグインとして、「AWS（Amazon Web Service） Toolkit for Eclipse」（以下、「AWS Toolkit」）がAmazonから提供されているのをご存じでしょうか（参照：Eclipse中でAmazon EC2向けJava開発が完結）。 AWS Toolkitを利用すると、Eclipse上で作成したWebアプリケーションを簡単にEC2上にデプロイできます。また、これにより複数のWebサーバ
Amazon API認証のPROXYを書いたよ(AmazonのAPI認証導入はOSSに対する挑戦だよなぁ(4)) - ただのにっき(2009-06-19)
■ Amazon API認証のPROXYを書いたよ(AmazonのAPI認証導入はOSSに対する挑戦だよなぁ(4)) あれから、なんと即日で回答が来た: ご提案いただいている アプリ --(ASIN)→ PROXY --(ASIN+秘密キー)→ Amazon の方法でしたら、ライセンス上問題となりませんので、対応につきご検討いただけますと幸いです。 ニヤリ。 掲示板の方には書いていないが、言うまでもなくPROXYもFOSSとして公開するわけです(もちろんsecret keyは含めずに)。というか、サンプル的な意味合いを込めて、プリミティブな実装をGitHubにあげておいた: amazon-auth-proxy tDiaryのamazonプラグイン実装は、デフォルトでtDiary.org上に設置したこのPROXYを呼び出すようにするつもりだが、ご存知のようにtDiary.orgは第一tDia
アマゾンAPIを使うのに2009年8月15日から認証が必要になるらしい
アマゾンAPIを使うのに2009年8月15日から認証が必要になるらしい 2009-05-09-1 [Programming][Affiliate][WebTool] 「Amazon アソシエイト Web サービスの名称変更および署名認証についてのお知らせ」というメールが来ました。 （追記: ほぼ同内容のものが Forum とアソシ公式ブログにもありました。ただし Forum では15日ではなく16日となっています。） さて、このたび、Amazon アソシエイト Web サービスの名称を、「Product Advertising API」と変更しましたことをお知らせいたします。この新名称は、開発者の皆様が Amazon サイトで販売されている商品の広告作成を行い、これによって Amazon より広告費を受け取るという、API の目的をより正しく表しています。 はいはい、了解しました。 「Pr
Forums
You have been redirected here because the page you are trying to access has been archived. AWS re:Post is a cloud knowledge service launched at re:Invent 2021. We've migrated selected questions and answers from Forums to AWS re:Post. The thread you are trying to access has outdated guidance, hence we have archived it. If you would like up-to-date guidance, then share your question via AWS re:Post.
AWS関連リンク集
Amazon Webサービス（Amazon Associates Web Service）の開発者向け資料をまとめました。（最終更新：2007.11.17） ※利用者向けのスクリプト／サービスは、lilboxのほかlilbox：リンク集へどうぞ。 ※当初Amazon Webサービス（略称AWS）といえば今で言うAmazon Associates Web Service（略称A2S）の一種類だけでしたが、2004年にバージョン4.0が導入された際にE-Commerce Service（略称ECS、2007年11月にA2Sに改称）としてAWS下の一サービスという位置付けになりました。今ではこれ以外にも多数のWebサービスが提供されていますが、まだ一般的にAWSと言えばA2Sのことを指すことが多いようです。
Amazon Associates Web Service 4.0簡易テスター
Amazon Associates Web Service 4.0 簡易テスター 最終更新日：2008/08/21 フォームにしたがって作成されたRESTリクエストを新規ウィンドウで開きます。 参考： Technical Documentation / チュートリアル / AWS関連リンク集 Operationは、ItemLookupと、キーワードかブラウズノードによるItemSearchのみ用意しています。 日本以外も選べますが、日本で対応していないパラメータは用意していません。 JavaScriptが無効になっていると、必要以上に分かりにくくなります。一応動作はします。 「クッキー保存」をチェックしておくと入力内容をクッキー保存します（ItemPageとResponseGroupを除く）。 レスポンスはXML文書なので、ブラウザにはIEが見やすくておすすめです。 http://w
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
TechCrunch | Startup and Technology News
Amazon Associates Web Service
bricklife.com
Amazon Web Services Developer Community : Migrating from Amazon ECS 3.0
Gauche で Amazon Web Services。 : torus solutions!