タグ

AWSとs3に関するatsuizoのブックマーク (5)

  • KinesisかS3か

    Kinesisを触ってはみたものの、特別「これは使いやすい!」という印象ではなかった。 Kinesisの用途は要するに AWSにガンガンデータを送る AWS側では、送られてきたデータを片っ端から処理する AWS側に着いたデータは処理しようがしまいが一定期間(現在は24時間)で消える というもの。 しかし、AWSへの送信は単純にHTTPSのPOSTリクエストであり、さらにBase64エンコードされているということで特に効率的な方法ではない。むしろ効率をまったく考慮しておらず、シンプルさ、扱いやすさに徹している。 HTTPSのPOSTリクエストであるにも関わらずサイズ上限(現在は50KB)がきついので、小さなデータを送る用途に限定される。 個人的に数十~百台程度のサーバからAWSへのログの集約(Log Aggregation)を計画しているのだが、Kinesisの用途にぴったりか?と考えた一方

    KinesisかS3か
  • CloudWatch LogsのS3エクスポート | DevelopersIO

    渡辺です。 個人的に好きなAWSのサービスのひとつがCloudWatch Logsです。 各サーバに保存されるログを保存するだけでなく、簡易検索や保存期間の指定ができるため、ロギングに関する最低限の要件を満たすことができます。 利用方法もEC2インスタンスであればエージェントをインストールするだけという手軽さもポイントですね。 Lambdaを組み合わせれば簡単なログ監視もできます。 日はCloudWatch Logsで保存されたログを他のソフトウェアなどで利用する時に便利なS3エクスポート機能を紹介します。 S3へのエクスポート機能 S3へのエクスポート機能は文字通り、ログをS3に転送して保存します。 この時、エクスポートするログの時刻(範囲)を指定します。 簡易検索でログを絞り込んでのエクスポートはサポートされていないのでご注意ください。 S3バケットの準備 はじめにエクスポートする対

    CloudWatch LogsのS3エクスポート | DevelopersIO
    atsuizo
    atsuizo 2017/05/01
    CloudWatchLogs大好きでお世話になりまくりだけど、、CloudWatchLogs自体がS3領域に保存してるはずなのに、S3にエクスポートしてからじゃないとAthenaやRedshift Spectrumに連携できないのが残念。
  • アクセスポリシーのガイドライン - Amazon Simple Storage Service

    Amazon S3 では、リソースベースのポリシーとユーザーポリシーを使用して、Amazon S3 のリソースへのアクセスを管理できます。詳細については、リソースへのアクセスの管理 を参照してください。リソースベースのポリシーには、バケットポリシー、バケットアクセスコントロールリスト (ACL)、オブジェクト ACL があります。このセクションでは、リソースベースのアクセスポリシーを使用して Amazon S3 のリソースへのアクセスを管理する具体的なシナリオを紹介します。 ACL ベースのアクセスポリシー (バケットおよびオブジェクト ACL) の使用が適する場合 バケットとオブジェクトには関連する ACL があり、アクセス許可を付与するために使用できます。 S3 オブジェクト所有権は、Amazon S3 バケットレベルの設定で、バケットにアップロードされる新しいオブジェクト所有権を制御

    atsuizo
    atsuizo 2017/02/24
  • 乙武不倫の謝罪ホームページに見るサーバー構築:

    今回、不倫で有名になった乙武さんの謝罪文はAWSのS3で構築してる。技術的にもプロの犯行だ。S3とは、ざっくり言うとAmazonさんが運営してるほぼ絶対落ちない静的サーバのことです。http://ototake.com をDNSで全部S3に降ってる。要するに謝罪文しか表示しないけど絶対落ちないサーバをAmazonさんから短期的に借りる。今後、芸能人の謝罪文はAWSのS3というソリューションが増える。 GMOさんは芸能人に強いのに営業しないのかな。CAと組んで謝罪文サーバとか売ればいいのに。これは、芸能人のサイトを運用している人には重要な事例だ。教科書にのるかもしれない。むしろ、今後の謝罪ページのセオリーになるかもしれない。昔に比べて、DNSの浸透は爆速になったので、こういうのが可能なんだろな。 今まで、ototake.comを無視して、短期的にS3にDNSを降ることで、以下のメリットが有る

    乙武不倫の謝罪ホームページに見るサーバー構築:
  • Amazon S3とnanocで作る 安い・落ちないwebサイト

    Amazon S3による静的webサイトホスティングの紹介、実際のサイト二つを例に料金の試算、nanocを使ったサイト制作・S3への公開フローの紹介。 2014/12/06 JAWS-UG Shimane vol.3 発表資料(一部修正)。

    Amazon S3とnanocで作る 安い・落ちないwebサイト
  • 1