[B! *matome][amazon] masadreamのブックマーク

AWSはIaaSでAzureはPaaSという観点で違いを説明｜佐々木康介

海外ベンダーの資料にAWSはIaaSでAzureはPaaSって書いてて面白いなと思うと同時に、妙に腑に落ちる分類だなと思いました。それをツイートしたところ、どういうことか書けよとばかりに拡散されたので書きました。もちろんそんなにバッサリ区分けできるものじゃないし、AWSにはlambdaとかRDSとかPaaSの人気サービスがたくさんあります。逆にAzureにだってIaaSはあります。でも、そういう区分けをしていることに納得できる理由。それは、設計思想が違うからです。なお、本記事は私の偏見のみで構成されております。 2020/12/23追記 lambdaは2010年ではなく2014年開始との指摘を多数いただいたので修正いたします。調べもせずに適当に書いてすみませんでした。また他にも「GCPこそPaaSでは？」「GCPはSaaS」などGCPを比較する声がものすごくたくさんありましたが、私の

masadream 2021/01/04

リンク

Amazon Redshift データ型と列圧縮タイプのまとめ(データ型＆列圧縮タイプ対応表付) | DevelopersIO

Amazon Redshiftではテーブルを作成する際の要素として幾つかポイントがあります。1.と5.については一般的なRDBMSでも用いられるような概念ですね。残りの2〜4についてはRedshift特有の設定となります。当エントリではこの中の『データの型』と『列圧縮タイプ』について、その概要と、実践で使いやすい/調べやすい様に諸々個人で整理した情報などを併せて投下したいと思います。 1.データの型(data types) 2.列圧縮タイプ(column compression types) 3.分散キー(distkey) 4.ソートキー(sortkey) 5.制約(constraint) 目次データ型数値型文字型日付型ブール型列圧縮タイプ raw bytedict delta delta32k lzo mostly8 mostly16 mostly32 runlength t

masadream 2020/07/05

リンク

Udemy「手を動かしながら2週間で学ぶ AWS 基本から応用まで」Day1、2、3 - はぐれメタルのケモノ道

どうも、はぐりんです。仕事でAWSを触る機会が迫っており、諸々お勉強を始めておりましたが、そんな中、おすすめ教材をTwitterで見つけました。手を動かしながら2週間で学ぶ AWS 基本から応用まで | Udemy 有料の教材ですが、ちょうどセールで90％オフで購入できました。全15日間の教材となっており、今回のブログではDay1,2,3の内容をまとめたいと思います。なお、自分の備忘録的な意味合いが大きいため、綺麗な画面キャプチャーなどありません。ご了承ください。 Day1 ・AWSアカウントの作成・IAMユーザの作成・IAMユーザでのログイン・CloudTrailによる操作ログ保存デフォルトでは90日分しか保存されないためS3バケットに保存する。 →　CloudTrailの設定（ログをS3に保存する） →　同時にS3バケットの作成・利用料金アラートの設定 →　Cl

masadream 2018/11/11

リンク

POSIX 演算子 - Amazon Redshift

POSIX 正規表現は、マッチパターンを指定する一連の文字です。文字列が正規表現で記述された正規セットのメンバーであれば、その文字列は正規表現と一致します。 POSIX 正規表現は、LIKE および SIMILAR TO の演算子の場合よりも強力なパターンマッチング手段を提供します。POSIX 正規表現のパターンは、パターンが文字列全体と一致した場合にのみ true を返す SIMILAR TO 演算子の場合とは異なり、文字列の任意の部分と一致することができます。 POSIX 演算子を使用する正規表現マッチングは、計算コストが高くなります。非常に多くの行を処理する場合は特に、可能な限り、LIKE を使用することをお勧めします。例えば、以下に示す各クエリは機能的には同じですが、LIKE を使用したクエリは、正規表現を使用したクエリよりも数倍速く実行できます。 select count(*)

masadream 2017/05/20

リンク

AWS CLIのS3コマンドまとめ - TASK NOTES

普段 AWS CLI を使うことはそんなにないんですが、S3 コマンドだけはよく使うのでまとめました。といっても全てではなく、ファイルやディレクトリ操作に関する部分です。基本コマンド AWS CLI の S3 コマンドは以下の形式で実行します。 aws s3 <Command> [<Arg> ...] 基本的に Arg の箇所はパスを入力することになるのですが、ローカルのパスは「ローカルファイルまたはディレクトリの絶対パスまたは相対パス」、S3のパスは「s3://<bucket>/<prefix>/<object>」となります。prefix とはディレクトリやフォルダのイメージです。 Command Description cp オブジェクトのコピー ls オブジェクトの一覧 mb S3バケットの作成 mv オブジェクトの移動 rb S3バケットの削除 rm オブジェクトの削除 sync

masadream 2017/04/02

リンク

AWS Solutions Architect ブログ

AWSソリューションアーキテクトの蒋(@uprush)です。初期コストがなく、導入しやすいペタバイト級のデータウェアハウスAmazon Redshiftは、非常に多くの皆様に利用頂いています。そのなかでも特に多いのは、Redshiftに保存されているビッグデータをBIや可視化ツールを使った解析です。データ解析ツールとしてRが有名です。Rは統計分析や可視化するためのオープンソースソフトウェアで、データマイニングや分析などの分野で広く使われています。 RはJDBCを利用してデータベースにアクセスすることができます。また、Redshiftは標準的なSQLが利用可能で、PostgresSQLのJDBC・ODBCドライバをそのまま使用することができるため、この２つを組み合わせるとRからRedshiftにもアクセスできます。 RedshiftとRを利用して、インタラクティブ、かつ高度なビッグデータ