タグ検索の該当結果が少ないため、タイトル検索結果を表示しています。
こんにちは！ 山下郁矢です。2018年新卒で入社し、現在はNoSQLデータベースエンジニアとして働いています。 サービスを作るにあたってデータベースは必要不可欠ですよね。ヤフーでは100を超えるサービスで毎日生み出される膨大なデータを、データベースを用いてリアルタイムで蓄積し、運用管理しています。 今回は、その中でも利用規模の大きい、NoSQLデータベースの1つであるApache Cassandraを皆様に知ってもらうべく、ヤフーでどのようにして利用されているのかをお伝えしたいと思います。 NoSQLの立ち位置 Cassandraについてご紹介する前に、NoSQLについて軽く説明します。 NoSQLデータベースは一般的に非RDBMSに該当するデータベースのことを指します。 MySQLやOracleのようなRDBMSとはどう違うのでしょうか？ RDBMSと比べて、優位性のあるデータベースなの
Kubernetesに最適化されたNoSQLデータベース「K8ssandra」が登場。Cassandra開発元のDataStaxがオープンソースで公開
Kubernetesに最適化されたNoSQLデータベース「K8ssandra」が登場。Cassandra開発元のDataStaxがオープンソースで公開 代表的なNoSQLデータベースとして知られるApache CassandraをKubernetesに最適化した「K8ssandra」（海外の複数の記事によると発音はケェイサンドラ：Kay-sandraの模様）を、Cassandraの開発元であるDataStaxがオープンソースとして公開しました。 Meet K8ssandra! As a #Kubernetes #Helm chart, #K8ssandra deploys all things @Cassandra and gives #DBAs and #SREs elastic scale for data on Kubernetes. Check it out at https://
サーバレスでApache Cassandraを提供する「Amazon Keyspaces for Apache Cassandra」正式リリース。事実上無制限スケール、使った分だけ課金
サーバレスでApache Cassandraを提供する「Amazon Keyspaces for Apache Cassandra」正式リリース。事実上無制限スケール、使った分だけ課金 Amazon Web Servicesは、代表的なNoSQLデータベースの1つであるApache Cassandraをマネージドサービスとして提供する「Amazon Keyspaces for Apache Cassandra」を正式版としてリリースしたと発表しました。 New #AWSLaunches! Amazon Keyspaces (for Apache Cassandra) is now generally available AWS IQ waives fees until June 30, 2020 Amazon Aurora with PostgreSQL Compatibility for
New – Amazon Managed Apache Cassandra Service (MCS) | Amazon Web Services
AWS News Blog New – Amazon Managed Apache Cassandra Service (MCS) Managing databases at scale is never easy. One of the options to store, retrieve, and manage large amounts of structured data, including key-value and tabular formats, is Apache Cassandra. With Cassandra, you can use the expressive Cassandra Query Language (CQL) to build applications quickly. However, managing large Cassandra cluste
Discordがデータベースを「Apache Cassandra」から「ScyllaDB」に移行した“納得”の理由
ゲーマー向けの無料音声テキストチャットアプリケーション「Discord」を開発、提供するDiscordは2023年3月6日（米国時間）、DBとして利用していた「Apache Cassandra」（以後、Cassandra）における課題に対処するため、「ScyllaDB」に移行していたことを明らかにした。 Cassandra運用における課題とは 2015年、ゲーム専用グループチャットアプリとしてサービスがスタートしたDiscordは、スタート1年間で1100万人のユーザー、毎日4000万ものメッセージが送受信されるプラットフォームに成長した。以降も成長を続けたDiscordは、2017年には数十億ものメッセージを保存するデータベースとして、MongoDBからCassandraに移行していた。 関連記事 実装言語を「Go」から「Rust」に変更、ゲーマー向けチャットアプリ「Discord」の課
[速報] AWSのマネージドCassandra、分散KVSのAmazon MCSが発表されました！ (Open Preview) #reinvent | DevelopersIO
Operating Cassandra at scale re:Invent 2019のキーノートにて、Amazon Managed Apache Cassandra Service (MCS)が発表されました。この記事では速報としてお届けします。 Announcing Amazon Managed Apache Cassandra Service – Now in Preview New – Amazon Managed Apache Cassandra Service (MCS) | AWS News Blog スケールに対応した分散KVSとして代表的なApache Cassandraが、ついにマネージドサービスのひとつとしてAWSでサポートされます。DynamoDBへの移行が簡単でないアプリケーションの管理者には福音ではないでしょうか。 Amazon MCSの特徴は下記とのこと： A
![[速報] AWSのマネージドCassandra、分散KVSのAmazon MCSが発表されました！ (Open Preview) #reinvent | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/657e3b3e3f89a8788137ff06f32110aea2101341/height=288;version=1;width=512/https%3A%2F%2Fd1tlzifd8jdoy4.cloudfront.net%2Fwp-content%2Fuploads%2F2019%2F12%2F201912-keynote-new-amazon-mcs-eyecatch-fs8.png)
— 脱RDB脳 — Cassandraのデータモデルについて考えてみる | フューチャー技術ブログ
はじめにこんにちは、Technology Innovation Group所属 DBチームの岩崎です。 私はDBチームとして様々なプロジェクトでOracleやPostgreSQLなどRDBの設計・構築に携わってきました。 現在は、Cassandraの導入とデータモデルを設計しています。 本稿ではDBネタとしてRDB脳から脱却して、KVSならではのテーブル設計の勘所をお伝えいたします。 CassandraはどのようなデータベースなのかCassandraはKVS(Key-ValueStore）と呼ばれ、KeyとValueを組み合わせる単純な構造からなるDBです。 データアクセスはkeyに対して行い、Keyに関連付けられたValueが呼び出されます。 KVSは一般的にスキーマレスを採用することが多いと思いますが、Cassandraではアプリケーションの観点から見て、データは構造的に扱える方が開発
「Apache Cassandra 4.0」正式リリース。スループットが25％向上、データの一貫性も強化、監査ログ機能も
「Apache Cassandra 4.0」正式リリース。スループットが25％向上、データの一貫性も強化、監査ログ機能も 代表的なNoSQLデータベースの1つであるApache Cassandraが6年ぶりにメジャーバージョンアップを果たし、「Apache Cassandra 4.0」が正式リリースとなりました。 Apache Cassandra 4.0 is here! The most stable database release in history, already running in production in some of the world’s largest environments. Read @TheASF press release: https://t.co/iXzxWYRobp#nosql #databases #opensource #apache pic
Amazon Managed Apache Cassandraサービス（MCS）がアナウンスされました | Amazon Web Services
Amazon Web Services ブログ Amazon Managed Apache Cassandraサービス（MCS）がアナウンスされました 大規模なデータベース管理は決して簡単ではありません。キーと値や表形式を含む大量の構造化データを保存、取得、管理するオプションの1つにApache Cassandraがあります。Cassandraでは、表現力豊かなCassandra Query Language（CQL） を使用して、アプリケーションを迅速に構築できます。 ただし、大規模なCassandraクラスターの管理は困難な場合があり、多くの時間がかかります。基盤となるインフラストラクチャのセットアップ、構成、および保守には専門的な専門知識が必要であり、Apache Cassandraオープンソースソフトウェアを含むアプリケーションスタック全体を深く理解するひつようがります。ノードを
Repro における Presto Cassandra Connector 改造秘話 / Presto Conference Tokyo 2020
https://techplay.jp/event/795265 の発表資料です
Amazon Keyspaces (Apache Cassandra 用) は、スケーラブルで可用性の高い、Apache Cassandra 互換のマネージドデータベースサービスです。Amazon Keyspaces では、現在使用しているのと同じ Cassandra アプリケーションコードとデベロッパーツールを使用して、AWS で Cassandra ワークロードを実行できます。サーバーをプロビジョニング、パッチ適用、または管理する必要はなく、ソフトウェアをインストール、保守、または運用する必要もありません。Amazon Keyspaces はサーバーレスであるため、使用するリソースのみに料金を支払うだけで、サービスはアプリケーショントラフィックに応じてテーブルを自動的にスケールアップおよびスケールダウンします。事実上無制限のスループットとストレージで毎秒数千のリクエストに対応するアプリ
GitHub - datastax/dynamo-cassandra-proxy: Preview version of an open source tool that enables developers to run their AWS DynamoDB™ workloads on Apache Cassandra™. With the proxy, developers can run DynamoDB workloads outside of AWS (including on premises
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session.
DynamoDB、Cassandra互換のOSS NoSQL「Scylla」を使ってみる | DevelopersIO
Scyllaとは Scyllaはオープンソースのワイドカラム型のデータストアです。 Apache CassandraやAmazon DynamoDBとの互換性があります。 Cassandraと同様にクラスタ構成が可能ですが、ノードの性能が高いため、より少ないノード数で同様のパフォーマンスが出せるようです。 公式ホームページでは以下のように謳っています。 World's Fastest NoSQL Database Power your applications with ultra-low latency & extremely high throughput 速い！強い！そんなDBらしいです。 今回はあくまでもDynamoDBの代わりとして使いますが、メインはCassandraの方みたいです。 互換性があるのでエンドポイントを書き換えるだけでほとんどコード変更なしでDBを変更することがで
Cassandra でレプリケーションストラテジーを変更するとデータが消失する現象に遭遇したんですが、どうしてそんなことが起きるのかやどうしたら直せるのかがさっぱりわからなかったので、ソースコードを読んだり手を動かしたりして調べてみました。 以下、Cassandra 3.11.4 の話です。 partitioner としてデフォルトの Murmur3Partitioner を使用し、endpoint snitch として GossipingPropertyFileSnitch を使用することとします。 Cassandra のレプリカノードはどのように決まるのか？ まず、そもそも Cassandra がどのようにレプリカノードを選択しているかがわからなかったので、それについて説明します。 データセンターの数が 1、ラックの数が 2、ノード数が 3 の次のようなクラスタを考えます。 IP Ad
Amazon Managed Cassandra Service (プレビュー) が 18 拠点の AWS リージョンで使用可能になりました
スケーラブルかつ可用性が高く、Apache Cassandra 互換のマネージドデータベースサービスである Amazon Managed Apache Cassandra Service (MCS) のプレビュー版が、18 拠点の AWS リージョンで利用いただけるようになりました。 今回のリリースから、プレビュー版の Amazon MCS が以下のリージョンでご利用いただけるようになりました。米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (オレゴン)、米国西部 (北カリフォルニア)、カナダ (中部)、南米 (サンパウロ)、欧州 (アイルランド)、欧州 (フランクフルト)、欧州 (ロンドン)、欧州 (パリ)、欧州 (ストックホルム)、中東 (バーレーン)、アジアパシフィック (香港)、アジアパシフィック (シンガポール)、アジアパシフィック (東京)、アジアパシフィック
Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...
New – Amazon Keyspaces (for Apache Cassandra) is Now Generally Available | Amazon Web Services
AWS News Blog New – Amazon Keyspaces (for Apache Cassandra) is Now Generally Available We introduced Amazon Managed Apache Cassandra Service (MCS) in preview at re:Invent last year. In the few months that passed, the service introduced many new features, and it is generally available today with a new name: Amazon Keyspaces (for Apache Cassandra). Amazon Keyspaces is built on Apache Cassandra, and
DataStaxが新サービス「Constellation」を発表。「Cassandra-as-a-Service」としてNoSQLのCassandraをクラウドサービスで提供
代表的なNoSQLデータベースの1つであるApache Cassandraの開発元であるDataStaxは、クラウドでデータベースサービスを提供する新サービス「Constellation」を発表しました。 Constellationはクラウドネイティブなデータプラットフォームであると説明されており、その第一弾としてNoSQLデータベースをクラウドサービスとして提供する「Cassandrra-as-a-Service」と、データベース管理ツールの「DataStax Insight」が提供されます。 プレスリリースから説明を引用します。 DataStax Apache Cassandra as a Service goes far beyond hosted Apache Cassandra, providing users with a frictionless, cloud-native
Cassandra のコアコンポーネント Cassandra は Amazon EC2 などのインフラストラクチャサービス上にインストールし、そこで管理する必要があります。これで、Cassandra の基盤インフラストラクチャコンポーネントであるノード、クラスター、データセンターの管理上の負担を軽減できます。ここで使用するデータセンターという用語は Cassandra 固有の用語です。データセンターの一般的な定義と混同しないよう注意してください。ノードがデータを保存します。データセンターが集合したものをクラスターといいます。Cassandra データセンターは関連するノードの集合で、物理データセンターまたは仮想データセンターのいずれかです。ワークロードごとにそれぞれ別のデータセンターを使用し、ワークロードのトランザクションが相互に影響しないようにする必要があります。 Cassandra は
Apache Cassandra Projectは7月27日（米国時間）、オープンソースNoSQLデータベースの最新のメジャーリリースとなる「Apache Cassandra v4.0」公開を発表した。 Apache CassandraはNoSQLに分類される分散型データベース。Javaで実装されており、マスターレスアーキテクチャ、低遅延、フォールトトレラントなどの特徴を備える。同期または非同期レプリケーションを選択でき、DML/DDL/DCLを追跡するオペレーターのロギング機能もある。米Apple、中国Huawei Technologies、米Netflixなど多数の採用実績を持ち、Appleでは1000以上のクラスタ構成上に、16万以上のインスタンスを構築、データ量は100ペタバイト以上に及ぶという。Apache Cassandra 4.0は2015年に公開されたバージョン3系に続くメ
DataStax によって Google Cloud で Apache Cassandra as-a-Service が利用可能に | Google Cloud 公式ブログ
DataStax によって Google Cloud で Apache Cassandra as-a-Service が利用可能に ※この投稿は米国時間 2020 年 5 月 12 日に、Google Cloud blog に投稿されたものの抄訳です。 お客様がオープンソース テクノロジーを有効に活用できるようにすることは、Google Cloud の使命です。この 10 年間、Apache Cassandra は多くの大規模インターネット アプリケーションで好まれるオープンソース データベースとして選ばれ続けています。 膨大なデータを扱うアプリケーションのサポートが、Cassandra のスケールアウト可能なアーキテクチャによって実現されます。その一方で、デプロイ、管理、スケーリングの複雑化は否めません。そのため、多くの企業はより多くのワークロードをクラウドに移行し、Google Clo
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
NoSQLデータベースCassandraの紹介 〜 ヤフーのデータ基盤を支える技術
Apache Cassandra 用 Amazon Keyspaces – アマゾン ウェブ サービス
Cassandra でレプリケーションストラテジーを変更するとデータが消失する
Discord、CassandraからScyllaDBへ何兆ものメッセージを移行
Cassandra 開発者向け Amazon DynamoDB 入門 | Amazon Web Services
6年ぶりのメジャーリリース「Apache Cassandra 4」が登場 | OSDN Magazine
www.nikkei.com
harmonylife18.hatenablog.com
cub-camp.net
kai-you.net
oimo-chan.hatenablog.com
www.asahi.com