[B! MySQL] efclのブックマーク

Log Explorer: monitor security events without third-party storage

Log Explorer: monitor security events without third-party storage03/08/2024 This post is also available in Français, Español, 简体中文, 繁體中文, 日本語, 한국어 and Deutsch. Today, we are excited to announce beta availability of Log Explorer, which allows you to investigate your HTTP and Security Event logs directly from the Cloudflare Dashboard. Log Explorer is an extension of Security Analytics, giving you th

efcl 2024/03/11

CloudflareのSQLでログを検索できる仕組み

リンク

Zendesk、DynamoDBからMySQLとS3へ移行し、コストを80％以上削減

垂直スケーラビリティと効果的なテストによる金融取引システムのパフォーマンスと効率の最大化 Peter Lawrey氏はJavaチャンピオンであり、Chronicle SoftwareのCEOとして、開発者を鼓舞してソリューションのクラフトマンシップを高めることに情熱を注いでいる。経験豊富なソフトウェアエンジニアとして、Lawrey氏はソフトウェア開発プロセスにおけるシンプルさ、パフォーマンス、創造性、革新性を奨励することに努めている。

efcl 2024/02/06

MySQLとS3(-select)を使って、常時コストがかかるDynamoDBを置き換えてコストを削減した話。

MySQL
aws

リンク

MySQL Introduces Javascript Support in Preview

InfoQ Software Architects' Newsletter A monthly overview of things you need to know as an architect or aspiring architects. View an example

efcl 2024/01/03

MySQL EnterpriseにJavaScriptサポートが追加された。GraalVMを使ったJSのストアドルーチンが動かせるようになってる

リンク

オンライン DDL を期待して ALTER 文を実行したら障害になりかけた話 - カミナシエンジニアブログ

こんにちは。ソフトウェアエンジニアの坂井 (@manabusakai) です。カミナシではマルチプロダクト化に向けて、認証・認可の切り出しを進めています。その対応を進める中で、既存テーブルへのカラム追加が必要になりました。先日、そのリリースのために本番データベースにマイグレーションの ALTER 文を実行したところ、クエリが詰まって危うく障害になるところでした（幸いすぐにキャンセルして事なきを得ました）。原因を調べたところ、オンライン DDL は複数の条件が関係することがわかりました。オンライン DDL に対する知識不足と事前検証の甘さゆえのミスでしたが、結果的には良い学びが得られました。カミナシのバリューのひとつである「全開オープン」の気持ちで、事の顛末やそこから得た学びを公開します。なお、今回の話は MySQL 5.7 互換の Amazon Aurora MySQL 2 で確

efcl 2023/11/08

オンライン DDL を期待した ALTER 文が詰まる問題

MySQL

リンク

UUIDs are Popular, but Bad for Performance — Let’s Discuss

All of Percona’s open-source software products, in one place, to download as much or as little as you need.

efcl 2023/10/07

UUIDをprimary keyとして利用した時の局所性の問題について

リンク

各SQLサーバでOSコマンドを実行する方法

sql-execute-os-command.md Defending new vectors: Threat actors attempt SQL Server to cloud lateral movement | Microsoft Security Blog SQLサーバから別のところに侵入するパターンで、SQLサーバ上でOSのコマンドを利用してるケースが増えている。各SQLサーバでOSコマンドを実行する方法を知りたい。 Type How To Status SQL Server xp_cmdshell Disable by Default MySQL system (\!) Enable in Terminal PostgreSQL COPY Require pg_execute_server_program role Related Exploiting PostgreSQL

efcl 2023/10/07

SQLサーバ上でOSコマンドを実行する方法。 SQLサーバから水平方向への展開に利用されるケースがある

リンク

LINE LIVE クロージング連載 Vol.2 - DBのReplication Delayとの奮闘

LINE株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。 LINEヤフー Tech Blog こんにちは、開発5センターの Zhu です。現在は LINE NEWS の SRE チームに所属しています。この記事は、2023年3月末にサービス提供を終了したライブ配信サービス「LINE LIVE」において、今まで行ってきた施策の紹介や大規模サービスならではのクロージングに関わる話を連載するシリーズの2本目の記事です。今回の記事では、データベース上で Replication Delay によって起きていた問題と解決までの経緯やDB構成について、図を交えて紹介します。背景 LINE LIVE では、大規模のアクセスに耐えるために DB(MySQL) へのアクセスは Read/Write で分離しています。つまり書き込み

efcl 2023/09/29

MySQLのMASTER_DELAYをレプリケーションのテストとして使って、レプリケーションが遅延した時にどういう問題が起きるかをチェックしたという話。

リンク

Migrate from RDS MySQL to Aurora MySQL

In this tutorial, we will look at how to migrate from Amazon RDS MySQL to Amazon Aurora MySQL with minimal downtime. As with any database migration, there are several options. For migrating data from a MySQL DB Instance to an Amazon Aurora MySQL DB Cluster, we recommend to use a special type of node called an Aurora Read Replica for the source MySQL DB instance. Amazon RDS uses the MySQL DB engine

efcl 2023/08/22

RDSからAuroraへのマイグレーション

MySQL
aws

リンク

大規模サービスのデータベースエンジンを MySQLからAurora MySQLへの移行〜リードレプリカ, DNSを利用した最小ダウンタイム移行方法〜 - メドピア開発者ブログ

バックエンドエンジニアの徳富(@yannKazu1)です。先日、メドピアのメインサービスであるmedpeer.jpで使われているデータベースエンジンを、MySQLからAurora MySQLへと移行しました。今回はその移行のプロセスについて詳しくお話しします。移行したデータベースの簡単なインフラ構成移行方針今回移行するデータベースは複数のアプリケーションから参照されており、ダウンタイムによるユーザー影響が大きいため、移行方針の検討の段階で重視したのは、ダウンタイムの最小化でした。これを達成するために、DNSのCNAMEレコードと、Auroraのリードレプリカを活用し、移行させることにしました。 DNSのCNAMEレコードの使用データベースエンドポイントをアプリケーションに直接記述する代わりに、DNSのCNAMEレコードを利用して間接的に参照するようにしました。これにより、データベー

efcl 2023/08/22

RDSからAuroraへの移行。 Auroraをリードレプリカとして用意し、DNSでRDSを参照するようにアプリケーションを変更、既存のRDSをread onlyにしてレプリーション待ち = ダウンタイム、DNSの向き先の変更。アプリケーションでのコネ

リンク

Course introduction — MySQL for Developers — PlanetScale

Welcome to the MySQL for Developers course! This first video will give you an overview of what we’re going to cover, what you’ll see on the screen, and an introduction to your instructor. 3:25 Next: Schema → A comprehensive course on MySQL for developersWelcome! MySQL for Developers is PlanetScale’s free MySQL course that teaches you schema basics, indexing, querying, and beyond. This intermediate

efcl 2023/03/22

planet scaleのMySQLチュートリアル

リンク

Scaling Datastores at Slack with Vitess - Slack Engineering

Rafael Chacón Staff Software Engineer, Infrastructure From the very beginning of Slack, MySQL was used as the storage engine for all our data. Slack operated MySQL servers in an active-active configuration. This is the story of how we changed our data storage architecture from the active-active clusters over to Vitess — a horizontal scaling system for MySQL. Vitess is the present and future of Dat

efcl 2022/04/11

SlackのMySQLからVitessへの移行

slack
MySQL

リンク

GitHub - amacneil/dbmate: :rocket: A lightweight, framework-agnostic database migration tool.

Dbmate is a database migration tool that will keep your database schema in sync across multiple developers and your production servers. It is a standalone command line tool that can be used with Go, Node.js, Python, Ruby, PHP, or any other language or framework you are using to write database-backed applications. This is especially helpful if you are writing multiple services in different language

efcl 2022/03/23

MySQL/PostgreSQL/SQLiteなどに対応したマイグレーション管理ツール

リンク

Node.jsのMySQLパッケージにおけるエスケープ処理だけでは防げない「隠れた」SQLインジェクション - Flatt Security Blog

※本記事は筆者styprが英語で執筆した記事を株式会社Flatt Security社内で日本語に翻訳したものになります。 TL;DR Node.jsのエコシステムで最も人気のあるMySQLパッケージの一つである mysqljs/mysql (https://github.com/mysqljs/mysql)において、クエリのエスケープ関数の予期せぬ動作がSQLインジェクションを引き起こす可能性があることが判明しました。通常、クエリのエスケープ関数やプレースホルダはSQLインジェクションを防ぐことが知られています。しかし、mysqljs/mysql は、値の種類によってエスケープ方法が異なることが知られており、攻撃者が異なる値の種類でパラメータを渡すと、最終的に予期せぬ動作を引き起こす可能性があります。予期せぬ動作とは、バグのような動作やSQLインジェクションなどです。ほぼすべてのオンラ

efcl 2022/02/16

https://efcl.info/2021/03/26/create-validator-ts/ MongoDBとかでクエリにオブジェクト指定できると起きるNoSQL Injectionとかなり似た問題だ…

リンク

Atlas | Manage your database schema as code

Define database schemas in declarative code. Use HCL, SQL or any ORM or language. Supports all popular ORMs, such as GORM, Sequelize, Django, SQLAlchemy, Hibernate, and more.

efcl 2022/01/29

MySQL, Postgres, SQLite, MariaDBなどに対してデータベースのスキーマ管理ツール。 HCLの構文を使ったスキーマ管理、ビジュアライズ、マイグレーション管理など

リンク

GitHub - kysely-org/kysely: A type-safe typescript SQL query builder

Kysely (pronounce “Key-Seh-Lee”) is a type-safe and autocompletion-friendly TypeScript SQL query builder. Inspired by Knex.js. Mainly developed for Node.js but also runs on all other JavaScript environments like Deno, Bun, Cloudflare Workers and web browsers. Kysely makes sure you only refer to tables and columns that are visible to the part of the query you're writing. The result type only has th

efcl 2021/11/14

TypeScriptで書かれたSQLクエリビルダー。 PostgreSQLとMySQLに対応したクエリの作成と実行ができる。 Schemaを型として定義し、その型を元にクエリを構築できる。

リンク

GitHub - pingcap/tidb: TiDB is an open-source, cloud-native, distributed, MySQL-Compatible database for elastic scale and real-time analytics. Try AI-powered Chat2Query free at : https://tidbcloud.com/free-trial

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

efcl 2021/09/08

MySQLプロトコル互換のNewSQL

MySQL

リンク

VercelからMySQL/PostgreSQLに接続したい場合にどういうアーキテクチャにするのが最適か

Issue VercelへのリクエストからServerless Functions が実行されると新規にDBに接続し、終了時にコネクションを切断する一般的なコネクションプールを使ったアーキテクチャよりDB接続コストの影響を受ける Amazon RDS ProxyやCloud SQL Proxyのようなプラットフォームが提示する解決策がまだない

efcl 2021/09/08

VercelからMySQL/PostgreSQL

リンク

MySQLでプライマリキーをUUIDにする前に知っておいて欲しいこと | Raccoon Tech Blog [株式会社ラクーンホールディングス技術戦略部ブログ]

株式会社ラクーンホールディングスのエンジニア/デザイナーから技術情報をはじめ、世の中のためになることや社内のことなどを発信してます。 bashパフォーマンスMySQLInnoDB DB設計インデックスこんにちは、羽山です。今回は MySQL のプライマリキーに UUID を採用する場合に起きるパフォーマンスの問題を仕組みから解説します。 MySQL(InnoDB) & UUID のパフォーマンスについては各所でさんざん議論・検証されていますが、論理的に解説した記事が少なかったり一部には誤解を招くようなものもあるため、しっかりと理由から理解するための情報として役立つことができればと思っています。 UUID と比較される古き良き昇順/降順のプライマリキーはというと、 MySQL の InnoDB において良いパフォーマンスを出すために縁の下の力持ちのような働きをしてくれているケースが実は少な

efcl 2021/09/02

ランダムなIDと時間的な順序性を持ったULIDのような値をPrimary Keyにした場合の違いについて。 1つのリーフページに偏りやすくすることでのパフォーマンスの違いについて。

リンク

The ultimate MySQL database platform

Scale, performance, and reliabilityScale, performance, and reliabilitypowered by Vitess The ultimate MySQL database platformPlanetScale is the world’s most advanced, fully-managed MySQL database platform.

efcl 2021/08/22

Vitess/MySQL互換のserverless database service。 Gitのようにデータベースブランチの概念を持っていて、スキーマを開発してマージできる。 Developer向けのフリープランがあり、重量課金

リンク

Aurora MySQL のバックアップは本当にそれでいいのだろうか？ | CyberAgent Developers Blog

技術本部サービスリライアビリティグループ（SRG）の長谷川 @rarirureluis です。 #SRG（Service Reliability Group）は、主に弊社メディアサービスのインフラ周りを横断的にサポートしており、既存サービスの改善や新規立ち上げ、OSS貢献などを行っているグループです。また Amazon Aurora MySQL（以下：Aurora MySQL）の話です。何でこんなに Aurora MySQL に関する記事ばっか書いてるのか僕も分かりません。前回の Aurora MySQL のアップグレード方法のベストプラクティスはこちらです。 RDS Graviton2 に少ないリスクで切り替える方法を考えてみる【アップグレード編】 | CyberAgent Developers Blog 今回はバックアップについてです。そのクラスター、間違ったクエリ流したときに

efcl 2021/06/14

バックトラック、ポイントインタイムリカバリでの復元。特定のクエリ前に復元するためのバイナリログを使った復元方法について

aws
MySQL

リンク

はてなブックマーク

タグ

関連タグで絞り込む (31)

MySQLに関するefclのブックマーク (34)

お知らせ

今週のはてなブックマーク数ランキング（2024年5月第2週）

今週のはてなブックマーク数ランキング（2024年5月第1週）

月間はてなブックマーク数ランキング（2024年4月）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス