GAKU@データ屋さん @GAKU_DCL 会社の飲み会後に婚活バーに行ったら、となりの席の女性が急にWEB+DB PRESSをテーブルに出してデータモデリングについて問い詰められるという謎の経験をしました･･･、、泥酔+経験不足で十分な回答ができませんでしたが、婚活をする上ではDB設計は必須の能力だということを思い知らされました･･･ 2022-09-30 01:05:05 GAKU@データ屋さん @GAKU_DCL 自称データエンジニア SIer→会計職→事業会社(情シス→データエンジニア)→業務委託→事業会社(データエンジニア) MBAホルダー 技術ブログ的な何か：gktechblog.com 好きなもの：お酒・アニメ・野球(東京六大学、都市対抗など) Amazonアソシエイト参加者 gktechblog.com GAKU@データ屋さん @GAKU_DCL バズった？ので宣伝をば･･
DWH: スタースキーマをベースにあらためて考えてみたデータモデリングの９つのこと - プログラマ３８の日記
DWHのデータモデルでとても有名な"スタースキーマ"。 でも、アプライアンスDBを導入したんだからきちんと正規化した方が後々使いやすいといった意見もあったりします。 私は、スタースキーマはとてもシンプルでわかりやすく、そして結合が少なくて使いやすい、何より性能が安定するモデルと考えています。 そこで、自分の思いを踏まえてスタースキーマをベースにしたデータモデリングについて書いていこうと思います。 [いわゆるスタースキーマの絵] ※以前の記事にも同じものを貼っています 真ん中の売上データのテーブルを一般的にファクトテーブル（以下、ファクト）そして、周りのカレンダ、商品、店舗、顧客のテーブルをディメンションテーブル（以下、ディメンション）という名前で呼びます。 １．ディメンションとファクトは、物理的に１：Nで結合する。 ２．ディメンションとファクトは、内部結合にする。 ３．ヘッダと明細の構成の
【Deep Learning研修（発展）】系列データモデリング (RNN / LSTM / Transformer) 第１回「イントロダクション」
【Deep Learning研修（発展）】（ https://www.youtube.com/playlist?list=PLbtqZvaoOVPA-keirzqx2wzpujxE-fzyt ）はディープラーニング・機械学習に関する発展的な話題を幅広く紹介する研修動画シリーズです。Neural Network Consoleチャンネル（https://www.youtube.com/c/NeuralNetworkConsole/ ）でもディープラーニングに関するより基礎的な内容の解説動画を公開しておりますので、ぜひそちらも御覧ください。 本動画は「系列データモデリング」の第１回の動画です。系列データとは何か、どのような応用事例があるのか、そして本研修で扱う内容について説明しています。 [スライド4] Found in translation: More accurate, fluen
はじめに 社内の新人向けDB研修でデータモデリング（RDB論理設計）に関してレビューを行うことがあります。その際によく指摘する内容をいくつかリストアップしておきたいと思います。（例として用いている題材は実際に研修で使っているものとは異なります） 設計方法論というより基礎的かつ多少ニッチな内容を選んでいるのですが、既存システムでも問題があるケースも散見されるので、参考になればと思います。 本題 1. 主キーは更新されないものを選択する 一般に主キーが満たすべき条件として以下が挙げられます。 必須性 一意性 完全関数従属 不変性 上３つは概ね守られるのですが、４番目の不変性（主キーの値は変わらない）を満たせないモデルをたまに見かけます。そのようなモデルは好ましくないとされています。 よく例として挙げられるのは、ユーザーがシステムにログインする際のIDとしてメールアドレスを用いることから、ユーザ
Amazon DynamoDB 向け NoSQL Workbench を使用したデータモデリング | Amazon Web Services
Amazon Web Services ブログ Amazon DynamoDB 向け NoSQL Workbench を使用したデータモデリング Amazon DynamoDB などの NoSQL データベースを使用する場合、リレーショナルデータベースで慣れているものとは異なる最適化を選択する傾向があります。リレーショナルデータベースの経験から、最初は別の方法で実行するように指示されていたため、簡単ではありませんでした。 これを支援するために、AWS は Windows および macOS で利用可能なクライアント側アプリケーションである Amazon DynamoDB 向け NoSQL Workbench をリリースしました。これを使用して、スケーラブルで高性能なデータモデルを構築し、クエリの開発とテストを簡素化できます。NoSQL Workbench を使用すると、次のことができま
【Deep Learning研修（発展）】系列データモデリング (RNN / LSTM / Transformer) 第７回「Transformer」
【Deep Learning研修（発展）】（ https://www.youtube.com/playlist?list=PLbtqZvaoOVPA-keirzqx2wzpujxE-fzyt ）はディープラーニング・機械学習に関する発展的な話題を幅広く紹介する研修動画シリーズです。Neural Network Consoleチャンネル（https://www.youtube.com/c/NeuralNetworkConsole/ ）でもディープラーニングに関するより基礎的な内容の解説動画を公開しておりますので、ぜひそちらも御覧ください。 本動画は「系列データモデリング」の第７回の動画です。前回のAttentionに続き、深層学習分野において大きなインパクトを与えた手法であるTransformerについて説明します。 [スライド5] Attention Is All You Need
DMBOK で一番読むのを楽しみにしていたのがデータモデルの章だったのですが、いざ読んでみると細かすぎるというか、求めていたものと違う感覚がありました。私がドメイン駆動設計から生成されるモデルの実用性に興味をもっていた時期なので、実践的な内容を求めているだけかもしれませんが…。DMBOK ではデータモデリング・スキームが多数紹介されていたり、データモデリング戦略を立ててモデリングしていきましょう・・・といった内容が書かれており、現職で起きている問題を解決するのには役立たなそうだと感じました。 そんな中で見つけたこのデータ総研さんの記事で合点がいきました： （EDW報告その2）データモデリングの逆襲 | 株式会社データ総研 データ構造を固めなくてもデータを格納して貯めていけるNoSQLは、Webを中心としたシンプルなビジネスで数多く採用されています。テキストも画像も音声も動画も、なんでも構造
Developers IO 2022 データ分析を支える技術 データモデリング再入門 「仏作って魂入れず」ということわざがありますが、データモデリングせずにDWHという「器」を導入しただけでは、データ分析は捗りません。 DWHのデータモデリングとは何か、代表的なDWHのデータモデリング手法の紹介と、長所・短所、選定のポイントについて解説します。 ■アジェンダ ・DWHのデータモデリング ・ビル・インモンさんのDWHのデータモデリング ・ラルフ・キンボールさんのディメンショナルモデリング ・DWHアプローチの選択 ・Data Vault モデリング（Data Vault 2.0） ・まとめ ■DevelopersIO 2022の詳細はこちら 「DevelopersIO 2022」公式サイト https://classmethod.jp/m/developers-io/ ■出演者プロフィール
2024年2月24日紙版発売 2024年2月24日電子版発売 杉本啓 著 A5判／400ページ 定価3,740円（本体3,400円＋税10%） ISBN 978-4-297-14010-6 Gihyo Direct Amazon 楽天ブックス ヨドバシ.com 電子版 Gihyo Digital Publishing Amazon Kindle ブックライブ 楽天kobo honto この本の概要 本書のテーマは「データモデリング」と「基幹系システム」です。 Web上で台頭しつつある新たなビジネスは，新たな基幹系システムを必要としています。一方，既成ビジネスでは，モノリシックで硬直的な基幹系システムをしなやかな姿に変えていく必要があります。 基幹系システムの中核には「構造化されたビジネス記録」＝「帳簿」があります。そのデザイン，つまりデータモデリングがいずれの取り組みにおいてもカギですが，
【レポート】今から理解するNoSQL Databases〜ケーススタディと実践的データモデリング〜 AWS-44 #AWSSummit | DevelopersIO
2022年5月25日(水)~2022年5月26日（木)開催のAWS Summit Online 2022に参加しています。 今回はオンラインセッション AWS-44 今から理解するNoSQL Databases〜ケーススタディと実践的データモデリング〜 についてレポートします。 セッション概要 NoSQL Databaseは知っているが、実際にどうやって開発していくのかイメージが持てないという開発者の方に向けたセッションです。 前半では、ショッピングサイトをケーススタディとし、サービスの成長と共に起こる問題と、それに対処するデータベースの選択をご説明します。 後半ではNoSQLの開発でも頭を悩ませることが多い、データモデリングのやり方について、DynamoDBを例に取りステップ毎にポイントを解説していきます。 スピーカー AWS 技術統括本部 ソリューションアーキテクト 上原 友理 氏 A
🎍QDくん🎍Python x 機械学習 x 金融工学 on Twitter: "SONYがYouTubeに無料公開している、系列データモデリングのコース。説明が丁寧でわかりやすい。RNN, LSTM, seq2seq, attention, Transformer, word2vec, BERTなど盛り沢山の… https://t.co/i5GSLIaLEo"
SONYがYouTubeに無料公開している、系列データモデリングのコース。説明が丁寧でわかりやすい。RNN, LSTM, seq2seq, attention, Transformer, word2vec, BERTなど盛り沢山の… https://t.co/i5GSLIaLEo
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
会社の飲み会後に婚活バーに行ったら、隣の女性が急にデータモデリングについて問い詰めてきたのだが…
データモデリングにおけるいくつかの注意ポイント - Qiita
2021/12/08 データモデリングの文脈変化 - /home/by-natures/dev*
データ分析を支える技術 データモデリング再入門
データモデリングでドメインを駆動する ――分散／疎結合な基幹系システムに向けて