技術部データ基盤チームの@tosh2230です。この記事では、astronomer-cosmosでdbtのモデル実行条件をタグで柔軟に制御する方法についてご紹介します。 記事執筆時点での利用バージョンは下記のとおりです。 astronomer-cosmos: 1.3.2 dbt-bigquery: 1.5.4 Apache Airflow: 2.6.3 Cloud Composer: 2.4.6 結論 astronomer-cosmos Airflowのコンポーネントでdbtモデルを管理 dbt実行環境の作成 dbt testの自動実行 Cosmos運用開始にあたっての課題 モデルごとに適切な実行頻度が異なる 複数のモデルオーナーがいる 解決手段 モデル実行条件の制御 複数のタグをAND条件で指定するにはParsing methodを変更する CI/CDでのmanifest.jsonの生成

デジタル トランスフォーメーションを加速 お客様がデジタル トランスフォーメーションに乗り出したばかりでも、あるいはすでに進めている場合でも、Google Cloud は困難な課題の解決を支援します。

Size of this PNG preview of this SVG file: 600 × 600 pixels. Other resolutions: 240 × 240 pixels | 480 × 480 pixels | 768 × 768 pixels | 1,024 × 1,024 pixels | 2,048 × 2,048 pixels.

After a very long time with no appearances, I’m pleased to say I’ll be in Juneau, Alaska this weekend with books, trinkets and sketches! The 2024 Alaska Robotics Minicon takes place on Saturday, April 27 at the APK Libraries, Archives, and Museum building. I’ll also be doing a presentation the night before, Friday 4/26, at the kickoff variety show at the Mendenhall Valley Library. The full events

前置き フォントをM PLUS 1pにする 絵文字は使わない ソースコードを貼り付ける時にいい感じにシンタックスハイライトを効かせるやつ SlidesCodeHighlighter Carbon VSCodeなど 前置き 普段発表用の資料は Google Slides で作成し、Google SlidesでPDFにエクスポートした後に https://speakerdeck.com/ にアップロードしています。 長年の暗黙知が積み重なってきたのでメモ。 フォントをM PLUS 1pにする Google SlidesだとデフォルトのフォントがArialとかになっていますが、このフォントだとPDF化した時にレイアウトが崩れたり文字が掠れるため、PDF化する前提なら初手でM PLUS 1pにするのが無難です。 参考URL speakerdeck.com note.com 絵文字は使わない 絵文字

SmartHR でプロダクトエンジニアをしている tmtms です。読み方がわからない(自分でもわからない)ので社内では tommy と名乗ってます。 2月に開催された社内LT大会第3回で「ショートカットと端末」というネタで発表したのですが、とても5分に収まる量ではなかったのでここにしたためておきます。 キーバインド macOSのテキスト編集のショートカットとEmacsとbashのキーバインドを比較するとこんな感じです。 control macOS Emacs bash A 行頭に移動 行頭に移動 行頭に移動 B 左に移動 左に移動 左に移動 C - prefix 中断 D 右文字削除 右文字削除 右文字削除/入力終了 E 行末に移動 行末に移動 行末に移動 F 右に移動 右に移動 右に移動 G - 中断 中断 H 左文字削除 ヘルプ 左文字削除 I - タブ タブ J - 改行 改行 K

はじめに 弊社にはGoで作ったシステムが存在しますが、作られてから数年が経過して、メンテナンスも十分にできていない状況でした。 そこで、このシステムをリファクタリングして生産性を上げようという結論になりました。 リファクタリングにあたり、Goのままで行くのか、弊社でよく使われているRubyで行くのかを検討してみましたので、その過程を紹介したいと思います。 Rubyでリプレイスしようと思った理由 Goで動いてて言語やライブラリのバージョンアップなどメンテナンスがされてない部分はありますが、 そこを解消すればGoのままで行った方が良いのでは？と思うかもしれません。 しかし、あえてRubyでリプレイスしようと思うに至ったのは以下の点があります。 Rubyの方が開発速度があがりそう Goのリファクタリングをするのに時間がかかりそう Goのリファクタリングと機能追加でコード修正箇所が被るとスケジュー

SQLの未解決問題（坂井調べ）。解けたらIQ180！ さぁキミはできるかな！？ ・・・・とくだらないサイトの煽り文句のような出だしですが、「SQLで書けそうなのにうまく書けない」テーマがあります。ウデに自信がある人も自信がない人も、頭の体操として取り組んでいただき、教えて戴けると、わたしがとっても助かります(笑)。 書けそうなのになぁ・・・なにか私がちょっとしたところで勘違いしちゃっているだけのような気がするんだけどなぁ・・・・ 追記：このエントリでは、「面を構成する辺」に注目して書いていますが、実際には（今回の目的である）MOJデータでは辺IDは共有されていないことがわかりました。そのため一番下のサンプルデータでは「面を構成する点」に話を置き換えていますが、本質的には違いはありません。 データ構造に関する説明 基本的な要素 「辺」に囲まれた「面」をあらわすデータです。面にはIDがあり、ま

最近息子と一緒にBBC micro:bitを触って遊んでいます。 今日はこのmicro:bit上でmruby/cを動かしてみましたのでメモを残しておきます。 (写真撮ったあとにBBCをBCCにtypoしてるのに気付きました。。。) はじめに micro:bitとは micro:bitはBBC(英国放送協会)が主体となって開発されたシングルボードコンピューターです。学校での情報教育(プログラミング)などで利用されているとのことです。 microbit.org MICRO-BIT V2 （マイクロビット）バージョンアップ版 正規品！ メディア: エレクトロニクス こちらのスイッチエデュケーションさんのサイトに特徴がまとめられています。 switch-education.com micro:bit の特徴 - LEDやボタン、センサーなどをあらかじめ搭載しています - パソコンやタブレット、さま

まさかこんなことになるとは 以前のブログ記事でも書いたように、バンドを組み、オリジナル曲「タワーマンの孤独」を含む3曲を演奏しました。まさかこんなことになるとは。 経緯 経緯についてはなぜか動画が公開されているので、そちらを見ていただくのでもいいです。なぜあるんだ？ というわけで、あそなすさんという方にめちゃくちゃ「バンドやろうぜ」という勧誘を受けていて、根負けしました。 ただ押し切られて嫌々始めたわけでもなく、昔から家族や友達など周囲に楽器を演奏できる人がおり、興味がなくはなかったことと、「How To Become A Hacker」に なにか楽器を上手に演奏したり、歌が歌えるようになること。 とあることから、楽器を演奏できるようになることには憧れがありました。問題は初期費用とか、練習する時間が確保できるのかとか、そもそも練習しても全然弾けるようにならなかったらとかいう不安もありました

新人が1on1に来ない。その原因を考察する。 ここで出てくる新人の情報は以下である。 年齢: 30代前半 エンジニア歴: 5年 入社して半年 1on1を行うに至った経緯: 1年前、私と同じ時期に入社した同期Aが退職した。 詳細はよく分からないが、どうやらチームの先輩の1人と相性が悪いとの事だった。 尚、Aが退職したのは上記の理由だが、退職したいからこれを名目上の理由にしているのであって、原因は他にある可能性はあるが、この際それは考慮しない。 会社の人員構成: ほとんどがエンジニア歴10 ~ 20年のベテラン。平均年齢は30代後半。 Aは30代前半。 周囲の反応: Aが退職を告げた時、周囲はうろたえた。事前に相談は無かったし、特に問題はないように思われていた。 何より30過ぎた社会人は、問題があれば自分から話して来るという思い込みが、既存社員にあったもしれない。 年齢は関係あるか: ないと考

来る2024年8月10日に埼玉浦和でbuilderscon 2024をやります！ 予定を空けておいてくださいね！ 近々セッション公募を開始予定ですのでネタをご用意のうえお待ちください。 また、手伝ってくれる方は@nasa9084までご一報ください！

地球から遠く離れた宇宙空間を漂う無人探査機の「ボイジャー1号」が2023年11月から解読不能なデータを地球に送信し続けていました。しかし2024年4月22日にボイジャー1号が、搭載しているエンジニアリングシステムに関する解読可能なデータを地球に送信したことをNASAが発表しました。 NASA’s Voyager 1 Resumes Sending Engineering Updates to Earth https://www.jpl.nasa.gov/news/nasas-voyager-1-resumes-sending-engineering-updates-to-earth NASA’s Voyager 1 Resumes Sending Engineering Updates to Earth – Voyager https://blogs.nasa.gov/voyager/20

昨年から量子コンピュータ業界は大きな転換期に入りました。これまで人類には難しすぎるという量子コンピュータはみんなで四苦八苦しながら開発をしてきたと思います。具体的な沿革としては、 １、2012年に簡易型量子コンピュータみたいな量子アニーリングマシンが出る。 ２、量子アニーリングマシンは2016年をピークに2018年ごろに廃れる。（デスクトップパソコンと大差ないことがわかる） ３...