dowsonのブックマーク (13)

  • データ基盤を支える技術

    主にクラウドの話してます - 広島 での登壇資料です。 https://omoni-cloud.connpass.com/event/315682/

    データ基盤を支える技術
    dowson
    dowson 2024/05/12
  • 複数の企業でデータエンジニアとして求められたスキル - yasuhisa's blog

    最近「ああ、これ前職でも前々職でもやったことあるなぁ」という仕事があった。データエンジニア(やその関連職種)として働き始めて約5年、3社でフルタイムとして働いてきて「このスキルは業界や組織規模が変わってもデータエンジニアとしてスキルを求められることが多いな」と感じたものをまとめてみることにした。棚卸し的な意味はあるが、特に転職用などではないです。 前提 どこでも必要とされたスキル データマネジメントに関する概要レベルの知識と実行力 セキュリティや法令に関する知識 事業ドメインに関する興味関心 他職種とのコミュニケーション能力 コスト管理 / コスト削減のスキル ソフトウェアエンジニアとしてのスキル DataOpsやアラートのハンドリング能力 分析用のSQLを書く力 古いテーブルやデータパイプラインを置き換えていくスキルや胆力 あるとやりやすいスキル 関連部署の動きを何となく把握しておく力

    複数の企業でデータエンジニアとして求められたスキル - yasuhisa's blog
    dowson
    dowson 2024/04/30
  • GitHub、「Copilot Workspace」テクニカルプレビューを開始。ほとんど全ての開発工程をAIで自動化

    GitHub、「Copilot Workspace」テクニカルプレビューを開始。ほとんど全ての開発工程をAIで自動化 テクニカルプレビューは上記のCopilot Workspaceのページからウェイトリストボタンをクリックして申し込みます。 Copilot Workspaceはほとんど全ての工程を自動化 Copilot Workspaceは、自然言語で書かれたIssue(課題)を基に、Copilotが仕様案と実装計画を示し、コーディングや既存のコードの修正を行い、ビルドをしてエラーがあればデバッグも行うという、プログラミングのほとんど全ての工程をCopilotが自動的に実行してくれる、というものです。 人間は各工程でCopilotから示される内容を必要に応じて修正するか、そのまま見守ることになります。 GitHub CEOのThomas Dohmke(トーマス・ドムケ)氏は、Copilot

    GitHub、「Copilot Workspace」テクニカルプレビューを開始。ほとんど全ての開発工程をAIで自動化
    dowson
    dowson 2024/04/30
    すごい! DDDとか、既存のソースコードの設計方針を学習してくれたりもするんだろうか。
  • 「頭の回転が速い」を科学する|宮脇 啓輔 / 株式会社unname

    こんにちは、unnameの代表取締役の宮脇啓輔です。 普段から重要だなと感じたことや、自分なりに思考したものを伝えようとXで投稿しているのですが、その中でも反響が大きかった投稿をさらに肉付けして発信しようという試みで記事化しております。 「頭の回転が速い」とは「累積思考量が多い」ことだと思います。「過去に似たようなテーマについて考えたことがある」から、すぐに自分の意見が出てくるし、回転が速く見える。考えたことがないと、その場で思考してしまい、遅く見える。そういうことだと思っています。… — 宮脇 啓輔 / 積極採用中 / unname (@keisuke_unname) March 21, 2024 この投稿がかなりいい反響をいただいたということもあり、投稿をベースに、もう少し肉付けして解説してみます。 「頭の回転が速い」の正体はなんなのか「頭の回転が速い」と見える人は、実際は「累積思考量

    「頭の回転が速い」を科学する|宮脇 啓輔 / 株式会社unname
    dowson
    dowson 2024/04/27
    めちゃくちゃしっくりきた。 頭の回転に大差はない。日々蓄積された思考があるのと、それが引き出しやすいように整理されている人が頭の回転が早そうに見える。
  • 若手のうちに知りたかった生産性の高め方

    D-Plus Tokyo #1 https://d-plus.connpass.com/event/315744/

    若手のうちに知りたかった生産性の高め方
    dowson
    dowson 2024/04/25
    1作業のリードタイムを最小化するのが基本戦略。 そのために環境を磨き、他人からの依頼の優先度を高める。
  • デジタル庁の「デジタル認証アプリ」迷走…オンライン利用履歴、政府に集中するリスク

    【読売新聞】 デジタル庁の「デジタル認証アプリ」計画が波紋を広げている。マイナンバーカードによる公的個人認証のためのアプリをデジタル庁が開発し、自らが認証業務を担う「署名検証者」になるという構想だ。計画の概要はパブリックコメントにか

    デジタル庁の「デジタル認証アプリ」迷走…オンライン利用履歴、政府に集中するリスク
    dowson
    dowson 2024/04/25
    国家として統一のサービスを作るのが目的なのだから、情報が一元化されるのは当然な気がする。 むしろ民間企業で分散管理されている方がガバナンスも効かせられずにリスクなのでは
  • 日報を自分のために書いてみよう - KAKEHASHI Tech Blog

    はじめに こんにちは、株式会社カケハシでエンジニアリングマネージャーをやっている小田中( @dora_e_m )です。 今回は、タイトルの通り「日報を書くといいよ!」、とくに「組織のニューカマーにはオススメだよ!」という話を書きます。 日報って何? まず、日報とは何でしょうか。一般には、日々の業務内容や進捗などを報告する文書を指します。 この定義に従えば、受益者は報告される立場の上長であり、日報を作成する当の人にはあまりメリットがありません。 私自身、ただ進捗を共有するだけの日報にはあまり意味を感じません。たとえばJiraなりTrelloなりで進捗管理している現場であれば、そのうえで進捗報告のための日報を作成することは作業の重複、情報の二重管理の発生を意味します。 ですが、日報を以下の目的で作成するようにすると、それは作成者人にとって役立つものにできます。 毎日のふりかえり 思考プロセ

    日報を自分のために書いてみよう - KAKEHASHI Tech Blog
    dowson
    dowson 2024/04/25
    日報なー。自分の思考をさらけ出すのって結構勇気が必要で、書くのが億劫になっちゃうんだよね
  • 「コンビニでいいよ」と言う西洋人観光客に「せっかく日本まで来たのにいいとこでご飯食べないの?」と疑問に思うこと自体が日本人的な感覚である説

    インポスター @inpostarrr 西洋人観光客に対し 「せっかく日まで来たのにいいとこでご飯べないの?」 という疑問そのものがまさに日人的な感覚で、西洋人が 「コンビニでもいいよ」 と答えるのは別に建前でもなく心で、彼らの中で事に対し重みが全くないんですよ。まさに文化認識のズレってのはこういう部分 2024-04-22 15:52:03 インポスター @inpostarrr そもそも味なんて二の次で旅行先で美味しいのをべるという感覚そのものが、西洋人にとってプライオリティが低いってのはあまり日人には認識されない部分の一つですね。美味しいものをべる目的として旅行する人はそこまで多くない 2024-04-22 17:56:44 インポスター @inpostarrr 問題は旅に事や宿泊等、癒しを求める日人に対し、西洋人観光客は大凡お金をどこに落とすかというと、体験系、新し

    「コンビニでいいよ」と言う西洋人観光客に「せっかく日本まで来たのにいいとこでご飯食べないの?」と疑問に思うこと自体が日本人的な感覚である説
    dowson
    dowson 2024/04/23
    周りに合わせているだけで実は同じ感覚の日本人も多いのでは?
  • スクラム開発がエンジニアから成長機会を奪うかもしれない話 - 開発日報

    おことわり 最初に断っておきますが、私はスクラム開発反対の立場をとっているわけではないです。また、スクラムマスターでもないのでスクラム開発について誤った見解を持っている可能性も大いにあります。 また、これから記載するスクラム開発のペインはあくまでも筆者の独断と偏見に基づいて記載されております。そのため、ペインの原因がスクラム開発ではなく、単にその所属組織の構成員の性質や文化的な要因であることも考えられます。おそらく、スクラム開発でなくても起こり得る問題も多く挙げていると思います。そういった側面も踏まえてご意見あれば忌憚なく反論異論いただければ幸いです。 なぜこの記事を書いたか チーム内で密なコミュニケーションをとりながら、個人ではなくあくまでもチームとしての成果を重視するスクラム開発の開発フローは、割と個人の活躍と成長機会を奪ってしまい、結果として組織としても開発成果が縮小均衡になってしま

    スクラム開発がエンジニアから成長機会を奪うかもしれない話 - 開発日報
    dowson
    dowson 2024/04/23
    チームワークを重視し過ぎている、という感覚は確かにある。 全員等しく優秀で、コミュニケーションも高く、同じ目線で動いているなら機能するが、そうでないメンバーにとっては煩わしく感じられる時がある。
  • OpenAIのBatch APIを使ってお得にプロンプトを一括処理してみる - Taste of Tech Topics

    はじめに こんにちは。データサイエンスチームYAMALEXのSsk1029Takashiです。 最近はOpenAIに日支社が出来て、日語対応が加速するというニュースにわくわくしています。 今回はそんなOpenAIから発表されたBatch APIという機能が便利、かつお得な機能だったのでどのように使えるのか試してみます。 Introducing the Batch API: save costs and get higher rate limits on async tasks (such as summarization, translation, and image classification). Just upload a file of bulk requests, receive results within 24 hours, and get 50% off API pri

    OpenAIのBatch APIを使ってお得にプロンプトを一括処理してみる - Taste of Tech Topics
    dowson
    dowson 2024/04/18
    バッチで利用したいユースケースあるかなと思ったけど、複数の文章をまとめて要約しておくみたいな時に使えるのか
  • 楽天、無料の家計簿アプリを突如リリース 1000以上の社外サービスとも連携可能

    楽天は4月17日、家計簿アプリ「楽天家計簿」の格提供を始めた。楽天会員向けにリリースするもので、クレジットカードや銀行口座、証券口座と連携し、収入/資産から、ECや携帯料金といった支出まで一元管理。利用料は無料、まずはiOS版からの提供(Android版は今後提供予定)となる。 「楽天銀行」「楽天カード」「楽天モバイル」「楽天Edy」「楽天市場」「楽天ポイント」などと連携でき、楽天サービスの支出を管理できる。楽天以外の銀行口座や、1000以上の他社サービスとも連携可能。なお、楽天銀行/他行ともに登録できるのはそれぞれ1口座まで。他社のサービス連携も3アカウントまでとしている。 アプリは、水道・光熱費、通信費などの固定費や、費、日用品費などの変動費の支出を項目ごとに自動で分類し、家計全体の収支をひと目でわかるように表示。固定費と変動費に分けて可視化することで、必要以上の出費を抑えて効果的

    楽天、無料の家計簿アプリを突如リリース 1000以上の社外サービスとも連携可能
    dowson
    dowson 2024/04/18
    “なお、楽天銀行/他行ともに登録できるのはそれぞれ1口座まで。他社のサービス連携も3アカウントまでとしている。” これはかなりきついのでは
  • 一度は読むべき「哲学」の名著 カリスマが選ぶ入門・古典・傑作8冊

    日経BOOKプラスに掲載されている記事、、著者を任意のキーワードで検索することができます。 ※ISBNも検索にご利用いただけます。ISBNとは出版物固有の13桁の番号で、裏表紙に記載されています。サイトでISBNを使って書籍を検索する際は、ハイフン(-)を省略し、13桁の数字のみを半角文字で入力してください。

    一度は読むべき「哲学」の名著 カリスマが選ぶ入門・古典・傑作8冊
    dowson
    dowson 2024/04/18
  • 雑に思考を整理する技術と効能

    先達エンジニアに学ぶ 思考の現在地 Online Conference https://findy.connpass.com/event/313119/

    雑に思考を整理する技術と効能
    dowson
    dowson 2024/04/17
    書くという行為への心理的ハードルを下げる意味でもスマホで書くというのは良い案だなと思った
  • 1