複数の企業でデータエンジニアとして求められたスキル - yasuhisa's blog
最近「ああ、これ前職でも前々職でもやったことあるなぁ」という仕事があった。データエンジニア(やその関連職種)として働き始めて約5年、3社でフルタイムとして働いてきて「このスキルは業界や組織規模が変わってもデータエンジニアとしてスキルを求められることが多いな」と感じたものをまとめてみることにした。棚卸し的な意味はあるが、特に転職用などではないです。 前提 どこでも必要とされたスキル データマネジメントに関する概要レベルの知識と実行力 セキュリティや法令に関する知識 事業ドメインに関する興味関心 他職種とのコミュニケーション能力 コスト管理 / コスト削減のスキル ソフトウェアエンジニアとしてのスキル DataOpsやアラートのハンドリング能力 分析用のSQLを書く力 古いテーブルやデータパイプラインを置き換えていくスキルや胆力 あるとやりやすいスキル 関連部署の動きを何となく把握しておく力
中学用教科書大半にQRコード AIの利点・課題、教科書に - 寝ても覚めても学校のこと。～学校経営の経営課題（人事・財務・募集・施設などなど）について考えるブログ～
今日のブログでは２つの記事をご紹介します。 同じテーマを扱ったものです。日経新聞より。 www.nikkei.com （会員限定記事となっております。ご了承ください） 文部科学省は（3月）22日、2025年度から中学校で使う教科書の検定結果を公表した。学習用端末で読み取って音声や動画などのデジタル教材を再生する2次元コード（QRコード）が100点中97点に載った。全小中学生に配った端末の活用を前提とした教科書づくりが加速している。 というわけで、自然な流れではありますが、 教科書にもデジタル素材がどんどん入ってきています。 実際に授業参観などにお邪魔してみると、 紙面ベースの教材に加えて、デジタル教材や映像などが 組み合わされることによって、興味関心を引きやすくなりますし、 理解が深まっている様子も見て取れます。 今回合格した英語教科書は全てで大半のページにQRコードが載り、 掲載数は中1
大学で読んだ情報科学関連の教科書 - ｼﾞｮｲｼﾞｮｲｼﾞｮｲ
先日、博士（情報学）になりました。学部と大学院をあわせた 9 年間で読んだ情報科学関連の教科書・専門書を思い出を振り返りつつここにまとめます。私は授業はあまり聞かずに独学するタイプだったので、ここに挙げた書籍を通読すれば、大学に通わなくてもおおよそ情報学博士ほどの知識は身につくものと思われます。ただし、特に大学院で重要となる論文を読み書きすることについては本稿には含めておりません。それらについては論文読みの日課についてや論文の書き方などを参考にしてください。 joisino.hatenablog.com 凡例：（半端）とは、数章だけ読んだ場合か、最後まで読んだものの理解が浅く、今となっては薄ぼんやりとしか覚えていないことを指します。☆は特におすすめなことを表します。 学部一年 寺田 文行『線形代数 増訂版』 黒田 成俊『微分積分』 河野 敬雄『確率概論』 東京大学教養学部統計学教室『統計学
LLM時代の強化学習 - どこから見てもメンダコ
強化学習におけるLLMの活用パターン調査 はじめに：実世界における強化学習の課題 LLM×強化学習 人間はゼロショット推論によりサンプル効率の良い学習ができる LLMによるゼロショット推論の例 さまざまなLLM活用パターン 1. 報酬モデルとしてのLLM LLMによる代理報酬モデル VLMによる外観ベース代理報酬モデル 外部知識にもとづく報酬モデル設計 2. 計画モデルとしてのLLM LLMによるセマンティック計画 LLMによる構造的な探索計画 3. 方策モデルとしてのLLM LLM as 確率方策 マルチモーダルLLM as 確率方策 参考：GPTアーキテクチャの転用 4. 世界モデルとしてのLLM Language Models Meet World Models (あとで書く) おわりに：VLM as 確率方策に期待 はじめに：実世界における強化学習の課題 レトロゲームで人間並みのパ
ジョン・ハンター 著『小学４年生の世界平和』より。エンプティー・スペース（考える余地）をたっぷりと生み出す。 - 田舎教師ときどき都会教師
母は私に――それどころか誰にも――答えを与えてはくれなかった。その代わり、私たちが探求者、探検者、開拓者になれるだけの余地を創り出してくれた。こうして私はわずか９歳の小学生ではあったが、あのエンプティ・スペースに秘められたパワーのすごさに気づいていた。そしてそんな幼い頃の体験は、後に東洋の宗教や思想から学んだことによっていっそう強固なものになった――空っぽであることは充溢に劣らぬ価値を持ち得るということだ。 （ジョン・ハンター『小学４年生の世界平和』角川書店、2014） こんばんは。２ヶ月くらい前に、ジョン・ハンターさん（米国人）をめちゃくちゃ「推し」ているお姉さんと知り合いました。で、上記の本と、下記の TED を勧められました。読んだら当然＆観たら当然、また話を聞きたくなります。で、つい最近、そのお姉さんと再会して、ビールを片手に大いに盛り上がったんですよね。おそらくは神様が「やれ」っ
斎藤一人さん 生まれてきた意味 - コンクラーベ
なぜ、人の悪口を言ってはいけないのかと言うと、 人は『自分』を知るために生まれてきたから。 「あの人はこうだから」と、いつも他人のことを言っているのは、もしかしたら、「自分を見たくない」のかもわかんないよね 自分はなぜ怒っているんだろう、何が嫌なんだろう、自分は何を恐れているんだろうって、自分を見つめていく 「あの人はこうだから」と、いつも他人のことを言っているのは、もしかしたら、「自分を見たくない」のかもわかんないよね 一人さんが人の悪口を言っているのを、私は一度も見たことがありません。 その理由を、ある時本人に尋ねたところ、一人さんは「他人のことを言うほど、俺は立派な人間じゃないから」と言ったそうです。 私は納得いかなかったので、問い詰めました。 すると、一人さんは教えてくれたんです、人の悪口を言ってはいけない理由を。 人は自分を知るために生まれてきたのに、人の悪口をばかり言っていると
斗比主閲子がお勧めする「読むと頭が良くなる漫画20作」 - 斗比主閲子の姑日記
『東大生300人が選んだ「読むと頭が良くなる漫画ランキングベスト30」』という、頭の悪そうなテレビの特集があったそうです。 東大生300人が選んだ「読むと頭が良くなる漫画ランキングベスト30」にランクインしなかった『ハイパーインフレーション』がなぜかトレンド入り - Togetter まずは、頭が良いことの定義と、頭が良くなるプロセスの説明が必要だと思いますが、恐らくは「読むことを通じて勉強に通じる、頭を使う漫画」というのを狙っているんでしょうね。ただ、ラインナップを見る限りは、現役大学生ぐらいの子どもたちが、自分が中高大で読んで面白かった漫画をお勧めしているという印象です。だって、名探偵コナンが一位だし。 私もたしなむ程度ですが、子どもの頃から長くは漫画を読み続けていますので、私の独断と偏見で、「読むと頭が良くなる漫画」 というものを紹介してみます。こういうのはたくさんあったほうが楽しい
オンライン学習でスキルアップ！社会人向けのお手軽な方法「Schoo(スクー) 」!?【妄想カタログ】 - YANO-T’ｓ blog
［本ページはプロモーションが含まれています］ ブログの前のみなさ～ん、 今回もYANO-T's blogにお越し頂き ありがとうございます。 感謝感謝。 ｽﾎﾟﾝｻｰﾘﾝｸ 今回の妄想カタログのテーマは オンライン学習でスキルアップ！社会人向けのお手軽な方法「Schoo(スクー) 」!? 突然ですが、 話題のライブ配信サービス「SHOWROOM」をつくられた 前田裕二 氏 が、YouTubeのSchooチャンネルで 「僕たちがSHOWROOMを作った理由」 というタイトルで登壇された動画を見つけました。 その＃1 がこちら↓↓↓ 前田 裕二先生が登壇！【Schoo】#1 SHOWROOMのCEO・CTOに生放送で質問しよう | 前田 裕二 先生 ～オープニング～ youtu.be 変化や進化の激しい時代、わたしたちもそれに遅れないよう、スキルアップしていかないといけないですよね!!! 実際
メンタルレキシコンとは？わかりやすく解説・心理学との関係 英語学習への効果とは？ - ポリグロットライフ | 言語まなび∞ラボ
はじめに 今回はメンタルレキシコンについてわかりやすく解説していきます。メンタルレキシコンとは、どのような意味や性質を持ち、学ぶ意義は何なのかを考えていきます。心理学との関係や英語学習及び語彙学習への効果についても考えていきます。メンタルレキシコンを正しく理解して、正しい効率的な語彙学習をぜひ取り入れてみてください。 ↓↓第二言語習得研究に基づく英語学習動画をアップしていきます。 www.youtube.com メンタルレキシコンとは？ メンタルレキシコンの意味 メンタルレキシコンの性質 メンタルレキシコンを学ぶ意義 メンタルレキシコン内の語彙知識モデル 階層的ネットワークモデル 活性化拡散モデル 母国語のメンタルレキシコン 子供の語彙の増加 即時マッピング 第二言語学習への示唆 バイリンガルの語彙発達 バイリンガルの言語的特徴 バイリンガルレキシコン メンタルレキシコンと心理学 二重符号
一番星はてのが英語学習記事に無言ブクマするようになりました - 一番星はての開発ブログ
500ブクマ以上の英語学習っぽい記事を見つけたら無言ブクマするようになりました（「英語」タグでブクマされます）。なお、タイミングによってはブコメありでブクマされる場合もあります。 図書館で英語を勉強する一番星はての キャラ画像生成にReference-onlyが便利 ここ最近は主にキャラLoRA作成を頑張っていたんですが、あまり安定せずにどうしたものかと思っていたらControlNetのReference-onlyという便利な機能でキャラの特徴を掴んで簡単に画像出力できるようになったのでそれではてのの画像を生成してみた。頭のリボンはうまくいかなかったので仕方なく後から調整している。 インターネットを見る一番星はての まだまだ同じ向きの顔とかしか出せないけど、そのうちブックマークコメントに合わせた画像生成をしてツイートするなど行いたい。 参考 www.youtube.com
Zero-shot Learning網羅的サーベイ：CLIPが切り開いたVision & Languageの新しい世界 - エクサウィザーズ Engineer Blog
こんにちは！ 画像システムグループで機械学習エンジニアをやっている小島です。 この記事では、今ホットな「Zero-shot Learning」と「Vision & Language」に関する最新情報を、CLIPという研究を起点として網羅的にサーベイをしていきます。このために論文1000本に目を通し、70本程度を記事にしました。 Zero-shotやVision & Languageは、Stable Diffusionに代表される画像生成AIとも密接に関連している技術です。この記事を通して、Vision & Languageの奥深い世界を体感できるでしょう。 注意事項 この記事は非常に長いため、全部読むのに1時間以上かかる可能性があるので、休憩を取りながら、または必要な部分だけ読んでください。各セクションを個別に読んでも問題ありません。 また、文章中の画像は、特別な記載がない限り、引用元の論
麻雀、洗濯機、言葉でのコミュニケーション！ 全力で「打ちたいもの・投げたいもの」たち！ - 週刊はてなブログ
今日も、ブログを書く・読むの二刀流！ はてなブログでは毎週「今週のお題」を出題しています。今回は、2023年3月24日から2023年3月31日にかけて募集した、今週のお題「打ちたいもの・投げたいもの」に寄せられたエントリーから、週刊はてなブログ編集部がおすすめしたい記事をピックアップして紹介します。 2023年3月に開催された「2023 ワールド・ベースボール・クラシック（WBC2023）」。 ドラマチックな試合展開にペッパーミル、そしてなにより3大会ぶりに日本代表である侍ジャパンが優勝を果たしたことから大きな話題となり、はてなブログにも侍ジャパンを称えるエントリーが多数投稿されました。 そんなお祭りムードにはっきり言って乗っかるように出した、今週のお題「打ちたいもの・投げたいもの」。 このお題には、野球に関するエントリーだけでなく、「麺を打ちたい」「投げ出したくない趣味」など、さまざまな
アラーム。 - TETSUYAの航海
岸田首相が和歌山で襲撃された。 爆発物が至近距離に投げ入れられたが、警備員に突き飛ばされ、安全圏に移動できた。 第一報ならではの勝手なことを言い散らしておく。 １．周辺 岸田氏は個人としての重みは安倍氏より軽いが、世界全体で言うと、アメリカの傀儡としての働きを大変精力的にやっているので、アメリカ側の支配者たちは胸をなでおろしたのではないか。 また、犯人を取り押さえた和歌山の漁港のおやじたちは、奈良県民より頼りになるという印象が生まれるであろう。 ２．犯人像 まずは模倣犯のそしりを免れない。手間暇かけて手作りした？爆弾であることから、社会というか、自身の環境への不満が長年積もっていたのではないか。 あと、点火から爆発まで50秒もかかっている。２発用意していたようだが、自身の生命を犠牲にすることについていまいち覚悟が足りない。 地元では「おとなしい印象のうすい人物」。「弁護士が来てから話す」と
GPTの仕組みと限界についての考察（１） - conceptualization
GPT4が登場してChatGPTが盛り上がってますね。 本記事は、GPT（を支えるTransformerという仕組み）をChatGPTユーザにとって分かりやすく説明し、その能力と限界についての見通しをよくしよう、という趣旨になります。 少し長くなりそうなので、全部で記事を3回に分けようと思います。 （１）大まかな背景と概要：本記事 （２）GPTの能力と可能性：実際の使用例とTransformerの仕組みを踏まえて説明 （３）GPTの限界と未来展望：Transformerの仕組みが持つ限界と研究の進展を予想 GPT3と4の違い： トークン長とは何か？ まずここから話を始めます。GPT-3は、パラメータ数が750億個（850GBの容量を食う）でトークン長が4097(GPT-3.5)でした。GPT-4は、パラメータ数は非公開でトークン長は32768ですので、ちょうど8倍になります。 さて、トーク
街や道路や標識の勉強ができる知育要素満載なレジャーシートの話。 - 誰かのためになるかもしれない玩具と遊びの話。
こんにちは！ 今日はかなり寒いですね…。通勤、通学の方は足元注意でお出かけください！ こういう天気の日でも頑張ってる方々にはほんと感謝ですね。 早く春の心地よい陽気になって欲しいものですね。梅や桜を早く見に行きたいですよね〜。 三浦海岸の河津桜まつりは3/25までなのでお近くの方や関東お住まいの方はぜひご検討ください。 xn--n8jna2cxb5ckcf2ai3d4jra7kta5734lbwsfcqydq9a499e.net 「トミカ おでかけレジャーマップ 」 商品説明 写真で紹介 実際に遊んでみた YouTubeでの紹介動画 さいごに それでは今回の本題に移りたいと思います。 トミカ好きのお子さまがいる方必見！街や道路や標識の勉強ができる！ 「トミカ おでかけレジャーマップ 」 takaratomymall.jp 商品説明 タカラトミーから発売されているトミカ用の大型マップになりま
専門実践教育訓練給付金覚書。 - TETSUYAの航海
TETSUYAです。 先日、社会人大学院を修了しました。 大学院の学費 はい、結構かかりましたよ。 授業料は100万円/年。 入学金、諸経費込みで250万円ほどになりました。 はじめは銀行に学費ローンを申し込みました。3.375％でした。 学費ローンは利率が高いけれど、無担保のわりに審査が通りやすいようです。てか、窓口の方は初め、子供の学費だと思っておられました。そうだよね。 入学金支払期日が迫っていたので、住宅ローンのある銀行で、審査の日数を最小限にしてもらったのです。 日本政策金融公庫の教育ローンだと1.81％。100万円借入だと利率の差15,000円。期日の余裕があればいろいろ見くらべて節約できたんでしょうが。 月々の返済が大変不安でした（まあ、いざとなったら金利見直しか返済減額で組みなおそうと思っていました）。 それでも学びたいことがあったのと、取れる資格があったので、突き進んだの
斎藤一人さん 親というものは完璧であると思ってると、親の未熟さは不満の種なんだよ - コンクラーベ
自分が親になってみるとわかるけど、本当、未熟なんだよ。 親というものは完璧であると思ってると、親の未熟さは不満の種なんだよ どうしようもないから愛してるって、ゆるがない愛 マイナスの過去を”いいこと”に解釈できると、今、起きてることでも、自分の思いのままになるんだよ 親というものは完璧であると思ってると、親の未熟さは不満の種なんだよ 親は子供に期待をした。 子供の自分は、期待に応えようと努力したけれど、応えられなかった。 その時、子供の心の中は、親に申し訳ないような気持ちと、 親は期待を裏切った自分をもう愛してくれないじゃないかという不安、恐れ、そして、 「親のがっかりした顔を見て、あの時の自分は傷ついて落ち込んだり、自信を失ったりした」 っていうんだけど。 今、大人になった自分が、”自分探しの旅”に出かけてって、その場面に戻ってみると、 当時、あなたの親はまだまだ未熟なんだよね。 ちっち
Auroraバージョンアップに伴い改めてMySQL5.7の押さえるべきポイントについて勉強会を開催しました！ - ANDPAD Tech Blog
こんにちは！エンジニアの福間（fkm_y）です。 弊社でデータベースの技術顧問をして頂いている三谷（mita2）さんに、MySQL5.7の追加機能についての開発部向け勉強会を実施いただきましたのでそのレポートをお伝えします。 開催背景 弊社では三谷さんによるデータベース勉強会を定期的に開催しており、3月にもMySQLロックの基礎編の勉強会を開催しました。 ANDPADでは、今年の4月にAurora MySQLをVer.1（MySQL5.6互換）からVer.2（5.7互換）にバージョンアップを実施しました。 tech.andpad.co.jp Aurora MySQL Ver.2 になることで使えるようになった、MySQL5.7で追加された機能について開発者に知ってもらい、普段の開発に取り入れてもらうためにMySQL5.7の勉強会を開催することとしました。 今回は追加された150以上の新機能
慶應大の文法問題から表現を覚えましょう(1)2021理工学部 - フレイニャのブログ
「東大の文法問題から表現を覚えましょう」だけでなく，早慶や医学部の文法問題も見てみたいと思います。 今回は2021年度の慶應理工の第4問です。空所に入れるべき適語を選択肢から選ぶというオーソドックスな出題ですが，さすが理工学部といった感じで…… (1) Newton's second law states that the acceleration of an object is directly ( ) to the net force acting on it. 1. equillibrant 2. exponential 3. integral 4. parallel 5. perpendicular 6. proportional (2) Albert Einstein's theory of general ( ) predicted the
覚え方が簡単なので覚えないと損な難語43選 (recur, depict, tangibleなど) - フレイニャのブログ
(38)～(43) を新規追加!! 単語を覚える際はもちろん重要度・頻度の高い単語から覚えるべきですね。「重要度順・頻度順」を謳った単語集は山ほどあります。私は有名な森一郎『試験にでる英単語』をみっちりやりました。 ただし，覚え方が簡単なのならマイナー語・難語でも覚えておいた方が得です。 （１）recur occur「起こる」を覚えていることが条件です。 occurはhappen「起こる」に似ていますが，toが続く時は happen to N「Nの身に起こる」 occur to N「Nの頭に浮かぶ」 という違いがあるので注意しましょう。 recurはre「再び」＋occur「起こる」，つまり「再発する」です。これは覚えておかないと損ですね。 （２）depict pictはpictureのpictです。depictは「描写する」という意味です。 deは無視してもOKですが，「はっきりと」でし
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
