皆さんこんにちは。CTOの松本です。LLM使ってますか？ChatGPT毎日触ってますか？ LLMに熱狂してすでに1年以上が経ちましたが周辺エコシステムが充実してきたことでいろいろな取り組みがとても簡単に実現出来るようになったなーと感じています。 ということで今回はZapierを使った小ネタのご紹介です。 AI・LLM事業部の今 とその前に、AI・LLM事業部での取り組みから着想を得たものでして、AI・LLM事業部について簡単に紹介させてください。 LayerXの新規事業であるAI・LLM事業部では、バクラクでも取り組んできたビジネス文書の解析の延長としてLLMを活用して文書分析エンジンの開発を進めています。現在このエンジンを使ったエンタープライズ向けの新規プロダクト開発にいそしんでおります。とても楽しいですし、最近は様々なお客様からの引き合いも増えておりまして、事業成長に向けて満を持しての
クラウドアプリケーション 10の設計原則 「Azureアプリケーションアーキテクチャガイド」から学ぶ普遍的な原理原則 - インプレスブックス
■真壁 徹（まかべ とおる） 北陸先端科学技術大学院大学 博士前期課程修了 修士（情報科学）。 株式会社大和総研に入社。公共向けパッケージシステムのアプリケーション開発からIT業界でのキャリアを始める。その後日本ヒューレット・パッカード株式会社に籍を移し、主に通信事業者向けアプリケーション、システムインフラストラクチャの開発に従事する。その後、クラウドコンピューティングとオープンソースに可能性を感じ、OpenStack 関連ビジネスでアーキテクトを担当。パブリッククラウドの成長を信じ、日本マイクロソフト株式会社へ。 主な著書に『しくみがわかるKubernetes Azure で動かしながら学ぶコンセプトと実践知識』（翔泳社）、『Microsoft Azure 実践ガイド』（インプレス）、共著に『Azureコンテナアプリケーション開発 ── 開発に注力するための実践手法』（技術評論社）などが
OpenAIのBatch APIを使ってお得にプロンプトを一括処理してみる - Taste of Tech Topics
はじめに こんにちは。データサイエンスチームYAMALEXのSsk1029Takashiです。 最近はOpenAIに日本支社が出来て、日本語対応が加速するというニュースにわくわくしています。 今回はそんなOpenAIから発表されたBatch APIという機能が便利、かつお得な機能だったのでどのように使えるのか試してみます。 Introducing the Batch API: save costs and get higher rate limits on async tasks (such as summarization, translation, and image classification). Just upload a file of bulk requests, receive results within 24 hours, and get 50% off API pri
米国時間2023年5月23日から開催されたMicrosoft Buildは、歴史的な瞬間となりました。データアナリティクスの世界において世界初となるエンドツーエンド（E2E）のSaaS*1型アナリティクスサービス、Microsoft Fabric（以降「Fabric」）の登場です。Microsoft Fabricは業界の常識を覆すほどのインパクトを持ち、ビッグデータ分析、セルフサービス分析、データサイエンスプロジェクトなど、あらゆるデータニーズを満たす革新的なクラウドサービスが誕生しました。 Microsoft Power BIの製品チームに所属していることもあり、Fabricについては入社時に知るようになりました。今回のMicrosoft Buildでその瞬間に立ち会えることができ、非常に嬉しく思います。今まではPower BIを広める立場ということで他のAzureサービス*2との関わり
1. 始めに こんにちは、morioka12 です。 本稿では、バグバウンティの入門として、主に Web アプリケーションを対象にした脆弱性の発見・報告・報酬金の取得について紹介します。 1. 始めに 免責事項 想定読者 筆者のバックグラウンド Start Bug Bounty Bug Bounty JP Podcast 2. バグバウンティとは バグバウンティプラットフォーム Program Type Private Programs VDP (Vulnerability Disclosure Program) Asset Type 3. プログラムの選び方 Scope OoS (Out of Scope) 4. 脆弱性の探し方 (初期調査編) Subdomain Google Dorks Wayback Machine Wappalyzer JS Analyze [Blog] Java
はじめに 本書『Observability Engineering』は、複雑化の一途をたどる現代のソフトウェアシステムに立ち向かうための、強力な武器となる一冊であり本稿はその読書感想文です。Observability Engineering を今から知りたい方はもちろん、Observability Engineering の基礎を改めて学びたい方もぜひお読みください。この記事もかなりの長さになるので普通に書籍を読んだほうがいいかもです learning.oreilly.com 「Observability:可観測性」という言葉は、近年ソフトウェアエンジニアリングの世界で大きな注目を集めています。しかし、その概念の本質を理解し、実践に移すことは容易ではありません。 本書は、そのオブザーバビリティについて、その基本的な考え方から、具体的な実装方法、そして組織への適用まで、幅広くかつ深く解説して
Real World HTTP 第3版 ミニ版
TOPICS 発行年月日 2024年05月 PRINT LENGTH 207 ISBN 978-4-8144-0083-6 FORMAT PDF EPUB 本書は、2017年に発行し、2024年に第3版を発行した『Real World HTTP 第3版』のエッセンスを凝縮した、無料の電子書籍です。 HTTP/1.0、HTTP/1.1、HTTP/2と、HTTPが進化する道筋をたどりながら、ブラウザが内部で行っていること、サーバーとのやりとりの内容などについて、プロトコルの実例や実際の使用例などを交えながら紹介しています。 ミニ版のため、一部の内容を割愛しています。詳しくは本書の「まえがき」をご覧ください。 ミニ版の使用について ミニ版の図版やテキストは、著作権法で認められている引用の範囲に加えて、有志での勉強会、自社の社員向けの研修に用いるプレゼンテーション資料のために、全体の10～20%程
Matthias Endler - Consultant at Corrode.dev • 27 September 2023 Oh no, not another 'Is Rust better than Go?' article. Seriously, haven't we all had our fill of these comparisons by now? But before you sigh in exasperation, hear us out! Many comparisons between Go and Rust emphasize their differences in syntax and the initial learning curve. However, ultimately, what matters is the ease of use for
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは。システム統括本部 クラウドプラットフォーム本部の早川です。 私が所属する部署では、ヤフー社内のサービス開発者向けのプライベートクラウドを開発、運用しています。昨年の後半頃から「Platform Engineering」という言葉が聞かれるようになってきていますが、私たちは以前から、その理念に近い取り組みを行っています。 本記事では、「Platform Engineering」の概要と、私たちがKubernetesを活用して実現しているプラットフォーム開発、運用の取り組みについて詳しく紹介します。私たちの経験と知見が、これからプラットフォームの開発に取り組む皆様の一助になれば幸いです。 Platform Engineer
Real World HTTP 第3版
本書はHTTPに関する技術的な内容を一冊にまとめることを目的とした書籍です。HTTPが進化する道筋をたどりながら、ブラウザが内部で行っていること、サーバーとのやりとりの内容などについて、プロトコルの実例や実際の使用例などを交えながら紹介しています。さまざまな仕様や実例、またGoやJavaScriptによるコード例を紹介しながら、シンプルなHTTPアクセスやフォームの送信、キャッシュやクッキーのコントロール、SSL/TLS、Server-Sent Eventsなどの動作、また認証やメタデータ、CDNやセキュリティといったウェブ技術に関連する話題を幅広く紹介し、いま使われているHTTPという技術のリアルな姿を学びます。 第3版では、より初学者を意識した導入や、スーパーアプリなどプラットフォーム化するウェブに関する新章を追加。幅広く複雑なHTTPとウェブ技術に関する知識を整理するのに役立ち、また
本記事は 基盤デザインウィーク 2日目の記事です。 🌈 1日目 ▶▶ 本記事 ▶▶ 3日目 💻 気付けば入社して14年。2010年入社の小林です。 いつの間にか基盤デザイン事業部では部長に続き2番目の古株となっていました。 もう今の若手（〜5年目ぐらい）はサーバというものを触ったこともない人もいるような時代になっています。 今回は基盤デザイン事業部ウィーク（長いので基デザウィークと呼んでいます）ということで、 入社2年目にインフラチームに配属された当初のオンプレミスシステムばかりの時代を懐かしみつつ、 情報システムにおけるインフラの今と昔の違いについて考えていきたいと思います。 オンプレミスの時代 仮想化前 さて、読者の皆様はサーバを触ったことはありますでしょうか？ 「メインフレームからやってるぞー」という声も聞こえましたが、私はメインフレームは経験ないので少し置いておきます。 私がイ
ChatGPTのセキュリティへの影響 | Cloud Security Alliance Japan
© Copyright 2023, Cloud Security Alliance.All rights reserved. 1 Acknowledgements Authors: Kurt Seifried Sean Heide Bogdan Filip Vishwa Manral Lars Ruddigkeit Walter Dula Eric E. Cohen Billy Toney Supro Ghose Marina Bregkou Additional Staff: Stephen Lumpe (Cover illustration, with assistance from Midjourney) This is a Release Candidate version and is subject to change. © 2023 Cloud Security Allian
「gettyimages」より ここ10年ほど続くクラウドブームを受け、システム運用をオンプレミスからクラウドサービスへ移行する動きが広がるなか、いったんはクラウドへ移行したもののオンプレミスに戻す企業も出始めている。その理由は何なのか、そして浮き彫りになりつつあるクラウド導入のデメリットとは何か。専門家の見解を交えて追ってみたい。 自前でサーバなどのハードウェアを保有・構築してシステムを運用するオンプレミスに対し、専用事業者が保有するシステム環境をインターネット経由で利用するクラウドコンピューティング。米アマゾン・ドット・コムは2006年に企業向けクラウド「Amazon EC2/S3」を、米グーグルは08年に「Google Cloud Platform」を、米マイクロソフトは10年に「Microsoft Azure」を提供開始し、世界的に普及。日本では2000年に米セールスフォース・ドッ
Demystifying Azure OpenAI Networking for Secure Chatbot Deployment
Introduction Azure AI Landing Zones provide a solid foundation for deploying advanced AI technologies like OpenAI's GPT-4 models. These environments are designed to support AI enthusiasts, but it's essential to grasp their networking aspects, especially concerning Platform as a Service (PaaS) offerings. In this article, we'll dive into the networking details of OpenAI Landing Zones, focusing on ho
近年は多くの企業がデータの保管やサービスの提供にクラウドホスティングサービスを利用しており、「データはクラウドで保管しているから安心」と思っている管理者も多いはず。ところが、デンマークのクラウドホスティング企業であるCloudNordicは2023年8月、「ランサムウェアによってほぼすべての顧客のデータが暗号化され、アクセスできなくなってしまった」と報告しました。 CloudNordic Ransomware Angreb https://www.cloudnordic.com/ Ransomware infection wipes all CloudNordic servers • The Register https://www.theregister.com/2023/08/23/ransomware_wipes_cloudnordic/ Danish cloud host says
Announcing the General Availability of Application Integration | Google Cloud Blog
Introducing Application Integration: Connect your applications visually, without code According to a recent Accenture report, large businesses deploy an average of 500 different applications. This trend shows no signs of slowing down, with the majority of respondents signaling plans to acquire even more applications. No surprise, all these applications present a number of integration challenges, w
「ハイパースケールオペレーター」19社のデータセンター数が1000の大台を超える、総容量は4年ごとに倍増
Synergy Research Groupは2024年4月17日（米国時間）、世界のハイパースケールデータセンターに関する調査を発表した。それによると、ハイパースケーラーが運営する大規模データセンターの数は2023年末時点で992に増加し、2024年初頭には1000の大台を超えたという。一方、消費電力を尺度としたハイパースケールデータセンターの総容量は、施設数の急速な増加と、平均容量の上昇が続いたことを理由に、4年で倍増した。同社のデータによると、世界全体のIT消費電力のうち51％を米国が占めており、残りは欧州と中国がそれぞれ約3分の1を占めている。 この調査は、Synergy Research Groupが「ハイパースケールオペレーター」と見なす、SaaS（Software as a Service）、IaaS（Infrastructure as a Service）、PaaS（Pla
ソフトウエアやサーバー、ネットワーク基盤といったベンダーのIT資源を、インターネットなどを介してユーザーが利用できるようにしたサービス。仮想化技術の活用などによって、処理負荷に応じて柔軟にIT資源を増減できるようにしている。 総務省によれば、クラウドサービスを利用する日本企業の割合は72.2％に達している。普及が進む一方で「トラブルに遭遇した」「想定通りに活用できなかった」といった声も聞こえる。特にネットワークの設計や運用に綻びがあると落とし穴にはまるようだ。 クラウド活用に潜む様々な落とし穴を理解する上では、クラウドに関する基礎知識を押さえておく必要がある。クラウドの基本的な特徴や主要なサービス形態、ネットワークなどを確認していこう。 負荷に応じて資源を増減 クラウドサービスはソフトウエアをネット経由でユーザーに貸し出すサービスとして始まった。米Salesforce（セールスフォース）が
Announcing the General Availability of Application Integration | Google Cloud Blog
Introducing Application Integration: Connect your applications visually, without code According to a recent Accenture report, large businesses deploy an average of 500 different applications. This trend shows no signs of slowing down, with the majority of respondents signaling plans to acquire even more applications. No surprise, all these applications present a number of integration challenges, w
本連載では、Google Cloudのアプリ開発とDBプロダクトにおけるスペシャリスト達が、Google Cloudプロダクトを利用した、クラウドネイティブな開発を実践する方法を解説していきます。 第1回では、Google Cloudで実践するモダンなアプリケーション開発に焦点を当てます。Google Cloudのサービスや利点について紹介し、マイクロサービスアーキテクチャやTwelve-Factor Appの重要性を探求し、Google Cloudがモダンなアプリケーション開発にどのように役立つかを理解できます。 主に対象となる読者は、クラウドを利用してアプリケーションを開発するエンジニア、またはその基盤を構築するエンジニア、サービス開発に携わるプロダクトマネージャーを想定しています。 なぜモダンなアプリケーション開発が必要なのか DevOpsという手法がありますが、これは開発と運用が協
How we migrated our PostgreSQL database with 11 seconds downtime – Government Digital Service
GOV.UK Notify is hosted on the GOV.UK Platform as a Service (PaaS). The PaaS is being retired, so we are migrating all of our infrastructure into our own Amazon Web Services (AWS) account. This blog post explains how we migrated our PostgreSQL database with minimal downtime. Migrating our database The PaaS provides a database for us and we use it to store all of our data - from data about each not
SalesforceはPaaS（Platform as a Service）群「Heroku」の一部サービスで、無償プランを提供していた。同社がこれらの無償プランを廃止した今、これまで無償プランを利用してきたHerokuユーザーは、ある決断を下さなければならない。利用していたHerokuサービスの有償プランを契約するか、同等の機能を持つ別のPaaSに移行するかだ。後者を選ぶHerokuユーザーに向けて、候補を紹介しよう。 Heroku代替候補2．CapRover 併せて読みたいお薦め記事 連載：Herokuの「代替PaaS」を比較 第1回：「Heroku無償プラン終了」の衝撃 “無料じゃなくなったサービス”はこれだ 第2回：「Heroku無償プラン」に依存し過ぎた企業が陥る“最悪の末路” 第3回：“Heroku無課金勢”が検討しやすい「格安有償プラン」はこれだ 第4回：Heroku無償プラ
G-gen の杉村です。2023年8月29日〜31日 (現地時間)、Google Cloud Next '23 が米国・サンフランシスコで開催されました。前回の記事では1日目の発表を扱いましたので、今回の記事ではそれ以外の発表等をご紹介します。 はじめに 開発の効率化 Jump Start Solutions GitLab との提携 Application Integration の GA インフラ C3A / C3D VM Titanium BigQuery と AI/ML BigQuery ML での生成 AI 利用 Feature Store の BigQuery 対応 BigQuery でのベクトルインデックス構築 BigQuery とデータ分析 Data clean rooms (Preview) BigQuery to Bigtable export BigQuery Omni
Abstraction Actor Model Architecture AI Algorithms Anti Patterns Architectural Design Principles Architecture Decision Records (ADR) Azure Cloud Back Pressure Caching Clean Architecture Clean Code Cloud Best Practices Cloud Design Patterns Cloud Native Code Review Concurrency CQRS Data Driven Design Design Best Practices Design Patterns DevOps Distributed Locking Distributed Transactions & Saga Do
Salesforceは、PaaS（Platform as a Service）群「Heroku」のサービスについて、無償プランを提供してきた。単純な仕組みのアプリケーションの開発や機能実験、QA（品質保証）テストのための手段として、Herokuの無償プランを利用していた個人や組織は少なくない。 2022年11月、SalesforceはコンテナやデータベースサービスといったHerokuサービスの無償プランを廃止した。この影響の大きさは、無償プランをどのように利用してきたかに依存する。 「Heroku無償プラン廃止」が“最悪の結果”になる企業の条件 併せて読みたいお薦め記事 連載：Herokuの「代替PaaS」を比較 第1回：「Heroku無償プラン終了」の衝撃 “無料じゃなくなったサービス”はこれだ PaaSの選び方 “普通のPaaS”が嫌なら「オープンソースPaaS」製品を使うべき理由 オ
Power BI Advent Calendar 2023 のオオトリです Happy Holidays and Merry Christmas🎄🎊🎉🚀👍 この記事は Power BI Advent Calendar 2023 のシリーズ1 - 25日目の記事です。 これが Power BI Advent Calendar 2023 シリーズ1 の最後の記事です。 今年も去年に続き、石川さん が Advent Calendar のホストを務めてくださいました。まずは石川さん、ありがとうございました🙇 さて、2023年は皆さんにとって、どんな年になりましたか？ そして、どんな Power BI Year になりましたか？ 会社で Power BI が使えるようになった人 個人的に興味を持って Power BI Desktop をインストールした人 Excel で業務をしていて、な
Dokploy DokployはVercelやNetlify、Herokuなどの代替として開発されたオープンソースのPaaS（Platform as a Service）です。セルフホスト可能で、DockerとTraefikを使用してアプリとデータベースのデプロイ及び管理を簡素化してくれる、というものだそうです。 Node.js、PHP、Python、Go、Rubyなど様々なアプリを簡単にデプロイしたり、様々なDBのサポート及び作成・管理が可能、Docker管理、Traefikとの統合、CPUやメモリやストレージ、ネットワークなどのリアルタイム監視、データベースの自動バックアップなどを担ってくれます。 効率とセキュリティの強化を重視した設計となっており、アプリの任意のVPSへのデプロイに貢献してくれるとの事です。Vercel、Netlify、Herokuのいずれも使い続ける事に迷いがある開
iOS開発におけるGitHub Actions self-hosted runnerを利用したオンプレ CI/CD のすゝめ | CyberAgent Developers Blog
iOS開発におけるGitHub Actions self-hosted runnerを利用したオンプレ CI/CD のすゝめ 昨今のiOSのCI /CD環境において、マシンスペックと実行コストのトレードオフや、それに伴うクレジット管理に悩まされることが増えています。 6月27日〜28日にかけて開催した「CyberAgent Developer Conference 2023」では「iOS開発におけるGitHub Actions self-hosted runnerを利用したオンプレ CI/CD のすゝめ」というタイトルで下記についてご紹介しました。本ブログでは、そのセッションの様子をお届けします。 ————————— サイバーエージェントではCyberAgent group Infrastructure Unit（CIU）がMac OSの物理マシンを運用管理し、GitHub Action
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
今日から始めるChatGPT+Zapierで雑パーソナライズ情報収集 - LayerX エンジニアブログ
Microsoft Fabricの登場 - テクテク日記
バグバウンティ入門(始め方) - blog of morioka12
もう一度読むObservability Engineering - じゃあ、おうちで学べる
Rust Vs Go: A Hands-On Comparison
ヤフーにおけるKubernetesを活用したPlatform Engineeringの取り組み
システムインフラいまとむかし - NRIネットコムBlog
クラウドに移行→オンプレミスに戻す、なぜ広まる？自前サーバへ回帰の理由
ランサムウェアの被害を受けたクラウドホスティングサービスが「ほぼすべてのデータ」を失ってしまったと報告
「暗黙のルーター」って何？ ネットワーク技術者も必修のクラウド基礎知識
Google Cloudの概要とモダンなアプリケーション開発 | gihyo.jp
“Heroku代替”として無料で使える「CapRover」「Fly.io」とは？
Google Cloud Next '23 速報を日本語で解説(2&3日目) - G-gen Tech Blog
Awesome Software Architecture
「Heroku無償プラン」に依存し過ぎた企業が陥る“最悪の末路”
Power BI の今年、2024年に向けてちょっと未来のお話 - Qiita
VercelやNetlify、Herokuなどの代替として開発されたオープンソースのPaaS・「Dokploy」