BERTを使ったMLバッチ処理実サービスのアーキテクチャとMLOpsの取り組み

こんにちは、Development部門に所属しているSREの佐藤と申します。 Development部門では複数プロダクト共通の基盤構築や、新技術の検証、インフラ整備などを幅広く担当しています。これまでストックマークではCI/CD基盤の構築やAWS上で構築するインフラのコード化、ニュース収集基盤のアーキテクチャの改善や運用負荷軽減から、製品利用状況のデータ分析基盤構築などに取り組んできました。 今日はAstrategyという製品でのMLOpsの取り組みについて話します。 AstrategyについてAstrategyは国内外Webメディアを対象として情報を収集・構造化し、調査・報告業務を包括的にサポートする検索プラットフォームです。 図1: 「言葉のAI」自然言語解析を用いたオープンデータ解析ツール 複数の分析画面を提供しており、目的に応じて異なる観点で市場変化や競合動向を可視化できます。

[nikkie-ftnext]

#xpjug の発表 https://speakerdeck.com/kenta_sato3/mlopswoshi-xian-surusreji-dou-falseli-shi のブログ版。ref:https://b.hatena.ne.jp/nikkie-ftnext/20200921#bookmark-4691631988780388930

[samurairodeo]

“内外Webメディアを対象として情報を収集・構造化し、調査・報告業務を包括的にサポートする検索プラ”