「japanese-large-lm」は、同社が以前から取り組んでいる日本語の大規模言語モデル「HyperCLOVA」の研究開発プロジェクトと並行して、Massive LM開発ユニットにより開発された。 なお、本モデルのライセンスは、商用利用が可能な「Apache License 2.0」となっている。 同モデルの訓練には、同社独自の大規模日本語Webコーパスが利用され、Web由来のテキスト特有のノイズを除去するために、同社NLPチームのメンバーが開発したOSSの「HojiChar」によるフィルタリング処理が適用されている。また、最終的な学習には約650GBのコーパスが利用されている。加えて本モデルでは、「3D Parallelism」「Activation Checkpointing」などの手法を用い、学習を高速化している。 学習したモデルの性能評価には、Perplexityスコア（PP

ソフトバンクは5月10日の決算会見で、LINEと共同で和製GPTの立ち上げを進めていることを明らかにした。グループのLINEが開発を進めてきたLINE AiCallなどのHyperCLOVA技術をベースに、OpenAIに追いつくことを狙う。 「GPTの基礎ベースを持っている会社は日本ではわが社しかない。これはもうやらざるを得ない。米国勢や中国勢に勝てるかどうかではなく、やらなければ今後の参加権がなくなる」（宮川潤一社長） 3月に組織を立ち上げ、合弁会社も用意した。グループ内からAI開発人材として1000人を選抜し、異動または兼務を検討している。「1000人から5000人規模の“GPT祭り”をやらなければ、日本の中でのGPTの立ち上がりはない」（宮川氏） LINEが開発してきた独自の大規模言語モデルHyperCLOVAは、LINE子会社のワークスモバイルジャパンに移管されている。Zホールディ

AIスコアの算出とそれに基づいた個人向け無担保貸付事業を営むJ.Score（東京都港区）は12月13日、各種サービスを終了し、事業を同業のLINE Credit（東京都品川区）と統合すると発表した。事業統合後、J.Score社は清算する。 J.Scoreはみずほ銀行とソフトバンクの共同出資により2016年に設立した。ユーザーのスコアリングに基づいて最適な借り入れ条件を提示する「AIスコア・レンディング」事業を行っていた。 LINE Creditは、LINE上での行動データを元に算出したスコアを活用して貸出を行う「LINEポケットマネー」を提供している。3月時点で申込み件数は100万件を突破し、累計貸付実行額が500億円を超えた。 みずほフィナンシャルグループとソフトバンクは、20年に次世代型金融事業における戦略提携を行っている。今回の事業統合は、その一環。 各事業は段階的にサービスを終了す

当初公開したタイトルに誤りがありました。本ブログはChatGPTではなく2022年初頭にトレーニングを終えたGPT-3.5シリーズのモデルをAPIとして実行したものになります。ChatGPTのAPIがAPIで実行できるようになり次第ブログを更新したいと思います。※ChatGPTはGPT-3.5シリーズのモデルをベースに微調整を加えたもの 各所で盛り上がっている ChatGPT を 使い慣れた LINE から使えるようにしてみました。 簡単なやり取りであればコードを書く必要すらないのでノーコードツール（Make）を使って実現してみます。 今回の成果物はこちら(15 分程度で作成することができます) ChatGPT とは 作り方の説明に入る前にまず簡単に ChatGPT とは何かについてChatGPTに聞いてみます。 だそうです。 少しだけ補足すると ChatGPT はOpenAIが開発した言

LINE株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。 LINEヤフー Tech Blog 2021年11月10日・11日の2日間にわたり、LINEのオンライン技術カンファレンス「LINE DEVELOPER DAY 2021」が開催されました。特別連載企画「DEVDAY2021 アフターインタビュー」では、発表内容をさらに深堀りし、発表では触れられなかった内容や裏話について登壇者たちにインタビューします。今回の対象セッションは「属性推定システムのリニューアルで見えた様々な課題とその解決の事例紹介」です。 ユーザー一人ひとりへ最適なコンテンツやサービスを届けるため、LINEでは機械学習を用いてユーザーの属性や興味・関心を推定する属性推定システムを開発・運用しています。2021年の夏に、この属性推定システムの利便性やメ

2021年11月10日と11日の2日間、LINE株式会社が主催するエンジニア向け技術カンファレンス「LINE DEVELOPER DAY 2021」がオンラインで開催されました。そこで前半では、曽弘博氏が、出前館における機械学習活用に向けた取り組みを紹介しました。後半は実際に出前館でどのように機械学習を実装しようとしているかについてです。前編はこちら。 推薦システムについて 曽弘博氏：では、推薦システムについての解説に入りましょう。こちらでやりたかったことを復習すると、「それぞれのユーザーに対して、そのユーザーの好みに合わせた店舗の推薦リストを提示すること」でした。 このタスクにに関して、ここでは2つの多様性という課題に関してお話をいたしましょう。 1つは推薦リスト全体での店舗の多様性です。ここでいう多様性というのは、「全てのユーザーに対する推薦リストを集めてきたときに、そのリストの集まり

LINE株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。 LINEヤフー Tech Blog LINEの開発組織のそれぞれの部門やプロジェクトについて、その役割や体制、技術スタック、今後の課題やロードマップなどを具体的に紹介していく「Team & Project」シリーズ。今回は、LINE公式アカウントの分析業務を担当しているData Science室のOA Data Scienceチームを紹介します。 マネージャーの西手嘉昭、永峰宏規に話を聞きました。 ※関連記事：LINEの広告プラットフォームの分析業務を担当するチームを紹介します OA Data Scienceチームのデータサイエンティストの皆さん まず、自己紹介をお願いします。 西手：2017年4月に、OA Data Scienceチームにデータサイエンティスト

LINE株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。 LINEヤフー Tech Blog はじめに こんにちは、2020年4月に新卒としてLINE株式会社に入社した二又 航介です。テキスト音声合成システムの研究開発を担当するAI開発室 Voiceチームに所属し、音声合成システムにおけるテキスト処理部の研究開発やチームの機械学習基盤構築に取り組んでいます。 学生時代は機械翻訳や同時通訳に関連する研究に取り組んでいました。研究以外の活動としては、アルバイト・インターンでの対話システムや機械翻訳システムの研究開発、個人活動としてwebアプリケーション開発などを行っていました。このような活動を通じて、数多くのユーザーに利用される自然言語処理技術を活かしたサービスに携わりたいという思いからLINEを志望しました。学生時代は専

2020年11月25〜27日の3日間、LINE株式会社が主催するエンジニア向け技術カンファレンス「LINE DEVELOPER DAY 2020」がオンラインで開催されました。そこで LINEのフェローであり、Data Science and Engineeringセンターに所属する並川淳氏が、「LINEではどのようにサービス横断でのデータ活用を実現しているのか」というテーマで、LINEにおけるデータの扱い方について共有しました。 LINEにおけるデータ活用の取り組み 並川淳氏（以下、並川）：本日は「LINEではどのようにサービス横断でのデータ活用を実現しているのか」というタイトルで、並川が発表いたします。私は、LINEではふだん機械学習に関わる開発全般を担当しています。ですが、今日は機械学習に限らず、LINEにおけるデータ活用の取り組みについて幅広く紹介させてもらえればと思っています。よ

LINEは3月2日、機械学習エンジニアなどAIに詳しい技術者の採用を強化する方針を示した。2021年中をめどに、現在の約2倍となる200人規模に拡大する考え。人材を確保し、AI技術を活用したサービスの実用化を早めるという。 21年中をめどに、新たに約100人のAI技術者を採用する計画。これまでAI技術に関する組織は事業ごとに分かれていたが、3月からは1つに集約。AI技術者が集まる組織とAI関連サービスの各部署との連携を強化する。 募集職種は、画像処理や自然言語処理、音声処理といった分野のエンジニアや、データサイエンティストなど8種。機械学習チームのプロジェクトマネジャー、プロダクトマネジャーも募集する。

LINEの全社員が使えるデータ分析ツール「OASIS」開発秘話 既存のソフトウェアを採用せず、内製化を選んだ理由 OASIS - Data Analysis Platform for Multi-tenant Hadoop Cluster 2018年11月21日、LINE株式会社が主催するエンジニア向け技術カンファレンス「LINE DEVELOPER DAY 2018」が開催されました。4度目の開催となる今回のテーマは「Next LINE」。メッセージアプリだけでなく、さまざまなサービスの開発や新たな技術領域への投資を行っているLINEが目指すビジョンと各分野での取り組みについて、エンジニアたちが技術的側面から紹介します。セッション「OASIS - Data Analysis Platform for Multi-tenant Hadoop Cluster」に登壇したのはLINE株式会社D

ネスレ日本は5月28日、食事分析やDNA検査に基づく健康アドバイスを提供する新サービスを、LINE上で無料提供すると発表した。食事を撮影してLINEで送るだけでその写真をAIが自動で解析。カロリーや栄養価を即時に診断し、不足する栄養分をアドバイスしてくれる。 ネスレが健康習慣を提案する「ネスレ ウェルネス アンバサダー」プログラムの一環。ウェルネス アンバサダーは、カプセル対応のコーヒーマシン「ネスカフェ ドルチェ グスト」を無償貸与し、対応カプセルを販売するプログラム。ファンケルと共同開発した「ウェルネス抹茶」など健康志向のカプセルをそろえた。 AIによる栄養価診断では、診断結果とともに不足する栄養素を補うドルチェ グスト用カプセルなど（ウェルネス アンバサダー商品）を提案する。また、カプセルを毎月購入する「特別定期コース」に加入すると、月に一度血液検査やDNA検査を受けられる特典を設け

こんにちは、LINE株式会社でDeveloper Advocateをしている中嶋です。この記事はLINE Advent Calendar 2017の1日目の記事で、私が日頃開発しているチャットボットによく適用している、自動学習機能についてアイデアを共有したいと思います。 概要 チャットボットは人のように対話できるシステム、とざっくり定義することができると思います。チャットボットの背後では、ユーザーからのメッセージに対して自然言語処理をおこなってユーザーの意図を特定し、その意図と文脈に応じて処理と返答をおこなう方式が典型的な実装の1つだと思います。 この仕組みで「賢くなる」には2つの側面があり、1つは理解力が高まること、もう1つはできることが増えることです。一般に、前者は自然言語処理、後者はスキルを強化していくことを意味します。 今回この記事でご紹介するのは理解力を高める方法です。自然言語処

バッチなどで日々のKPIを自動で集計した内容をすぐ確認できるようにしてみる。今回はLINEへ通知する方法。とても簡単 １．まずは下記にアクセスし、ログインした上で通知を行いたいチャットに対してアクセストークンの発行を行う。 ２．発行されたアクセストークンをメモして（1回しか表示されないらしいので注意。コピーし忘れたら一旦提携を解除してもう一度発行しなおせばＯＫ） ３．以下のコードを追加 import requests line_notify_token = 'アクセストークン' line_notify_api = 'https://notify-api.line.me/api/notify' message = '通知したい内容' payload = {'message': message} headers = {'Authorization': 'Bearer ' + line_noti

『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day

国内最大級のスマートフォン調査パネルを活用し、企業のマーケティング活動をサポート LINE株式会社（本社：東京都渋谷区、代表取締役社長：出澤 剛、以下 LINE）は、同社が提供するコミュニケーションアプリ「LINE」上で保有する、国内最大級のスマートフォン調査パネルを基盤とした調査事業者向けのユーザーリサーチプラットフォーム「LINE Research Platform」を本日より公開いたしましたので、お知らせいたします。 従来、インターネットを利用したユーザー調査はPCパネルを利用したものが主流である一方、スマートフォンの普及に伴い、PCの利用時間は2011年をピークに減少に転じています。また、利用時間が拡大する携帯電話・スマートフォンとの差は広がり、特に若年層についてはその傾向が顕著なものとなっています。＊1 ＊1：出典　博報堂ＤＹメディアパートナーズ メディア環境研究所 「メディア定

『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day

株式会社サイバーエージェント（本社：東京都渋谷区、代表取締役社長：藤田晋、東証一部上場：証券コード 4751）のアドテクノロジー分野におけるサービスの開発を行うアドテクスタジオは、LINE ビジネスコネクト(※1)配信ツール「CA‐Link (シーエーリンク)」(提供：株式会社RightSegment)において、コミュニケーションアプリ「LINE」の「LINE公式アカウント」にて、友だち追加済みユーザーを対象に、リッチメッセージ(※2)を活用したアンケートを配信する新機能「リッチアンケート」の提供を開始いたしました。 「CA‐Link」は、LINE株式会社が提供する法人向けサービス「LINE ビジネスコネクト」を活用したスマートフォンマーケティングプラットフォームです。企業が保有する顧客データを用いて、ユーザーセグメントを作り、特定のユーザーセグメントに対して、メッセージを最適なタイミング

Research indicates that carbon dioxide removal plans will not be enough to meet Paris treaty goals

『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day