「japanese-large-lm」は、同社が以前から取り組んでいる日本語の大規模言語モデル「HyperCLOVA」の研究開発プロジェクトと並行して、Massive LM開発ユニットにより開発された。 なお、本モデルのライセンスは、商用利用が可能な「Apache License 2.0」となっている。 同モデルの訓練には、同社独自の大規模日本語Webコーパスが利用され、Web由来のテキスト特有のノイズを除去するために、同社NLPチームのメンバーが開発したOSSの「HojiChar」によるフィルタリング処理が適用されている。また、最終的な学習には約650GBのコーパスが利用されている。加えて本モデルでは、「3D Parallelism」「Activation Checkpointing」などの手法を用い、学習を高速化している。 学習したモデルの性能評価には、Perplexityスコア（PP

ソフトバンクは5月10日の決算会見で、LINEと共同で和製GPTの立ち上げを進めていることを明らかにした。グループのLINEが開発を進めてきたLINE AiCallなどのHyperCLOVA技術をベースに、OpenAIに追いつくことを狙う。 「GPTの基礎ベースを持っている会社は日本ではわが社しかない。これはもうやらざるを得ない。米国勢や中国勢に勝てるかどうかではなく、やらなければ今後の参加権がなくなる」（宮川潤一社長） 3月に組織を立ち上げ、合弁会社も用意した。グループ内からAI開発人材として1000人を選抜し、異動または兼務を検討している。「1000人から5000人規模の“GPT祭り”をやらなければ、日本の中でのGPTの立ち上がりはない」（宮川氏） LINEが開発してきた独自の大規模言語モデルHyperCLOVAは、LINE子会社のワークスモバイルジャパンに移管されている。Zホールディ

AIスコアの算出とそれに基づいた個人向け無担保貸付事業を営むJ.Score（東京都港区）は12月13日、各種サービスを終了し、事業を同業のLINE Credit（東京都品川区）と統合すると発表した。事業統合後、J.Score社は清算する。 J.Scoreはみずほ銀行とソフトバンクの共同出資により2016年に設立した。ユーザーのスコアリングに基づいて最適な借り入れ条件を提示する「AIスコア・レンディング」事業を行っていた。 LINE Creditは、LINE上での行動データを元に算出したスコアを活用して貸出を行う「LINEポケットマネー」を提供している。3月時点で申込み件数は100万件を突破し、累計貸付実行額が500億円を超えた。 みずほフィナンシャルグループとソフトバンクは、20年に次世代型金融事業における戦略提携を行っている。今回の事業統合は、その一環。 各事業は段階的にサービスを終了す

当初公開したタイトルに誤りがありました。本ブログはChatGPTではなく2022年初頭にトレーニングを終えたGPT-3.5シリーズのモデルをAPIとして実行したものになります。ChatGPTのAPIがAPIで実行できるようになり次第ブログを更新したいと思います。※ChatGPTはGPT-3.5シリーズのモデルをベースに微調整を加えたもの 各所で盛り上がっている ChatGPT を 使い慣れた LINE から使えるようにしてみました。 簡単なやり取りであればコードを書く必要すらないのでノーコードツール（Make）を使って実現してみます。 今回の成果物はこちら(15 分程度で作成することができます) ChatGPT とは 作り方の説明に入る前にまず簡単に ChatGPT とは何かについてChatGPTに聞いてみます。 だそうです。 少しだけ補足すると ChatGPT はOpenAIが開発した言

LINE株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。 LINEヤフー Tech Blog 2021年11月10日・11日の2日間にわたり、LINEのオンライン技術カンファレンス「LINE DEVELOPER DAY 2021」が開催されました。特別連載企画「DEVDAY2021 アフターインタビュー」では、発表内容をさらに深堀りし、発表では触れられなかった内容や裏話について登壇者たちにインタビューします。今回の対象セッションは「属性推定システムのリニューアルで見えた様々な課題とその解決の事例紹介」です。 ユーザー一人ひとりへ最適なコンテンツやサービスを届けるため、LINEでは機械学習を用いてユーザーの属性や興味・関心を推定する属性推定システムを開発・運用しています。2021年の夏に、この属性推定システムの利便性やメ

2021年11月10日と11日の2日間、LINE株式会社が主催するエンジニア向け技術カンファレンス「LINE DEVELOPER DAY 2021」がオンラインで開催されました。そこで前半では、曽弘博氏が、出前館における機械学習活用に向けた取り組みを紹介しました。後半は実際に出前館でどのように機械学習を実装しようとしているかについてです。前編はこちら。 推薦システムについて 曽弘博氏：では、推薦システムについての解説に入りましょう。こちらでやりたかったことを復習すると、「それぞれのユーザーに対して、そのユーザーの好みに合わせた店舗の推薦リストを提示すること」でした。 このタスクにに関して、ここでは2つの多様性という課題に関してお話をいたしましょう。 1つは推薦リスト全体での店舗の多様性です。ここでいう多様性というのは、「全てのユーザーに対する推薦リストを集めてきたときに、そのリストの集まり

LINE株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。 LINEヤフー Tech Blog LINEの開発組織のそれぞれの部門やプロジェクトについて、その役割や体制、技術スタック、今後の課題やロードマップなどを具体的に紹介していく「Team & Project」シリーズ。今回は、LINE公式アカウントの分析業務を担当しているData Science室のOA Data Scienceチームを紹介します。 マネージャーの西手嘉昭、永峰宏規に話を聞きました。 ※関連記事：LINEの広告プラットフォームの分析業務を担当するチームを紹介します OA Data Scienceチームのデータサイエンティストの皆さん まず、自己紹介をお願いします。 西手：2017年4月に、OA Data Scienceチームにデータサイエンティスト

LINE株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。 LINEヤフー Tech Blog はじめに こんにちは、2020年4月に新卒としてLINE株式会社に入社した二又 航介です。テキスト音声合成システムの研究開発を担当するAI開発室 Voiceチームに所属し、音声合成システムにおけるテキスト処理部の研究開発やチームの機械学習基盤構築に取り組んでいます。 学生時代は機械翻訳や同時通訳に関連する研究に取り組んでいました。研究以外の活動としては、アルバイト・インターンでの対話システムや機械翻訳システムの研究開発、個人活動としてwebアプリケーション開発などを行っていました。このような活動を通じて、数多くのユーザーに利用される自然言語処理技術を活かしたサービスに携わりたいという思いからLINEを志望しました。学生時代は専

こんにちは。保育園からくるメールに気付かない事が多く、朝保育園に行ったらお休みという事がたまにあるので、LINE通知をして気付きやすくするのと家族で共有するようにしました。 「LineNotify」と「Google Apps Script」を使って簡単に実現出来ます。 LineNotifyでアクセストークンの取得 LineNotify(https://notify-bot.line.me/ja/)よりマイページを選択して、「トークンを発行する」からアクセストークンを取得します。 トークンは一度しか表示されないので忘れないようにメモします。 Google Apps Scriptにてソース作成 Google Apps Script(https://script.google.com/home)より新しいプロジェクトを作成します。 以下ソースをコピーします。 最初の３行を書き換えて下さい。 Go

やりたいことみなさんは、複数のメールアカウントを持ってますよね？ 僕も例に漏れず持っています。人は複数のメールアカウントを持つものです。 そうすると、時にどのアカウントにメールが来たかわからなくなることはないでしょうか。僕はよくあります。 ホテルの予約メールどこいったっけ、と思いながら複数のGoogleとYahoo!のアカウントにログインして、メールを検索するのは大変ですよね。 そこで、複数のアカウントから、ひとつのアカウントにメールを転送して探しやすくするというライフハックがあります。 下記のようなイメージです これでひとつのアカウントを探せば良くなりますね。 僕はこのまとまったアカウントを親玉と呼んでいます。 さらに欲を出せば、なるべく通知ってまとめたいですよね。 あれ、思いませんか。 LINEとメールはどちらもメッセージアプリなので、僕はどちらかで一方で受け取りたいと思ってしまいます

2020年11月25〜27日の3日間、LINE株式会社が主催するエンジニア向け技術カンファレンス「LINE DEVELOPER DAY 2020」がオンラインで開催されました。そこで LINEのフェローであり、Data Science and Engineeringセンターに所属する並川淳氏が、「LINEではどのようにサービス横断でのデータ活用を実現しているのか」というテーマで、LINEにおけるデータの扱い方について共有しました。 LINEにおけるデータ活用の取り組み 並川淳氏（以下、並川）：本日は「LINEではどのようにサービス横断でのデータ活用を実現しているのか」というタイトルで、並川が発表いたします。私は、LINEではふだん機械学習に関わる開発全般を担当しています。ですが、今日は機械学習に限らず、LINEにおけるデータ活用の取り組みについて幅広く紹介させてもらえればと思っています。よ

出前館は第三者割当増資によって、新たに300億円の資金を調達する LINEは3月26日、持分法適用関連会社の出前館（旧・夢の街創造委員会）に追加出資すると発表した。LINEの親会社である韓国ネイバーと共同出資で設立した未来Fund（ファンド）と共に、出前館が実施する第三者割当増資を引き受け、合計で約61％を出資。LINEから社長も派遣し、実質子会社化する。 LINEは2016年10月に出前館を持分法適用関連会社とし、約22％（19年8月末時点）を出資する筆頭株主となっている。LINEと未来ファンドは、第三者割当増資の引き受けによって、それぞれ150億円ずつを出資。出資比率はLINEが約36％、未来ファンドが約25％となる。 LINEは17年10月から独自の出前代行サービス「LINEデリマ」を行っているが、今後はLINEと出前館のIDを統合し、同サービスを強化する。また、出前代行だけでなく、

LINEは3月2日、機械学習エンジニアなどAIに詳しい技術者の採用を強化する方針を示した。2021年中をめどに、現在の約2倍となる200人規模に拡大する考え。人材を確保し、AI技術を活用したサービスの実用化を早めるという。 21年中をめどに、新たに約100人のAI技術者を採用する計画。これまでAI技術に関する組織は事業ごとに分かれていたが、3月からは1つに集約。AI技術者が集まる組織とAI関連サービスの各部署との連携を強化する。 募集職種は、画像処理や自然言語処理、音声処理といった分野のエンジニアや、データサイエンティストなど8種。機械学習チームのプロジェクトマネジャー、プロダクトマネジャーも募集する。

ZホールディングスとLINEが、経営統合について基本合意。記者会見の質疑応答の模様をリアルタイムでお伝えする。 ヤフーを傘下に持つZホールディングス（ZHD）とLINEは11月18日、経営統合について基本合意したと発表した。両社は同日午後5時から、都内で記者会見を開催。記者会見には、ZHDの川邊健太郎社長、LINEの出澤剛社長が登壇した。 質疑応答の内容は以下の通り。 ──出澤社長は、これまでも「川邊社長と話すことが度々あった」と言っていた。今回は「思う所があった」ということだが、それは具体的に何か。 出澤　会見冒頭でも話したが、競合を含めた危機感と、ネットの流れの早さやAI化の早さへの危機感。いま手を打って、次のステージにいこうというタイミングだった。 ──異なる文化を持つ会社同士なので、時には合意できないこともあるのではないか。どのように足並みをそろえていくのか。 出澤　プロダクトに関

LINEの全社員が使えるデータ分析ツール「OASIS」開発秘話 既存のソフトウェアを採用せず、内製化を選んだ理由 OASIS - Data Analysis Platform for Multi-tenant Hadoop Cluster 2018年11月21日、LINE株式会社が主催するエンジニア向け技術カンファレンス「LINE DEVELOPER DAY 2018」が開催されました。4度目の開催となる今回のテーマは「Next LINE」。メッセージアプリだけでなく、さまざまなサービスの開発や新たな技術領域への投資を行っているLINEが目指すビジョンと各分野での取り組みについて、エンジニアたちが技術的側面から紹介します。セッション「OASIS - Data Analysis Platform for Multi-tenant Hadoop Cluster」に登壇したのはLINE株式会社D

ネスレ日本は5月28日、食事分析やDNA検査に基づく健康アドバイスを提供する新サービスを、LINE上で無料提供すると発表した。食事を撮影してLINEで送るだけでその写真をAIが自動で解析。カロリーや栄養価を即時に診断し、不足する栄養分をアドバイスしてくれる。 ネスレが健康習慣を提案する「ネスレ ウェルネス アンバサダー」プログラムの一環。ウェルネス アンバサダーは、カプセル対応のコーヒーマシン「ネスカフェ ドルチェ グスト」を無償貸与し、対応カプセルを販売するプログラム。ファンケルと共同開発した「ウェルネス抹茶」など健康志向のカプセルをそろえた。 AIによる栄養価診断では、診断結果とともに不足する栄養素を補うドルチェ グスト用カプセルなど（ウェルネス アンバサダー商品）を提案する。また、カプセルを毎月購入する「特別定期コース」に加入すると、月に一度血液検査やDNA検査を受けられる特典を設け

こんにちは、LINE株式会社でDeveloper Advocateをしている中嶋です。この記事はLINE Advent Calendar 2017の1日目の記事で、私が日頃開発しているチャットボットによく適用している、自動学習機能についてアイデアを共有したいと思います。 概要 チャットボットは人のように対話できるシステム、とざっくり定義することができると思います。チャットボットの背後では、ユーザーからのメッセージに対して自然言語処理をおこなってユーザーの意図を特定し、その意図と文脈に応じて処理と返答をおこなう方式が典型的な実装の1つだと思います。 この仕組みで「賢くなる」には2つの側面があり、1つは理解力が高まること、もう1つはできることが増えることです。一般に、前者は自然言語処理、後者はスキルを強化していくことを意味します。 今回この記事でご紹介するのは理解力を高める方法です。自然言語処

バッチなどで日々のKPIを自動で集計した内容をすぐ確認できるようにしてみる。今回はLINEへ通知する方法。とても簡単 １．まずは下記にアクセスし、ログインした上で通知を行いたいチャットに対してアクセストークンの発行を行う。 ２．発行されたアクセストークンをメモして（1回しか表示されないらしいので注意。コピーし忘れたら一旦提携を解除してもう一度発行しなおせばＯＫ） ３．以下のコードを追加 import requests line_notify_token = 'アクセストークン' line_notify_api = 'https://notify-api.line.me/api/notify' message = '通知したい内容' payload = {'message': message} headers = {'Authorization': 'Bearer ' + line_noti

『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day