サクサク読めて、アプリ限定の機能も多数!
トップへ戻る
中東情勢
www.keywalker.co.jp
#ChatGPT #LangChain はじめに 本記事では Visual ChatGPT の枠組みを踏襲して LangChain の Tools を用いたマルチモーダルへのアクセス方法について紹介します。 GPT-3 や ChatGPT では対象となるモダリティが言語情報に制限されていたこともあり、Visual ChatGPT の枠組みは事業範囲の拡大に貢献するかもしれません。 おことわり 再現のためのスクリプトについて現状公開予定はありません…。 著者は自然言語処理エンジニアとして絶賛勉強中です。記事の誤り、推奨される方法等がありましたらご指摘いただけますと幸いです。 本記事は読者層を明確に想定した上で書かれたものではありません。就職先として弊社を考えている学生の方々、弊社クローラサービスの利用を検討されているお客様、著者と同様に絶賛勉強中のエンジニアなど、特定の個人に刺さる内容であれ
本記事では LangChain を用いて任意の URL から情報を抽出するシステムの minimum viable product について紹介します。 特定のページを対象に情報抽出を行ったところ、ベースラインとしてはある程度の抽出精度が期待できる結果となりました(多様なページに対する定量評価も今後行う予定です)。 一方で一部のクエリに対して抽出誤りが見られました。電話番号や株価など抽出誤りが許容されない情報については、あくまで抽出支援として、人が介在する運用を検討する必要があると改めて感じました。 結論としては、高精度に情報抽出できる従来のクローラと併せて、互いの苦手な領域を補っていく仕組みを整えていきたいなと思います。 おことわり 著者は自然言語処理エンジニアとして絶賛勉強中です。記事の誤り、推奨される方法等がありましたらご指摘いただけますと幸いです。 本記事は読者層を明確に想定した上
海外の自然言語処理活用事例シリーズはこちらです。 Part.1・Part.2・Part.3・Part.4・Part.5 第四回 自動要約 ~時短効率化を目指して~ 第三回では、文章分類の技術の中身と、ニュース分類や顧客分析への応用例を紹介しました。第四回では文章の内容を機械が要約して返す機能である自動要約について、活用事例と、2020年に開発されたばかりの最新アルゴリズム「PEGASUS」を紹介します。 自動要約とは 人間は複雑な文章データをすぐに理解するため意識的・無意識的に要約作業を行っています。例えば、何ページにもわたる白書をレポートでまとめるとき、顧客との電話で話を理解するときなど、ビジネスの現場でも要約する力は不可欠です。そんな要約作業、AIによってより「人間らしい」要約を返すモデルが生成しつつあるのをご存じでしょうか。「AIが文章の内容を認識し、自動で要約を返す」自然言語処理、
日々刻々と膨れ上がる情報をどのように処理し、迅速に意思決定するかは現代の企業や個人にとって大きな課題です。ビジネス課題を洗い出すためにビッグデータの分析や可視化が有効だとわかっていても、扱いきれないこともあると思います。 キーウォーカーでは、自然言語処理の技術を使ってお客様のビジネス課題を抽出するお手伝いをしています。膨大なテキストデータをAIで分析することによって、課題が明確化され、より適切な意思決定につながります。本記事では、自然言語処理の技術のひとつ「BERT」を利用してECサイトレビューの感情分析を行った例を紹介し、このような分析を行うメリットについて述べていきます。 Keywalker データ分析サービスの詳細 BERTでできること BERT(Bidirectional Encoder Representations from Transformers) は2018年10月にGo
米国時間8月25日に、データ分析企業である”Palantir”はニューヨーク証券取引所へIPOのための目論見書を提出しました。 日本でも、2019年にSOMPOホールディングスと共同でPalantir Technologies Japan株式会社を設立し、2020年には富士通がパートナーとなり、同社のソフトウェアを活用したソリューションの提供を始める等のリリースが報道されてくるようになりましたが、その事業は謎に包まれている部分が多いとも伝えられています。 公開されたIPO申請書類(S-1)から、秘密のベールに包まれていたPalantirの事業の強さの秘密を読み解いてみたいと思います。 参考:Palantir/IPO目論見書 企業価値200億ドルのPalantirの概要 Palantirは、2003年にPaypalの創業者でもあるピーター・ティール氏により、2011年に発生した米国同時多発テ
海外の不動産テック企業の事例【15社】を紹介 金融領域とテクノロジーの融合を指すFintec(フィンテック)も、ニュースやメディアに頻繁に登場し、耳新しい言葉ではなくなりました。〇〇テックと呼ばれる分野では、新たな技術が芽吹き、ベンチャー企業や新サービスが続々と登場しています。 このページで紹介する不動産テック企業 1社目:IT技術でユーザーのニーズにマッチするサービスを提供する【Open Door Labs】 2社目:利用者にもエージェントにもオープンで公平な金額や情報をシェア【Compass】 『従来のシステム』と『〇〇テック』の違いとは? 従来システムでは、業務効率向上など、従来業務の置き換えが主眼とされてきました。 一方〇〇テックの裏側には、大量のデータ(BigData)やIoTを始めとする最新のテクノロジーを新しいアイデアで活用し、今まで考えられなかったサービスを提供することで、
参考リンク:AWS料金体系を1ページで纏める2017版 1. はじめに 有名なクラウドコンピューティングサービスとして Amazon Web Service(以下AWS)とGoogle Cloud Platform(以下GCP)があります。ここでは主にクラウドコンピューティングプラットフォームであるAmazon Elastic Compute Cloud(Amazon EC2、以下 EC2)とGoogle Compute Engine(以下GCE)に関連する料金の簡単な比較を行います。前提条件は以下の通りです。 全ての情報は2018/08時点のものです。 分かり易くするために金額を日本円で表記することがありますが、ドル/円レートは111円として換算します。 1か月は30日として計算します。 OSはLinuxとします。 AWSやGCPについての ご相談はこちら 2. EC2とGCE 今回比較
ビッグデータを分析・可視化した Tableauダッシュボードサンプル集を 無料ダウンロード 行政が公開している行政データ、WEBクローラで収集したオープンデータ、Analyticsなどのマーケティング集計データをTableauで可視化したワークブックです。 Tableauダッシュボード資料のダウンロードは無料。 応用事例満載 ダッシュボード資料を無料ダウンロード
社内でマーケティングオートメーションを導入して約1年経過。導入したのは無料のマーケティングオートメーションツールのMautic(マウティック)だ。Mauticは無料で使えるのが最大のメリット。しかし有料のマーケティングオートメーションツールと引けを取らない機能を持っている。 無料でMAが始められるとしたら使わない手はない。Webサイトのリニューアルに伴い問合せフォームやPDF資料のダウンロード、メール配信の仕組みをMAで行うことにした。 マーケティングオートメーションの導入にあたり「導入に失敗したくない。。」「料金が高くて手が出せない。。」「試してみたいけど、難しそう。。」と思っている方に参考していただければ幸いである。 無料で大丈夫なのか?実用性はあるのか? 「無料!」と聞くと、余計な公告が入っていたり、機能が劣っていたり、必要な機能が制限されてたり、実務では使えなさそうな気がする。 し
2.3 応答時間(レイテンシー) リージョンによって応答時間(レイテンシー)が異なります(http://qiita.com/toritori0318/items/5bd5ba7c609fda7292f6)(表 1)。これはアベイラビリティーゾーン、ネットワーク経路によっても変動します。例えば日本のページをクロールする場合、「アジアパシフィック(東京)」からクロールするか「米国東部(バージニア北部)」からクロールするかによって1ページ当たり6.8倍の時間差が生じます。 2.4 データ転送料金 AWSではデータ転送量によって課金されます(https://aws.amazon.com/jp/ec2/pricing/on-demand/)。料金はどこからどこへの転送かによって異なりますが料金体系は複雑です。またどのリージョンかによっても異なります。詳細な料金については上記URL、または添付のExc
情報ダッシュボード 弊社の提供する情報で作成したダッシュボードで社内外の情報をワンストップで表示・比較します。 社内情報ダッシュボード 業界内の情報など外界の情報ををワンストップで提供 関連数値などを見える化 社内外の情報をわかりやすく分類 だれでも簡単に、キュレーションメディアを構築運営 キュレーションサイト運営のプロセスを完全自動化 全自動でコンテンツ・キュレーションメディアを運営するためのツールを、ASPサービスで提供を開始しました。 Webサービスを提供する企業では、質の高いニュース情報等を「セルフメディア」として提供することで、ユーザーの再帰固定化を促し、サービスや売上の促進に大きく寄与することができます。 近年グノシーやスマートニュースなどのキュレーションメディアは、日々更新される多くの関連サイトから、コンテンツを「収集」「整理」「評価」「ディスプレイ」「メール配信」等をするこ
WebスクレイピングサービスShtockDataは、Webサイトを周期的に巡回し、Webページ上のデータを抽出し、収集するサービスです。データは、標準化された形式に変換され、クラウド上のDWH(データウェアハウス)に格納されます。 Webデータから取得可能なデータには、画像やテキスト(商品価格、レビュー、企業情報、ニュース記事)があり、市場変化の検出や競合他社の商品やサービスの比較(価格や性能)等に使用されています。 WebスクレイピングサービスであるShtockDataにより、価格戦略、商品企画、海外市場調査、企業情報の抽出、求人状況や不動産情報のリアルタイムな把握、様々なマーケティング活動を支援し、組織のDX化を推進します。
世界の未来を可視化する 私たちは、創業以来長年にわたり、 データとアルゴリズムによる課題解決をテーマに、 ビッグデータの収集、 データビジュアライゼーション、 AIや統計学を活用した分析機能まで 一連の実装をおこなってきました。 膨大なデータを整理することで、 目まぐるしく変化するグローバルの事象を 可視化し、更にはその先の未来を予測することで、 人々、組織、そして社会の意思決定を 支援することをミッションとしています。 SERVICE サービス Webデータを始めとするビッグデータの収集と正規化、 Tableau等のBIツールを基にしたデータビジュアライゼーション、 テキスト分析支援サービスや画像処理技術、 統計学やAIによるデータ分析ソリューションを提供しています。 ビジネスを加速する Webデータ抽出サービス 競合調査価格調査市場調査 ShtockDataは、Webサイトをクローリン
システム構築には開発技術だけでなく、該当の業種に対しての業務知識が不可欠です。 キーウォーカーはこれまで幅広い業種での開発を行い、業務知識を培ってまいりました。 システム構築のことなら当社にご相談ください。 アパレル業 業種 システム概要 技術要素 アパレル
このページを最初にブックマークしてみませんか?
『ビッグデータ収集・分析の株式会社キーウォーカー』の新着エントリーを見る
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く