ブラウザでマルコフ連鎖を用いた文章を要約できる要約器を作った - 文系プログラマー
ブラウザでマルコフ連鎖を用いた文章を要約できる要約器を作った 作ったもの ブラウザでマルコフ連鎖(Website) hubotでマルコフ連鎖(Twitter) hubotはこんな感じのことを10分毎にツイートしている。 使用したもの 今回、要約器や要約スクリプトを作成するにあたって、markov-chain-kuromojiを作成した。 kuromoji.jsは、mecabと違ってJavaScriptのみで記述されているので、hubotへの組み込みが容易。 ソースコード hubotのスクリプトは次の通り cronJob = require('cron').CronJob MarkovChain = require('markov-chain-kuromoji') Twit = require 'twit' client = new Twit({ consumer_key: process.
kuromoji.jsでmecab-ipadic-NEologdを使う - Qiita
JavaScriptだけで形態素解析ができるkuromoji.jsで、mecab-ipadic-NEologdを使いたいなーと思って、試してみました。 結論 辞書生成はできた 辞書サイズが大きすぎてメモリ馬鹿食いする 読み込みに時間がかかる サーバサイドでの使用ならいいかもしれませんが、クライアントサイドでの利用は難しいかなと思いました。 サーバサイドなら素直にmecab使うほうが楽な気はしますね。 辞書生成方法 追加辞書の用意 ここから追加辞書をダウンロードして解凍します。 ここではmecab-user-dict-seedを追加しようと思います。
kuromoji.jsの辞書に単語を追加する - Qiita
やりたいこと kuromoji.jsを使って、提供されている辞書に単語を追加したい。 環境 OS X Yosemite 10.10.5 手順 mecab, mecab-ipadicをインストール 追加したい単語の辞書用CSVファイルを作る mecab-ipadicのモデルファイルからコストの自動推定をする kuromoji.jsで辞書を作成する 確認 1. mecab, mecab-ipadicをインストール Node.jsでmecab-ipadic-NEologdを使うを参考に、mecabとmecab-ipadicをインストールする。 $ brew install mecab mecab-ipadic xz $ echo '施行期日' | mecab 施行 名詞,サ変接続,*,*,*,*,施行,シコウ,シコー 期日 名詞,一般,*,*,*,*,期日,キジツ,キジツ EOS
textlintで日本語の文章をチェックする
textlintはMarkdownなどテキスト向けのLintツールで、テキスト版ESLintみたいな感じのツールです。 JavaScriptでルールを書けるテキスト/Markdownの校正ツール textlint を作った | Web Scratch 最近azu/JavaScript-Plugin-Architectureという小さな書籍を書いていて、色々簡単に使えるような仕組みを追加しています。 この記事では簡単なtextlintの導入方法について紹介します。 公式サイトには一部ルールを含むオンラインデモが公開されています。 textlint · The pluggable linting tool for text and markdown ドットインストールにてNode.jsのインストール、textlintの利用方法、エディタとの連携などのチュートリアルが公開されています。Node.
kuromoji.jsを使って日本語クローズテスト
クローズテストってものがあるらしい オライリーから出ているインタフェースデザインの実践教室という本を読んでいたところ、文章のユーザビリティをチェックする為のクローズテストについて説明がありました。 簡単に説明すると一定間隔で穴が開いた状態のテキストを読んで、ユーザーが文章の意味をくみ取れるかをチェックする為のテストです。 ある程度の単語が隠れた状態でも伝わる文章を書けという事でしょうか。 詳しくはこちら Testing Content · An A List Apart Article 実装してみよう 先に上げた本の中で訳者が、日本語でUI用途の利用例が見つかれないよーと書いてあったので早速実装してみました。 また、先日からJavaScriptで言語処理100本ノック2015というのに取り組んでいる最中でしたので、kuromoji.js というライブラリを使いJavaScriptでの実装を
kuromoji.js - Webブラウザ上で分かち書き！ MOONGIFT
テキストから意味を読み取るというのは非常に難しく、そのための専用ソフトウェアが存在するほどです。そしてテキスト解析手法の一つとして知られているのが分かち書きです。日本語であればChasenがよく知られています。 kuromoji.jsはそんな分かち書き処理をJavaScriptで行ってしまおうというソフトウェアになります。KuromojiというApache財団のオープンソース分かち書きエンジンをJavaScriptにポーティングしています。 kuromoji.jsの使い方 こちらはデモです。Webブラウザベースで動作しています。nodeでも使えます。 適当な文章をリアルタイムに分かち書きできます。 kuromoji.jsは辞書ファイルをAjaxで取得しています。そのためサイズは大きくなりますが、分かち書きの精度はとても高くなります。サーバサイドで辞書を用意したり分かち書きエンジンを用意する
kuromoji.js使って構文解析した - Qiita
こんにちは、らこです。先日から話題になってるJavaScriptの形態素解析器kuromoji.jsを使って、確率自由文脈文法で構文解析してみました。(注意:アルゴリズムの解説記事 ではない です) 結論 kuromoji.js遊びまくれるのでみんな使おう kuromoji.d.ts書いた 私は型大好き人間なのでTypeScript使ってkuromoji.js使いました。型定義ファイルは自分が使う部分だけエイヤっと自作しました(laco0416/kuromoji.d.ts)。 あと、プロジェクトに↑の自作型定義ファイルを読み込むのにdtsm使いました。tsd使ってたのが馬鹿らしくなるくらい便利です。作者のvvakameさんによるわかりやすい紹介はこちら 確率自由文脈文法とは ちゃんと説明すると長くなりますしうまく説明できる自信もないので、ばっさりカットします。 雰囲気つかむにはここらへんを
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
hubot-middleware-kuromoji
GitHub - takuyaa/kuromoji.js: JavaScript implementation of Japanese morphological analyzer