エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
マルコフ連鎖から卒業しようと思っている話 - らこらこブログ
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
マルコフ連鎖から卒業しようと思っている話 - らこらこブログ
今人工無能botである機械化らこ( @la0c )を稼働している。 現在はコーパスをlaco0416のタイムラインのツ... 今人工無能botである機械化らこ( @la0c )を稼働している。 現在はコーパスをlaco0416のタイムラインのツイートから得て、形態素解析を行った後にトライグラムのテーブルに保存して、 文章生成はマルコフ連鎖によって行っている。マルコフ連鎖を選んだのは実装が楽でわかりやすいからだったけども、マルコフ連鎖では形態素の情報(品詞など)が失われ、単なる表現文字列の前後関係だけで生成されるため、生成される文全体の構文が破綻する場合がほとんど。 これはせっかく形態素解析したのに勿体無いということで、構文解析のアルゴリズムを取り入れて、日本語として構文がまともな(とりあえずは簡単のために、まともな日本語=文脈自由文法で解釈できるという定義にしておく)文章を生成できるようにしようと思い立った。 というわけで自然言語処理の沼に足を踏み入れようとしているわけだけど、最初に検討したのがまず文脈自由文法と