[B! mysql][search] Makotsのブックマーク

Makots id:Makots

mysqlとsearchに関するMakotsのブックマーク (4)

Ruby on Rails + MySQL で全文検索 - ドワンゴ研究開発ブログ
このエントリでは Ruby on Rails と MySQL を使って日本語の全文検索を行う方法を記述する。Ruby on Rails のバージョンは 2.0.2、MySQL のバージョンは 5.0.67、Tritonn のバージョンは 1.0.12、Hyper Estraier のバージョンは 1.4.10 を使用した。サンプルの文章データとして、あらゆる日本人にとって極めて身近な著作権切れ文章である『ドグラ・マグラ』と『黒死館殺人事件』を利用した。処理のために整形したデータは本エントリに添付しておく。またデータベースへアクセスするコードではマイグレーションを除きできるだけベンチマークを取るようにし、その結果は本エントリの最後に記載する。ページネーション Rails でページネーションを実現する will_paginate という plugin は ActiveRecord に標準でつ
Makots 2009/02/05
全文検索

mysql

rails

search
リンク
Tags: Database schemas
An online tech community is the most exciting place for a software developer to spend their time. It not only offers the chance to work and interact remotely, but also helps in honing one’s own skills and becoming a well-rounded programmer. Whether you are a budding software developer or simply passionate about techno logy, here are the best online software development communities you can join. The
Makots 2007/11/13
folksonomy

tagging

sbm

research
リンク
MySQLでTF-IDFの計算、あと2つのベクトルの内積の計算 (2006-12-19)
本文を形態素分解し、必要な品詞をtfテーブルとdfテーブルに入れる。分析対象となる文書群すべてについてこの処理を行い、各形態素のTF-IDF値を求めて文書をベクトル化する。他の文書ベクトルと内積を比較し、小さい順に「似ている記事」を求めたい (クラスタリングとかは別途)。 HarmanによるTF値の正規化とSparok JonesによるDF値の正規化をする場合のTF-IDF値の計算式は以下のようになる (参考文献): tfidf(i,j) = log2(freq(i,j) + 1) / log2(NoT) * (log2(N / Dfreq(i)) + 1)
Makots 2007/06/26
mysql

search

tf-idf
リンク
MySQL FULLTEXT Ngram : LIKE検索より数十倍高速な、お手軽日本語全文検索について｜blog｜たたみラボ
tatamilab.jp
Makots 2007/05/07
mysql

search

全文検索

tips
リンク
1