Perl, Go, Q4M and Groonga (part 0) : D-7 <altijd in beweging>
まだ道半ばなんだけど、GroongaをGo+Perlなフロントエンドから使うシステムを動かしはじめている。 今回はとりあえず現時点での状態をざっくり書き出してみる。まだ本番化はしてないが、とりあえず本番環境からデータの挿入・削除ができるところまでつなぎ込みはした。最終的に全面的に本番化したらまたまとめ直します。 まずデータを突っ込む部分は慣れもあるのでより素早くデータの整形をしたりテーブルスキーマとかを変更したりするためにPerlでワーカーをさくさくっと書いた。ワーカーはQ4Mでデータを受け取り、データを整形してMroonga経由でデータを挿入。仕組みができたところでGroongaが我々が求めているデータ量をハンドリングできるかどうか検証するために全力で平均1行4KB~10KBくらいのデータをmroonga経由で○億件挿入してみた。この挿入処理中様々な地雷を踏んだので、kazeburoさん
InnoDB純正の全文検索エンジンInnoDB FTS
2011-07-28 InnoDB純正の全文検索エンジンInnoDB FTS つい先日、MySQL-5.6.3-labs版がリリースがされました。この中にはInnoDBで動作する全文検索エンジン"InnoDB FTS"が含まれています。これまでは、MySQLとInnoDBの組み合わせで全文検索を行うためにはサードパーティの製品(mroonga 等..)が必要でしたが、これでズバっと選択肢が広がることになります。しかもInnoDBの開発チームが自ら開発した"純正の"エンジンということですから、これは大きな期待が持てます。 いったいどのような製品に仕上がっているのか、ざっくり記事やソースを読んで得た感触を述べてみたいと思います。 written by daijiro.mori どんなエンジンか? エンジンの概要については、 Overview and Getting Started with I
【第四回solr勉強会】4.全文検索エンジンgroongaについて | 勉強会ログ
一定期間更新がないため広告を表示しています
全文検索 Groonga を使って perl で Google Suggest ならぬ Groonga Suggest を作る - ワタブログ
2011年07月10日12:09 全文検索 Groonga を使って perl で Google Suggest ならぬ Groonga Suggest を作る カテゴリ Tweet 前回もちょっと書いた全文検索 Groonga がすごい便利なので、そのことが少しでも伝わるように、 例によって日本郵便が提供してる郵便番号データを使って、Google Suggest 風の何かを作ってみました（伝わらないとか言わないで！）。あと Yappo さんがやられている優良バインディング案件が待ち遠しいです。 今回使うものは全部 https://github.com/wata/Groonga-Suggest に。 1. DBの作成作成するテーブル、カラムはこんな感じ。 table_create --name KEN_ALL --flags TABLE_HASH_KEY --key_type UInt32
groonga(単体サーバ)で大量データロード - WebService::Blog->new( user => ’hide_o_55’ )
groonga(単体サーバ)で大量のデータをロードする場合はファイルにloadコマンド+データを書いて、標準入力にリダイレクトしましょう。 データはJSON形式なのでこんな感じで適当に作れます。 use strict; use warnings; use utf8; use JSON qw(encode_json); my @load_data; my $table_name = "Foo"; #do something my $json_data = encode_json(\@load_data); print <<"__EOS__"; load --table $table_name $json_data __EOS__ あとは、以下の様にすればデータをロードできます。 スタンドアローンモード groonga /path/to/db < /path/to/data クライアントモード
Amon2 + Groonga + HTML5 + Starman で日本人AV女優の動画が簡単に探せるエロサイト作った - ワタブログ
2011年07月06日06:25 Amon2 + Groonga + HTML5 + Starman で日本人AV女優の動画が簡単に探せるエロサイト作った カテゴリ Tweet その名も「Eroimon」。現時点では300名以上のAV女優さん、トータル2000件ほどの動画情報がデータベースに保存されています（今後どんどん増える予定）。 Eroimon （18歳未満の方はご遠慮ください） Eroimon が出来ることは、 AV女優名やキーワードで動画を検索AV女優一覧ページでお気に入り女優さんを探したりも気に入った動画があればプレイリストに保存 と今のところシンプルｗなものになってます。動画そのものは海外の動画サイトにあがっているものが主です。海外の動画サイトにあがっている動画を日本語で検索→観に行くという流れです。 作った経緯というか最初のモチベーションみたいなものを話すと、既存のエロサイ
Fast fulltext search for all languages on MySQL
About Mroonga Mroonga is a storage engine for MySQL. It provides fast fulltext search feature for all languages including Chinese, Japanese and Korean to all MySQL users. Mroonga was called Groonga storage engine. Characteristic The latest release 13.05 is the latest release. It had been released at 2023-08-02. Install The latest posts Mroonga 13.05 has been released! (2023-08-02) Mroonga 13.01 ha
groonga ドキュメント — groonga v0.1.4 documentation
Skip to main content Back to top Ctrl+K GitHub Twitter Blog Groonga documentation# News 1. Characteristics of Groonga 1.1. Groonga overview 1.2. Full text search and Instant update 1.3. Column store and aggregate query 1.4. Inverted index and tokenizer 1.5. Sharable storage and read lock-free 1.6. Geo-location (latitude and longitude) search 1.7. Groonga library 1.8. Groonga server 1.9. Mroonga st
groongaをCentOS5.5のMySQL5.5にインストールする - ドラあり！*ドラゴンに挑むアリの物語 ** Python使いの日々
rpmレポジトリを更新します。 # rpm -ivh http://packages.groonga.org/centos/groonga-repository-1.0.0-0.noarch.rpm # yum update追加されたものを見てみましょう。 # yum list | grep MySQL MySQL-client.x86_64 5.5.8-1.rhel5 groonga MySQL-client-community.x86_64 5.1.53-1.rhel5 groonga MySQL-devel.x86_64 5.5.8-1.rhel5 groonga MySQL-devel-community.x86_64 5.1.53-1.rhel5 groonga MySQL-embedded.x86_64 5.5.8-1.rhel5 groonga MySQL-embedded-
ゆーすけべー日記
サキとは彼女の自宅近く、湘南台駅前のスーパーマーケットで待ち合わせをした。彼女は自転車で後から追いつくと言い、僕は大きなコインパーキングへ車を停めた。煙草を一本吸ってからスーパーマーケットへ向かうと、ひっきりなしに主婦的な女性かおばあちゃんが入り口を出たり入ったりしていた。時刻は午後5時になる。時計から目を上げると、待たせちゃったわねと大して悪びれてない様子でサキが手ぶらでやってきた。 お礼に料理を作るとはいえ、サキの家には食材が十分足りていないらしく、こうしてスーパーマーケットに寄ることになった。サキは野菜コーナーから精肉コーナーまで、まるで優秀なカーナビに導かれるように無駄なく点検していった。欲しい食材があると、2秒間程度それらを凝視し、一度手に取ったじゃがいもやら豚肉やらを迷うことなく僕が持っているカゴに放り込んだ。最後にアルコール飲料が冷やされている棚の前へ行くと、私が飲むからとチ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
