ホワイトペーパー： Solrを利用した多言語検索の最適化 | Basis Technology
テキスト検索の精度を左右する自然言語処理パイプラインのプロセスを概観した後、多言語検索アプリのために Solr をカスタマイズする方法を具体的に説明します。さらに、精度が高くスケーラブルなソリューションを提供するために、多言語検索エンジンの採り得る３種のアーキテクチャの長所と短所を議論します。多言語検索アプリのベースとなる検索エンジンは複数の言語間でシームレスに動作することを期待されます。本ホワイトペーパーでは、テキスト検索の精度を左右する自然言語処理パイプラインのプロセスを概観した後、多言語検索アプリのために Solr をカスタマイズする方法を具体的に説明します。さらに、精度が高くスケーラブルなソリューションを提供するために、多言語検索エンジンの採り得る３種のアーキテクチャの長所と短所を議論します。 ＊ 右の図をクリックし、ダウンロードしてください。 INTRODUCTION Today
Lazy Refactoring
On the first Tuesday of each month our Boston office hosts Boston.rb’s project night. This is an opportunity for the community to get together and hack away on each other’s projects. At a recent project night we encountered an interesting problem. We went through several iterations, before we found a solution that satisfied us. Initial problem We’re implementing the ability to search events. Searc
Omniref
Omniref is Closed As of January 2017, we've shut down Omniref.com. Thank you for your support over the years. I've preserved the most popular blog posts that I wrote for the site: Ruby Garbage Collection: Still Not Ready for Production What's the most popular Ruby library? Writing Extensions for Firefox is Barely Worth the Trouble Programmers are hipster librarians Making Ruby Faster Matz at RubyC
Adding search and autocomplete to a Rails app with Elasticsearch - Blog - Shelly Cloud
This post will show a fast and easy way to add search to your Rails application. We will use Elasticsearch, an open source search engine, and Searchkick, an easy-to-use gem that integrates Elasticsearch with Rails. Installing Elasticsearch To get started, you need to install Elasticsearch. Mac users can use Homebrew for that - simply run brew install elasticsearch and follow the instructions. Alte
Damn Cool Algorithms: Levenshtein Automata - Nick's Blog
Posted by Nick Johnson | Filed under python, tech, coding, damn-cool-algorithms In a previous Damn Cool Algorithms post, I talked about BK-trees, a clever indexing structure that makes it possible to search for fuzzy matches on a text string based on Levenshtein distance - or any other metric that obeys the triangle inequality. Today, I'm going to describe an alternative approach, which makes it p
自然言語処理と AI(PDF)
自然言語処理と AI 東京大学大学院 工学系研究科 鶴岡 慶雅 概要 • 自然言語処理と AI • ゲーム AI アルゴリズム – Comparison training • コンピュータ将棋、ミニマックス探索、評価関数 – Monte Carlo Tree Search (MCTS) • コンピュータ囲碁、モンテカルロ法、多腕バンディット – CounterFactual Regret Minimization (CFR) • ポーカー、ゲーム理論、ナッシュ均衡 • まとめ 自然言語処理と AI • 人工知能（Artificial Intelligence, AI） – 知的な情報処理システムを作る – 推論、知識表現、プランニング、学習、自然言語処理、 認識 • ゲーム AI – ゲームの思考エンジン • オセロ、チェス、将棋、囲碁、ポーカー、StarCraft, etc
TechCrunch | Startup and Technology News
Autonomous trucking company TuSimple last week successfully completed a fully autonomous semi-truck run on public roads in China without a human present in the vehicle and without human intervention. Shoppable Business wants to make it easier for businesses in the Philippines to source and procure branded products and other inventory, with an emphasis on making sure products are authentic. The B2B
From Solr to elasticsearch - Government Digital Service
https://gds.blog.gov.uk/2012/08/03/from-solr-to-elasticsearch/ Search is right at the centre of GOV.UK. It’s the main focus of the homepage and it appears in the corner of every single page. Many of our recent and upcoming apps such as licence finder also rely heavily on search. So, making sure we have the right tool for the job is vital. Recently we decided to begin switching away from Solr to el
Z80 Routines:Math:Square root - WikiTI
Size Optimization This version is size optimized, it compares every perfect square against HL until a square that is larger is found. Obviously slower, but does get the job done in only 12 bytes. ;------------------------------- ;Square Root ;Inputs: ;HL = number to be square rooted ;Outputs: ;A = square root sqrt: ld a,$ff ld de,1 sqrtloop: inc a dec e dec de add hl,de jr c,sqrtloop ret Small and
情報検索の基礎 - 共立出版
あなたが普段使っている検索エンジン、 その真髄は本書の中にある！ 近年の情報爆発にともなって、膨大な情報から必要な情報を探し出す検索技術が、ますます重要になり、また大きく変化、発展してきた。本書は、従来の古典的な情報検索から、最近のウェブの情報検索までの基礎をわかりやすく扱った、網羅的で最先端の入門書である。最初に、文書の前処理、インデックス付け、逆インデックス、重み付け、スコア付け、検索システムの評価といった、情報検索の基礎、特にサーチエンジンに関わる話題をとりあげる。次に、より先進的な話題として、適合フィードバックやクエリー拡張を用いた検索の強化手法、構造化された文書からの情報検索、文書のスコア付けにおける確率論の応用といった話題をとりあげる。その後に、カテゴリー集合への分類問題、クラスタリングの問題といった、様々な形の機械学習と数値手法を取り扱う。最後に、ウェブサーチの問題を扱う。情
Looking for search? Find it on Google App Engine
News, notes, tips and tricks from the Google App Engine Team For almost as long as we can remember, full text search has been one of the top feature requests for Google App Engine. Since our talk at Google I/O last year, we’ve been hard at work getting search ready for our developers, and today we’re happy to announce that we are making it available as an Experimental feature. The Search API, like
再現率を上げる - 取りこぼしを減らす技術について - Solr, Python, MacBook Air in Shinagawa Seaside
大手SIから「検索ヒット率」が低くて困っていると言われたので 再現率を上げればよいのかと資料作って行ってみたら 実は上げたいのは精度の方だったという笑えない話で 作った資料がボツになったのでここに上げときます。 検索エンジンで取りこぼしを減らす(再現率を上げる)技術 ノーマライズ 全角半角、大文字小文字、ー有り無し等の表記揺れ対応 ｺﾝﾋﾟｭｰﾀｰ:コンピュータ 、jal:ＪＡＬ ステミング 活用形対策 買う、買った、買え -> 買う、cars -> car 基本形( 語幹 )への変換 サブストリング 文字列の部分一致 「データ」 で 「株式会社NTTデータ」 をヒットさせる シノニム 同意語、別名 マック ＝ マクドナルド ＝ マクド 副作用 取りこぼしを減らす施策を実施した場合には再現率が上がる一方で、誤抽出が増えるため精度は下がる。 京都知事 : 東京都知事 ラーメン : いつものレ
『入門 ソーシャルデータ』で日本語を扱うために - Men talking over coffee with smoking Ark Royal.
追記（2012/09/17）：macab-pythonをMac OSX 10.7 Lion, Python2.7にインストールする。 入門 ソーシャルデータ ―データマイニング、分析、可視化のテクニック 作者: Matthew A. Russell,奥野陽（監訳）,佐藤敏紀（監訳）,瀬戸口光宏（監訳）,原川浩一（監訳）,水野貴明（監訳）,長尾高弘出版社/メーカー: オライリージャパン発売日: 2011/11/26メディア: 大型本購入: 18人 クリック: 779回この商品を含むブログ (42件) を見るオライリーの『入門 ソーシャルデータ』を購入したが、p.8で躓いた。 本書の内容だけでは、「英語は文章が単語ごとにスペースで区切られているが、日本語はそうではない」という特性を処理できないのです。 まずぶちあたった問題はMac 0S X 10.6のコンソールでのPython対話型インタプリ
AnalyzersTokenizersTokenFilters - Solr - Apache Software Foundation
This page exists for the Solr Community to share Tips, Tricks, and Advice about Analyzers, Tokenizers and Filters. Reference material previously located on this page has been migrated to the Official Solr Reference Guide. If you need help, please consult the Reference Guide for the version of Solr you are using. The sections below will point to corresponding sections of the Reference Guide for eac
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
5 Minutes of Javascript
Fulltext search with Node.js and elasticsearch
Elasticsearch Platform — Find real-time answers at scale
IBM Developer