Merging Datasets with Common Columns in Google Refine
OUseful.Info, the blog… Trying to find useful things to do with emerging technologies in open education and data journalism. Snarky and sweary to anyone who emails to offer me content for the site. It’s an often encountered situation, but one that can be a pain to address – merging data from two sources around a common column. Here’s a way of doing it in Google Refine… Here are a couple of example
Reconciliation Services for OpenRefine
refine.codefork.com This server provides OpenRefine reconciliation services for the following data sources: VIAF - Virtual International Authority File ORCID - digital identifiers for researchers Open Library - an open, editable library catalog (a project of the Internet Archive) more to come... You can use these services to resolve many types of names (i.e. persons, organizations, geographic regi
特許データのゴミ取り（名寄せ）へのOpen Refineの利用可能性（８）
さて、このデータをOpen Refineに取り込んでいきます。 取り込んだのが、この状態。 ここから、前回と同様にText Facetを選択して、ClusteringでMetaphone3を選択するとこのようになります。 どうしようもないですね。ClusteringでKey Collision系の処理は軒並みダメです。 Key Collision系は英文（Word毎にスペースが入る文）向きで、中国語や日本語のような文には向かないようです。 そこで、nearest neighborのlevensteinを選択してみます。調整値はデフォルトで。 前回の英文と比較するとアレですが、ある程度のレベルで似た文字列の出願人名を名寄せ候補として提示してくれます。後はどれを採用するか個別に選択することになります。まあまあ使えるという結果です。日本語の出願人名の場合にも同様の感覚で使えるでしょう。 さて、一
GRefine RDF Extension
RDF Refine - a Google Refine extension for exporting RDF Main features Reconcile & interlink Reconcile against SPARQL endpoints, RDF dumps Search the Web for related RDF datasets Export RDF GUI for defining the shape of the RDF graph Use you own vocabulary or import existing ones Autocomplete for property and class names Download extension 0.8.0 Getting started… Make sure "extensions" folder exist
Google Refineは神ツールである | wrong, rogue and log
Google Refine 2.0 http://code.google.com/p/google-refine/ Googleのデータクレンジングツール。ローカルwebサーバーで動作するアプリである。なぜローカルで動作するwebサーバにしているかというと、それには理由があるのだ。ほんと、ビックリ。 公開しているデータはタイトルやデータ形式がマチマチで、それを自分のところで統計解析するには、データレンジングをかなりやらなければいけなかった。そのためには、いままでgrepだとかfindだとかのコマンドやPythonスクリプトで半狂乱になって汚れ落としをしていたけれど、このGoogle Refineを使うとそういう問題がアホみたいに簡単に解決する。 例えば、カテゴリカルデータがセルに割り当てられているとする。記入者によってそれが略語だったりフルの名称だったりマチマチである。これを全て一つの文字
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Remove duplicate rows
vlookup in google refine
Fetching URLs From Web Services
StrippingHTML
オープンアクセスリポジトリ推進協会（JPCOAR）
Using OpenRefine
Parse JSON in Google Refine
GREL Functions
GitHub - isaomatsunami/RegularExp-OpenRefine: データの洗浄
Amazon.co.jp: Using OpenRefine (English Edition): Verborgh, Ruben, Wilde, Max De: Digital Ebook Purchas
Extracting, Augmenting, and Updating Metadata in Fedora 3 and 4 Using a Local OpenRefine Reconciliation Service
https://acrl.ala.org/techconnect/?p=3276
https://acrl.ala.org/techconnect/?p=4253
OpenRefine