Google N-gram V.S. Baidu N-gram 〜ケータイウェブは本当にエロいのか？〜 - nokunoの日記
近年検索エンジンのBaiduは不自然言語処理コンテストなるものを開催し、今日が締切のはずだったのだが24時間延長されたらしいことを聞いてBaiduコーパスをダウンロードしたid:nokunoは仕事帰りの電車で思いついたアイデアを30分ほどで実装してみたところそれなりに面白い結果がでたので応募してみることにした。そもそもBaiduのコーパスはエロいというのを最初に誰かが言ったら@mhagiwaraさんがこんなツイートをしたことに話は遡る。インターネットがエロいのは誰でも知っている。けれど、ケータイウェブが特別にエロいのか？ については寡聞にして知らなかったため、検証してみることにした。今回はケータイウェブがエロいかどうかを検証するため、以下のコーパス（N-gramデータ）を相互に比較することとした。Baidu N-gram（Baidu絵文字入りモバイルウェブコーパス） 今回のメインターゲット
ことば好きエンジニア必読！Baidu不自然言語処理コンテスト | Baidu Japan Blog
こんにちは、Baiduプロダクト事業部の水野貴明＆上之山奈津希です。 今日は、Baiduが開催する のお知らせです。 「渋谷なう」「w」「ちょっっっ」「乙！」「ｧﾀｼは・・・」など、Twitterの流行もあって、インターネット上でこういった言葉を目にしたり、使ったりする機会が増えた方も多くいらっしゃるのではないでしょうか。 検索サービスを提供するBaiduでは、このような「正しいとは言えないかもしれないけれど、みなさんに使われている日常言語」を「不自然言語」と呼び、「不自然言語処理」に取り組んでおります。しかし、実はこの「不自然言語」は、Baiduにとっては厄介な存在です。そこで、ことば好きエンジニアのみなさんと一緒にこの不自然言語に取り組むべく、「Baidu.jp不自然言語処理コンテスト」開催をいたします！ グランプリ賞金10万円を用意して、みなさまのご応募をお待ちしております。また、
Baidu.jpは、日本でも受け入れられるか？──百度取締役に聞く (1/5)
滞在して遊べる検索エンジン 「百度はコンテンツポータルに見えるかも知れないが、あくまで検索にこだわり続けてきた。そういう部分が中国のユーザーに支持されている部分であり、日本においても同じ」と舛田氏は語る。 よく「百度はGoogle型かYahoo!型のどちらか」と聞かれるそうだが、舛田氏によると少なくともコンテンツポータル的なYahoo!型ではなく、百度自らコンテンツを持つことは考えていない。 「情報を自動収集しユーザーに届けるという意味ではGoogleに近いが、ポリシーは違う。Googleは検索画面にはユーザーを長く滞在させないという考えだが、逆に百度では長く滞在させることも考えている。画像検索の結果を見比べたりなど、検索で遊んでもらいたい」 滞在時間やPVを上げる工夫が、トップページに表示されている「話題の画像」や「話題の動画」などのサービスというわけだ。 「中国の百度はコミュニティーを
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
絵文字を「符号」として処理する難しさ～日本のモバイルウェブのカオスぶり バイドゥ「絵文字の意味検索」ができるまで（1）
Baidu Japan（バイドゥ株式会社）
