「Yahoo!知恵袋」の不快な投稿、見えないところへ わずか1日で6億件を処理 ヤフー社内で何が起きたのか (1/2) - ITmedia NEWS

「Yahoo!知恵袋」の不快な投稿、見えないところへ わずか1日で6億件を処理 ヤフー社内で何が起きたのか（1/2 ページ） Q＆Aサービス「Yahoo!知恵袋」は長い間、不快な内容だが規約違反ではなく削除できない「グレーな投稿」に悩まされてきた。解決するための処理には約9カ月かかると思われていたが、わずか1日強で完了したという。何が起きたのか。 老舗Q＆Aサービス「Yahoo!知恵袋」は、長い間あるものに悩まされてきた。規約違反ではないため削除できないが、見る人を不快にさせる内容の“グレーな投稿”である。これまで社内でパトロールを行うなど対応してきたが、同サービスの投稿は約6億件にものぼり、全てのグレーな投稿を見つけ出すことは難しかった。スーパーコンピュータ「kukai」（クウカイ）が導入されるまでは。

[htmikan]

知恵袋とAmazonのQ&Aにある、質問に対して「分かりません」的な回答も消して欲しい。アカウント停止にして欲しい程。あれは何なのだろうか。分からないなら書き込むなと言いたい。

[miketaro1234]

「よくわかりませんが…」も役に立たないので消して欲しい。/「日本語の体をなしてない」のは全消しで良いだろうと。

[wata_d]

望ましい回答も自動生成されるようになり、やがて質問も生成され初めて人類が滅んだ後も続くサービスに

[razokulover]

これはさすがに笑う “グレーな投稿の中には日本語の体をなしていないものもある。形態素解析ではうまくいかなかった”

[fukken]

知恵袋で「わかりません」と回答するのは回答するとポイントがもらえるから。Amazonは質問がメールで飛んでくるので回答しないといけないように感じるから。どっちもサービス設計の問題。

[srgy]

21世紀の弘法は筆を選ばずにグレーな投稿を選ぶのか

[pixmap]

どれどれと思って知恵袋見に行ってみたところ、相変わらずいかがわしいだけのつまらん投稿が目についたんだけど、ヤフー知恵袋内で一体何が起きたたのか。

[ryuzi_kambe]

もしかしたらですけど、京都弁でしゃべりはったらそんなとこ通過できてしまう気がするんで、そこにどうにもできん節穴があらへんか。

[strow0343]

Twitterの凍結みたいに誤判定で処理されたものも結構ありそうだが

[kosui]

あれでも減っているのか。

[takahiro4]

蓮舫に教えてあげたい

[rgfx]

「グレーな投稿の中には日本語の体をなしていないものもある。形態素解析ではうまくいかなかった」そこを指摘するのはやめて差し上げろ

[summoned]

わかりませんって糞回答も問題だけど、デタラメなこと堂々と書くバカが一番厄介

[sds-page]

これからは縦読みが流行る

[kentanakamori]

いやいや、全然まともに判定できてないから。ほんと真面目な人がブロックされたりしてるから。ヤフークオリティ最低。

[rteeeeee]

「蓄積された約6億件の投稿をまとめて処理するには、既存のサーバを使った環境では約9カ月かかるという試算が出たのだ。そこで清水さんは考えた。「kukaiの出番だ」と」

[kana0355]

“kukaiのリソースの半分（40nodes／80GPU）を使用し、投稿判定システムを起動。すると、完了までにかかった時間は1日強。”

[meganeya3]

今すぐ対応するための手順を知りたい相手に概念理解のページを案内する頭のいいひとのanswerは白なのかグレーなのか

[gui1]

弘法にも筆の誤り(´・ω・｀)

[Hamukoro]

空海強そう

[outdoor-kanazawa]

仕事中にYahoo!知恵袋のエッチな相談を読むのが日課なので、そのあたりは消さないでね。ムンムーン蒸れ蒸れ脇の下〜♪

[akanama]

「期待を込めて★5です。」

[tanakh]

あっ某社のｽﾊﾟｺﾝの話じゃん！！！(´･_･`)

[ebo-c]

6億件て。仮に10万ユニークアカウントでも平均6,000件。bot投稿の練習場にでもなってるのでは

[kura-2]

yahooゴミ袋

[adsty]

グレーな投稿の判定技術とスーパーコンピュータ「kukai」の導入。

[mikuti2]

”Twitter上のツイートと、それに対する返事（リプライ）をペアにしたデータ数千万件を使った学習モデルも作成”。ビッグデータって、何に役立つか分からんなぁ。

[sukekyo]

一方はてなはidコールを辞めた

[moodyzfcd]

"ざっくり言って、4億円くらい" "ExaScalerさんの液浸冷却システム" "80基のXeonと160基のNVIDIA｢Tesla P100｣" https://www.businessinsider.jp/post-100486

[spade77]

変なやつ、多いからな知恵袋は。問題は不快な投稿を処理する仕事をしてる人の精神が病まないかが問題だ。前にグリーの削除屋を求人募集してたタウンワークを読んだが、求人広告見ただけでゾッとした。

[cardamom]

これは凄いな。スパコン凄い。やっぱり世界一を目指す価値はあるよね。

[buu]

質問への回答をAIで自動化してくれ。

[tick2tack]

“日本語の体をなしていないものもある。形態素解析ではうまくいかなかった” ww

[hatebutabooboo]

Yahoo!知恵袋を消してほしい。

[Wafer]

汚物は消毒だー！

[Tora1014]

何が残るというのか

[braitom]

スパコン入れて演算時間の問題を解決した話。すごい。費用対効果あったのだろうか。

[hackapellmanda]

おー、このビジュアルは、、

[abababababababa]

誤判定の割合も見守りたい

[regularexception]

なんかすごい技術革新があったのかと思ったが、わりと力業だった