• はてなブックマーク
  • テクノロジー
  • 使いやすさを重視したHTMLスクレイピングライブラリを作った - 純粋関数型雑記帳
  • Twitterでシェア
  • Facebookでシェア

使いやすさを重視したHTMLスクレイピングライブラリを作った - 純粋関数型雑記帳

テクノロジー カテゴリーの変更を依頼 記事元:tanakh.hatenablog.com
適切な情報に変更
350 usersがブックマーク コメント42

    記事へのコメント42件

    • 注目コメント
    • 新着コメント
    オーナーコメントを固定しています
    tanakh
    オーナー tanakh (´･_･`)

    2020/02/13 リンク

    その他
    kkobayashi
    kkobayashi Xpathじゃダメなの？

    2020/02/13 リンク

    その他
    rna
    rna ノードツリーのパターンの記法としては RELAX NG compact syntax とかあるけど、割とマイナーなので学習コストかかっちゃうかなー。

    2020/02/13 リンク

    その他
    criticabug
    criticabug プログラミングできない人もPattern作れそうで良い。一つのページからいくつも情報を抜き出すときXPathはしんどい。

    2020/02/14 リンク

    その他
    gfx
    gfx なるほと構造に対して一つ一つもCSSセレクタで抜くよりも直接構造パターンで一度だけマッチさせればいいと。たしかに。

    2020/02/13 リンク

    その他
    mojimojikun
    mojimojikun 細かいことをしようとする(attributeがあったりなかったりするとかattributeに複数要素入ってるとかがある)とどうなるかってのがちょっと怖いけどこういう書き方で表現できるのは人間に優しくて良さげ

    2020/02/13 リンク

    その他
    riocampos
    riocampos CSSセレクタじゃなくXPathで指定すればいいやん。まあXPath学習の初期コストはかかるけど、その後の効率は高いよ。

    2020/02/13 リンク

    その他
    t_f_m
    t_f_m 他のブコメでも既出だけどXPath使えるスクレイピングライブラリはないんかしら

    2020/02/13 リンク

    その他
    megumin1
    megumin1 この方の書く記事はいつも素晴らしいですね。オリジナリティがあり、かつセンスも実装力もあるという点で、はてぶで見かける記事の中では群を抜いてますね。いつもありがとうございます。

    2020/02/13 リンク

    その他
    umbrellap
    umbrellap 発想の転換。使いやすそう

    2020/02/13 リンク

    その他
    オーナーコメントを固定しています
    tanakh
    オーナー tanakh (´･_･`)

    2020/02/13 リンク

    その他
    ishideo
    ishideo scraping][easy-scraper]

    2020/02/28 リンク

    その他
    tmatsuu
    tmatsuu 個人的にはXPath使っちゃうけど、ツリーマッチングベース面白いね。

    2020/02/24 リンク

    その他
    s_hiiragi
    s_hiiragi テンプレートエンジンによるデータからテキストへの変換の逆変換みたいな感じ

    2020/02/14 リンク

    その他
    sucelie
    sucelie XPathがブラウザで拾えるから学習もしなくても良いと思うんだが・・・

    2020/02/14 リンク

    その他
    criticabug
    criticabug プログラミングできない人もPattern作れそうで良い。一つのページからいくつも情報を抜き出すときXPathはしんどい。

    2020/02/14 リンク

    その他
    ms2sato
    ms2sato このライブラリ的にはHTML片のパターンマッチがしたくてXPath/セレクタなどの抽象的記述を避けたい思想と受け止めた。 ブコメが古い技術名出してくる人がいたり、素直に感銘受けている人が混ざっていて興味深い。

    2020/02/14 リンク

    その他
    ruicc
    ruicc 関数は合成出来るけどパターンは合成できないものだろか

    2020/02/13 リンク

    その他
    threetea0407
    threetea0407 面白い。SQLみたい。

    2020/02/13 リンク

    その他
    megumin1
    megumin1 この方の書く記事はいつも素晴らしいですね。オリジナリティがあり、かつセンスも実装力もあるという点で、はてぶで見かける記事の中では群を抜いてますね。いつもありがとうございます。

    2020/02/13 リンク

    その他
    versatile
    versatile XSLT ...

    2020/02/13 リンク

    その他
    surumedaka
    surumedaka rustちゃん

    2020/02/13 リンク

    その他
    mainyaa
    mainyaa おもしろ！

    2020/02/13 リンク

    その他
    gabuchan
    gabuchan 独自の正規表現みたいなもんかという理解

    2020/02/13 リンク

    その他
    k12u
    k12u XPathってそういう風に使えたのか。違う勉強になってしまった。

    2020/02/13 リンク

    その他
    itchyny
    itchyny JSXを見たときの感動に近いものを覚える

    2020/02/13 リンク

    その他
    mizchi
    mizchi 使いやすさは主観的な指標で定量化できないのでこういうときのアピールに使っちゃいけない言葉だと思う

    2020/02/13 リンク

    その他
    tettekete37564
    tettekete37564 ブラウザの機能で XPath やセレクタをコピー出来る昨今あまりメリット感じないかなあ。

    2020/02/13 リンク

    その他
    p1ass
    p1ass あ～この指定の仕方良さそう

    2020/02/13 リンク

    その他
    colic_ppp
    colic_ppp ブコメも参考になる

    2020/02/13 リンク

    その他
    asuforcegt
    asuforcegt これはすごい！目から鱗だ！

    2020/02/13 リンク

    その他
    sogaoh
    sogaoh 使ってみたい

    2020/02/13 リンク

    その他
    vvakame
    vvakame はぇ〜〜〜はちゃめちゃクソ賢い… 実装力ある…さすが…

    2020/02/13 リンク

    その他
    fashi
    fashi 試してないけど似たような構造がいっぱいあるときはどうするのだろう。取得してからよりわけるのかな

    2020/02/13 リンク

    その他
    razokulover
    razokulover 発想面白い

    2020/02/13 リンク

    その他
    zetta1985
    zetta1985 XPath使うライブラリはすでに存在する（libxmlのラッパーとか）けど、これはこれでわかりやすそう

    2020/02/13 リンク

    その他
    aox
    aox マウスで使えるんですかね

    2020/02/13 リンク

    その他
    uunfo
    uunfo 面白そうでよさそう。既存のスクレイパーのめんどくささと直観的でなさは書かれてる通りだと思う。／xpathでもcss selectorと大差ないかと／「部分集合」とかの独自用語が謎

    2020/02/13 リンク

    その他
    riocampos
    riocampos CSSセレクタじゃなくXPathで指定すればいいやん。まあXPath学習の初期コストはかかるけど、その後の効率は高いよ。

    2020/02/13 リンク

    その他
    Silica
    Silica スクレイピング自体はよくやるけど、他所のライブラリ使ったことなかったけど、こういう感じの世界なのか

    2020/02/13 リンク

    その他
    hitode909
    hitode909 おもしろい

    2020/02/13 リンク

    その他

    注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

    アプリのスクリーンショット
    いまの話題をアプリでチェック！
    • バナー広告なし
    • ミュート機能あり
    • ダークモード搭載
    アプリをダウンロード

    関連記事

    使いやすさを重視したHTMLスクレイピングライブラリを作った - 純粋関数型雑記帳

    TL:DR レポジトリ https://github.com/tanakh/easy-scraper ドキュメント 背景 このところ訳あってRust...

    ブックマークしたユーザー

    • techtech05212023/05/14 techtech0521
    • pirorongo212021/07/12 pirorongo21
    • hate_nao2021/03/13 hate_nao
    • baboocon198204192021/01/12 baboocon19820419
    • thotentry_hatebu1972020/12/11 thotentry_hatebu197
    • emanon0012020/07/27 emanon001
    • moccos_info2020/07/11 moccos_info
    • heatman2020/04/03 heatman
    • Windymelt2020/03/25 Windymelt
    • bluevinyl2020/03/09 bluevinyl
    • toshiharu_z2020/03/01 toshiharu_z
    • kenichiice2020/03/01 kenichiice
    • ishideo2020/02/28 ishideo
    • chck12452020/02/24 chck1245
    • sh199107112020/02/24 sh19910711
    • boxphere2020/02/24 boxphere
    • tmatsuu2020/02/24 tmatsuu
    • sudo_vi2020/02/23 sudo_vi
    すべてのユーザーの
    詳細を表示します

    同じサイトの新着

    同じサイトの新着をもっと読む

    いま人気の記事

    いま人気の記事をもっと読む

    いま人気の記事 - テクノロジー

    いま人気の記事 - テクノロジーをもっと読む

    新着記事 - テクノロジー

    新着記事 - テクノロジーをもっと読む

    同時期にブックマークされた記事

    はてなブックマーク

    公式Twitter

    はてなのサービス

    • App Storeからダウンロード
    • Google Playで手に入れよう
    Copyright © 2005-2024 Hatena. All Rights Reserved.