徹底攻略PDFオープンデータ。PDFMinerで始めるPDFテキスト分析。 - Qiita
紹介 オープンデータは、 政府データを、全ての人が自由に加工し、自由に再配布し、自由に商用利用できるようにしていこうとする政治活動です。 現在、政治の透明性や経済の活性化の観点から注目されており、 日本政府も実際にデータを出し始めています。 -> 参考サイト：Open DATA METI | 経済産業省のオープンデータカタログサイト ただし、日本のオープンデータの問題として、 ☆１のオープンデータが出てくるケースが多い事が挙げられます。 オープンデータは、そのオープン性により５つ星で評価されます。 ☆１のオープンデータ、つまりPDFは、 構造化データではない為に最もクローズドとされています。 しかし、技術に疎い公務員の方に機械可読性の重要性を説くことは難しく、 それを理解して貰えたとしても機械可読性の為の予算を割り振って貰えるかは微妙です。 現実問題として、PDFに対峙する必要があるのです
自治体のオープンデータを使って タダ働きした話
自治体のオープンデータでWebアプリを作ったので、一連の流れと作り方（技術的な話）。自分の地域でも公開されているので人様に役立つ何かを作りたい、自身が不便なので何とかしたいと思ってる方の参考になれば幸いです。 オープンデータ？ 皆さんはオープンデータってご存じですか？ 色んなデータを著作権などの制限なし*1で出して、｢まぁ使ってよ｣って商用非商用 関わらず使えたりするようなもの。 一部の企業や機関、政府（○○省）も出していますが、最近は（政府の方針で？）地方の自治体で流行っていて、色んな県や市が、市民の生活向上、ひらかれた行政をアピールする為にデータを公開しています。 *1 データによりライセンス形式は変わります。自治体のデータは出典元を表記するライセンスの物が多い。 どんなデータなの？ 自治体で良く公開されているのは、こんな感じのデータ。 位置情報（文化財、名所、AED、公共施設、防
Open DATA METI | 経済産業省のオープンデータカタログサイト
本サイトは経済産業省がオープンデータを実践するために設置した試験サイト（β版）です。本サイトは、データ活用に関心がある企業、NPO、個人等の方々から色々な意見をいただくことで、少しでも使い勝手の良いサイトにしていくとともに、個人情報等に配慮した上で、経済省のみならず政府全体におけるオープンデータ推進の検討に活用させていただくことも考えております。そのため、本サイトでは、ユーザーの方々から様々な意見や要望をいただき、対して様々な意見や要望をいただく仕組みの一つとして、「DATA METI活用パートナーズ」を設置しております。この「DATA METI活用パートナーズ」の概要と申込についてはこのページのとおりとなりますので、御関心のある方は是非ご覧下さい。 なお、いただいたコメントを踏まえ、柔軟な修正を逐次していくことを考えております。そのため、利用規約も含め、予告無く本サイトは変更される可能性
DATA GO JP/open data
データセット データセットとは、ファイルやURLなどの「オープンデータ」が登録された入れ物を指します。 データポータルでは、複数の切り口からデータセットを探すことができます。
オープンデータ | OpenGovLab
日本におけるインターネットを活用して開かれた政府（オープンガバメント）の実現を目指し、さまざまな実証を行っているサイトです。オープンガバメントに関するさまざまな情報の収集、提供も行っています。Open Data オープンデータ 政府や公的機関ではそれぞれのが保持するデータは原則オープンとして積極的な公開を進めています。具体的にはデータの2次利用を妨げないライセンスを基本とし、機械判読式データやAPIの整備などウェブを通じて手軽にデータのダウンロードや利用ができるような環境を目指しています。 オープンデータの推進によって政府の透明性を高め、また、民間活動の支援につながるなどの効能が期待されています。
オープンデータ＆公開データのまとめ - NAVER まとめ
サービス終了のお知らせ NAVERまとめは2020年9月30日をもちましてサービス終了いたしました。 約11年間、NAVERまとめをご利用・ご愛顧いただき誠にありがとうございました。
クローラー／スクレイピング本がざくざく - プログラマでありたい
2015年8月末に、クローラー／スクレイピング本が2冊同時に発売です。Python版メインのものとJavaScript版メインのものです。なかなか市場のニーズ突いてきていますね。 実践 Webスクレイピング&クローリング-オープンデータ時代の収集・整形テクニック 作者: nezuq,東京スクラッパー(協力)出版社/メーカー: マイナビ発売日: 2015/08/28メディア: 単行本（ソフトカバー）この商品を含むブログを見るJS+Node.jsによるWebクローラー/ネットエージェント開発テクニック 作者: クジラ飛行机出版社/メーカー: ソシム発売日: 2015/08/31メディア: 単行本この商品を含むブログを見る 実践 Webスクレイピング&クローリング-オープンデータ時代の収集・整形テクニック 実践 Webスクレイピング&クローリング-オープンデータ時代の収集・整形テクニックは、Py
資料発掘で地域の歴史・文化の掘り起こし―国立国会図書館が所蔵データの活用を考えるワークショップ開催 - MdN Design Interactive
当日は、まずワークショップの準備として、参加者に対してオープンデータやウィキペディア、デジコレなどに関する知識をインプットするため、短めの講演がいくつか行われた。最初に登壇したのは、UDCの実行委員であり、OKFJ（オープンナレッジファウンデーションジャパン）の事務局長である東修作氏。東氏は、東日本大震災において、政府・自治体のサイトに掲載されたデータを二次利用するために個々に許可を求める必要があったため、避難所情報を使うのに苦労した体験を例に挙げて、オープンデータやオープンガバメントの必要性について語った。さらに、オープンデータやオープンガバメントは「透明性の確保」「市民参画」「経済効果」などを実現するための手段のひとつであり、短期的に効果が出るものではない、とも語った。「オープンデータやオープンガバメントは、荒れ果てた原野に水が少しずつ行き渡って、少しずつ豊かになるようなものだと思って
大阪市のオープンデータを使って、ひったくり事件発生個所を視覚化してみた。
[2016/6/8 data update] 以前、大阪都構想住民投票結果の地図を作った際に、大阪市のオープンデータの中に犯罪発生個所データがあるのを発見したので、そのなかから「ひったくり発生個所」データを視覚化してみました。 大阪市市民の方へ 大阪市の犯罪発生情報 example データの読み込みと整形処理が結構重いので、ページが表示されるまでに時間がかかります。 画面上位にある「被害者の年齢」や「事件発生時刻」のヒストグラムは、バーをクリックするとデータの絞り込みを行えます。グラフの空白部分をクリックすると、絞り込みを解除します。 地図上のエリアをクリックすると下に事件に関するデータを表示します。 めんどうだったこと 公開されているcsvの町名の一部が旧漢字だったため、e-statから取得した町丁目境データと名寄せするのがめんどくさかったです。 本来は新漢字に寄せた方がよいのでしょうが
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
