同じ二時記憶装置にアクセスしてるのにCPUを並列化したら速くなるって発想がよくわからない／SSDならまだゆとりあるのか。HDDかと思った

roirrawedoc のブックマーク 2019/06/02 21:29

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4669580855244628706/comment/roirrawedoc" data-user-id="roirrawedoc" data-entry-url="https://b.hatena.ne.jp/entry/s/qiita.com/hoto17296/items/586dc01aee69cd4915cc" data-original-href="https://qiita.com/hoto17296/items/586dc01aee69cd4915cc" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fqiita.com%2Fhoto17296%2Fitems%2F586dc01aee69cd4915cc" data-user-icon="/users/roirrawedoc/profile.png">Python で大量のファイルを並列で速く読み込む - Qiita</a><br><p style="clear: left">同じ二時記憶装置にアクセスしてるのにCPUを並列化したら速くなるって発想がよくわからない／SSDならまだゆとりあるのか。HDDかと思った</p><a class="datetime" href="https://b.hatena.ne.jp/roirrawedoc/20190602#bookmark-4669580855244628706"><span class="datetime-body">2019/06/02 21:29</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

Python で大量のファイルを並列で速く読み込む - Qiita

qiita.com/hoto172962019/06/02

from glob import glob files = glob('data/*.csv') len(files) # 10000 この 1万件の CSV ファイルを Pandas DataFrame として読み込みたい。ちなみに検証用のデータは以下のようにして生成した。 (3列 x 10,00...

276 人がブックマーク・15 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

Python で大量のファイルを並列で速く読み込む - Qiita

はてなブックマーク

公式Twitter

はてなのサービス