お前らのpandasの使い方は間違っている - Qiita

この記事は株式会社Nuco Advent Calendar 2022の9日目の記事です。 はじめに いきなりお馴染みの「キャッチーでウィットでセンセーショナルな」タイトルで失礼します。 私自身、業務の中でpandasに大変お世話になっており、自戒も込めてpandasの「アンチパターン」をまとめてみました。 この記事を読んで、より快適なpandasライフを送っていただけると嬉しいです。 対象読者 Pythonを使ったデータ分析や機械学習に携わる方 この記事はpandasの基本的な使い方を解説するものではないので注意してください。 表形式ファイルを加工する必要がある方 pandasの強みはリレーショナルなデータ全般です。必ずしもデータ分析や機械学習だけが守備範囲ではありません。 pandasとは pandasの公式ドキュメントの概要には、以下のように記載してあります。 pandas is a

[fukouhei001]

Pandasを使うのは間違っている

[nakag0711]

pandasやるとSQLはよくできてたことがよくわかる

[misshiki]

“自戒も込めてpandasの「アンチパターン」をまとめ”

[takilog]

あるあるだが、そんなに難しい処理をpandasで書くとつらいみたいな話もあるな（？）

[tsz]

python 側はグルーであってデータ処理はしてはならないと雑に理解してる。DBアクセスも同様。

[parakeety]

“「むやみやたらにDataFrameを生成するな」では、別の変数を使いながら元々のDataFrameに処理を加えていきました。 変数を以下のように更新してしまえばメモリ使用量を節約できますが、これはmutating(変異) と言われ、推奨さ

[georgew]

numpy使えるところは直接使った方がいいんだろうね。さすがにDataFrameをforループでなめるなどという愚かな使い方はしませんよ。

[FEMRIK]

pandasむずい

[khwarizmi]

こういうの重要

[sds-page]

ループが遅いのメモリの消費がどうだってなってくると、ポスグレにぶち込んでSQLで目的のデータだけ持ってくる派

[kgkaaz]

重要なのは　index を使えってことです。使わないならnumpy使ってくれ

[perl-o-pal]

「リレーショナル」または「ラベル付き」をどうやったら「表形式」と読み取れるんだ？

[mole-studio]

実質DBクエリのDSLだからな。クセはあるけど簡単には逃げれないので覚えるしかない

[maketexlsr]

教えるのに有用そう。ありがとう

[pavlocat]

よくまとまってる

[fufufukakaka]

大体思ってることが書かれてて安心した

[fog-og-frog2]

連鎖代入はあるある