データ分析polars←pandasの逆引き pandas使い慣れてからpolars使い始めてみると、pd.hogehogeに対応する処理なんだっけ?となることが多発するので逆引き辞書的なものを用意。 実務で使いたくなったものだけにフォーカスして、捜索性を高めるつもり...2023.02.16データ分析
エンジニアリング複数のpd.DataFrameを1つのExcelの複数シートで保存する。 こんな感じのデータフレームがあったとして import numpy as np import pandas as pd import os df = pd.DataFrame([{'col_0': "A&q...2022.08.26エンジニアリングデータ分析
エンジニアリングPandas カラム名の部分一致検索 カラムの多いデータフレームを扱っていると、df.columnsだと見切れてしまったり、見切れなくても出力が多すぎて探すのがめんどくさいときがある。「○○売上」みたいなあの列名加工したいんだけどなんだっけ?みたいな。そういう時用の2つのソリ...2022.06.03エンジニアリングデータ分析
データ分析pandas 集計結果等の差分比較のためのanti merge 2つのテーブルを比較する際、SQLならexcept distinctがある。類似の処理でPandasならcompareがあるが、これは行数と列数が完全に一致してないとダメ。Pythonで2つのDataFrameを比較して、違うところだけを...2022.04.06データ分析
データ分析pandas.query()で欠損値を指定する .isnull()と.notnull()を使えば解決。engine='python'を忘れずに 以下のようなDataFrameがあったとして、 import numpy as np import pandas as pd df...2022.03.29データ分析