「2020年6月」の記事一覧

Pythonで経過時間を計測する 経過時間を計測するには、timeモジュールが使えますね。 下記がサンプルコードになります。 $ cat sample.py #!/usr/bin/env python3 # coding・・・

続きを読む

daskでcsvファイの読み込みを高速化(datetime64型でindexの列を設定) daskでcsvファイの読み込みを高速化してみました。 使ってみると、もっと早くdaskを使っていればと後悔。 まずはdaskをi・・・

続きを読む

pip3 install "dask[complete]" daskがinstallされてなく、下記のエラーメッセージ。 ImportError: Dask dataframe requirements are not ・・・

続きを読む

pandasで空のDataFrameを新規作成して0埋めする まずは、空のDataFrameを新規作成します。 indexをrange(5)で定義して、val1とval2の列を定義します。 data = pd.DataF・・・

続きを読む

[MACターミナル]splitコマンドでファイル分割 例えば、下記のsample.txtがあったとします。 $ ls -l sample.txt | awk '{print $5}' 588895 -・・・

続きを読む

pandasのindexを行番号を指定して取得 下記のように、pandasのindexを行番号を指定して取得できます。 ふとした時に意外と詰まったのでここに残したいと思います。 data.index[行番号] csvデー・・・

続きを読む

Pythonのdatetimeで、x日・時間・分・秒後を取得 datetime型の時間に、datetime.timedelta()で和算することで、x日・時間・分・秒後を取得できます。 例えば、現在時刻の１日後を取得、 ・・・

続きを読む

idxmax() idxmin()で最大値と最小値のindexを取得 idxmax() idxmin()で最大値と最小値のindexを取得できます。 まずは、indexをつけてpandasのデータを作ります。 impor・・・

続きを読む

pandasで日付を指定して行を抽出する まずはdatetime型をindexにして、pandasのデータを作成します。 import pandas as pd data = pd.read_csv('csv.・・・

続きを読む

pandasのread_csv()のusecolsで読み込む列(カラム)を指定する pandasのread_csv()のusecolsで読み込む列(カラム)を指定できます。 例えば、下記のcsv.txtがあったとします。・・・

続きを読む