カード連携の不安よさらば！pythonで楽天カードの明細を家計簿へ登録する Part.2

import pandas as pd
from datetime import datetime,timedelta
from dateutil.relativedelta import relativedelta    #来月を出す
import re
import numpy as np

#　今日のcsv読み込み
today_df = pd.read_csv('./today.csv')

#支払月のリスト作成する
pay_month = []
max_paymonth = today_df['支払月'].max() # dataframeの「支払月」列で最大の値を取る
if('以降' in max_paymonth):
    _pay_month = np.sort(today_df['支払月'].unique())[::-1] # 降順でソート
    pay_month = [m.replace('以降', '') for m in _pay_month] # '以降'を削除
else:
    pay_month.append(max_paymonth)

# 今日のcsvデータ整形
today_df['支払月'] = today_df['支払月'].replace(re.compile(r'以降$'),'',regex=True) # 明細の「支払月」にある'以降'を削除
_today_df = today_df.rename(columns = {today_df.columns[0]:'利用日'}) #「利用日」のヘッダに不要なダブルクォーテーションがあるのでこれを消す
_today_df = _today_df[_today_df['利用日'].notnull()] #　ETCの利用データは2つできる(1個は利用店名・商品名にしか値がないゴミ)。これを消す
filtered_today = _today_df[_today_df['支払月'].isin(pay_month)]      # 今日のcsvから対象の支払月のデータだけ抜き出す

# 昨日のcsv読み込み
yesterday_df = pd.read_csv('./yesterday.csv') 
# 昨日のcsvデータ整形
yesterday_df['支払月'] = yesterday_df['支払月'].replace(re.compile(r'以降$'),'',regex=True) # 明細の「支払月」にある'以降'を削除
_yesterday_df = yesterday_df.rename(columns={yesterday_df.columns[0]:'利用日'}) #「利用日」のヘッダに不要なダブルクォーテーションがあるのでこれを消す
_yesterday_df = _yesterday_df[_yesterday_df['利用日'].notnull()] #　ETCの利用データは2つできる(1個は利用店名・商品名にしか値がないゴミ)。これを消す
filtered_yesterday = _yesterday_df[yesterday_df['支払月'].isin(pay_month)] # 昨日のcsvから対象の支払月のデータだけ抜き出す

 # 今日と昨日のデータをマージ
merged_df = pd.concat([filtered_yesterday,filtered_today])
_merged_df = merged_df.rename(columns={merged_df.columns[0]:'利用日'})

# 重複削除後のdataframeを用意
diff_df = pd.DataFrame(index=[],columns=filtered_today.columns)
# 必要なカラムだけで重複削除
diff_df = _merged_df.drop_duplicates(keep=False,subset=['利用日','利用店名・商品名','利用者','支払方法','利用金額'])

# 結果を出力する
diff_df.to_csv('./diff.csv', index=False)

today_df = pd.read_csv('./today.csv')　# csv読み込み
today_df['支払月'] = today_df['支払月'].replace(re.compile(r'以降$'),'',regex=True) #以降を削除
_today_df = today_df.rename(columns = {today_df.columns[0]:'利用日'})   #「利用日」のヘッダを修正
_today_df = _today_df[_today_df['利用日'].notnull()]   # ゴミデータ削除