136

考虑一个 csv 文件：

string,date,number
a string,2/5/11 9:16am,1.0
a string,3/5/11 10:44pm,2.0
a string,4/22/11 12:07pm,3.0
a string,4/22/11 12:10pm,4.0
a string,4/29/11 11:59am,1.0
a string,5/2/11 1:41pm,2.0
a string,5/2/11 2:02pm,3.0
a string,5/2/11 2:56pm,4.0
a string,5/2/11 3:00pm,5.0
a string,5/2/14 3:02pm,6.0
a string,5/2/14 3:18pm,7.0

我可以阅读此内容，并将日期列重新格式化为日期时间格式：

b=pd.read_csv('b.dat')
b['date']=pd.to_datetime(b['date'],format='%m/%d/%y %I:%M%p')

我一直在尝试按月对数据进行分组。似乎应该有一种明显的方式来访问月份并以此进行分组。但我似乎做不到。有谁知道怎么做？

我目前正在尝试按日期重新索引：

b.index=b['date']

我可以像这样访问月份：

b.index.month

但是，我似乎找不到按月汇总的功能。

4

5 回答 5

227

设法做到了：

b = pd.read_csv('b.dat')
b.index = pd.to_datetime(b['date'],format='%m/%d/%y %I:%M%p')
b.groupby(by=[b.index.month, b.index.year])

或者

b.groupby(pd.Grouper(freq='M'))  # update for v0.21+
于 2014-06-06T13:38:42.773 回答
101

（更新：2018）

请注意，这pd.Timegrouper是折旧的，将被删除。改用：

 df.groupby(pd.Grouper(freq='M'))
于 2018-01-20T12:38:02.700 回答
17

避免 MultiIndex 的一种解决方案是创建一个新datetime列设置 day = 1。然后按此列分组。

标准化一个月中的一天

df = pd.DataFrame({'Date': pd.to_datetime(['2017-10-05', '2017-10-20', '2017-10-01', '2017-09-01']),
                   'Values': [5, 10, 15, 20]})

# normalize day to beginning of month, 4 alternative methods below
df['YearMonth'] = df['Date'] + pd.offsets.MonthEnd(-1) + pd.offsets.Day(1)
df['YearMonth'] = df['Date'] - pd.to_timedelta(df['Date'].dt.day-1, unit='D')
df['YearMonth'] = df['Date'].map(lambda dt: dt.replace(day=1))
df['YearMonth'] = df['Date'].dt.normalize().map(pd.tseries.offsets.MonthBegin().rollback)

然后groupby正常使用：

g = df.groupby('YearMonth')

res = g['Values'].sum()

# YearMonth
# 2017-09-01    20
# 2017-10-01    30
# Name: Values, dtype: int64

比较pd.Grouper

与 不同，此解决方案的微妙好处是，pd.Groupergrouper 索引被标准化为每个月的开始get_group而不是结束，因此您可以通过以下方式轻松提取组：

some_group = g.get_group('2017-10-01')

计算 10 月的最后一天稍微麻烦一些。pd.Grouper，从 v0.23 开始，确实支持convention参数，但这仅适用于grouper PeriodIndex。

与字符串转换的比较

上述想法的替代方法是转换为字符串，例如将 datetime 转换2017-10-XX为字符串'2017-10'。但是，不建议这样做，因为您失去了datetime一系列（内部存储为连续内存块中的数字数据）与object一系列字符串（存储为指针数组）相比的所有效率优势。

于 2018-03-28T02:01:13.130 回答
11

要对时间序列数据进行分组，您可以使用方法resample。例如，按月分组：

df.resample(rule='M', on='date')['Values'].sum()

您可以在此处找到带有偏移别名的列表。

于 2021-06-08T08:16:27.537 回答
8

@jpp 的稍微替代解决方案，但输出一个YearMonth字符串：

df['YearMonth'] = pd.to_datetime(df['Date']).apply(lambda x: '{year}-{month}'.format(year=x.year, month=x.month))

res = df.groupby('YearMonth')['Values'].sum()
于 2018-10-11T10:58:29.780 回答