Как сгруппировать DataFrame по периоду времени?

У меня есть некоторые данные из файлов журнала и я хочу сгруппировать записи по минутам:

 def gen(date, count=10):
     while count > 0:
         yield date, "event{}".format(randint(1,9)), "source{}".format(randint(1,3))
         count -= 1
         date += DateOffset(seconds=randint(40))

 df = DataFrame.from_records(list(gen(datetime(2012,1,1,12, 30))), index='Time', columns=['Time', 'Event', 'Source'])

ДФ:

 Event  Source
 2012-01-01 12:30:00     event3  source1
 2012-01-01 12:30:12     event2  source2
 2012-01-01 12:30:12     event2  source2
 2012-01-01 12:30:29     event6  source1
 2012-01-01 12:30:38     event1  source1
 2012-01-01 12:31:05     event4  source2
 2012-01-01 12:31:38     event4  source1
 2012-01-01 12:31:44     event5  source1
 2012-01-01 12:31:48     event5  source2
 2012-01-01 12:32:23     event6  source1

Я попробовал эти варианты:

df.resample('Min') is too high level and wants to aggregate. df.groupby(date_range(datetime(2012,1,1,12, 30), freq='Min', periods=4)) fails with exception.

df.groupby(TimeGrouper(freq='Min')) works fine and returns a DataFrameGroupBy object for further processing, e.g.:

grouped = df.groupby(TimeGrouper(freq='Min'))
grouped.Source.value_counts()
2012-01-01 12:30:00  source1    1
2012-01-01 12:31:00  source2    2
                     source1    2
2012-01-01 12:32:00  source2    2
                     source1    2
2012-01-01 12:33:00  source1    1

However,TimeGrouper класс не задокументирован.

Как правильно сгруппировать по периоду времени? Как я могу сгруппировать данные по минутам И по столбцу «Источник», например,groupby([TimeGrouper(freq='Min'), df.Source])?

Ответы на вопрос(2)

периодов другое решение в настоящее время:

df.groupby(df.index.to_period('T'))

Кроме того, вы можетеResample

df.resample('T')
Решение Вопроса

что и ваш DataFrame, даже вычисленный коэффициент, который на самом деле не является столбцом DataFrame. Таким образом, сгруппировать по минутам вы можете сделать:

df.groupby(df.index.map(lambda t: t.minute))

Если вы хотите группировать по минутам и что-то еще, просто смешайте вышеприведенное с колонкой, которую вы хотите использовать:

df.groupby([df.index.map(lambda t: t.minute), 'Source'])

Лично я считаю полезным просто добавлять столбцы в DataFrame для хранения некоторых из этих вычисляемых вещей (например, столбец «Минута»), если я хочу часто группировать их, поскольку это делает код группировки менее многословным.

Или вы можете попробовать что-то вроде этого:

df.groupby([df['Source'],pd.TimeGrouper(freq='Min')])
 20 авг. 2014 г., 09:32
как я могу продлить его до 30 минут?
 16 сент. 2015 г., 14:47
Этот pd.TimeGrouper можно использовать для группировки по кратным единицам времени.df.groupby(pd.TimeGrouper(freq='30Min'))
 20 февр. 2018 г., 12:57
Я хочу сгруппировать данные по дням, но мой день заканчивается в 02:00, а не в 24:00. Как это может быть сделано?
 serguei17 июн. 2012 г., 21:15
Спасибо. Я получил результат, который искал с помощью этого оператора: df.groupby ([df.index.map (лямбда-т: datetime (t.year, t.month, t.day, t.hour, t.minute)), df.Source, df.Event]). size (). unstack (level = 2)

Ваш ответ на вопрос