Pandas 中日期时间列的矢量化操作

exp*_*rer 5 python pandas

我想取一列日期时间对象并返回一列整数,这些整数是“从那个日期时间到今天的天数”。我可以用一种丑陋的方式来做,寻找一种更漂亮(更快)的方式。

所以假设我有一个带有日期时间列的数据框,如下所示:

11    2014-03-04 17:16:26+00:00
12    2014-03-10 01:35:56+00:00
13    2014-03-15 02:35:51+00:00
14    2014-03-20 05:55:47+00:00
15    2014-03-26 04:56:33+00:00
Name: datetime, dtype: object
Run Code Online (Sandbox Code Playgroud)

每个元素看起来像:

datetime.datetime(2014, 3, 4, 17, 16, 26, tzinfo=<UTC>)
Run Code Online (Sandbox Code Playgroud)

假设我想计算每次观察发生的天数,并将其作为一个简单的整数返回。我知道我只能使用apply两次,但有没有一种矢量化/更清洁的方法来做到这一点?

today = datetime.datetime.today().date()
df_dates = df['datetime'].apply(lambda x: x.date())
days_ago = today - df_dates
Run Code Online (Sandbox Code Playgroud)

这给出了一个 timedelta64[ns] 系列。

11   56 days, 00:00:00
12   50 days, 00:00:00
13   45 days, 00:00:00
14   40 days, 00:00:00
15   34 days, 00:00:00
Name: datetime, dtype: timedelta64[ns]
Run Code Online (Sandbox Code Playgroud)

最后,如果我想要它作为一个整数:

days_ago_as_int = days_ago.apply(lambda x: x.item().days)
days_ago_as_int
11    56
12    50
13    45
14    40
15    34
Name: datetime, dtype: int64
Run Code Online (Sandbox Code Playgroud)

有什么想法吗?


与我所问的问题不太相关的相关问题:

Pandas Python-可以将日期时间与矢量化输入一起使用

熊猫将一天添加到列


尝试Karl D 的回答,我成功地获得了今天的日期和所需的日期列,但是在减法中出现了问题(与原始示例中的日期时间不同,但应该无关紧要,对吧?):

converted_dates = df['date'].values.astype('datetime64[D]')
today_date = np.datetime64(dt.date.today())
print converted_dates
print today_date
print today_date - converted_dates

[2014-01-16 00:00:00 
2014-01-19 00:00:00 
2014-01-22 00:00:00
2014-01-26 00:00:00
2014-01-29 00:00:00]

2014-04-30 00:00:00

[16189 days, 0:08:20.637994
16189 days, 0:08:20.637991
16189 days, 0:08:20.637988
16189 days, 0:08:20.637984
16189 days, 0:08:20.637981]
Run Code Online (Sandbox Code Playgroud)

Kar*_* D. 4

(对于名为日期的列)怎么样?

import datetime as dt
df['foo'] = (np.datetime64(dt.date.today()) 
             - df['date'].values.astype('datetime64[D]'))
print df

                 date     foo
0 2014-03-04 17:16:26 56 days
1 2014-03-10 01:35:56 50 days
2 2014-03-15 02:35:51 45 days
3 2014-03-20 05:55:47 40 days
4 2014-03-26 04:56:33 34 days
Run Code Online (Sandbox Code Playgroud)

或者如果你想要它作为一个 int:

df['foo'] = (np.datetime64(dt.date.today()) 
             - df['date'].values.astype('datetime64[D]')).astype(int)
print df
                  date  foo
0 2014-03-04 17:16:26   56
1 2014-03-10 01:35:56   50
2 2014-03-15 02:35:51   45
3 2014-03-20 05:55:47   40
4 2014-03-26 04:56:33   34
Run Code Online (Sandbox Code Playgroud)

或者如果它是一个索引

print np.datetime64(dt.date.today()) - df.index.values.astype('datetime64[D]')

[56 50 45 40 34]
Run Code Online (Sandbox Code Playgroud)

很久以后编辑:这个解决方法怎么样?

>>> print df

                 date
0 2014-03-04 17:16:26
1 2014-03-10 01:35:56
2 2014-03-15 02:35:51
3 2014-03-20 05:55:47
4 2014-03-26 04:56:33
Run Code Online (Sandbox Code Playgroud)

尝试将今天的日期分配给一列,以便 pandas 将其转换为 datetime64 列,然后进行算术:

>>> df['today'] = dt.date.today()
>>> df['foo'] = (df['today'].values.astype('datetime64[D]')
               - df['date'].values.astype('datetime64[D]'))
>>> print df

                 date       today     foo
0 2014-03-04 17:16:26  2014-05-14 71 days
1 2014-03-10 01:35:56  2014-05-14 65 days
2 2014-03-15 02:35:51  2014-05-14 60 days
3 2014-03-20 05:55:47  2014-05-14 55 days
4 2014-03-26 04:56:33  2014-05-14 49 days
Run Code Online (Sandbox Code Playgroud)