查找pandas df中timedelta对象的均值和标准差

Question

我想从mean计算standard deviation的timedelta和dataframe，下面有两列。当我运行代码（也显示如下）时，我得到以下错误：

pandas.core.base.DataError: No numeric types to aggregate

我的数据帧：

   bank                          diff
   Bank of Japan                 0 days 00:00:57.416000
   Reserve Bank of Australia     0 days 00:00:21.452000
   Reserve Bank of New Zealand  55 days 12:39:32.269000
   U.S. Federal Reserve          8 days 13:27:11.387000

我的代码：

means = dropped.groupby('bank').mean()
std = dropped.groupby('bank').std()

Answer 1

您需要将timedelta转换为某个数值，例如int64由values什么是最准确的，因为转换为ns是timedelta的数字表示：

dropped['new'] = dropped['diff'].values.astype(np.int64)

means = dropped.groupby('bank').mean()
means['new'] = pd.to_timedelta(means['new'])

std = dropped.groupby('bank').std()
std['new'] = pd.to_timedelta(std['new'])

另一个解决方案是通过seconds将值转换为total_seconds，但这不太准确：

dropped['new'] = dropped['diff'].dt.total_seconds()

means = dropped.groupby('bank').mean()

Answer 2

无需来回转换timedelta。 Numpy和Pandas可以通过更快的运行时间无缝地为您完成。使用你的dropped DataFrame：

import numpy as np

grouped = dropped.groupby('bank')['diff']

mean = grouped.apply(lambda x: np.mean(x))
std = grouped.apply(lambda x: np.std(x))

Answer 3

Pandas mean()和其他聚合方法支持numeric_only=False参数。

dropped.groupby('bank').mean(numeric_only=False)

在这里找到：Aggregations for Timedelta values in the Python DataFrame

Answer 4

我建议将亚历山大·乌西科夫提到的numeric_only=False论证传递给mean - 这适用于熊猫版本0.20+。

如果您使用的是旧版本，则以下内容有效：

import pandas pd

df = pd.DataFrame({
    'td': pd.Series([pd.Timedelta(days=i) for i in range(5)]),
    'group': ['a', 'a', 'a', 'b', 'b']
})

(
    df
    .astype({'td': int})         # convert timedelta to integer (nanoseconds)
    .groupby('group')
    .mean()
    .astype({'td': 'timedelta64[ns]'})
)