1

我有一个DataFrame带有列time、、latitude和longitude。它看起来像这样：

>>> df.head()
                  time   latitude  longitude
0  2011-12-16 08:09:07  42.386391 -71.013544
1  2011-12-16 08:09:08  42.386391 -71.013544
2  2011-12-16 08:09:09  42.386391 -71.013544
3  2011-12-16 08:09:10  42.386391 -71.013544
4  2011-12-16 08:09:11  42.386391 -71.013544

我想做的是估计一个人住在哪里。最简单的方法是在一天中最早的时刻获取他们所在位置的模式（最常见的）。

我的数据框有超过 700,000 行，跨越大约 3 个月，每天每秒 4-8 小时的数据！所以我需要做的是从每天的前几秒钟找到最常见的（纬度，经度）对。

如果我想使用整个数据集而不仅仅是每天的前几秒钟，我可以执行以下操作：

l = []
for i in range(len(df)-1):
    l.append((df.latitude[i],df.longitude[i]))
import collections
answer = collections.Counter(l).most_common(1)

这可能是也可能不是最有效的方法，如果您有更好的方法可行，请随时在您的答案中使用它。重要的部分是我只取每天的前几个值。

谢谢你。

注意：每天的开始时间各不相同。

4

2 回答 2

0

我认为这会起作用，我在这里使用小时，但同样的想法 Groupby 日期，然后你的函数返回前 3 个值的中位数（或者更少，如果有更少）

In [23]: df = DataFrame(randn(2000,2),
        index=date_range('20130101',periods=2000,freq='H'))

In [24]: df
Out[24]: 
<class 'pandas.core.frame.DataFrame'>
DatetimeIndex: 2000 entries, 2013-01-01 00:00:00 to 2013-03-25 07:00:00
Freq: H
Data columns (total 2 columns):
0    2000  non-null values
1    2000  non-null values
dtypes: float64(2)

In [21]: def f(frame):
   ....:     if len(frame) > 3:
   ....:         frame = frame.iloc[0:4,:]
   ....:     return frame.median()
   ....: 


In [25]: df.resample('D',how=f).head(20)
Out[25]: 
                   0         1
2013-01-01 -1.168960  0.752771
2013-01-02  0.252991  0.257350
2013-01-03  0.823164  0.246403
2013-01-04 -0.253409 -0.099833
2013-01-05  0.328023 -0.308967
2013-01-06 -0.086218 -1.090935
2013-01-07  0.073870  0.256468
2013-01-08 -0.551869  0.332902
2013-01-09  0.267126  0.232623
2013-01-10  0.305948  0.460094
2013-01-11 -0.088975 -1.080070
2013-01-12 -0.587940  0.391419
2013-01-13 -0.220146  0.380210
2013-01-14 -0.689020 -0.873559
2013-01-15  0.576461 -0.184413
2013-01-16  0.258620  0.221407
2013-01-17 -0.385102  0.376829
2013-01-18  0.096542  0.331183
2013-01-19  0.385703  0.241587
2013-01-20 -1.119306 -0.210429
于 2013-05-22T17:25:32.283 回答
0

您可以在一行中取中位开始位置。

df.set_index('time').resample('D', how='first').median()

这仅考虑每天的第一个位置，而不是前几个位置，但是如果每秒采样一次，在我看来，第一个位置和前几个位置可能大致相同。

于 2013-05-22T17:26:39.850 回答