Python 将相同的连续值分组并存储:值、索引和列切片

Python 将相同的连续值分组并存储:值、索引和列切片,python,pandas,Python,Pandas,我有一个数据帧 import pandas as pd import numpy as np v1=list(np.random.rand(30)) v2=list(np.random.rand(30)) mydf=pd.DataFrame(data=zip(v1,v2),columns=['var1','var2']) 然后我对一些变量应用一些布尔条件 mydf['cond1']=mydf['var1']>0.2 mydf['cond2']=mydf['var1']>0.8

我有一个数据帧

import pandas as pd
import numpy as np
v1=list(np.random.rand(30))
v2=list(np.random.rand(30))
mydf=pd.DataFrame(data=zip(v1,v2),columns=['var1','var2'])
然后我对一些变量应用一些布尔条件

mydf['cond1']=mydf['var1']>0.2
mydf['cond2']=mydf['var1']>0.8


mydf['cond1']=
0 False
1 True
2 True
3 False
4 False
5 True
6 False
....
我想在“cond1”(或“cond2”)为真的块中分组,对于每个分组存储:

  • 组的值:真/假

  • 块的开始和结束的索引:例如。 1,2 5,5

  • 起始和结束索引处的
    var2
    两个值

  • 起始索引和结束索引之间的
    var1
    的所有值,作为一个可数(np.array列表)

这是返回值的一个示例:

summary=
'Start' 'End' 'Start_var2' 'End_var2' 'Value' 'var1'
 1        2    0.3217381    0.454543   True    [0.25,0.26]
我想你可以用
i
为您提供组号,可以使用
g
索引
获取
var

v1=list(np.random.rand(30))
v2=list(np.random.rand(30))
df=pd.DataFrame(data=zip(v1,v2),columns=['var1','var2'])

df['cond1']=df['var1']>0.2
df['cond2']=df['var1']>0.8

for i, g in df.groupby([(df['cond1'] != df['cond1'].shift()).cumsum()]):
    print (i)
    print (g)
    print (g['cond1'].tolist())
    print(g['cond1'].index[0])#can get var values from this

IIUC,让我们试试这样:

mydf.groupby(mydf.cond1.diff().cumsum(), as_index=False)\
    .apply(lambda x: pd.Series([x.iloc[0].name,
                                x.iloc[-1].name, 
                                x.iloc[0]['var2'], 
                                x.iloc[-1]['var2'], 
                                x.iloc[0]['cond1'], 
                                x.var1.tolist()],
                                index=['Start','End','Start_var2',
                                       'End_var2','Value','var1']))
输出:

   Start  End  Start_var2  End_var2  Value                                               var1
0      1   13    0.580713  0.772878   True  [0.9080110836630401, 0.34879731608699105, 0.63...
1     14   14    0.688374  0.688374  False                              [0.11739843719148924]
2     15   15    0.204304  0.204304   True                               [0.3010533582011998]
3     16   17    0.470689  0.808964  False         [0.14526373397045378, 0.09218609736837002]
4     18   20    0.675035  0.087408   True  [0.6029321967069232, 0.3641874497564469, 0.564...
5     21   21    0.346795  0.346795  False                               [0.1913357207205566]
6     22   29    0.944366  0.845753   True  [0.6769058596527606, 0.2155054472756598, 0.278...

非常接近。有没有可能避免for循环?这是一个很长的dfI问题,
groupby
返回一个您必须以某种方式解包的对象。不过我并不认为自己是专家。回答相关问题的人可能会帮上忙。完美。漂亮,紧凑,没有明显的循环