基于发生率合并行,同时在Python的数据帧中保持唯一值

基于发生率合并行,同时在Python的数据帧中保持唯一值,python,pandas,dataframe,pandas-groupby,Python,Pandas,Dataframe,Pandas Groupby,数据帧: Name Category Port Class A Code 443 string1 A Code 80 string2 B Math 443 string3 A Code 443 string1

数据帧:

Name         Category        Port          Class
A                Code         443        string1
A                Code          80        string2
B                Math         443        string3
A                Code         443        string1
B                Math          80        string4
我尝试过的代码:

df1 = df.name.ne(df.name.shift())
count = df.name.groupby(df1.cumsum()).size()
我得到的输出:

Name     Category      Port       Class     Count
A            Code       443     string1         2
B            Math       443     string3         1
A            Code       443     string1         1
B            Math        80     string4         1
我想要的输出:

Name    Category         Port               Class   Count
A           Code      443, 80    string1, string2       2
B           Math          443             string3       1
A           Code          443             string1       1
B           Math           80             string4       1

非常感谢您的帮助。

使用
groupby
agg
以及适当的功能,您会得到想要的。下面使用
列表
,这将导致保留所有值,如果您只需要唯一的值,可以将其更改为
设置

df['cumsum'] = df.Name.ne(df.Name.shift()).cumsum()
df2 = df.groupby(df["cumsum"]).agg({'Name': 'first', 'Category': 'first', 'Port': list, 'Class': [list, 'count']})
df2.columns = df2.columns.droplevel(1).values[:-1].tolist() + ['Count']
df2 = df2.reset_index(drop=True)
这将为您提供:

  Name  Category       Port               Class  Count
0    A      Code  [443, 80]  [string1, string2]      2
1    B      Math      [443]           [string3]      1
2    A      Code      [443]           [string1]      1
3    B      Math       [80]           [string4]      1

这里的关键是用通用名称和类别标识连续的行。一个简单的技巧是使用
shift
cumsum

x = pd.Series(np.where((df['Name'] == df1['Name'])&(df['Category'] == df1['Category']), 0, 1),
              index = df.index).cumsum()
完成此操作后,
groupby
agg
执行以下操作:

df.assign(Count=1, Port=df['Port'].astype(str)).groupby(['Name', 'Category',x]).agg(
    {'Port': ', '.join, 'Class': ', '.join, 'Count': 'sum'}).reset_index().drop(columns='level_2')
它给出:

  Name Category     Port             Class  Count
0    A     Code  443, 80  string1, string2      2
1    A     Code      443           string1      1
2    B     Math      443           string3      1
3    B     Math       80           string4      1