Python / Pandas-使用多列合并时将“空字符串”视为匹配项

如何解决Python / Pandas-使用多列合并时将“空字符串”视为匹配项

我正在尝试在多列上合并2个数据框：['Unit','Geo','Region']。并且，条件是：当right_df中的值在left_df上遇到“空字符串”时，应将其视为匹配项。

例如，当right_df的第一行与left_df的第一行联接时，列'Region'的行为空。因此，需要将空字符串视为与“ AU”的匹配项并获得最终结果“ DE”。

left_df = pd.DataFrame({'Unit':['DEV','DEV','TEST1','TEST2','ACCTEST1','ACCTEST1'],'Geo':['AP','JAPAN','NA','Europe','','AP','NA'],'Region':['','France','BENELUX',''],'Resp':['DE','FG','BO','MD','KR','PM','NJ','JI','HN','FG']})


right_df = pd.DataFrame({'Unit':['DEV','TEST2'],'Europe'],'Region':['AU','ISA','USA','AU/NZ','CEE','CEE']})    

我尝试了以下代码，但仅在“空字符串”具有值时才起作用。我正在努力添加一个条件，说“将空字符串视为匹配项”或“忽略right_df是否遇到空字符串并继续可用的匹配项”。将不胜感激。谢谢！

result_df = pd.merge(left_df,right_df,how='inner',on=['Unit','Region'])

解决方法

看起来映射中有些不匹配，但是您可以使用update方法来处理空字符串：

# replace empty strings with nan
left_df = left_df.replace('',np.nan)

# replace np.nan with values from other dataframe
left_df.update(right_df,overwrite=False)

# merge
df = pd.merge(left_df,right_df,how='right',on=['Unit','Geo','Region'])

希望这给您一些想法。

,

在列表理解中使用DataFrame.merge并执行 left按以下顺序合并操作：

1. 在列right_df，left_df和Unit上将Geo与Region合并，然后选择列Resp。

2. 在right_df，left_df列上将Unit与Geo和Resp合并（在Unit和Geo中删除重复的值），然后选择列right_df。 / p>

3. 在left_df列中将Unit与Resp合并（将重复的值放入单元中）并选择列s。

然后将functools.reduce与归约函数Series.combine_first一起使用，以组合列表Resp中的所有序列，并将此结果分配给right_df中的from functools import reduce c = ['Unit','Region'] s = [right_df.merge(left_df.drop_duplicates(c[:len(c) - i]),on=c[:len(c) - i],how='left')['Resp'] for i in range(len(c))] right_df['Resp'] = reduce(pd.Series.combine_first,s) 列

print(right_df)

        Unit     Geo   Region Resp
0        DEV      AP       AU   DE
1        DEV   JAPAN    JAPAN   FG
2        DEV      AP      ISA   DE
3        DEV      NA      USA   BO
4      TEST1      AP    AU/NZ   PM
5      TEST2  Europe   France   NJ
6   ACCTEST1  Europe      CEE   HN
7        DEV  Europe   France   MD
8   ACCTEST1      AP      ISA   JI
9      TEST1   JAPAN    JAPAN   PM
10     TEST2      AP      ISA   NJ
11       DEV  Europe  BENELUX   KR
12     TEST1  Europe      CEE   PM
13     TEST2  Europe      CEE   NJ

结果：

public class CustomHandshakeHandler extends DefaultHandshakeHandler {
        @Override
        protected Principal determineUser(ServerHttpRequest request,WebSocketHandler wsHandler,Map<String,Object> attributes) {
            
                LOGGER.info(request.getBody().toString());
            
}}