从pandas数据框列中查找所有正则表达式匹配项


问题内容

我正在尝试从数据框中提取一些数据,但是以下查询仅提取第一个匹配项,而忽略其余匹配项,例如,如果整个数据为:

df['value']=
           0   123 blah blah blah, 456 blah blah blah, 129kfj blah blah
           1   237 blah blah blah, 438 blah blah blah, 365kfj blah blah 
           ...

正则表达式为:

df['newCol']=df['value'].str.extract("[0-9]{3}")

我希望结果是一个新的列名“ newCol”,例如:

newCol
------
123,456,129
237,438,365
...

但我得到的实际结果只是第一个数字:

newCol
------
123
237

这是怎么了 :(

谢谢

更新:

感谢MaxU,我找到了解决方案,仅提出了几点建议。我有Pandas
0.18.1,所以直到我将Pandas更新到0.19之前,extractall才对我有用,所以如果您遇到Extractall的问题,请记住检查您的熊猫版本…第二,apply(’,’。join)没有之所以为我工作,是因为我有一些非字符串值(Null值),并且它无法处理它,所以我使用了Lambda,最后对MaxU解决方案进行了少量修改。

x['value'].str.extractall(r'(\d{3})').unstack().apply(lambda x:','.join(x.dropna()), axis=1)

问题答案:

您可以使用Series.str.extractall()方法:

In [57]: x
Out[57]:
                                                    value
0  123 blah blah blah 456 blah blah blah 129kfj blah blah
1  237 blah blah blah 438 blah blah blah 365kfj blah blah

In [58]: x['newCol'] = x['value'].str.extractall(r'(\d{3})').unstack().apply(','.join, 1)

In [59]: x
Out[59]:
                                                    value       newCol
0  123 blah blah blah 456 blah blah blah 129kfj blah blah  123,456,129
1  237 blah blah blah 438 blah blah blah 365kfj blah blah  237,438,365

更新:

In [77]: x
Out[77]:
                                                      value
0  123 blah blah blah, 456 blah blah blah, 129kfj blah blah
1  237 blah blah blah, 438 blah blah blah, 365kfj blah blah

In [78]: x['value'].str.extractall(r'(\d{3})').unstack().apply(','.join, 1)
Out[78]:
0    123,456,129
1    237,438,365
dtype: object