从pandas数据框列中查找所有正则表达式匹配项
问题内容:
我正在尝试从数据框中提取一些数据,但是以下查询仅提取第一个匹配项,而忽略其余匹配项,例如,如果整个数据为:
df['value']=
0 123 blah blah blah, 456 blah blah blah, 129kfj blah blah
1 237 blah blah blah, 438 blah blah blah, 365kfj blah blah
...
正则表达式为:
df['newCol']=df['value'].str.extract("[0-9]{3}")
我希望结果是一个新的列名“ newCol”,例如:
newCol
------
123,456,129
237,438,365
...
但我得到的实际结果只是第一个数字:
newCol
------
123
237
这是怎么了 :(
谢谢
更新:
感谢MaxU,我找到了解决方案,仅提出了几点建议。我有Pandas
0.18.1,所以直到我将Pandas更新到0.19之前,extractall才对我有用,所以如果您遇到Extractall的问题,请记住检查您的熊猫版本…第二,apply(’,’。join)没有之所以为我工作,是因为我有一些非字符串值(Null值),并且它无法处理它,所以我使用了Lambda,最后对MaxU解决方案进行了少量修改。
x['value'].str.extractall(r'(\d{3})').unstack().apply(lambda x:','.join(x.dropna()), axis=1)
问题答案:
您可以使用Series.str.extractall()方法:
In [57]: x
Out[57]:
value
0 123 blah blah blah 456 blah blah blah 129kfj blah blah
1 237 blah blah blah 438 blah blah blah 365kfj blah blah
In [58]: x['newCol'] = x['value'].str.extractall(r'(\d{3})').unstack().apply(','.join, 1)
In [59]: x
Out[59]:
value newCol
0 123 blah blah blah 456 blah blah blah 129kfj blah blah 123,456,129
1 237 blah blah blah 438 blah blah blah 365kfj blah blah 237,438,365
更新:
In [77]: x
Out[77]:
value
0 123 blah blah blah, 456 blah blah blah, 129kfj blah blah
1 237 blah blah blah, 438 blah blah blah, 365kfj blah blah
In [78]: x['value'].str.extractall(r'(\d{3})').unstack().apply(','.join, 1)
Out[78]:
0 123,456,129
1 237,438,365
dtype: object