根据其他键值对填充空白字典值

Question

我有一个 df，其中包含一列 ['mjtheme_namecode']，该列以字典形式包含代码和名称。这些代码都有数字，但缺少一些名称。我想根据具有相同代码的其他对来填充缺失的名称值。这是有问题的 df 列：

import pandas as pd
import json
import numpy as np
from pandas.io.json import json_normalize
df = pd.read_json('data/world_bank_projects.json')
print(df['mjtheme_namecode'].head(15))

0     [{'code': '8', 'name': 'Human development'}, {...
1     [{'code': '1', 'name': 'Economic management'},...
2     [{'code': '5', 'name': 'Trade and integration'...
3     [{'code': '7', 'name': 'Social dev/gender/incl...
4     [{'code': '5', 'name': 'Trade and integration'...
5     [{'code': '6', 'name': 'Social protection and ...
6     [{'code': '2', 'name': 'Public sector governan...
7     [{'code': '11', 'name': 'Environment and natur...
8     [{'code': '10', 'name': 'Rural development'}, ...
9     [{'code': '2', 'name': 'Public sector governan...
10    [{'code': '10', 'name': 'Rural development'}, ...
11    [{'code': '10', 'name': 'Rural development'}, ...
12                          [{'code': '4', 'name': ''}]
13    [{'code': '5', 'name': 'Trade and integration'...
14    [{'code': '6', 'name': 'Social protection and ...
Name: mjtheme_namecode, dtype: object

我知道我可以使该列成为一个单独的 df，然后进行 ffill，但我想我必须重新编制索引，所以我认为我无法在那之后将其放回原位。我在想理想情况下，我会制作一个仅包含代码和名称的字典项目的列表（没有重复项），然后使用该列表在 for 循环中迭代字典，其中名称成为非重复列表中的匹配值我创建。这有意义吗？不知道该怎么做。

Answer 1

您可以采用类似的方法创建新的 DataFrame，然后再转换回来：

theme= pd.DataFrame([val for pair in df['mjtheme_namecode'].values for val in pair])
mapper = theme.drop_duplicates().replace(r'', np.nan).dropna().set_index('code').name.to_dict()

使用列表理解将它们放在一起：

s = pd.Series(
    [[{'code': i['code'], 'name': mapper[i['code']]}
        for i in t] for t in df.mjtheme_namecode]
)

s.head(13)

0     [{'code': '8', 'name': 'Human development'}, {...
1     [{'code': '1', 'name': 'Economic management'},...
2     [{'code': '5', 'name': 'Trade and integration'...
3     [{'code': '7', 'name': 'Social dev/gender/incl...
4     [{'code': '5', 'name': 'Trade and integration'...
5     [{'code': '6', 'name': 'Social protection and ...
6     [{'code': '2', 'name': 'Public sector governan...
7     [{'code': '11', 'name': 'Environment and natur...
8     [{'code': '10', 'name': 'Rural development'}, ...
9     [{'code': '2', 'name': 'Public sector governan...
10    [{'code': '10', 'name': 'Rural development'}, ...
11    [{'code': '10', 'name': 'Rural development'}, ...
12    [{'code': '4', 'name': 'Financial and private ...
dtype: object

如您所见，最后一行（第 12 行）已正确填写，其他行也是如此，您可以将其重新分配给原始 DataFrame。

根据其他键值对填充空白字典值

Filling in blank dictionary values based on other key value pairs

python

dictionary

missing-data

pandas