在合并列中将两个数据帧与 pd.NA 合并会产生“TypeError：NA 的布尔值不明确”

使用 Pandas 1.0.1，如果以下情况我无法合并

df = df.merge(df2, on=some_column)

yields

File /home/torstein/code/fintechdb/Sheets/sheets/gild.py, line 42, in gild
    df = df.merge(df2, on=some_column)
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/frame.py, line 7297, in merge
    validate=validate,
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/reshape/merge.py, line 88, in merge
    return op.get_result()
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/reshape/merge.py, line 643, in get_result
    join_index, left_indexer, right_indexer = self._get_join_info()
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/reshape/merge.py, line 862, in _get_join_info
    (left_indexer, right_indexer) = self._get_join_indexers()
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/reshape/merge.py, line 841, in _get_join_indexers
    self.left_join_keys, self.right_join_keys, sort=self.sort, how=self.how
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/reshape/merge.py, line 1311, in _get_join_indexers
    zipped = zip(*mapped)
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/reshape/merge.py, line 1309, in <genexpr>
    for n in range(len(left_keys))
File /home/torstein/anaconda3/lib/python3.7/site-packages/pandas/core/reshape/merge.py, line 1918, in _factorize_keys
    rlab = rizer.factorize(rk)
File pandas/_libs/hashtable.pyx, line 77, in pandas._libs.hashtable.Factorizer.factorize
File pandas/_libs/hashtable_class_helper.pxi, line 1817, in pandas._libs.hashtable.PyObjectHashTable.get_labels
File pandas/_libs/hashtable_class_helper.pxi, line 1732, in pandas._libs.hashtable.PyObjectHashTable._unique
File pandas/_libs/missing.pyx, line 360, in pandas._libs.missing.NAType.__bool__

TypeError: boolean value of NA is ambiguous

虽然这有效：

df[some_column].fillna(np.nan, inplace=True)
df2[some_column].fillna(np.nan, inplace=True)
df = df.merge(df2, on=some_column)
# Works

如果相反，我这样做

df[some_column].fillna(pd.NA, inplace=True)

然后错误返回。

这与pd.NA正在实施于熊猫1.0.0以及 pandas 团队如何决定它应该在布尔上下文中工作。另外，您考虑到它是一个实验性功能，因此除了实验之外不应将其用于任何其他用途：

警告实验：pd.NA 的行为仍然可能会在没有警告的情况下发生变化。

在 pandas 文档的另一个链接中，它涵盖了处理缺失值，我相信可以找到您正在寻找的原因和答案：

布尔上下文中的 NA： 由于 NA 的实际值未知，因此将 NA 转换为布尔值是不明确的。以下引发错误： TypeError: NA 的布尔值不明确

此外，它还提供了一条有价值的建议：

“这也意味着 pd.NA 不能在计算为布尔值的上下文中使用，例如 if 条件：...其中条件可能是 pd.NA。在这种情况下，isna() 可用于可以避免检查 pd.NA 或 pd.NA 的情况，例如通过预先填充缺失值。”