Pyspark--如何左合并数据帧

在Pandas中，我可以像这样合并两个数据帧：

df1 = pd.DataFrame({'lkey': ['foo', 'bar', 'baz', 'foo'],
                    'value': [1, 2, 3, 5]})
df2 = pd.DataFrame({'rkey': ['foo', 'bar', 'baz', 'foo'],
                    'value': [5, 6, 7, 8]})

df1.merge(df2, how='left', left_on='lkey', right_on='rkey')


  lkey  value_x rkey  value_y
0  foo        1  foo        5
1  foo        1  foo        8
2  bar        2  bar        6
3  baz        3  baz        7
4  foo        5  foo        5
5  foo        5  foo        8

---

在pyspark中会有什么类似的情况？左连接？

您可以在pyspark中应用连接作为

df = df1.join(df2, df1.lkey==df2.rkey, 'left_outer')

---

互联网上有很多有用的资源。或