在AWS Glue的scala编程中连接多个s3文件

在AWS Glue的scala编程中连接多个s3文件,scala,aws-glue,Scala,Aws Glue,如何在scala中连接多个s3文件?根据连接数据,我需要将数据插入或更新到MySQL数据库中 让我知道是否有这样的示例脚本。Ramesh,虽然我没有scala脚本来连接文件并导入到Mysql,但这个aws链接可能会让您了解如何为S3中的3个文件创建不同的数据帧,然后根据需要连接它们,然后再处理创建/导入到Mysql/redshift表 创建一个胶水爬虫&指向3个文件,为S3文件生成数据库/表目录(参考:) 在scala脚本中,为3个表创建数据帧,然后根据需要连接它们 网址: 谢谢 Yuva如果提

如何在scala中连接多个s3文件?根据连接数据,我需要将数据插入或更新到MySQL数据库中


让我知道是否有这样的示例脚本。

Ramesh,虽然我没有scala脚本来连接文件并导入到Mysql,但这个aws链接可能会让您了解如何为S3中的3个文件创建不同的数据帧,然后根据需要连接它们,然后再处理创建/导入到Mysql/redshift表

  • 创建一个胶水爬虫&指向3个文件,为S3文件生成数据库/表目录(参考:)
  • 在scala脚本中,为3个表创建数据帧,然后根据需要连接它们
  • 网址:

    谢谢


    Yuva

    如果提供的解决方案/链接有用,请投票/接受答案。