C# 如何在Azure数据工厂的Databrick上运行.Net spark作业？

在Azure数据工厂中，您有一个DataRicks Acvity。此活动支持运行python、jar和笔记本。这些笔记本可以用scala、python、java和R编写，但不能用c#/.net编写

是否有内在的或直接的支持，我可以编写我的.NET spark代码并在Data Factory的DataRick上运行它

---

我可以在Azure Databricks中完全使用.NET spark吗？

您指定要启动JAR文件。.NET for Apache Spark项目使用一个JAR文件启动一个侦听器，.NET代码随后连接到该侦听器

JAR是microsoft-spark-2.4.x-0.12.1.JAR（取决于spark的版本和.NET NuGet的版本）。要运行的类是org.apache.spark.deploy.dotnet.DotnetRunner，您需要将正确的参数传递给它，以便它启动.NET应用程序

---

Ed

你提到过吗？是的，我提到过。但正如您所看到的，这是定制的，并且使用CLI。正如我提到的，我也做了同样的事情。我想知道的是，我可以使用Azure数据工厂以任何方式调用砖块上的.NET spark