Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/apache-kafka/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache kafka 对于azure提供的实时流媒体,我必须从azure使用哪项服务?_Apache Kafka_Azure Hdinsight_Azure Eventhub_Azure Stream Analytics_Azure Databricks - Fatal编程技术网

Apache kafka 对于azure提供的实时流媒体,我必须从azure使用哪项服务?

Apache kafka 对于azure提供的实时流媒体,我必须从azure使用哪项服务?,apache-kafka,azure-hdinsight,azure-eventhub,azure-stream-analytics,azure-databricks,Apache Kafka,Azure Hdinsight,Azure Eventhub,Azure Stream Analytics,Azure Databricks,我正在尝试使用Azure进行实时分析,当我浏览了各种服务后,我看到了Azure提供的三项服务:HDInsight(Kafka)、Azure stream analytics和Azure Events hub我必须使用哪些服务。 我正在尝试从SQL server、twitter或其他网站实时流式传输数据,并将其存储在Azure数据仓库或数据湖中。为了回答这个高级问题,可以使用事件中心(包括事件中心Kafka)和HDInsight来接收数据。第一个提供无服务器服务,而第二个提供托管Kafka集群 A

我正在尝试使用Azure进行实时分析,当我浏览了各种服务后,我看到了Azure提供的三项服务:HDInsight(Kafka)、Azure stream analytics和Azure Events hub我必须使用哪些服务。
我正在尝试从SQL server、twitter或其他网站实时流式传输数据,并将其存储在Azure数据仓库或数据湖中。

为了回答这个高级问题,可以使用事件中心(包括事件中心Kafka)和HDInsight来接收数据。第一个提供无服务器服务,而第二个提供托管Kafka集群

Azure Stream Analytics专注于数据处理、转换和分析。您可以使用SQL查询来执行此操作,并从事件中心(或物联网中心)获取数据,然后将其移动到各种接收器,如SQL、SQL数据仓库、数据湖等

为了回答您的特定问题,您可以看看如何使用事件中心和流分析来处理Twitter数据

另外,您提到要从SQL Server获取数据?是流式数据吗?Azure Stream Analytics支持来自SQL的数据作为参考数据(用于丰富数据流的慢速移动数据)。您是否正在寻找进行ETL并以常规速度将数据从SQL server移动到其他位置的方法?对于这个Azure数据工厂或SQL Server集成服务可能是一个不错的选择

让我知道如果这回答了你的问题,我会很高兴给你更多的信息

让-塞巴斯蒂安
(Azure Stream Analytics)

您好Jean-Sébastien,谢谢您的回复。我一直在阅读并熟悉ASA和ADF。您能否帮助我了解一些用例,其中一个可能更喜欢这些服务中的一个而不是另一个?我知道ADF真的很强大,可以做很多事情,但肯定有一些用例可以使用它们中的任何一个(例如,从事件中心复制数据并存储在SQL数据库中?