Hive 在不从S3加载到DB的情况下获取计数

Hive 在不从S3加载到DB的情况下获取计数,hive,analytics,aggregation,data-warehouse,Hive,Analytics,Aggregation,Data Warehouse,当在线应用程序根据查询参数发出请求时,我必须返回计数。为了实现这一点,我们使用管道将大量数据加载到数据库中,然后在收到请求时查询数据库并返回计数 由于数据存在于S3上,当我们接收到请求和返回计数时,是否有一种方法可以直接在S3上查询数据,而不是编写整个基础结构 我可以使用Hive吗?看看:它提供了一种直接在S3上查询数据的简单方法。 您只需将数据指向S3,用标准SQL定义所需的模式。但是当用户从webapp发出请求时,我可以进行此查询吗?当然,您可以连接到它

当在线应用程序根据查询参数发出请求时,我必须返回计数。为了实现这一点,我们使用管道将大量数据加载到数据库中,然后在收到请求时查询数据库并返回计数

由于数据存在于S3上,当我们接收到请求和返回计数时,是否有一种方法可以直接在S3上查询数据,而不是编写整个基础结构

我可以使用Hive吗?

看看:它提供了一种直接在S3上查询数据的简单方法。

您只需将数据指向S3,用标准SQL定义所需的模式。

但是当用户从webapp发出请求时,我可以进行此查询吗?当然,您可以连接到它