Warning: file_get_contents(/data/phpspider/zhask/data//catemap/1/database/8.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181

Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/amazon-s3/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Database 创建第一个数据管道_Database_Amazon S3_Pipeline - Fatal编程技术网

Database 创建第一个数据管道

Database 创建第一个数据管道,database,amazon-s3,pipeline,Database,Amazon S3,Pipeline,我开始对大数据感兴趣了。我很想建立一个数据管道作为练习,你们知道任何好的来源/站点/练习,在那里我可以建立一个数据管道来适应这个概念。我对任何一种技术都持开放态度。这是一个广泛的领域,但你可以阅读一些重要的概念,如数据收集、流式传输、处理、存储和分析 使用AWS服务,您可以更轻松地迎头赶上。尝试使用S3,导入一些CSV文件,使用AWS胶水使用SQL查询数据 对于技术水平较低的人员,您可以阅读AWS无服务器服务,如Lambda、DynamoDB,它们需要较少的学习曲线 AWS有很好的例子: 他们有

我开始对大数据感兴趣了。我很想建立一个数据管道作为练习,你们知道任何好的来源/站点/练习,在那里我可以建立一个数据管道来适应这个概念。我对任何一种技术都持开放态度。

这是一个广泛的领域,但你可以阅读一些重要的概念,如数据收集、流式传输、处理、存储和分析

使用AWS服务,您可以更轻松地迎头赶上。尝试使用S3,导入一些CSV文件,使用AWS胶水使用SQL查询数据

对于技术水平较低的人员,您可以阅读AWS无服务器服务,如Lambda、DynamoDB,它们需要较少的学习曲线

AWS有很好的例子:

他们有许多有用的基本训练:

Youtube也有许多关于许多有用主题的教程

祝你好运