Cloud Spring批处理作为ETL,用于将呼叫数据记录加载到DB-Telecom

Cloud Spring批处理作为ETL,用于将呼叫数据记录加载到DB-Telecom,cloud,etl,spring-batch,gridgain,Cloud,Etl,Spring Batch,Gridgain,如果有人可以分享信息,关于SpringBatch用作ETL工具。特别是在电信公司,用于从网络交换机加载呼叫数据记录(CDR)。内部ETL使用spring batch开发 在生产中表现如何 任何与Spring batch一起使用的云计算平台都可以实现可伸缩性 SpringBatch对于Java开发人员编写ETL作业来说非常简单,可能比SSIS这样的专用ETL工具更简单、更易于维护 我无法提供有关性能的详细信息,因为我正在运行的所有大型作业都受网络延迟而不是应用程序本身的限制,但较小的提取类型作业(

如果有人可以分享信息,关于SpringBatch用作ETL工具。特别是在电信公司,用于从网络交换机加载呼叫数据记录(CDR)。内部ETL使用spring batch开发

  • 在生产中表现如何

  • 任何与Spring batch一起使用的云计算平台都可以实现可伸缩性


  • SpringBatch对于Java开发人员编写ETL作业来说非常简单,可能比SSIS这样的专用ETL工具更简单、更易于维护

    我无法提供有关性能的详细信息,因为我正在运行的所有大型作业都受网络延迟而不是应用程序本身的限制,但较小的提取类型作业(约10K条记录)通常在3-5秒内运行,其中大部分是加载和读取配置

    另外,尽管您必须编写一些自己的reader和writer类,因为框架提供的类通常不是线程安全的


    如果您有任何具体问题,我很乐意尝试回答。

    我认为这个问题最好在这里提议的更具体的QA站点电信中解决,因为CDR的管理可能需要通过ETL流程进行具体处理:如果您喜欢这个提议,请在那里提出您的问题,并遵循该提议