Csv 哪些软件可用于数据质量检查

Csv 哪些软件可用于数据质量检查,csv,text,data-quality,Csv,Text,Data Quality,我正在寻找一些可能的软件选项,允许自定义规则操作批量数据文件(.csv),例如,适当的大写(允许州保留大写和唯一的姓氏),识别字段中特定单词的字数,以及一些其他自定义规则。任何指导都将不胜感激。一个快速的谷歌“数据清理实用程序”发现了以下内容: 它们看起来很接近你要找的东西 这将取决于规则的复杂程度。要比简单的东西复杂得多,你可能只需要编写一些东西(或让别人编写)就可以领先。你可以使用Talend Open Studio来完成这项任务。它是一个用于数据操作和集成的开源ETL工具。例如,您可以导

我正在寻找一些可能的软件选项,允许自定义规则操作批量数据文件(.csv),例如,适当的大写(允许州保留大写和唯一的姓氏),识别字段中特定单词的字数,以及一些其他自定义规则。任何指导都将不胜感激。

一个快速的谷歌“数据清理实用程序”发现了以下内容:

它们看起来很接近你要找的东西


这将取决于规则的复杂程度。要比简单的东西复杂得多,你可能只需要编写一些东西(或让别人编写)就可以领先。

你可以使用Talend Open Studio来完成这项任务。它是一个用于数据操作和集成的开源ETL工具。例如,您可以导入CSV>>数据库>>执行转换>>导出CSV。可能性是无穷的

你可以在这里找到它:

听起来您可能正在创建数据的概要文件。为此,您可以使用Talend Open Profiler,他们最近添加了对平面文件(如.csv)的支持。它使用简单,你应该在30分钟内启动并运行

您可以在此处找到下载:

您可以在此处找到一些教程:http://www.talendforge.org/tutorials/menu.php

在教程中选择“数据质量”选项卡,向下滚动至“Talend Open Profiler”


这是我在新数据集上评估数据质量的第一步。

谢谢,我将检查一下。看起来它能满足要求!这也是一个有趣的、稍微不太复杂的工具。(没有talend复杂)