今天，我们以一个“重复数据清洗”的案例为例，对表格中的列执行如下操作：

1. 删除“用户ID”列重复的记录，仅保留第一次出现的记录。

一、需求分析

有一个表格，500w数据。截取了表头和部分数据：

用户ID本来是唯一的，现在表格有重复的，需要进行删除。

二、工作流配置

挂一个”数据去重“，如图：

输入你要去重的列， 支持多个，多个用逗号分隔就行了。