跳转到主内容
websoft网络软件专家 - 深耕网络技术,打造实用软件!

数据清洗:用千问表格Agent一键去除重复值与修正格式

千问表格Agent支持一键去重、格式标准化及正则清洗:一、通过“数据处理→智能去重”按指定列组合识别并保留首条重复记录;二、右键“应用格式模板”,自动检测并统一日期、电话等字段格式;三、在“高级清洗”中自定义正则规则精准重构特殊编码。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜如果您在使用千问表格Agent进行数据清洗时,发现表格中存在重复记录或字段格式不统一,可能影响后续分析的准确性。以下是利用千问表格Agent一键去除重复值与修正格式的具体操作路径:

一、启用智能去重功能

千问表格Agent内置的去重模块可自动识别并标记语义重复与完全重复的行记录,支持基于指定列组合判断重复逻辑,避免误删关键变体数据。

1、在千问表格Agent界面顶部菜单栏点击

“数据处理”

选项卡。

2、在下拉子菜单中选择

“智能去重”

,系统将自动加载当前工作表全部字段。

3、勾选用于判定重复的列(如“姓名+手机号”或“订单ID+时间戳”),取消勾选易变辅助列(如“录入时间”“操作员”)。

4、点击

“预览重复项”

,查看高亮标出的重复组及保留策略建议。

5、确认无误后点击

“执行去重”

,系统将仅保留每组中的首条记录,并在操作日志中生成去重统计报告。

二、调用格式标准化模板

千问表格Agent提供预置格式规则库,可批量将日期、电话、邮箱、金额等常见字段转换为统一规范格式,消除空格、大小写、分隔符不一致等问题。

1、在表格任意单元格右键,选择

“应用格式模板”

。

2、在弹出面板中定位到目标列标题,点击列名右侧的

“格式检测”

图标。

3、系统自动识别该列数据特征(如检测到“2024/03/15”“2024-03-15”“15-Mar-2024”混合出现),并推荐“ISO标准日期格式(YYYY-MM-DD)”

。

4、点击

“应用模板”

,所有非空单元格即时转为统一格式,异常值(如“未知”“暂无”)被标记为待人工复核状态。

5、对电话列重复上述流程,选择

“中国大陆手机号标准化”

模板,自动补全“+86”前缀并删除空格、短横线。

三、自定义正则清洗规则

当预置模板无法覆盖特殊业务格式(如产品编码“PROD-A-001-V2”需统一为大写且去除版本号)时,可通过正则表达式定义清洗逻辑,实现精准字段重构。

1、进入

“高级清洗”

面板,点击“新建正则规则”

。

2、在“匹配模式”输入框中填写:

^PROD-[A-Z]-\d{3}-V\d$,用于识别目标编码格式。

3、在“替换为”输入框中填写:

PROD-$1-$2,其中$1捕获字母段,$2捕获三位数字段。

4、勾选

“仅作用于当前列”

,并指定目标列为“产品编码”。

5、点击

“试运行”

查看前10行匹配结果,确认替换效果后点击“批量执行”

。

相关文章