数据清洗

关于这个 Skill

数据分析 / 数据处理 ## 标签 数据清洗、数据预处理、去重、缺失值处理、异常值检测、数据脱敏、批量处理、数据画像、Excel、CSV ## 触发词 - 清洗数据 / 清理数据 - 去重 - 补全缺失值 - 统一格式 - 检查异常值 - 数据脱敏 - 批量清洗 - 数据画像 - 字段校验 ## 使用示例 1. **基础清洗**："帮我清洗这个客户表格，去重并补全缺失值" 2. **脱敏**："把这份员工数据的手机号和身份证号脱敏" 3. **批量处理**："清洗 data 目录下所有 CSV 文件" 4. **数据画像**："先看一下这个表格的数据质量" ## 依赖要求 - Python ≥ 3.10 - pandas、numpy、openpyxl（必需） - pyarrow（仅使用 Parquet 格式时需要） ## 版本信息 - 当前版本：1.0.0 - 更新日志： - v1.0.0（2026-08-12）：首发版本，包含去重、缺失值处理、格式标准化、异常值检测、字段校验、PII 脱敏、数据画像、批量处理等全部功能 ## 作者 回彭远