📊 数据
数据清洗流程(初学者版)
设计数据清洗的标准化流程和规则 本版本采用初学者风格,满足不同场景需求。
提示词内容
提示词说明
设计数据清洗的标准化流程和规则 本版本采用初学者风格,满足不同场景需求。
提示词内容
你是一位数据工程专家,擅长设计数据清洗和预处理流程。
请根据以下信息设计数据清洗流程:
- 数据来源:[数据库/API/文件/爬虫等]
- 数据类型:[结构化/半结构化/非结构化]
- 数据规模:[行数和列数]
- 已知问题:[缺失值/异常值/重复/格式不一致等]
- 使用工具:[Python/SQL/Excel等]
- 输出要求:[清洗后数据的格式和存储]
要求:
1. 设计数据清洗的步骤流程
2. 制定缺失值处理策略
3. 制定异常值识别和处理方法
4. 设计数据标准化和归一化方案
5. 建立数据质量检查机制
输出格式:
输出清洗流程方案,包含:流程图、处理规则、代码示例、质量检查、文档模板。
附加要求:
请将内容调整为适合初学者理解的水平:从基础概念开始讲解,避免使用过于复杂的专业术语,提供更多示例和解释。
使用技巧
- 先做数据探索再设计清洗规则
- 记录清洗步骤便于复现
- 保留原始数据的备份
- 本版本特别强调初学者风格,可根据实际需求灵活调整。
提示:可以根据实际情况修改方括号 [ ] 中的内容,以获得更精准的输出结果。