天机阁数据论坛app

数据人的随身资料库 · 有问题就问,有方案就晒

晚上好,访客朋友 访客默认头像 登录 注册加入
公告 本周主题:把手上跑通过的数据流程写成图文笔记,附上踩坑记录,被标精华的朋友会收到社区周边小礼。发帖前记得先搜一遍关键词,别重复造轮子~

最新话题

今日新帖 42 · 在线 316

精华帖详情预览

已被收藏 1,204 次
数据清洗流程示意图

从零搭一套能复用的数据清洗流程(附检查清单)

作者把流程拆成了「取数—体检—对齐—留痕」四个阶段,每个阶段都给了判断标准。比如体检阶段,先看空值率、再看重复率、最后看数值分布,顺序别反,反了会白跑一遍。

原文摘录:「不要等数据出问题才想起来写日志。每一步都留一份中间快照,出事了能回滚,事后也能复盘。这一条比任何技巧都值钱。」
作者:版主 · 老陈 阅读 12,860 评论 128 更新于 2 小时前

第一次发帖?按这个来就行

社区里没人会笑你问得基础,但把话说清楚,能让你更快拿到答案。

1. 先说清背景 数据从哪来、量级多大、跑在什么环境,三句话交代完,回答的人少猜一半。
2. 贴关键片段 报错信息和字段样例贴出来,敏感内容记得脱敏,别把整份文件直接甩上来。
3. 说你试过什么 已经排除的可能、查过的帖子都写上,说明你真的动过手,热心人更愿意帮。