第4章初步整理
第4章初步整理(第4/5页)
能解决的，需要业务方确认编码规则，或者至少明确哪些编码是有效的，哪些是无效的、需要如何处理。
他整理了一下问题，带着笔记本去找王海。
王海正在小会议室里打电话，门虚掩着。陈默站在门口等了一会儿。听到王海对着电话说：“……李总您放心，我们这边全力推进，初步分析很快就能出来……对，我们很重视，专门抽调了精干力量……明白，保持沟通……”
又等了几分钟，王海挂了电话出来，看到陈默，脸上还带着讲电话时的笑容：“默默，什么事？数据弄好了？”
“还没有。遇到个问题，需要确认。”陈默把笔记本屏幕转向他，指着那个编码混乱的问题，“这个字段很关键，后续分类汇总和分析都依赖它。但现在数据里编码很乱，跟给的码表对不上。可能需要联系天晟那边，确认一下准确的编码规则，或者提供一份最新的码表。不然清洗后的数据，这个字段不可用。”
王海凑近看了看陈默指出的那些异常样本，眉头皱了起来。他手指在屏幕上敲了敲：“这么多乱七八糟的？”
“嗯，比例不低。而且分散在不同时间段，不像是偶然错误。”陈默说。
王海直起身，摸着下巴，思考了几秒钟。“联系天晟……他们那边it对接人你又不是不知道，效率低，问个问题三天不回。而且这种细节问题，去问他们，显得我们水平不够，连个数据清洗都搞不定。”他摇摇头，“时间不等人。这样，你先按他们给的那个旧码表来，能对上的就归类，对不上的……”他顿了顿，“对不上的，你先统一归到一个‘其他’或者‘未知’类别里。标注一下比例。我们分析的时候，可以暂时把这类‘未知’交易单独拿出来看，或者按比例分摊到已知类别里做个估算。先把主干数据跑通，出个初步方向。细节问题，等后面深入分析的时候，有必要再去问。”
陈默看着王海：“王组，这样处理的话，如果‘未知’比例很高，或者‘未知’里的交易性质特殊，可能会对后续分析结论产生比较大的偏差。尤其是风险判断，可能失准。”
“我知道有风险。”王海语气有些不耐烦了，但很快又调整回来，拍拍陈默肩膀，“但咱们做项目，不能追求百分百完美，尤其是在时间紧的情况下。要抓住主要矛盾。你现在卡在这里，后面所有工作都得停。先按我说的办法处理，出一个可用的基础数据集。这是当前最重要的。有点偏差，我们在后续建模的时候，可以通过设置误差范围、做敏感性测试来弥补。快去弄吧，抓紧时间。”
陈默沉默了两秒，说：“行。那我先按现有码表清洗，无法识别的归为‘未知’，并记录比例和
（本章未完，请点击下一页继续阅读）