第4章初步整理
第4章初步整理(第4/5頁)
能解決的,需要業務方確認編碼規則,或者至少明確哪些編碼是有效的,哪些是無效的、需要如何處理。
他整理了一下問題,帶著筆記本去找王海。
王海正在小會議室裡打電話,門虛掩著。陳默站在門口等了一會兒。聽到王海對著電話說:“……李總您放心,我們這邊全力推進,初步分析很快就能出來……對,我們很重視,專門抽調了精乾力量……明白,保持溝通……”
又等了幾分鐘,王海掛了電話出來,看到陳默,臉上還帶著講電話時的笑容:“默默,什麼事?數據弄好了?”
“還冇有。遇到個問題,需要確認。”陳默把筆記本屏幕轉向他,指著那個編碼混亂的問題,“這個字段很關鍵,後續分類彙總和分析都依賴它。但現在數據裡編碼很亂,跟給的碼表對不上。可能需要聯係天晟那邊,確認一下準確的編碼規則,或者提供一份最新的碼表。不然清洗後的數據,這個字段不可用。”
王海湊近看了看陳默指出的那些異常樣本,眉頭皺了起來。他手指在屏幕上敲了敲:“這麼多亂七八糟的?”
“嗯,比例不低。而且分散在不同時間段,不像是偶然錯誤。”陳默說。
王海直起身,摸著下巴,思考了幾秒鐘。“聯係天晟……他們那邊it對接人你又不是不知道,效率低,問個問題三天不回。而且這種細節問題,去問他們,顯得我們水平不夠,連個數據清洗都搞不定。”他搖搖頭,“時間不等人。這樣,你先按他們給的那個舊碼表來,能對上的就歸類,對不上的……”他頓了頓,“對不上的,你先統一歸到一個‘其他’或者‘未知’類彆裡。標註一下比例。我們分析的時候,可以暫時把這類‘未知’交易單獨拿出來看,或者按比例分攤到已知類彆裡做個估算。先把主乾數據跑通,出個初步方向。細節問題,等後麵深入分析的時候,有必要再去問。”
陳默看著王海:“王組,這樣處理的話,如果‘未知’比例很高,或者‘未知’裡的交易性質特殊,可能會對後續分析結論產生比較大的偏差。尤其是風險判斷,可能失準。”
“我知道有風險。”王海語氣有些不耐煩了,但很快又調整回來,拍拍陳默肩膀,“但咱們做項目,不能追求百分百完美,尤其是在時間緊的情況下。要抓住主要矛盾。你現在卡在這裡,後麵所有工作都得停。先按我說的辦法處理,出一個可用的基礎數據集。這是當前最重要的。有點偏差,我們在後續建模的時候,可以通過設置誤差範圍、做敏感性測試來彌補。快去弄吧,抓緊時間。”
陳默沉默了兩秒,說:“行。那我先按現有碼表清洗,無法識彆的歸為‘未知’,並記錄比例和
(本章未完,請點擊下一頁繼續閱讀)