- 相關推薦
怎樣提升數(shù)據分析能力
我們正在迎來一個數(shù)據爆炸的時代:各類設備和互動產生的數(shù)據量正以年均大于50%的速度增長,那么,如何提高提升數(shù)據分析能力呢?
第一步:數(shù)據準備:(70%時間)
1.獲取數(shù)據(爬蟲,數(shù)據倉庫)
2.驗證數(shù)據
3.數(shù)據清理(缺失值、孤立點、垃圾信息、規(guī)范化、重復記錄、特殊值、合并數(shù)據集)
4.使用python進行文件讀取csv或者txt便于操作數(shù)據文件(I/O和文件串的處理,逗號分隔)
5.抽樣(大數(shù)據時。關鍵是隨機)
6.存儲和歸檔
第二步:數(shù)據觀察(發(fā)現(xiàn)規(guī)律和隱藏的關聯(lián))
1.單一變量:點圖、抖動圖;直方圖、核密度估計;累計分布函數(shù)
2.兩個變量:散點圖、LOESS平滑、殘差分析、對數(shù)圖、傾斜
3.多個變量:假色圖、馬賽克圖、平行左邊圖
第三步:數(shù)據建模
1.推算和估算(均衡可行性和成本消耗)
2.縮放參數(shù)模型(縮放維度優(yōu)化問題)
3.建立概率模型(二項、高斯、冪律、幾何、泊松分布與已知模型對比)
第四步:數(shù)據挖掘
1.選擇合適的機器學習算法(蒙特卡洛模擬,相似度計算,主成分分析)
2.大數(shù)據考慮用Map/Reduce
3.得出結論,繪制最后圖表
循環(huán)到第二步到第四步,進行數(shù)據分析,根據圖表得出結論完成文章。
以業(yè)務為核心做數(shù)據分析
“無尺度網絡模型”的作者艾伯特-拉斯洛·巴拉巴西認為——人類93%的行為是可以預測的。數(shù)據作為人類活動的痕跡,就像金礦等待發(fā)掘。但是首先你得明確自己的業(yè)務需求,數(shù)據才可能為你所用。
數(shù)據為王,業(yè)務是核心
1.了解整個產業(yè)鏈的結構
2.制定好業(yè)務的發(fā)展規(guī)劃
3.衡量的核心指標有哪些
有了數(shù)據必須和業(yè)務結合才有效果。首先你需要摸清楚所在產業(yè)鏈的整個結構,對行業(yè)的上游和下游的經營情況有大致的了解。然后根據業(yè)務當前的需要,指定發(fā)展計劃,從而歸類出需要整理的數(shù)據。最后一步詳細的列出數(shù)據核心指標(KPI),并且對幾個核心指標進行更細致的拆解,當然具體結合你的業(yè)務屬性來處理,找出那些對指標影響幅度較大的影響因子。前期資料的收集以及業(yè)務現(xiàn)況的全面掌握非常關鍵。
思考指標現(xiàn)狀,發(fā)現(xiàn)多維規(guī)律
1.熟悉產品框架,全面定義每個指標的運營現(xiàn)狀
2.對比同行業(yè)指標,挖掘隱藏的提升空間
3.拆解關鍵指標,合理設置運營方法來觀察效果
4.爭對核心用戶,單獨進行產品用研與需求挖掘
發(fā)現(xiàn)規(guī)律不一定需要很高深的編程方法,或者復雜的統(tǒng)計公式,更重要的是培養(yǎng)一種感覺和意識。不能用你的感覺去揣測用戶的感覺,因為每個人的教育背景、生活環(huán)境都不一樣。很多數(shù)據元素之間的關系沒有明顯的顯示,需要使用直覺與觀察(數(shù)據可視化技術來呈現(xiàn))。
3. 規(guī)律驗證,經驗總結
發(fā)現(xiàn)了規(guī)律之后不能立刻上線,需要在測試機上對模型進行驗證。
【怎樣提升數(shù)據分析能力】相關文章:
如何提升數(shù)據分析能力范文07-02
flash怎樣分析數(shù)據?07-10
請問網站數(shù)據怎樣分析?07-10
如何提升分析歸納的能力07-02
怎樣提升寶寶數(shù)學能力06-23
怎樣提升語文作文能力06-27
怎樣提升自己交際能力06-26
怎樣提升業(yè)務管理能力06-28