數(shù)據(jù)分析：觀測(cè)——實(shí)驗(yàn)——應(yīng)用

觀測(cè)：對(duì)事物形成客觀量化的認(rèn)知：簡(jiǎn)單可以理解為獲取數(shù)據(jù)制作報(bào)表、圖表、儀表盤

總的過(guò)程有采集數(shù)據(jù)、存儲(chǔ)數(shù)據(jù)、展示數(shù)據(jù)、設(shè)定標(biāo)準(zhǔn)、發(fā)現(xiàn)異常、研究關(guān)系

實(shí)驗(yàn)指的是：發(fā)現(xiàn)規(guī)律、驗(yàn)證假設(shè)

從科學(xué)研究、A/B測(cè)試

總的過(guò)程有拆解問(wèn)題、提出假設(shè)、設(shè)計(jì)實(shí)驗(yàn)、收集數(shù)據(jù)、分析數(shù)據(jù)、驗(yàn)證假設(shè)

應(yīng)用：不斷基于數(shù)據(jù)反饋迭代產(chǎn)品

總的過(guò)程有制定策略、實(shí)時(shí)策略、反復(fù)迭代、訓(xùn)練算法、優(yōu)化算法、使用算法

數(shù)據(jù)分析的全貌

觀測(cè)分為觀察和測(cè)量

采集數(shù)據(jù)主要是解析系統(tǒng)日志

采集數(shù)據(jù)可以埋點(diǎn)獲取新數(shù)據(jù)

比如觀看視頻記錄用戶IP，通過(guò)解析日志可以得到觀看地址

埋點(diǎn)是數(shù)據(jù)分析師獲取新數(shù)據(jù)的主要方式也是最可控最可靠的方式

采集數(shù)據(jù)還可以通過(guò)傳感器采集

真實(shí)世界的數(shù)據(jù)基本上都可通過(guò)傳感器采集如天氣傳感器

采集數(shù)據(jù)的另一個(gè)方式還有爬蟲(chóng)，但可能存在法律問(wèn)題，是違法的，正規(guī)公司不爬蟲(chóng)

采集數(shù)據(jù)還可以通過(guò)API采集

存儲(chǔ)數(shù)據(jù)：各種類型的數(shù)據(jù)庫(kù)，各有千秋，需要專門數(shù)據(jù)工程師開(kāi)發(fā)

存儲(chǔ)數(shù)據(jù)：連接數(shù)據(jù)庫(kù)取數(shù)

展示數(shù)據(jù)：可視化高效傳達(dá)信息，說(shuō)白轉(zhuǎn)成表格、圖表

分析數(shù)據(jù)的目的：及時(shí)發(fā)現(xiàn)異常，找到數(shù)據(jù)之間的因果關(guān)系

數(shù)據(jù)是客觀統(tǒng)一的

設(shè)定標(biāo)準(zhǔn)+發(fā)現(xiàn)異常

研究關(guān)系

提出假設(shè)然后驗(yàn)證假設(shè)

所有未經(jīng)事實(shí)數(shù)據(jù)驗(yàn)證的想法都是假設(shè)

提出假設(shè)，驗(yàn)證假設(shè)，找到規(guī)律

設(shè)計(jì)A/B測(cè)試獲取數(shù)據(jù)

應(yīng)用數(shù)據(jù)創(chuàng)造價(jià)值

數(shù)據(jù)拆解方法

分析框架

將數(shù)據(jù)應(yīng)用于業(yè)務(wù)

將數(shù)據(jù)應(yīng)用于算法

Excel操作