課程大綱sql
第1章 用戶畫像基礎知識 | 1.用戶畫像基礎知識 2.開發用戶畫像須要用到技術 3.用戶畫像及其應用規劃 4.用戶標籤應用實施方案 5.工程開發代碼案例 6.須要開發的表結構設計 |
第2章 用戶標籤指標體系 | 1.用戶屬性指標體系 2.用戶行爲指標體系 3.用戶消費指標體系 4.用戶風控指標體系 5.標籤口徑及數據調研分析 6.標籤命名方式 |
第3章 用戶畫像集羣環境部署 | 1.搭建虛擬機開發環境 2.HDFS的安裝及應用 3.Zookeeper的安裝及應用 4.Spark的安裝及應用 5.MySQL的安裝及應用 6.Hive的安裝及應用 7.Hbase的安裝及應用 8.Sqoop的安裝及應用 9.kafka的安裝 |
第4章 標籤數據存儲 | 1.Hive存儲及應用 2.Mysql存儲及應用 3.Hbase存儲及應用 4.Elasticsearch存儲及應用 5.爲何用不一樣數據庫進行存儲 |
第5章 標籤數據開發 | 1.數據倉庫基礎知識 2.統計類標籤開發案例 3.規則類標籤開發案例 4.挖掘類標籤開發案例 5.流式計算標籤開發—kafka 6.流式計算標籤開發-Spark Streaming 7.Streaming上線工程化 8.Spark人羣計算功能開發 9.打通數據服務層 |
第6章 項目性能調優 | 1.數據傾斜調優 2.Hive合併小文件 3.使用Spark緩存 4.開發中間表 |
第7章 做業流程調度 | 1.crontab命令調度 2.Airflow介紹 3.Airflow安裝 4.Airflow主要功能模塊 5.Airflow工做流調度 6.畫像工程化調度方案 7.標籤數據監控預警 8.ETL異常問題排查 |
第8章 用戶畫像項目產品化 | 1.標籤視圖與標籤查詢 2.標籤編輯管理 3.用戶人羣圈定與推送 4.多維透視分析 |
第9章 用戶畫像應用 | 1.業務數據分析2.AB效果測試3.精準營銷4.用戶行爲分析5.應用效果評估 |