直播平臺實時數倉與畫像運營
掌握java、scala、sql語言,大數據實時計算組件(kafka/redis/flink等).
不包含練習時間,純講解時長達8天(每天6小時左右).
從業人員,可以領略設計和思想為主(新手則建議逐行代碼跟隨實現)
真正為公司帶來業務價值的應用場景

實時大屏
從投放數據中提取廣告價值

實時BI報表
學習

實時用戶畫像
客觀分析不止于感性分析

實時監控預警
個性化推薦不止推薦算法

1000+實時指標
200+主題,1000+指標
行為主題,消費分析,活動分析,禮物分析,用戶分析,流量分析
500+代碼文件
需求豐富,場景復雜
1000+的java代碼開發,包含數千個類,全程現場手敲
80+特別設計
背壓監測,事務控制
實時系統一旦上線,就要求7*24小時在線運行,需要大量額外設計
項目整體技術架構
分層開發,結構清晰,項目實用,技術完整
直觀的報表看板
基于echarts組件,直觀展示各類畫像數據統計報表
先進的流批一體設計
基于streamx最新框架實現流批一體,自由sql定制
兩階段提交實現生產級exactly-once
lambda架構之所以一直存在,正是因為實時計算系統難以保證真正精確,本項目綜合大量實力企業的做法,實現了生產級的嚴格一致
完善的背壓量化監控機制
實時系統中,flink背壓一直是線上系統重點關注的問題,項目中通過獨到的設計實時收集并量化背壓指標
學員學習感受分享
數據倉庫從業人員的學后感受,那是最客觀真實和有參考意義的. 截圖來源于免費公開分享版

