<xmp id="samau"><acronym id="samau"></acronym><rt id="samau"><center id="samau"></center></rt>
<sup id="samau"><small id="samau"></small></sup>
<rt id="samau"><small id="samau"></small></rt>
<sup id="samau"><center id="samau"></center></sup>
<acronym id="samau"><xmp id="samau">
<acronym id="samau"></acronym>

大數據實戰派 都愛大講臺

當前位置:首頁  /  課程  /  【高階】億級用戶行為分析項目實戰(Spark)

【高階】億級用戶行為分析項目實戰(Spark)

【高階】億級用戶行為分析項目實戰(Spark)

分享到:

1個好項目不亞于1年工作經驗!這是國內某頂級運營商線上運行的大數據項目,生產環境150+節點,學會后可以非常自信的寫到簡歷上。課程內容涉及項目業務介紹、技術選型與架構設計、項目的架構演進、手機端到服務端數據流程、日志采集設計與要求、日志采集拓撲結構、線上和本地集群資源規劃、項目全流程開發、項目總結,還有大數據項目面試可能被問到的21個問題。

  • ¥626   ¥1880 

  • VIP免費

時長    14小時16分鐘          

免費試學 全款購買 當前學習人數 754 收藏


課程導圖

這是國內某頂級運營商線上運行的大數據項目,生產環境150+節點,學會后可以非常自信的寫到簡歷上。



課程收獲

1.獲得近20小時Spark實戰項目課程
2.獲得1個大項目4個子項目完整源碼
3.獲得1-3年Spark項目開發經驗



課程特色

1.課程可有償直播講解
2.課程老師可收徒一對一輔導



適用人群

1.有java基礎的學員
2.有大數據基礎的學員
3.有spark基礎的學員



技術說明

1. 開發語言:Java、Scala

2. 開發工具:IDEA

3. 主要技術:Hadoop2.6、Zookeeper-3.4.6、Flume1.8、HBase1.2.6、Kafka_2.11-1.0.0、Spark-2.3.0-bin-hadoop2.6


課程資料詳細完整

錄播視頻課程,免費提供PPT資料、Word文檔、隨堂筆記、項目代碼、Shell腳本、集群配置文件、安裝包、手畫相關項目架構圖


講師介紹

  • 楊俊

    大講臺大數據高級講師 | 原某廣電數據咨詢公司大數據高級架構師

    原某廣電數據咨詢公司大數據高級架構師 資深Java玩家,大數據技術狂熱者。曾在北京某廣電數據咨詢公司擔任大數據高級架構師,7年以上大數據實操經驗, 經歷過10個以上的重量級大數據項目。Hadoop源碼級技術大咖,熟練使用Hadoop、Spark、Flink、Hive、HBase、Flume、Kafka、ElasticSearch等各大主流組件。謙虛親和,崇尚實操至上的教學理念。受到學員一致好評。

課程大綱

第一章:項目需求分析與架構設計
項目需求分析與架構設計 1.項目業務介紹
2.技術選型與架構設計
3.項目架構的過去與現在
4.手機客戶端到服務端通信過程與服務質量監控
第二章:大數據采集集群設計與要求
大數據采集集群設計與要求 5.數據采集設計與要求
6.日志采集拓撲結構-數據高峰處理
第三章:大數據測試集群與線上集群資源規劃
大數據測試集群與線上集群資源規劃 7.大數據測試集群與線上集群資源規劃
第四章:華為手機客戶端數據上報服務端【實戰】
華為手機客戶端數據上報服務端 8.手機客戶端數據上報應用開發
9.手機客戶端上報數據到服務端-本地測試
10.手機客戶端上報數據到服務端-服務端測試1
10.手機客戶端上報數據到服務端-服務端測試2
11.手機客戶端上報敏感數據真實流程
第五章:Flume高可用集群采集華為手機業務數據【實戰】
Flume高可用集群采集華為手機業務數據 12.Flume最簡數據采集
13.Flume TailDirSource斷點續傳
14.Flume TailDirSource源碼解讀
15.Flume TailDirSource源碼bug修改
16.Flume TailDirSource 文件回滾驗證源碼bug修改
17.Flume高可用分布式集群構建
18.Flume集群接入手機客戶端上報數據
第六章:Kafka分布式集群實現華為手機數據交換【實戰】
Kafka分布式集群實現華為手機數據交換 19.Kafka集群可用性測試
20.Flume與Kafka整合
21.Kafka數據分區優化理論支撐
22.Kafka分區優化源碼開發
23.Flume與Kafka分區優化測試
第七章:HBase分布式數據庫建?!緦崙稹?
HBase分布式數據庫建模 24.HBase數據庫建模
第八章:Spark Streaming實時項目工程開發【實戰】
Spark Streaming實時項目工程開發 25.相關集群參數集中管理
26.生產環境中優雅停止Spark Streaming作業
27.從HBase獲取Kafka offset消費起始位置
28.Spark Streaming消費kafka數據
29.獲取當前DStream每個批次的offset
30.對數據做ETL
31.華為手機業務統計分析
32.業務數據入庫HBase
33.使用HBase維護kafka offset
34.項目中kryo序列化使用
35.Kafka分區限流
36.HBase計數器應對高并發流
第九章:項目工程本地測試與線上部署【實戰】
Spark Streaming實時項目工程開發 37.手機應用業務建表
38.項目本地測試jar包沖突解決
39.項目本地測試跑通
40.項目打包上傳至服務器
41.Spark ON YARN安裝部署
42.YARN生產環境調度器配置與使用
43.項目運行腳本開發及下線、線上配置切換
44.Spark華為手機作業提交YARN運行
45.Spark Streaming結合業務進行代碼執行詳解
第十章:web用戶行為可視化項目接口開發【實戰】
web用戶行為可視化項目接口開發 46.web用戶行為可視化項目整體介紹
47.用戶行為接口開發與查詢
48.用戶行為接口開發總結
49.Spark華為手機項目總結
50.Spark開發工程師面試21問

你可能還喜歡的課程

  • 【千元鉅惠】 資深大數據架構大佬全程直播,傳授硬核技能:①OLAP/HTAP/湖倉一體等多種架構;②借FlinkCDC/Kylin/Hudi/Doris等打造數倉;③湖倉一體化項目落地實踐;④基于Flink和StreamX打造低代碼大數據中臺

    查看詳情 QQ咨詢

    大數據實戰精英+架構師班

    查看詳情 4個月

  • 【千元鉅惠】 手握6000+節點的大數據運維大咖全程直播,4個月帶你熟悉大數據集群規劃、部署、監控、排錯、容器化等技能,并完成3個商業項目。

    查看詳情 QQ咨詢

    大數據運維尖刀班

    查看詳情 4個月

  • 【3重優惠】 技術大牛組團授課,專講大數據核心知識和大型項目實戰,多臺物理服務器數十個節點現場直播演示!企業級實戰項目讓你四個月掌握2年的項目經驗!

    查看詳情 QQ咨詢

    大數據開發工程師特訓營

    查看詳情 16周

  • 【優惠活動】 新東方、搜狗、騰訊等名企一線實戰講師授課,技“高”一籌!重在培養數據分析方法及思路,而不僅僅是學習技術及工具。帶教多個互聯網及金融領域企業真實項目,而不僅僅是講理論和小案例。

    查看詳情 QQ咨詢

    數據分析特訓營

    查看詳情 16周

  • 本課程為大數據金融信貸項目實戰課,著重講解企業中常用的大數據技術理論與實戰,如Hadoop、Hive、HBase、Sqoop、Flume、Kafka、Spark Streaming、Spark SQL、Spark Structured Streaming等。課程包含離線項目和實時項目,從項目業務需求、技術選型、架構設計、集群安裝部署、集成開發以及項目可視化進行多方位實戰講解。

    查看詳情 QQ咨詢

    互聯網金融信貸項目實戰(Hadoop&Spark)

    查看詳情 38小時44分鐘

  • 干貨多:15案例 + 3實戰 + 2項目;
    提升快:滴滴出行一線架構師傳授實戰經驗,30小時多方位講解數據倉庫構建相關理論及實戰內容
    技術全:綜合運用Hive/Flume/Kafka/Azkaban/Oozie/SparkSQL等技術;

    查看詳情 QQ咨詢

    基于大數據體系構建數據倉庫

    查看詳情 32小時52分鐘

  • 本課程基于某電商公司運營實時分析系統(2B),對Flink進行系統講解。通過本課程的學習,既能獲得Flink企業級真實項目經驗,也能深入掌握Flink的核心理論知識,還能獲得Flink在生產環境中安裝、部署、監控的寶貴經驗,從而深入掌握Flink技術。

    查看詳情 QQ咨詢

    Flink電商運營項目實戰

    查看詳情 50小時6分鐘

他們在學

  • 136****0096

  • 回歸~蘭興星

  • 班諾

  • 27792

  • 135****5098

  • 152****1028

  • 175****5888

  • 27880

  • 微信用戶27865

  • 158****0909

  • 27712

  • 186****7063

  • 188****4832

  • 152****6859

  • 191****5982

  • 182****3891

 
QQ在線咨詢
微信掃碼咨詢
亚洲精品自产拍在线观看_国产高清无码视频_国产精品久久一区二区三区动漫_久久9999无码精品亚洲日韩