大廠技術(shù)專(zhuān)家垂直賦能
大廠定制開(kāi)班畢業(yè)典禮
大廠實(shí)地沉浸式項(xiàng)目實(shí)訓(xùn)
拓展大廠實(shí)戰(zhàn)項(xiàng)目案例
優(yōu)秀學(xué)員大廠內(nèi)推
大數(shù)據(jù)浪潮席卷全球,應(yīng)用領(lǐng)域?qū)拸V,產(chǎn)業(yè)規(guī)模空前,
就業(yè)口徑寬廣,價(jià)值堪比黃金石油,“錢(qián)途”無(wú)量
大千鋒與京東物流合作共建課程體系,企業(yè)熱門(mén)技術(shù)全方位涵蓋,
融入真實(shí)項(xiàng)目案例和工程實(shí)踐創(chuàng)新。
京東物流合作共建課程
掌握大廠一線剛需
拓展京東物流實(shí)戰(zhàn)項(xiàng)目案例
大數(shù)據(jù)技術(shù)專(zhuān)家親授
大數(shù)據(jù)+數(shù)據(jù)智能助力學(xué)員高起點(diǎn)職業(yè)路徑,定位P5-P7級(jí)數(shù)據(jù)開(kāi)發(fā)工程師培養(yǎng),
學(xué)員跳過(guò)初中級(jí)大數(shù)據(jù)工程師,直接勝任大數(shù)據(jù)研發(fā)部門(mén)Leader相關(guān)崗位
千鋒好程序員大數(shù)據(jù)+數(shù)據(jù)智能,與京東物流大廠合作共建大數(shù)據(jù)技術(shù)領(lǐng)域的實(shí)戰(zhàn)型前瞻深度課程,
對(duì)大廠熱門(mén)技術(shù)及項(xiàng)目進(jìn)行系統(tǒng)、深度的研發(fā)和建設(shè),形成獨(dú)特的教研壁壘
掌握萬(wàn)能的JavaSE開(kāi)發(fā)、大數(shù)據(jù)必知必會(huì)的MySQL、Linux和Shell腳本以及基于Springboot的數(shù)據(jù)服務(wù)研發(fā)。
Java研發(fā)工程師、系統(tǒng)運(yùn)維工程師、數(shù)據(jù)庫(kù)工程師。
Java基礎(chǔ)、集合、線程、IO流、面向?qū)ο蟆ySQL DDL|DML |DQL、索引、JDBC、Linux文件系統(tǒng)命令、軟件安裝、Shell腳本編程。
基于Restful風(fēng)格的數(shù)據(jù)服務(wù)項(xiàng)目、數(shù)據(jù)可視化項(xiàng)目。
離線數(shù)據(jù)工程師、數(shù)據(jù)倉(cāng)庫(kù)工程師、ETL工程師、數(shù)據(jù)采集工程師、數(shù)據(jù)支持工程師、
BI商業(yè)分析師、數(shù)據(jù)可視化工程師、Hadoop工程師、Spark工程師。
數(shù)據(jù)服務(wù)開(kāi)發(fā)、離線數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)、BI商業(yè)分析
Java、MySQL、Maven、Git、OpenResty、Linux、Shell、HDFS、YARN、
Zookeeper、MapReduce、Scala、Python、SparkCore、Hive、SparkSQL、
Presto、Sqoop、DataX、Flume、CDH、數(shù)倉(cāng)架構(gòu)、維度建模、SuperSet、
Azkaban、Airflow等。
數(shù)據(jù)服務(wù)、大數(shù)據(jù)可視化、企業(yè)級(jí)Hadoop基建項(xiàng)目部署、分布式網(wǎng)絡(luò)爬蟲(chóng)、基于Spark
的大數(shù)據(jù)分析項(xiàng)目、ETL項(xiàng)目之Hive和SparkSQL、BI商業(yè)分析等。
掌握流數(shù)據(jù)接入、基于Flink實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā)、流批一體數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)、數(shù)據(jù)湖開(kāi)發(fā)、實(shí)時(shí)ETL、實(shí)時(shí)監(jiān)控系統(tǒng)和京東實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā)。
實(shí)時(shí)工程師、Flink工程師、實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)工程師、實(shí)時(shí)ETL工程師、Spark工程師
Kafka、Structured Streaming、Hudi、Canal、Flink、ClickHouse、HBase、Phoenix、Elasticsearch、Redis。
實(shí)時(shí)監(jiān)控系統(tǒng)、基于Flink的實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā)、實(shí)時(shí)數(shù)據(jù)湖、大數(shù)據(jù)搜索系統(tǒng)。
掌握企業(yè)項(xiàng)目開(kāi)發(fā)流程、用戶(hù)畫(huà)像開(kāi)發(fā)、企業(yè)級(jí)推薦系統(tǒng)開(kāi)發(fā)、數(shù)據(jù)治理、基于生產(chǎn)環(huán)境項(xiàng)目部署和京東項(xiàng)目性能調(diào)優(yōu)。
數(shù)據(jù)服務(wù)工程師、離線數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)工程師、BI商業(yè)分析師、實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)工程師、實(shí)時(shí)監(jiān)控系統(tǒng)工程師、ETL工程師、數(shù)據(jù)可視化工程師、數(shù)據(jù)治理工程師、高級(jí)數(shù)據(jù)開(kāi)發(fā)工程師、推薦工程、數(shù)據(jù)平臺(tái)工程師、數(shù)據(jù)架構(gòu)師
數(shù)據(jù)采集與監(jiān)控平臺(tái)、準(zhǔn)實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)、用戶(hù)畫(huà)像、推薦系統(tǒng)、基于Flink的實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)、元數(shù)據(jù)管理與數(shù)據(jù)治理。
京東物流大數(shù)據(jù)項(xiàng)目案例,多領(lǐng)域、全類(lèi)目、企業(yè)級(jí)
大型實(shí)戰(zhàn)項(xiàng)目貫穿課程始終,一切為了學(xué)員實(shí)戰(zhàn)能力
數(shù)據(jù)源頭多且是分散,除業(yè)務(wù)庫(kù),APP 埋點(diǎn),web網(wǎng)站 log,
LOT 設(shè)備等會(huì)產(chǎn)生各種各樣的海量數(shù)據(jù),這些數(shù)據(jù)進(jìn)入數(shù)據(jù)
倉(cāng)庫(kù)之,需要進(jìn)行統(tǒng)一,數(shù)據(jù)集成在一起。離線數(shù)倉(cāng)的ETL,
涵蓋數(shù)據(jù)的抽取轉(zhuǎn)換與加載。
在數(shù)據(jù)倉(cāng)庫(kù)中構(gòu)建模型,從數(shù)據(jù)源中抽取數(shù)據(jù),然后對(duì)這些
數(shù)據(jù)進(jìn)行轉(zhuǎn)化,最終加載到目標(biāo)數(shù)據(jù)庫(kù)或者數(shù)據(jù)倉(cāng)庫(kù)中去,
實(shí)現(xiàn)離線數(shù)倉(cāng)ETL過(guò)程。
企業(yè)信息化發(fā)展,對(duì) ETL 過(guò)程、存儲(chǔ)都提出更高的要求。互聯(lián)網(wǎng)在線特性對(duì)實(shí)時(shí)性提出了要求: 如用戶(hù)反欺詐、用戶(hù)審核等隨著用戶(hù)的暴漲。實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā),主要是對(duì)由用戶(hù)行為、 業(yè)務(wù)行為等產(chǎn)生的巨大量數(shù)據(jù)進(jìn)行實(shí)時(shí)處理,并應(yīng)用到生產(chǎn)中。
實(shí)時(shí)數(shù)倉(cāng)的存儲(chǔ)考慮支持?jǐn)?shù)據(jù)重放,方便支持任務(wù)重跑。選擇一個(gè)具有重放功能的、能夠保存歷史數(shù)據(jù)并支持多消費(fèi)者的消息隊(duì)列,根據(jù)需求設(shè)置歷史數(shù)據(jù)保存的時(shí)長(zhǎng),通過(guò)實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā),建成實(shí)時(shí)數(shù)倉(cāng)、實(shí)時(shí)指標(biāo)等,支撐企業(yè)鏈路的實(shí)時(shí)化。
大數(shù)據(jù)采集與指標(biāo)監(jiān)控項(xiàng)目是基于第一階段和第二階段課程,貫穿離線數(shù)據(jù)上報(bào)、數(shù)據(jù)儲(chǔ)存、數(shù)據(jù)服務(wù)監(jiān)控、數(shù)據(jù)分析等全套流程。整個(gè)項(xiàng)目包括Flume自定義攔截器代碼、自定義Azkaban監(jiān)控代碼和SQL相關(guān)指標(biāo)代碼開(kāi)發(fā)。
解決離線數(shù)據(jù)上報(bào)流程,數(shù)據(jù)采集操作,flume和azkaban的二次開(kāi)發(fā),數(shù)據(jù)服務(wù)監(jiān)控,離線數(shù)據(jù)開(kāi)發(fā)流程。
HDFS+Flume+Sqoop+數(shù)倉(cāng)思想+Spark SQL/Hive+Azkaban+Python+Shell+Superset大數(shù)據(jù)離線數(shù)倉(cāng)解決方案。
1.采集和同步架構(gòu)組件采用: Sqoop+Flume
2.數(shù)倉(cāng)架構(gòu)組件采用:HDFS+SparkSQL/Hive
3.任務(wù)調(diào)度架構(gòu)采用:Azkaban+Python/Shell
4.涉及到數(shù)倉(cāng)思想: 分層+建模+維度+粒度+拉鏈+增量/全量+數(shù)據(jù)質(zhì)量等
5.本項(xiàng)目中的BI工具: Superset
準(zhǔn)實(shí)時(shí)數(shù)倉(cāng)是一個(gè)集流式數(shù)據(jù)集成,數(shù)據(jù)分析、DAU預(yù)測(cè)和數(shù)據(jù)應(yīng)用的數(shù)倉(cāng)型項(xiàng)目。整個(gè)項(xiàng)目架構(gòu)為Nginx+OpenResty+Kafka+Spark+Presto等技術(shù)構(gòu)成。
解決事件行為分析、解決企業(yè)留存分析、解決漏斗分析、解決DAU預(yù)測(cè)及數(shù)據(jù)服務(wù)提供。
用戶(hù)畫(huà)像是基于數(shù)倉(cāng)之上的項(xiàng)目,主要解決畫(huà)像標(biāo)簽服務(wù),比如人群圈定服務(wù)和相似用戶(hù)搜索服務(wù)等。同時(shí)標(biāo)簽的處理使用Word2Vec、TF-IDF、HanLP分詞等技術(shù)。
解決企業(yè)人群圈定、解決相似用戶(hù)搜索。
專(zhuān)家垂直賦能,深耕核心技術(shù)
京東物流數(shù)據(jù)開(kāi)發(fā)工程師
miniBDP系統(tǒng)架構(gòu)設(shè)計(jì)及主要開(kāi)發(fā)者
數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)豐富
對(duì)BDP系統(tǒng)開(kāi)發(fā)有多年經(jīng)驗(yàn)
參與多個(gè)miniBDP項(xiàng)目
負(fù)責(zé)部署實(shí)施及相關(guān)開(kāi)發(fā)工作
京東健康大數(shù)據(jù)開(kāi)發(fā)工程師
某電信公司帳詳單流式計(jì)算系統(tǒng)架構(gòu)者與主要開(kāi)發(fā)者
數(shù)據(jù)ETL經(jīng)驗(yàn)豐富
千億級(jí)數(shù)據(jù)處理經(jīng)驗(yàn)
流式開(kāi)發(fā)和批處理開(kāi)發(fā)經(jīng)驗(yàn)豐富。
千鋒好程序員師資篩選自千鋒百人教研團(tuán)隊(duì)及
互聯(lián)網(wǎng)一線大廠核心技術(shù)人才,5維嚴(yán)選錄取率僅1%
好程序員大數(shù)據(jù)學(xué)科主管 | 原鳳凰網(wǎng)高級(jí)軟件工程師
從事企業(yè)軟件研發(fā)工作7年,從事大數(shù)據(jù)講師5年,
有豐富的軟件設(shè)計(jì)、軟件研發(fā)、軟件管理、流程控制經(jīng)驗(yàn)。
曾任職鳳凰網(wǎng)和途牛科技等企業(yè)。
負(fù)責(zé)過(guò)旅游平臺(tái)設(shè)計(jì)、電力系統(tǒng)研發(fā)、
商城后臺(tái)架構(gòu)和服務(wù)端架構(gòu)、
商城大數(shù)據(jù)平臺(tái)搭建和研發(fā)、
數(shù)據(jù)統(tǒng)計(jì)分析等工作。
好程序員大數(shù)據(jù)主管 | 原上市公司技術(shù)主管
從業(yè)10年,上市公司前主管,主持開(kāi)發(fā)了多款實(shí)用app,
并參與多個(gè)大型大數(shù)據(jù)項(xiàng)目研發(fā)工作,
精通Java,Mysql,Linux,Hadoop,Hive,Hbase,
Scala,Spark,iOS,數(shù)據(jù)倉(cāng)庫(kù)等多種開(kāi)發(fā)技能.
多年軟件開(kāi)發(fā)經(jīng)驗(yàn)和教學(xué)經(jīng)驗(yàn),
形成了一整套的成熟的教學(xué)體系,
總計(jì)培訓(xùn)出學(xué)員6千多人,
其中眾多學(xué)員都已經(jīng)是公司的骨干.
大數(shù)據(jù)高級(jí)講師 | 原上海漢詢(xún)軟件工程師
原漢詢(xún)軟件、軟通公司項(xiàng)目高級(jí)開(kāi)發(fā)工程師,
有5年以上研發(fā)經(jīng)驗(yàn),多年教學(xué)經(jīng)驗(yàn),
擁有多年的離線和實(shí)時(shí)開(kāi)發(fā)經(jīng)驗(yàn)及項(xiàng)目實(shí)施經(jīng)驗(yàn),
精通Spark、Hadoop等生態(tài)技術(shù)棧,
對(duì)項(xiàng)目?jī)?yōu)化有深入研究,授課邏輯清晰,
言簡(jiǎn)意賅,多注重于學(xué)員的自我解決問(wèn)題能力。
好程序員大數(shù)據(jù)高級(jí)講師 | 環(huán)球購(gòu)物高級(jí)工程師
原環(huán)球購(gòu)物(電商購(gòu)物)高級(jí)工程師,9年的研發(fā)與授課經(jīng)驗(yàn),
精通Java、scala、C#、python等多門(mén)編程語(yǔ)言,
精通Hadoop、Spark等生態(tài)。
授課從易到難循序漸進(jìn),
風(fēng)趣幽默,深受學(xué)員好評(píng)。
提前鎖定大廠崗位,開(kāi)辟綠色求職通道
學(xué)員備受青睞,一次學(xué)習(xí)長(zhǎng)久職業(yè)支持
優(yōu)秀學(xué)員簡(jiǎn)歷直推大廠大數(shù)據(jù)崗位面試
免去和千軍萬(wàn)馬同搶職位。
與京東物流合作共建,
培養(yǎng)實(shí)戰(zhàn)型大數(shù)據(jù)架構(gòu)師。
每年超20場(chǎng)雙選會(huì)
20000余家IT相關(guān)企業(yè)建立人才輸送合作關(guān)系。
年均1000+企業(yè)定期上門(mén)招聘
在畢業(yè)班進(jìn)行人才選拔。
剖析大廠面試題重點(diǎn),
提升學(xué)員大廠求職能力,規(guī)劃職業(yè)發(fā)展路線。
大廠HR深度指導(dǎo),
學(xué)員職業(yè)化素養(yǎng)綜合提升訓(xùn)練。
Copyright 2011-2023 北京千鋒互聯(lián)科技有限公司 .All Right
京ICP備12003911號(hào)-5
京公網(wǎng)安備 11010802035720號(hào)