國內人才缺口
31.7%每年行業(yè)需求增長(cháng)
10000+每天獵聘網(wǎng)大數據招聘
17210月薪北京大數據工程師
?大數據就業(yè)前景分析?據職業(yè)社交平臺LinkedIn發(fā)布的《2016年*互聯(lián)網(wǎng)最熱職位人才報告》顯示，研發(fā)工程師、產(chǎn)品經(jīng)理、人力資源、市場(chǎng)營(yíng)銷(xiāo)、運營(yíng)和數據分析是當下*互聯(lián)網(wǎng)行業(yè)需求最旺盛的六類(lèi)人才職位。其中研發(fā)工程師需求量*，而數據分析人才最為稀缺。領(lǐng)英報告表明，數據分析人才的供給指數*，僅為0.05，屬于高度稀缺。數據分析人才跳槽速度也最快，平均跳槽速度為19.8個(gè)月。[圖片7] 潮流技能 顛覆性課程 拒絕用老掉牙的淘汰項目練手 要做就做前沿覆蓋大數據行業(yè)主流技術(shù)崗位，課程半年升級一次，緊跟市場(chǎng)與企業(yè)步伐 01 大數據入門(mén)基礎課程 1.JavaSE；2.MySQL；3.JDBC；4.Linux；5.shell；6.HTML；7.CSS；8.JavaScript；9.JSP；10.Servlet 02 大數據Hadoop基礎 1.大數據概論；2.Hadoop框架；3.HDFS分布式文件系統；4.MapReduce計算模型；5.全真實(shí)訓項目 03 大數據離線(xiàn)分析 1.Hive數據倉庫；2.Sqoop ETL工具；3.Azkaban工作流引擎；4.Ooize；5.Impala；6.全真實(shí)訓項目 04 大數據實(shí)時(shí)計算 1.Zookeeper分布式協(xié)調系統；2.HBase分布式數據庫；3.Redis數據庫；4.mogDB數據庫；5.Kudu列式存儲系統；6.Storm實(shí)時(shí)數據處理平臺；7.Kafka分布式發(fā)布訂閱消息系統；8.Flume海量日志采集系統；9.全真實(shí)訓綜合項目 05 Spark數據計算 1.Scala；2.Spark；3RDD；4.Spark SQL；5. Streaming；6. Mahout；7.MLlib；8.GraphX；9.Spark R；10.Python；11.Alluxio；12.Python爬蟲(chóng)；13.ElasticSearch；14.Lucene Hadoop基礎實(shí)戰 項目名稱(chēng)：搜狗搜索日志分析系統 數據體量：5000W+/日 硬件環(huán)境：Hadoop集群 12臺 軟件環(huán)境：Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項目描述：搜狗每天產(chǎn)生大量的日志數據，從日志數據里面能提取到有用的數據包括每個(gè)用戶(hù)的ID、瀏覽次數、月/日瀏覽頻率、訪(fǎng)問(wèn)源、瀏覽內容等等，提取這些內容、統計數據分析每個(gè)用戶(hù)行為，從而做出有利的決定。 大數據離線(xiàn)實(shí)戰 項目名稱(chēng)：新浪微博數據分析系統 日均數據體量：3GB+ 硬件環(huán)境：Hadoop集群 50臺 軟件環(huán)境：MapReduce+HBase0.98.9+Storm0.9.6+Hadoop2.5.2+Kafka2.10+Zooke eper3.4.5+CentOS-6.5-X86 項目描述：此次項目我們需要處理微博產(chǎn)生的數據，通過(guò)對數據的處理得到所需的數據，微博擁有大量的用戶(hù)，大量的用戶(hù)潛在的價(jià)值是巨大，怎么挖掘這些潛在的寶藏就是我們項目最直接的目的，為了能夠實(shí)時(shí)的進(jìn)行數據處理使用Storm流式計算系統，和HBase、Zookeeper、Kafka組成框架，對數據進(jìn)行處理，當然這些都是建立在hadoop集群上實(shí)現的，底層的存儲還是HDFS。 大數據實(shí)時(shí)計算 項目名稱(chēng)：網(wǎng)絡(luò )流量流向異常賬號統計項目 數據體量：每天1000億，每秒峰值100 000 硬件環(huán)境：Hadoop集群 600臺 軟件環(huán)境：Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項目描述：運營(yíng)商骨干網(wǎng)上采集現網(wǎng)流量流向信息，根據這些原始信息檢測賬號是否存在異常，如果多個(gè)終端使用同一個(gè)寬帶賬號，超過(guò)一定閾值則觸發(fā)報警機制，例如閾值為5時(shí)，同一個(gè)賬號同時(shí)連接的終端數量不能超過(guò)該值，如果超過(guò)則報警。 Spark階段項目 項目名稱(chēng)：京東網(wǎng)上商城數據統計分析平臺 數據體量：5000W+/日 硬件環(huán)境：centos-6.5-x86 集群：spark standalone(Master-1,Worker-3) 軟件環(huán)境：hadoop,spark,hive,mysql,idea,navicat,kafka,flume 每日處理的數據量：3GB 項目描述：基于京東網(wǎng)上商城數據統計分析平臺--該項目采用了目前大數據領(lǐng)域非常流行的技術(shù)——Spark。本項目使用了Spark技術(shù)生態(tài)棧中最常用的三個(gè)技術(shù)框架，Spark Core、Spark SQL和Spark Streaming，進(jìn)行離線(xiàn)計算和實(shí)時(shí)計算業(yè)務(wù)模塊的開(kāi)發(fā)。實(shí)現了包括:統計和分析UV、PV、登錄、留存、熱門(mén)商品離線(xiàn)統計、廣告流量實(shí)時(shí)統計3個(gè)業(yè)務(wù)模塊。 ★課程價(jià)格根據所報讀的班級不同，價(jià)格從幾百到數萬(wàn)不等，詳情請咨詢(xún)客服。 來(lái)自主流高校和企業(yè)的骨灰級大咖授課他們將十余年實(shí)戰經(jīng)驗傾囊相授，他們在鄭州兄弟連為你的職業(yè)發(fā)展保駕護航 [圖片8]馬如忠 兄弟連總監級講師 icon精通Java、C、C++等主流開(kāi)發(fā)語(yǔ)言，5年以上開(kāi)發(fā)經(jīng)驗，非常豐富的IT從業(yè)經(jīng)驗和教育心得，鄭州兄弟連金牌JAVA講師，曾擔任達內課程總監級講師。
[圖片9]王溯 兄弟連總監級講師 icon軟件工程碩士，二十年系統開(kāi)發(fā)經(jīng)驗，具有大規模集群建設、開(kāi)發(fā)及運維經(jīng)驗；擁有Apache Hadoop、Oracle OCM等多項產(chǎn)品的技術(shù)認證證書(shū)。
360°全方位輔導 締造行業(yè)培優(yōu)模式學(xué)不會(huì )不是理由，相信我你可以。不拋棄不放棄，6大保障讓每一位學(xué)員成人成才！ 學(xué)習中途落課了怎么辦 icon中途耽誤幾天的話(huà)可以通過(guò)看視頻同步完成老師的作業(yè)彌補進(jìn)度，不會(huì )的可以隨時(shí)問(wèn)老師。
是否可以重修呢？ icon學(xué)生因學(xué)習中途落課或者學(xué)習效果不扎實(shí)等原因可以向教務(wù)老師申請重修或降級，本期學(xué)不會(huì )下期免費再學(xué)，直到學(xué)會(huì )為止！
考核方式 icon學(xué)習的流程分為預習、聽(tīng)課、整理筆記、作業(yè)（每周定期檢查作業(yè)，并針對反饋情況進(jìn)行講解）、復習、默寫(xiě)、項目階段跟蹤檢查。
嚴格規范的預習筆記 icon預習筆記是鄭州兄弟連一再強調的學(xué)習法寶，每個(gè)同學(xué)在鄭州兄弟連都必須養成課前預習的習慣，對老師第二天要講授的內容重點(diǎn)、難點(diǎn)做到心里有數，聽(tīng)課事半功倍。
定期召開(kāi)關(guān)懷學(xué)員會(huì )議 icon開(kāi)課后根據學(xué)生的作業(yè)及測驗情況形成關(guān)懷名單，進(jìn)入關(guān)懷名單的學(xué)生會(huì )被所有老師所關(guān)注，相應的對其作業(yè)、預習筆記、默寫(xiě)等要求會(huì )更高，要求會(huì )更嚴格。
人性化的班組機制 icon學(xué)習中遇到問(wèn)題，小組成員共同討論解決，小組內有學(xué)習懈怠完不成學(xué)習任務(wù)的同學(xué)，小組內全體成員會(huì )集體被罰（罰手抄代碼n遍喲）。
學(xué)習氛圍濃厚 人性化服務(wù)助你一站成才集衣食住學(xué)為一體，舒適生活區域，先進(jìn)教學(xué)設備 鄭州兄弟連注重細節，傾力為學(xué)員打造貼心學(xué)習環(huán)境 [圖片10] ? [圖片11] ? [圖片12] ? [圖片13] ? [圖片14] [圖片15] [圖片16] [圖片17] 業(yè)內獨有四大班型 為你而生 為你所需 [圖片18] 零基礎周末班課程設置與脫產(chǎn)班相同 學(xué)習工作兩不誤 適合需要周末上課的人群
[圖片19] 全日制脫產(chǎn)就業(yè)班面向零基礎小白 5個(gè)月完成Python 開(kāi)發(fā)課程
[圖片20] 精英提高班面向掌握一定Python技術(shù) 但需提升職場(chǎng)競爭力的 在職人群
[圖片21] 在線(xiàn)精品課程同步線(xiàn)下面授課程 純干貨技術(shù)課堂 隨到隨學(xué)
? ? ? 相關(guān)資訊： 大數據不僅改變企業(yè)的運營(yíng)方式，也將成為供應鏈協(xié)同創(chuàng )新提供新的發(fā)展方向。 ? 伴隨著(zhù)信息技術(shù)全面的融入社會(huì )生活，人類(lèi)世界充斥著(zhù)比以往更多的信息，而且信息數據的增長(cháng)速度還在不斷地加快。在科技的高速發(fā)展以及數據信息不斷增加的背景下，“大數據”這一全新的信息科學(xué)概念給我們的社會(huì )發(fā)展帶來(lái)兩個(gè)方面的巨變：一方面，在沒(méi)有數據積累的時(shí)代下無(wú)法實(shí)現的解決方案終于可以實(shí)現；另一方面，從數據匱乏時(shí)代到數據泛濫時(shí)代的轉變帶來(lái)新的挑戰與困擾，使傳統的數據分析解決方案已經(jīng)不能從海量數據中高效地獲取最重要的機會(huì )洞察點(diǎn)。 ? 作為**規模的零售連鎖企業(yè)華潤萬(wàn)家集團（以下簡(jiǎn)稱(chēng)華潤萬(wàn)家）和國際*的快速消費品公司寶潔（*）公司（以下簡(jiǎn)稱(chēng)寶潔）在如何運用“大數據”進(jìn)行了積極的嘗試。雙方選取供應鏈作為突破口，利用“大數據”工具在實(shí)現零售生意增長(cháng)的同時(shí)降低運作成本并提升現金流。 ? 雙方合作創(chuàng )建的基于門(mén)店的實(shí)時(shí)銷(xiāo)售以及庫存信息的智能運營(yíng)系統解決方案，將大數據解決方案成功地運用于生意趨勢分析，貨架缺貨降低，檔期需求預測等關(guān)鍵零供供應鏈協(xié)作領(lǐng)域。該成功案例也為“大數據”在商業(yè)智能，特別是針對供應鏈這一特定領(lǐng)域的運用提出了全新的解決思路和方向。 ? 華潤萬(wàn)家是*規模的零售連鎖企業(yè)品牌之一，旗下?lián)碛腥A潤萬(wàn)家、蘇果、歡樂(lè )頌、中藝、華潤堂、Ole’、blt、VanGO、Voi_la＂VIVO采活、太平洋咖啡Pacific Coffee等多個(gè)著(zhù)名品牌。目前已進(jìn)入28 個(gè)盛自治區、直轄市和特別行政區的100 多個(gè)主要城市，門(mén)店數量超過(guò)4000多家。 ? 寶潔擁有眾多深受信賴(lài)的優(yōu)質(zhì)、領(lǐng)先品牌，包括幫寶適、汰漬、碧浪、護舒寶、潘婷、飄柔、海飛絲、威娜、佳潔士、舒膚佳、玉蘭油、SK-II、歐樂(lè )B、金霸王、吉列、博朗等等。寶潔目前在廣州、北京、上海、成都、天津、東莞及南平等地設有多家分公司及工廠(chǎng)，員工總數超過(guò)七千人，在華投資總額超過(guò)十七億美元。 ? 大型零售商和快速消費品企業(yè)必將在大數據的運用實(shí)施上處于領(lǐng)先地位。 ? 2011年5 月，在“云計算相遇大數據”為主題的EMC World 2011 會(huì )議中，EMC 拋出了“大數據”（Big Data）概念。最早提出大數據時(shí)代到來(lái)的麥肯錫：“數據，已經(jīng)滲透到當今每一個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素。人們對于海量數據的挖掘和運用，預示著(zhù)新一波生產(chǎn)率增長(cháng)和消費者盈余浪潮的到來(lái)?！睒I(yè)界（IBM 最早定義）將大數據的特征歸納為4個(gè)“V”:大量化(Volume)、多樣化(Variety)、價(jià)值密度低（Value）、快速化(Velocity)。簡(jiǎn)而言之，大數據有四個(gè)層面的特征：*，數據體量巨大；第二，數據類(lèi)型繁多；第三，價(jià)值密度低，但是商業(yè)價(jià)值高；第四，處理速度快。這幾點(diǎn)也使“大數據”和傳統的數據挖掘技術(shù)有著(zhù)本質(zhì)的不同（如圖1）。 ? 總而言之，“大數據”是信息技術(shù)發(fā)展到現在的一種特征，在給人類(lèi)帶來(lái)巨變的同時(shí)也使得各個(gè)企業(yè)能在以云計算為代表的信息技術(shù)革命的背景下，逐步開(kāi)始收集和使用一些尚未被發(fā)掘的數據。 ? 通過(guò)各行各業(yè)的不斷創(chuàng )新，大數據逐步地為人類(lèi)創(chuàng )造出了更多的價(jià)值。特別是商業(yè)智能、公共服務(wù)和市場(chǎng)營(yíng)銷(xiāo)這三大領(lǐng)域。目前，越來(lái)越多的企業(yè)供應鏈負責人已經(jīng)將目光投向這一全新的信息技術(shù)解決方案中。依據國外*咨詢(xún)公司EFT的一項調查，84%的大型企業(yè)供應鏈負責人已開(kāi)始重視大數據，他們一致認為大數據項目能夠在提升供應鏈運營(yíng)的有效性的同時(shí)降低成本，并能夠推動(dòng)供應鏈管理從一般的基于歷史數據的決策進(jìn)化為即時(shí)的智能決策。而且有將近2/3的供應鏈負責人目前正在嘗試或者在考慮實(shí)施“大數據”項目。 ? 更重要的是，業(yè)界一致認為大型零售商和快速消費品企業(yè)將在大數據的運用實(shí)施上處于領(lǐng)先地位。這也是多年來(lái)業(yè)界所倡導的零供協(xié)同供應鏈這一大的基礎上激發(fā)的新成果，也必將為零供雙方構建新型聯(lián)合商務(wù)框架添加新的動(dòng)力能量。 ? 作為長(cháng)期的戰略合作伙伴，華潤萬(wàn)家和寶潔在生意發(fā)展的過(guò)程中遇到了共同的挑戰: 即需要在不斷滿(mǎn)足消費者的需求的同時(shí)降低運營(yíng)成本, 實(shí)現門(mén)店運營(yíng)效率的*化（如圖2）。 ? 圖2 零供雙方共同的挑戰和機遇 ? 供應鏈的高效協(xié)同是實(shí)現雙方生意發(fā)展共同目標的重要基石，也是雙方高層領(lǐng)導確定的重要合作方向。在聯(lián)合商務(wù)合作框架的理念下，過(guò)去幾年寶潔和華潤萬(wàn)家在供應鏈領(lǐng)域取得了一系列的成績(jì)：從精益供應鏈愿景的提出，到JBP（聯(lián)合生意發(fā)展計劃）計劃的落地，再到EDI/GDSN（電子數據交換/全球商品數據同步網(wǎng)絡(luò )）等項目的成功實(shí)施，充分展示出雙方供應鏈管理團隊通過(guò)精細化的管理手段、信息化的管理工具深入挖掘供應鏈的潛力，提升供應鏈的整體效能。 ? 正是有了這樣相互信任的合作理念以及技術(shù)基礎能力，雙方團隊開(kāi)創(chuàng )性的提出了“以店為先”這一全新的門(mén)店智能運營(yíng)模式，這一模式的關(guān)鍵點(diǎn)是從門(mén)店實(shí)際出發(fā)，以大數據為基礎，使用實(shí)時(shí)數據進(jìn)行預測性分析和決策，從而優(yōu)化門(mén)店的每一個(gè)運營(yíng)環(huán)節，通過(guò)實(shí)時(shí)數據分析把門(mén)店業(yè)務(wù)流程和決策過(guò)程中存在的每一份潛在價(jià)值都“擠”出來(lái)，從而提升門(mén)店單產(chǎn)，實(shí)現“低成本、高效率”的運營(yíng)模式。 ? 項目實(shí)施 ? 借助以往的供應鏈項目成功經(jīng)驗，由華潤萬(wàn)家和寶潔供應鏈相關(guān)負責人牽頭，雙方組建了跨*聯(lián)合工作小組，其中包括華潤萬(wàn)家信息部、物流部、商品部、營(yíng)運部和寶潔公司銷(xiāo)售部、物流部、信息部的主要負責人。確定了將現有系統和“大數據”方案整合的工作思路，并關(guān)注在門(mén)店執行可視化，消費者需求計劃以及風(fēng)險管理作為主攻方向以提升項目的收益。 ? 首先，項目組系統地梳理了門(mén)店運營(yíng)工作中的系列流程，重點(diǎn)探討了通過(guò)可比門(mén)店增長(cháng)數據以及品類(lèi)組發(fā)展的生意數據對比，挖掘出在新品，分銷(xiāo)以及陳列上的機會(huì )點(diǎn)；利用門(mén)店寶潔單品實(shí)時(shí)的銷(xiāo)售和庫存數據進(jìn)行預防性的補貨以便降低貨架缺貨率和分析檔期銷(xiāo)售的各項參數以提升商品去化率優(yōu)化商品庫存這三個(gè)最重要的生意增長(cháng)機會(huì )點(diǎn)。 ? 然后，項目組確定了最終的技術(shù)方案以及運營(yíng)方案。在技術(shù)解決方案中，主要關(guān)注在如何解決每日門(mén)店銷(xiāo)售及庫存數據的傳輸，存貯及加工的全套信息化解決方案。這也是對應“大數據”大量化(Volume)、多樣化(Variety)、價(jià)值密度低（Value）、快速化(Velocity)這四大特征所必須要解決的問(wèn)題。華潤萬(wàn)家（包含蘇果）4000多家門(mén)店所產(chǎn)生的巨大的銷(xiāo)售庫存數據信息，不同業(yè)態(tài)的數據清算方式的差異，以及最重要的三個(gè)生意需求的數據信息要求都給項目的實(shí)施帶來(lái)了各種障礙。 ? 項目組最終確認了一個(gè)囊括了門(mén)店實(shí)時(shí)數據和主數據的標準提取格式，以華潤萬(wàn)家不同區域為單位對數據進(jìn)行打包并最終采用T+1的頻率通過(guò)EDI（電子數據交換）平臺將原始數據傳輸給寶潔全球數據倉庫。在獲取數據之后，寶潔相關(guān)團隊會(huì )按照設定的邏輯對數據進(jìn)行校驗，清洗和結構化處理，使其成為能被寶潔全球智能分析平臺能所接受的標準數據格式。并最終產(chǎn)生可視化的智能報表，以*效的方式給門(mén)店一線(xiàn)運作人員運營(yíng)建議。需要強調的是，項目組依托移動(dòng)供應鏈的理念，設計了總部和門(mén)店兩個(gè)邏輯層級的報表展示方式?？偛繉蛹壍膱蟊碇饕P(guān)注在宏觀(guān)層面，門(mén)店層級的報表主要關(guān)注在微觀(guān)門(mén)店的執行層面，而且門(mén)店的層級報表可以直接在iPad等多平臺上呈現，以*程度地方便門(mén)店一線(xiàn)人員的交流和執行（如圖3）。 ? 圖3 門(mén)店智能運作系統解決方案 ? 在技術(shù)解決方案明確后，雙方團隊還研究了門(mén)店一線(xiàn)人員對相關(guān)工具的使用方式和流程，因為信息系統解決方案只是這個(gè)項目的一部分，更重要的是雙方一線(xiàn)運營(yíng)團隊需要用好這些通過(guò)“大數據”所挖掘商業(yè)洞察。結合目前門(mén)店的操作實(shí)踐，項目組共同設計并量身定做了能*效地服務(wù)于一線(xiàn)業(yè)務(wù)運營(yíng)人員、寶潔門(mén)店運營(yíng)經(jīng)理、華潤萬(wàn)家門(mén)店管理人員系列可視化報表。通過(guò)這些報表的有效運用，各種生意機會(huì )一目了然地呈現在一線(xiàn)運作人員面前，清晰可執行的改進(jìn)建議讓運作人員關(guān)注在*的生意機會(huì )點(diǎn)上，從而將他們從繁雜的數據分析工作中解放出來(lái)。在這個(gè)過(guò)程中，華潤萬(wàn)家和寶潔的一線(xiàn)運作人員也總結了很多更貼合門(mén)店實(shí)踐的修改意見(jiàn)，實(shí)現了信息系統解決方案的持續進(jìn)化（如圖4）。 ? 圖4 智能運作系統解決方案在門(mén)店的執行測試 ? 項目成就和收益 ? 據麥肯錫的估計，如果零供雙方能夠充分發(fā)揮大數據的優(yōu)勢，將各種商業(yè)洞察運用到供應鏈效率提升上，其生產(chǎn)效益將會(huì )實(shí)現年均0.5% ~1%的增長(cháng)幅度。在這個(gè)項目中，寶潔可以更好地建議商品在店內的陳設，可以通過(guò)店內工作人員更多地接觸，提高產(chǎn)品經(jīng)營(yíng)的知識；華潤萬(wàn)家可以降低庫存成本，提升銷(xiāo)售，減少店內商品陳設的投入。綜合起來(lái)，整個(gè)供應鏈可以在成本降低的情況下，更好地滿(mǎn)足消費者的需求。 ? 在對于測試門(mén)店的試運行中，項目組已經(jīng)取得了一些顯著(zhù)的效果，對比于基礎門(mén)店，測試門(mén)店的零售生意增長(cháng)了7%。（其中0.9%來(lái)源于貨架缺貨率的降低；3%來(lái)自于檔期銷(xiāo)量的提升；1.1%來(lái)自于分銷(xiāo)系統的提升；2.1%來(lái)自于門(mén)店庫存效率的提升）測試結果再一次證明了大數據解決方案的有效性，也有助于該項目在華潤萬(wàn)家*門(mén)店的推廣計劃，并實(shí)現實(shí)時(shí)智能運作系統運用到華潤萬(wàn)家的每一家門(mén)店中的項目目標。 ? 在推廣目前已有的解決方案的同時(shí)，項目組也在思考如何利用現有的大數據信息，從門(mén)店追溯回寶潔的上端供應鏈，例如寶潔的生產(chǎn)計劃環(huán)節通過(guò)在整條供應鏈上分享大數據技術(shù)，引爆零售業(yè)的生產(chǎn)效率革命。最終更快，更好，更高效地親近和美化更多消費者的生活！