眾眾網(wǎng)全國(guó)頁(yè) 眾眾網(wǎng)廣州站中睿教育廣州Hadoop大數(shù)據(jù)解決方案開發(fā)技術(shù)培訓(xùn)

廣州Hadoop大數(shù)據(jù)解決方案開發(fā)技術(shù)培訓(xùn)

请询价

適合對(duì)象：對(duì)嵌入式開發(fā)培訓(xùn),計(jì)算機(jī)技術(shù)培訓(xùn)等有興趣學(xué)習(xí)的學(xué)員

課時(shí)：0 班型：任意時(shí)段班制：小班

開設(shè)課程校區(qū)：廣州校區(qū)

課程介紹

Hadoop 作為開源的云計(jì)算平臺(tái)，為大數(shù)據(jù)處理提供了一整套解決方案，應(yīng)用非常廣泛。Hadoop 作為一個(gè) 平臺(tái)框架，包括了如何存儲(chǔ)海量數(shù)據(jù)，如何處理海量數(shù)據(jù)，以及相應(yīng)的數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)流處理、數(shù) 據(jù)分析和挖掘算法庫(kù)等等。本次培訓(xùn)作為知識(shí)儲(chǔ)備，主要講解目前應(yīng)用數(shù)據(jù)和大數(shù)據(jù)平臺(tái)的數(shù)據(jù)同步工作以及了解大數(shù)據(jù)理論體系結(jié)構(gòu), 應(yīng)用 Hadoop 2.0 的大數(shù)據(jù)框架結(jié)構(gòu)，文本文件與 Hadoop/Hive/Sqoop 數(shù)據(jù) 遷，Hadoop 的思想、原理，以及重要技術(shù)等相關(guān)知識(shí)。

第一天

一、Hadoop 的基本框架：

大數(shù)據(jù)時(shí)代面臨的問(wèn)題；當(dāng)前解決大數(shù)據(jù)的技術(shù)方案；Hadoop 架構(gòu)和云計(jì)算；Hadoop 簡(jiǎn)史及安裝部署；Hadoop 設(shè)計(jì)理念和生態(tài)系統(tǒng)

二、HDFS 分布式文件系統(tǒng)：海量數(shù)據(jù)存儲(chǔ)的搖籃

HDFS 的設(shè)計(jì)目標(biāo) 、HDFS 的基本架構(gòu) 、 NameNode 名稱節(jié)點(diǎn) 、 SecondaryNameNode 第二名稱節(jié)點(diǎn) 、 DataNode 數(shù)據(jù)節(jié)點(diǎn) 、HDFS 的存儲(chǔ)模型數(shù)據(jù)塊存儲(chǔ) 、元數(shù)據(jù)存儲(chǔ)（空間鏡像與編輯日志）、多副本存儲(chǔ) 多副本放置策略多數(shù)據(jù)節(jié)點(diǎn)管理機(jī)制與交互過(guò)程文件系統(tǒng)操作與管理讀文件過(guò)程寫文件過(guò)程（數(shù)據(jù)流管道）數(shù)據(jù)完整性機(jī)制數(shù)據(jù)校驗(yàn)和數(shù)據(jù)完整性掃描線程元數(shù)據(jù)備份與合并數(shù)據(jù)可靠性設(shè)計(jì) 安全模式（數(shù)據(jù)塊與節(jié)點(diǎn)映射關(guān)系管理）心跳檢測(cè)機(jī)制（節(jié)點(diǎn)失效管理）租約機(jī)制（多線程并發(fā)控制）其它 HDFS 的安全機(jī)制負(fù)載均衡文件壓縮操作接口與編程接口 HDFS Shell HDFS Commands 演練：HDFS 文件操作命令

三、MapReduce 分布式計(jì)算系統(tǒng)：海量數(shù)據(jù)處理的利器

MapReduce 的三層設(shè)計(jì)理念、分布治之的設(shè)計(jì)思想（Map 與 Reduce）、數(shù)據(jù)處理引擎（編程模型）、運(yùn)行時(shí)環(huán)境（任務(wù)調(diào)度與執(zhí)行）、MapReduce 的基本架構(gòu) 、JobTracker 作業(yè)跟蹤器、TaskTracker 任務(wù)跟蹤器 MapReduce 與 HDFS 的部署關(guān)系

四、Yarn：平臺(tái)

Yarn 平臺(tái)的搭建、 Yarn 實(shí)例的運(yùn)行、Yarn 應(yīng)用的監(jiān)控

學(xué)校介紹

全面的IT服務(wù)提供商—中睿信息是一家專業(yè)的IT服務(wù)提供商，致力于解決企業(yè)信息化所遇到的棘手問(wèn)題。公司與微軟（Microsoft）、甲骨文（Oracle）、思科（Cisco）、Pearson VUE等全球著名IT廠商建立長(zhǎng)期的合作伙伴關(guān)系，業(yè)務(wù)涵蓋企業(yè)IT架構(gòu)與應(yīng)用服務(wù)、軟件研發(fā)顧問(wèn)咨詢服務(wù)、數(shù)據(jù)庫(kù)服務(wù)、高級(jí)IT技術(shù)培訓(xùn)、軟件項(xiàng)目研發(fā)、解決方案實(shí)施和就業(yè)培訓(xùn)。公司擁有優(yōu)秀的技術(shù)團(tuán)隊(duì)，掌握國(guó)際前沿技術(shù)，采用標(biāo)準(zhǔn)化的服務(wù)體系，為客戶高效、穩(wěn)定的IT運(yùn)營(yíng)提供強(qiáng)有力支撐，提升企業(yè)核心競(jìng)爭(zhēng)力。服務(wù)客戶遍及各種行業(yè)，包括金融、通訊、制造業(yè)、政府、企事業(yè)單位。目前，中睿作為華南區(qū)實(shí)力強(qiáng)的IT服務(wù)商，已成為客戶優(yōu)秀IT服務(wù)商的優(yōu)選，并與上百家客戶建立了長(zhǎng)期、多贏的戰(zhàn)略性合作。