тыпНавучанне ў класах
РЭГІСТРАЦЫЯ

кантакт

Палі, адзначаныя зорачкай * патрабуюцца

 

вялікі Hadoop дадзеныя сертыфікацыйны курс

Big Data Hadoop Сертыфікацыйны курс і навучанне

агляд

Аўдыторыя і Перадумовы

змест курса

Расклад і зборы

сертыфікацыя

Big Data Hadoop сертыфікацыі Агляд курса

Гэта комплексны навучальны курс Hadoop Big Data распрацаваны экспертамі галіны з улікам бягучых патрэбаў прамысловасці працоўных месцаў, каб забяспечыць паглыбленае вывучэнне на вялікіх дадзеных і модулях Hadoop. Гэта галіна прызнана Big Data сертыфікацыі навучальны курс, які ўяўляе сабой спалучэнне навучальных курсаў у Hadoop распрацоўніка, Hadoop адміністратара, тэставанне Hadoop, і аналітыкі. гэта Cloudera Hadoop навучанне падрыхтуе вас, каб ачысціць вялікую сертыфікацыю дадзеных.

Мэты

  • Майстар аснова Hadoop 2.7 і пража і пісаць прыкладання, выкарыстоўваючы іх
  • Настройка вузла Псеўда і мульты вузел кластара на Amazon EC2
  • Майстар HDFS, MapReduce, Hive, Pig, Oozie, Sqoop, Flume, Zookeeper, HBase
  • Больш падрабязна Спарк, Спарк РДД, Graphx, MLlib напісанне прыкладанняў Spark,
  • Майстар Hadoop адміністравання дзейнасці як кластар кіраванне, маніторынг, кіраванне і ліквідацыю непаладак
  • Настройка ETL інструментаў, такіх як Pentaho / Talend працаваць з MapReduce, Hive, свінні і г.д.
  • Падрабязнае разуменне аналітыкі вялікіх дадзеных
  • тэставання прыкладанняў Hadoop з выкарыстаннем МР-Unit і іншыя сродкі аўтаматызацыі.
  • Праца з фарматамі дадзеных Avro
  • Практыка рэальных праектаў з выкарыстаннем Hadoop і Apache Спарк
  • Павінны быць абсталяваны, каб ачысціць Big Data Hadoop сертыфікацыі.

мэтавая аўдыторыя

  • Праграмаванне Распрацоўнікі і сістэмныя адміністратары
  • Вопытныя спецыялісты, якія працуюць, менеджэры праектаў
  • Вялікі DataHadoop Распрацоўнікі хочуць, каб даведацца іншыя вертыкалі, як тэставанне, аналітыка, кіраванне
  • Мэйнфрэймаў спецыялісты, архітэктары і тэставанне спецыялістаў
  • Business Intelligence, сховішчаў дадзеных і аналітыкі Professionals
  • Выпускнікі, студэнты імкнуцца вывучаць найноўшыя тэхналогіі Big Data можа прыняць гэта Big Data Hadoop сертыфікацыі навучанне онлайн

перадумовы

  • Там няма папярэдніх умоў прыняць гэтыя вялікія падрыхтоўкі дадзеных і асвоіць Hadoop. Але асновы UNIX, SQL і Java будуць good.At Intellipaat, мы прадстаўляем бясплатны Unix і Java курс з нашым сертыфікацыйных навучаннем Big Data для щеточных да патрэбных навыкаў, так што вы добра на вас Hadoop шляху навучання.

Змест курса Працягласць: 2 дзён

Ўвядзенне ў вялікіх дадзеных і Hadoop і яе экасістэмы, Карта Скарачэнне і HDFS

Што такое Big Data, Дзе Hadoop ўпісвацца ў, Hadoop Distributed File System - рэплікацыі, памер блока, Secondary NameNode, высокая даступнасць, разуменне прадзівам - ResourceManager, NodeManager, розніца паміж 1.x і 2.x

Hadoop Усталёўка і налада

Hadoop 2.x Кластар Архітэктура, Федэрацыя і высокая даступнасць, Тыповая ўстаноўка вытворчага кластара, Hadoop Рэжымы кластара Агульнага Hadoop Shell каманда, Hadoop 2.x файлы канфігурацыя, кластар Cloudera адзін вузел

Глыбокае апусканне ў MapReduce

Як MapReduce працуе, як працуе Reducer, як працуе драйвер, суматар, рэдагавання раздзелаў, фарматы ўводу, вываду Фарматы, у выпадковым парадку і сартавання, Mapside гуляючы, паменшыць бакавыя злучэння, MRUnit, размеркаванага кэша

Лабараторныя практыкаванні:

Праца з HDFS, Напісанне WordCount праграмы, Напісанне карыстацкіх разметкі, MapReduce з Combiner, Карта Side Join, паменшыць бакавыя злучэння, модульнае тэставанне MapReduce, Запуск MapReduce ў рэжыме LocalJobRunner

Графік Рашэнне праблем

Што такое графіка, графічнае прадстаўленне, пошук у шырыню Алгарытм, графічнае прадстаўленне карты Reduce, Як зрабіць Graph алгарытм, Прыклад графіка карты Паменшыць,

    Практыкаванне 1: практыкаванне 2: практыкаванне 3:

Падрабязнае разуменне Свінні

А. Уводзіны Свінні

Разуменне Apache Pig, асаблівасці, розныя віды выкарыстання і навучання, каб ўзаемадзейнічаць з Свінні

В. Разгортванне Свінні для аналізу дадзеных

Сінтаксіс Свіння лацінскага, розных азначэнняў, свайго роду дадзеных і фільтр, тыпы дадзеных, разгортваюць Pig для ETL, загрузкі дадзеных, прагляду схемы, вызначэння палёў, функцый звычайна выкарыстоўваецца.

С. Свінні для комплекснай апрацоўкі дадзеных

Розныя тыпы дадзеных, уключаючы укладзеныя і складаныя, апрацоўка дадзеных з Свінні, згрупаваныя ітэрацыі дадзеных, практычныя практыкаванні

D. Выкананне аперацый некалькі набораў дадзеных

Дадзеныя набор далучэння, набор дадзеных расшчаплення, розныя метады набору дадзеных аб'яднання, набор аперацый, практычныя практыкаванні

E. Пашырэнне Pig

Разуменне карыстацкіх функцый, выконвае апрацоўку дадзеных з іншымі мовамі, імпартам і макрасамі, з дапамогай струменевай перадачы і UDF, каб пашырыць Pig, практычныя практыкаванні

F. Pig Праца

Праца з рэальнымі наборамі дадзеных, звязаных з Walmart і Electronic Arts у якасці тэматычнага даследаванні

Падрабязнае разуменне Вулей

А. Уводзіны Hive

Разуменне вулей, традыцыйнае параўнанне баз дадзеных з ульем, свінні і параўнаннем вулля, захоўванне дадзеных у вуллі і улой схему, улом узаемадзеянні і розных выпадках выкарыстання вуллі

Б. Вулей для аналізу дадзеных рэляцыйнай

Разуменне HiveQL, базавы сінтаксіс, розныя табліцы і базы дадзеных, тыпы дадзеных, набор дадзеных, якія вядуць у розныя убудаваныя функцыі, разгортванне Hive запытаў на сцэнары, абалонкі і Хюэ.

C. Упраўленне дадзенымі з вулля

Розныя базы дадзеных, стварэнне баз дадзеных, фарматы дадзеных у вуллі, мадэлявання дадзеных, Вулей-кіраваныя табліцы, самакіравальнай табліцы, загрузка дадзеных, змяненне табліц і баз дадзеных, спрашчэнне запытаў з Views, вынік запамінання запытаў, кіравання доступам да дадзеных, кіраванне дадзенымі з ульем, вулей Metastore і серверам беражлівасці.

D. Аптымізацыя Вулей

Вывучэнне прадукцыйнасці запыту, індэксацыі дадзеных, падзел і bucketing

E. Пашырэнне Вулей

Разгортванне карыстацкіх функцый для пашырэння Вулей

F. Рукі практыкаванні - праца з вялікімі масівамі дадзеных і шырокімі запытамі

Разгортванне Уле для вялікіх аб'ёмаў набораў дадзеных і вялікай колькасці запытаў

Г. UDF, аптымізацыя запытаў

Праца з шырока вызначаюцца карыстальнікам запытаў, навучанне, як аптымізаваць запыты, розныя спосабы, каб зрабіць наладу прадукцыйнасці.

Impala

А. Уводзіны ў Impala

Што такое Impala?, Як Impala Адрозніваецца ад вулля і Свіней, як Impala Адрозніваюцца ад рэляцыйных баз дадзеных, абмежаванні і будучых напрамкаў, выкарыстоўваючы Impala Shell

B. Выбар Best (Hive, Pig, Impala)

С. Мадэляванне і кіраванне дадзенымі з Impala і Улье

Агляд Захоўванне дадзеных, стварэнне базы дадзеных і табліцы, загрузка дадзеных у табліцы, HCatalog, Impala метададзеных Кэшаванне

D. Дадзеныя Разметка

Разметка Агляд, разметка ў Impala і Улье

(AVRO) Фарматы дадзеных

Выбар фармату файла, падтрымка Інструмент для фарматаў файлаў, Avro Schemas, выкарыстоўваючы Avro з вулля і Sqoop, Avro схемы эвалюцыі, сціск

Ўвядзенне ў архітэктуру Hbase

Што такое Hbase, дзе гэта падыходзіць, што такое NoSQL

Apache Spark

A. Чаму Спарк? Праца з Спарк і Hadoop Distributed File System

Што такое Спарк, параўнанне паміж іскрай і Hadoop, Кампаненты Спарк

B. іскравыя кампаненты, агульныя Спаркі Алгарытмы-ітэрацыйныя алгарытмы, аналіз графаў, машыннае навучанне

Apache іскравыя Увядзенне, паслядоўнасць, даступнасць, падзел, Unified Стэк Спарка, Спарк кампаненты, Пякучы прыклад, махает, шторм, граф

C. Выкананне Іскры на кластары, Напісанне Spark, прыкладанняў з выкарыстаннем Python, Java, Scala

Растлумачыць прыклад пітона, Паказаць ўстаноўка іскру, растлумачыць праграму драйвера, Тлумачачы іскравыя кантэкст с, напрыклад, вызначэнне слаба тыпізаваных зменных, збожжаўборачны Scala і Java лёгка, растлумачыць паралелізм і размеркаванне., Растлумачце, што гэта рыса, растлумачыць функцыю вышэйшага парадку з, напрыклад, вызначэнне Офі планавальнік, Перавагі Спарк, Прыклад Lamda з дапамогай іскры, растлумачыць MapReduce з прыкладам

Настройка кластара Hadoop і запуск карты Паменшыць Працу

Настройка некалькіх вузлоў кластара з дапамогай Amazon ec2 - Стварэнне ўстаноўкі вузла кластара 4, Running Карта Скарачэнне працоўных месцаў на кластары

Асноўны праект - Збіраем ўсе разам і Падлучэнне Dots

Збіраем усе разам і падлучэнне Dots, Праца з вялікімі наборамі дадзеных, крокаў, якія ўдзельнічаюць у аналізе вялікіх аб'ёмаў дадзеных

ETL Сувязь з Hadoop экасістэм

Як ETL інструменты працуюць у буйной прамысловасці дадзеных, падключэнне да HDFS ад ETL інструмента і перамяшчэння дадзеных з лакальнай сістэмы HDFS, Перамяшчэнне дадзеных з СКБД ў HDFS, Праца з вулля з ETL інструмент, Стварэнне карты Паменшыць працу ў ETL інструмент, скразная ETL PoC паказвае большую інтэграцыю дадзеных з ETL інструментам.

канфігурацыі кластара

Агляд канфігурацыі і важны файл канфігурацыі, параметры канфігурацыі і значэння, HDFS параметры параметры MapReduce, налады асяроддзя Hadoop, «Уключыць» і «Выключыць» канфігурацыйныя файлы, Lab: MapReduce Performance Tuning

гаспадарчае ўпраўленне

NameNode / DataNode структуры каталогаў і файлаў, сістэма файлаў малюнкаў і рэдагавання часопіса, Checkpoint Працэдура, адмова NameNode і працэдура аднаўлення, бяспечны рэжым, метададзеных і дадзеных рэзервовага капіявання, патэнцыйныя праблемы і рашэнні / што шукаць, даданне і выдаленне вузлоў, Лабараторная праца: MapReduce сістэма File Recovery

Маніторынг і ліквідацыю няспраўнасцяў

Лепшыя практыкі маніторынгу кластара, з дапамогай часопісаў і трасіроўкі стэкі для маніторынгу і ліквідацыі непаладак з дапамогай інструментаў з адкрытым кодам для маніторынгу кластара

Планавальнік заданняў: Карта паменшыць паток прадстаўлення працы

Як запланаваць заданні на тым жа кластары, расклад FIFO, Fair Scheduler і яго канфігурацыя

Мульты Вузел Настройка кластара і запуск карты Паменшыць Праца на Amazon Ec2

Настройка некалькіх вузлоў кластара з дапамогай Amazon ec2 - Стварэнне ўстаноўкі вузла кластара 4, Running Карта Скарачэнне працоўных месцаў на кластары

Zookeeper

Zookeeper Увядзенне, выпадкі выкарыстання Zookeeper, Zookeeper паслуга, Zookeeper мадэль дадзеных, Znodes і яго віды, аперацыі Znodes, Znodes гадзін, Znodes чытае і піша, несупярэчлівасць гарантыя, кіраванне кластарам Leader выбары, Distributed манапольнай блакіроўка, Важныя моманты

Advance Oozie

Чаму Oozie?, Усталёўка Oozie, Running прыклад, Oozie- працоўны рухавік, прыклад M / R дзеянне, Word падлічваць прыклад працоўнага працэсу прыкладання, прадстаўленне працоўнага працэсу, Workflow пераходы станаў, Oozie апрацоўка заданні, бяспека Oozie чаму Oozie бяспекі?, Прадстаўленне работы , мультыфункцыянальная арэнды і маштабаванасць, час лінія Oozie працы, каардынатар, Bundle, пласты абстракцыі, архітэктура, Use Case 1: час трыгера, Use Case 2: дадзеныя і час трыгеры, Use Case 3: качэння вокны

Advance Flume

Агляд Apache Flume, фізічна размеркаваныя крыніцы дадзеных, змяненне структуры дадзеных, пільны погляд, Анатомія Flume, асноўныя паняццяў, падзея, кліенты, агенты, Source, каналы, Ракавіны, перахопнікі, селектар каналаў, працэсар ракавіны, дадзеныя ўжываю, трубаправодны Агент , транзакцыйных абмен дадзеных, маршрутызацыя і тыражаванне, чаму каналы?, выкарыстання рэгістра бярвеністых агрэгацыі, даданне агента вадавода, Апрацоўка фермы сервераў, аб'ём дадзеных кожнага агента, прыклад апісанне разгортвання вадавода аднаго вузла

Advance HUE

ўвядзенне HUE, HUE экасістэма Што такое HUE?, HUE гледжання рэальнага свету, Перавагі Хюэ, Як загрузіць дадзеныя ў File Browser?, Прагляд змесціва, інтэграцыя карыстальнікаў, інтэграцыя HDFS, Асновы HUE FRONTEND

Advance Impala

IMPALA Агляд: Мэты, выгляд ўдзельніка Impala: Агляд, выгляд карыстальніка з Impala: SQL, выгляд карыстальніка з Impala: Apache HBase, архітэктуры Impala, Импала дзяржаўную краму, Impala каталог паслуг, этапаў выканання запыту Параўнанне Impala ў Hive

Тэставанне прыкладанняў Hadoop

Чаму тэставанне важна, Модульнае тэставанне, тэставанне інтэграцыі, тэставанне прадукцыйнасці, дыягностыка, Nightly QA тэст, Benchmark і ўсутыч тэсты, функцыянальнае тэставанне, рэліз сертыфікацыйных выпрабаванняў, тэставанні бяспекі, Маштабаванасць тэставанне, увод у эксплуатацыю і вывад з эксплуатацыі тэставання вузлоў дадзеных, тэставанне надзейнасці тэставанне рэліз

Ролі і абавязкі Hadoop тэставання спецыялістаў

Разуменне гэтага патрабаванні, падрыхтоўка да тэставання ацэньвання, Test Cases, Test Data, стварэнне Выпрабавальнага стэнда, Test Execution, Дэфект справаздачнасць, Дэфект Retest, Дастаўка справаздачы аб стане, завяршэнне выпрабаванні, тэставанне ETL на кожным этапе (HDFS, Вулей, Hbase), а загружаючы ўваход (часопісы / файлы / запіс і г.д.) з выкарыстаннем sqoop / жолабы, які ўключае ў сябе, але не абмяжоўваючыся праверкай дадзеных, прымірэнне, аўтарызацыя і аўтэнтыфікацыі карыстальнікаў тэставанне (групы, карыстальнікі, прывілеі і г.д.), Справаздача дэфекты ў каманду распрацоўшчыкаў або менеджэр і кіраванне іх закрыцця, Аб'яднаць усе дэфекты і ствараць справаздачы дэфектаў, праверкі новай функцыі і пытанні ядра Hadoop.

Рамкі пад назвай MR Unit для тэставання Map-Reduce праграм

Паведамляйце дэфекты ў каманду распрацоўшчыкаў або менеджэр і кіраванне іх закрыцця, Аб'яднаць усе дэфекты і ствараць справаздачы дэфектаў, адказныя за стварэнне тэставання Framework пад назвай MR Unit для тэставання Map-Reduce праграм.

модульнае тэставанне

аўтаматызацыі тэсціравання з дапамогай OOZIE, праверкі дадзеных з дапамогай інструмента пашыральны запыту.

выкананне тэста

План тэставання для абнаўлення HDFS, аўтаматызацыі тэставання і вынік

План тэставання стратэгіі і напісанне тэстаў для тэставання Hadoop прымянення

Як праверыць ўстаноўкі і налады

Праца і сертыфікацыя Падтрымка

Cloudera сертыфікацыі парады і ўказанні і Mock Падрыхтоўка інтэрв'ю, практычныя парады па развіцці і метады

Калі ласка, напішыце нам па адрасе info@itstechschool.com І звязацца з намі па тэлефоне + 91-9870480053 за цэнавай курс і сертыфікацыі кошт, графік і месца

Напішыце нам запыт

Гэты навучальны курс распрацаваны, каб дапамагчы вам ясна, як Cloudera Спарк і Hadoop Распрацоўшчык сертыфікацыі (CCA175) экзамен і Cloudera Certified Administrator для Apache Hadoop (CCAH) экзамен. Усе ўтрыманне навучальнага курса ў адпаведнасці з гэтымі двума праграмамі сертыфікацыі і дапаможа вам ачысціць гэтыя сертыфікацыйныя экзамены з лёгкасцю і атрымаць лепшыя працоўныя месцы ў топ МНК.

У рамках гэтага трэнінгу вы будзеце працаваць у рэальным маштабе часу, праектаў і заданняў, якія маюць велізарныя наступствы ў сцэнары рэальнага свету прамысловасці, такім чынам, дапамагаючы вам хутка адсочваць вашу кар'еру без асаблівых высілкаў.

У канцы гэтай вучэбнай праграмы будуць віктарыны, якія выдатна адлюстроўваюць тып пытанняў, задаваных ў адпаведных сертыфікацыйных экзаменах і дапамогуць вам набраць больш высокія ацэнкі ў сертыфікацыйных экзаменаў.

ITS курс Сертыфікат завяршэння будзе ўручацца завяршэння працы праекта (па экспертнай ацэнцы) і пры агучванні па меншай меры, 60% марак у віктарыне. Intellipaat сертыфікацыі добра вядомая ў верхняй 80 + МНК, як Ericsson, Cisco, Усведамляючы, Sony, Mu Sigma, Saint-Gobain, Standard Chartered, ТКС, Genpact, Hexaware і г.д.

Для атрымання дадатковай інфармацыі ласкава Звяжыцеся з намі.


водгукі