ainaMafunzo ya darasa
REGISTER

kozi kubwa ya hati ya vyeo

Big Data Hadoop Certification Kozi & Mafunzo

Overview

Wasikilizaji & Maagizo ya awali

Ufafanuzi wa Mafunzo

Ratiba na ada

vyeti

Big Data Hadoop Certification Kozi Overview

Ni kina kina Hadoop Big Data mafunzo ya kozi iliyoundwa na wataalam wa sekta ya kuzingatia sasa sekta ya kazi mahitaji ya kutoa kina kina juu ya data kubwa na Hadoop Modules. Hii ni sekta ya kutambua kozi ya mafunzo ya Big Data ambayo ni mchanganyiko wa kozi za mafunzo katika mtengenezaji wa Hadoop, msimamizi wa Hadoop, upimaji wa Hadoop, na uchambuzi. Hii Cloudera Mafunzo ya Hadoop yatakutayarisha kufuta vyeti kubwa ya data.

Malengo

  • Mwalimu wa msingi wa Hadoop 2.7 na YARN na kuandika maombi kwa kutumia
  • Kuweka node ya pseudo na nguzo nyingi za node kwenye Amazon EC2
  • Mwalimu wa HDFS, Ramani ya Kupunguza, Hive, nguruwe, Oozie, Sqoop, Flume, Zookeeper, HBase
  • Jifunze Spark, Spark RDD, Graphx, MLlib kuandika maombi Spark
  • Mwalimu Hadoop utawala shughuli kama kikundi cha kusimamia, ufuatiliaji, utawala na matatizo
  • Inasanidi zana za ETL kama Pentaho / Talend kufanya kazi na MapReduce, Hive, Nguruwe, nk
  • Ufafanuzi wa kina wa Analytics Big Data
  • Hadoop kupima maombi kwa kutumia MR Unit na zana nyingine automatisering.
  • Kazi na muundo wa data wa Avro
  • Jitayarishe miradi ya maisha halisi kwa kutumia Hadoop na Apache Spark
  • Kuwa na vifaa vya kufuta vyeti Big Data Hadoop.

lengo Audience

  • Waendelezaji wa Programu na Wasimamizi wa Mfumo
  • Wataalam wenye ujuzi wa kazi, Wasimamizi wa Mradi
  • Data BigHadoop Waendelezaji wana hamu ya kujifunza vinginevyo kama Upimaji, Uchambuzi, Utawala
  • Wafanyabiashara Wakuu, Wajenzi na Wataalamu wa Upimaji
  • Biashara ya Upelelezi, Wafanyabiashara wa Data na Wataalam wa Analytics
  • Wanafunzi, wahitimu wa masomo wanaohitaji kujifunza teknolojia ya hivi karibuni ya Big Data wanaweza kuchukua mafunzo haya ya Big Data Hadoop online

Prerequisites

  • Hakuna haja ya awali ya kuchukua mafunzo haya makubwa ya data na kumtumikia Hadoop. Lakini misingi ya UNIX, SQL na java itakuwa nzuri.Kwa Intellipaat, tunatoa kozi ya kibinafsi ya unix na Java na mazoezi yetu makubwa ya vyeti vya vyeti ili kuchanganya ujuzi unaohitajika ili uwe mzuri kwako njia ya kujifunza Hadoop.

Course Outline Duration: 2 Days

Utangulizi wa Big Data & Hadoop na Ecosystem yake, Ramani Kupunguza na HDFS

Data Big ni wapi, Hadoop inakabiliwa wapi, Hadoop Distributed File System - Maelekezo, Ukubwa wa Block, Namenode ya Sekondari, Upatikanaji Mkubwa, Kuelewa YARN - ResourceManager, NodeManager, Tofauti kati ya 1.x na 2.x

Hadoop Ufungaji & usanidi

Hadoop 2.x Usanifu wa Cluster, Shirikisho na Ufikiaji Mkubwa, Usanidi wa Cluster wa Uzalishaji wa kawaida, Mfumo wa Hadoop wa Mfumo, Maagizo ya kawaida ya Hadoop Shell, Hadoop 2.x Files Configuration, Cloudera Single nguzo ya nguzo

Dive Deep katika Mapreduce

Jinsi Mapreduce Inavyofanya, Nini Kupunguza Kazi, Jinsi Driver kazi, Combiners, Partitioners, Fomu ya Input, Fomu za Kuondoa, Shuffle na Sort, Mapumziko ya Pamoja, Kupunguza Side Joins, MRUnit, Distributed Cache

Mazoezi ya Lab:

Kufanya kazi na HDFS, Kuandika Programu ya WordCount, Kusambaza kipangilio cha desturi, Mapreduce na Mchanganyiko, Ramani ya Kujiunga Kujiunga, Kupunguza Kuunganisha Kando, Kupima Kitengo cha Mapitio, Mapitio ya Kitengo cha Mipangilio, Mtazamo wa Mbio katika Hali ya Jobnunner

Grafu Tatizo Kutatua

Nini Grafu, Uwakilishi wa Grafu, Chakula cha kwanza cha Utafutaji wa Algorithm, Uwakilishi wa Grafu wa Kupunguza Ramani, Jinsi ya kufanya Algorithm ya Grafu, Mfano wa Ramani ya Grafu Kupunguza,

    Zoezi 1: Zoezi 2: Zoezi 3:

Uelewa wa kina wa Nguruwe

A. Utangulizi wa Nguruwe

Kuelewa Apache Nguruwe, vipengele, matumizi mbalimbali na kujifunza kuingiliana na nguruwe

B. Kuhamisha Nguruwe kwa uchambuzi wa data

Kipindi cha Pig Kilatini, ufafanuzi mbalimbali, aina ya data na chujio, aina za data, kupeleka nguruwe kwa ETL, upakiaji wa data, kuangalia kwa schema, ufafanuzi wa shamba, kazi za kawaida kutumika.

C. Nguruwe kwa usindikaji wa data tata

Aina mbalimbali za data ikiwa ni pamoja na njaa na ngumu, data ya usindikaji na nguruwe, itatoka data iteration, mazoezi ya vitendo

D. Performing multi-dataset operations

Takwimu zimejiunga na kuunganishwa kwa data, njia tofauti za kuunganisha data, kuweka shughuli, zoezi la mikono

E. Kupanua Nguruwe

Kuelewa kazi zinazoelezwa na mtumiaji, kufanya usindikaji wa data na lugha zingine, uagizaji na macros, ukitumia Streaming na UDF kupanua Nguruwe, mazoezi ya vitendo

F. Kazi ya Nguruwe

Kufanya kazi na seti halisi za data zinazohusisha Walmart na Sanaa za Umeme kama utafiti wa kesi

Uelewa wa kina wa Mishipa

A. Utangulizi

Kuelewa Hive, kulinganisha ya jadi ya kikaboni na kulinganisha Mishipa, Nguruwe na Mishipa, kuhifadhi data katika schema ya Hive na Hive, mwingiliano wa mizinga na matukio mbalimbali ya matumizi ya Mishipa

B. Mjadala wa uchambuzi wa data ya kihusiano

Kuelewa HiveQL, syntax ya msingi, meza mbalimbali na orodha, data za data, kuweka data, kujiunga na kazi mbalimbali, kupeleka maswali ya Hive kwenye scripts, shell na Hue.

C. Usimamizi wa data na Hive

Takwimu mbalimbali, uundaji wa databases, miundo ya data katika Mipangilio, maonyesho ya data, Majedwali yaliyosimamiwa na Hifadhi, Majedwali ya kujitegemea, upakiaji wa data, kubadilisha data na Majedwali, kurahisisha swala na Maoni, kuhifadhi kumbukumbu ya matokeo, udhibiti wa upatikanaji wa data, kudhibiti data pamoja na Mishipa, Mipangilio ya Hive na Seva ya Nyenyekevu.

D. Uboreshaji wa Mishipa

Kujifunza utendaji wa swala, uandikishaji wa data, ugawaji na usafi

E. Kupanua Hive

Kutuma kazi za mtumiaji zilizoelezwa kwa kupanua Mishipa

F. mikono juu ya mazoezi - kufanya kazi na seti kubwa za data na querying pana

Kutumia Hive kwa kiasi kikubwa cha seti za data na kiasi kikubwa cha kupima

G. UDF, uendeshaji wa swala

Kufanya kazi kwa kina na Maswali yaliyotafsiriwa na mtumiaji, kujifunza jinsi ya kuongeza maswali, mbinu mbalimbali za kufanya utendaji wa utendaji.

Impala

A. Utangulizi wa Impala

Impala ni nini ?, Jinsi Impala inatofautiana kutoka kwa Mifugo na nguruwe, Jinsi Impala inatofautiana kutoka kwa databases za uhusiano, mapungufu na maelekezo ya baadaye, Kutumia Shell ya Impala

B. Uchaguzi Bora (Mzinga, Nguruwe, Impala)

C. Mfano na Usimamizi wa Takwimu na Impala na Hive

Maelezo ya Uhifadhi wa Takwimu, Kuunda Takwimu na Majedwali, Upakiaji Data katika Majedwali, HCatalog, Impala Metadata Caching

D. Data Partitioning

Kugawanya kwa Muhtasari, Kugawanya katika Impala na Hive

(AVRO) Data Takwimu

Kuchagua Faili ya Picha, Msaada wa Vifaa kwa Fomu za Faili, Avro Schemas, Kutumia Avro na Hive na Sqoop, Programu ya Mchapishaji wa Avro, Ukandamizaji

Utangulizi wa usanifu wa Hbase

Hbase ni nini, inafaa wapi, ni nini NOSQL

Apache Spark

A. Kwa nini Spark? Kufanya kazi na Spark na Hadoop Kusambazwa System System

Spark ni nini, Kulinganisha kati ya Spark na Hadoop, Vipengele vya Spark

B. Spark Components, Njia za kawaida za uendeshaji wa algorithms-Iterative, Uchambuzi wa Grafu, Kujifunza Machine

Spache Spark - Utangulizi, Uwezo, Upatikanaji, Ugawishaji, Spark Unified umoja, Spark Components, mfano Scalding, mtunza, dhoruba, grafu

C. Running Spark kwenye Cluster, Kuandika Maombi ya Spark kutumia Python, Java, Scala

Eleza mfano wa python, Onyesha kuweka cheche, Eleza mpango wa dereva, Ufafanua hali ya cheche kwa mfano, Fanya mabadiliko ya kawaida, Fanya scala na java seamlessly, Eleza ushirikiano na usambazaji., Eleza nini ni sifa, Eleza kazi ya juu ya utaratibu kwa mfano, Fungua OFI Mpangaji, Faida za Spark, Mfano wa Lamda kutumia spark, Eleza Mapreduce kwa mfano

Hadoop Setup na Ramani ya Running Kupunguza Jobs

Mipangilio Yingi ya Cluster ya Node kutumia Amazon ec2 - Kuunda usanidi wa kikundi cha node ya 4, Ramani ya Mbio Kupunguza Kazi kwenye Cluster

Mradi Mkuu - Kuwaweka pamoja na Kuunganisha Dots

Kuweka yote pamoja na Kuunganisha Dots, Kufanya kazi na seti kubwa za data, Hatua zinazohusika katika kuchambua data kubwa

ETL Kuunganishwa na Hadoop Ecosystem

Jinsi zana za ETL zinavyofanya kazi katika Sekta ya Idara Kubwa, Kuunganisha na HDFS kutoka kwenye chombo cha ETL na kuhamisha data kutoka kwa mfumo wa Mitaa hadi HDFS, Kuhamisha Data kutoka DBMS hadi HDFS, Kutumia Hive na Kitambulisho cha ETL, Kuunda Kazi Kupunguza Ramani katika Kifaa cha ETL, Mwisho wa Kumaliza ETL PoC kuonyesha ushirikiano mkubwa wa data na chombo cha ETL.

Configuration ya Cluster

Ufafanuzi wa maelezo na faili muhimu ya usanidi, Vigezo vya usanidi na maadili, Vigezo vya HDFS Ramani Mipangilio ya kupunguza, Hadoop mazingira ya kuanzisha, 'Weka' na 'Sijumuishe' faili za usanidi, Lab: RamaniUpunguza Utendaji wa Utendaji

Utawala na Matengenezo

Namenode / muundo wa saraka ya Datanode na faili, Faili ya faili ya faili na Hifadhi ya Hifadhi, Utaratibu wa Checkpoint, Utaratibu wa Kushindwa na Utaratibu wa kurejesha, Namna ya Salama, Meta na Kumbukumbu ya Data, matatizo ya uwezekano na ufumbuzi / nini cha kuangalia, Kuongeza na kuondoa nodes, Lab: Ramani ya Kupunguza Faili ya Kurejesha

Ufuatiliaji na matatizo ya matatizo

Mbinu bora za ufuatiliaji nguzo, Kutumia magogo na alama za ufuatiliaji na ufuatiliaji, Kutumia zana za chanzo cha wazi kufuatilia nguzo

Mpangilio wa Kazi: Ramani inapunguza mtiririko wa kazi

Jinsi ya kupanga Kazi kwenye nguzo moja, Ratiba ya FIFO, Mhariri Mzuri na usanidi wake

Mipangilio Mipangilio ya Makundi ya Node na Ramani ya Kukimbia Inapunguza Kazi kwenye Amazon Ec2

Mipangilio Yingi ya Cluster ya Node kutumia Amazon ec2 - Kuunda usanidi wa kikundi cha node ya 4, Ramani ya Mbio Kupunguza Kazi kwenye Cluster

ZOOKEEPER

ZOOKEEPER Utangulizi, Matumizi ya ZOOKEEPER, Huduma za ZOOKEEPER, Mfano wa data ya ZOOKEEPER, Znodes na aina zake, Znodes shughuli, Znodes kuona, Znodes inasoma na kuandika, Uhakikisho wa Kukubaliana, Usimamizi wa Makundi, Uteuzi wa Kiongozi, Vikwazo vya Kugawanya Kutolewa, Vifungu muhimu

Uliopita Oozie

Kwa nini Oozie ?, Kuweka Oozie, Mfano wa kukimbia, Mfano wa Oozi-kazi, Mfano M / R hatua, Mfano wa kuhesabu neno, Maombi ya Workflow, Uwasilishaji wa kazi, Hali ya kazi ya Workflow, Oozie usindikaji wa kazi, Usalama wa Oozie, Kwa nini usalama wa Oozie? , Mpangilio wa Multi na uwiano, Muda wa kazi ya Oozie, Mratibu, Mfuko, Vifungo vya kupuuza, Usanifu, Matumizi ya Uchunguzi 1: kuchochea wakati, Tumia Uchunguzi 2: data na wakati husababisha, Tumia Uchunguzi 3: dirisha linalozunguka

Haraka ya Flume

Ufafanuzi wa Fluji ya Apache, Kutolewa kwa kimwili Vyanzo vya data, Kubadilisha muundo wa Data, Kuangalia kwa karibu, Anatomy ya Flume, Dhana za msingi, Tukio, Wateja, Wakala, Chanzo, Njia, Vipindi, Watazamaji, Chaguaji cha Channel, Programu ya Sink, Nakala ya data, Bomba la Agent , Kubadilishana data ya data, Kuruhusu na kupiga kura, Kwa nini vituo ?, Tumia kesi- Kuunganisha kumbukumbu, Kuongeza wakala wa flume, Kusimamia shamba la seva, Kiasi cha data kwa kila wakala, Mfano unaelezea kupelekwa kwa moja kwa moja ya flume

Uendelee HUE

Utangulizi wa HUE, mazingira ya HUE, Nini HUE ?, Mtazamo wa kweli wa ulimwengu, Faida za HUE, Jinsi ya kupakia data katika Kivinjari cha Faili?, Angalia yaliyomo, Kuunganisha watumiaji, Kuunganisha HDFS, Funguo la MAFUNZO YA HUE

Mbali ya Impala

IMPALA Overview: Malengo, Maoni ya mtumiaji wa Impala: Overview, Maoni ya mtumiaji wa Impala: SQL, mtazamo wa mtumiaji wa Impala: Apache HBase, usanifu wa Impala, duka la Jimbo la Impala, huduma ya catalog ya Impala, Awamu ya utekelezaji wa Swali, Kulinganisha Impala kwa Mishipa

Upimaji wa Maombi ya Hadoop

Kwa nini kupima ni muhimu, Upimaji wa kitengo, Ufuatiliaji wa ushirikiano, Upimaji wa Utendaji, Utambuzi wa Usiku, Usiku wa QA, Uchunguzi wa Usiku na mwisho wa majaribio ya mwisho, Uchunguzi wa kazi, Upimaji wa vyeti, Upimaji wa Usalama, Kupima Usalama, Kuagiza na Kukatwa kwa Node za Data Kupima, Uhakiki wa Kuaminika , Toleo la kutolewa

Wajibu na Majukumu ya Mtaalam wa Kupima Hadoop

Kuelewa Mahitaji, maandalizi ya Uchunguzi wa Upimaji, Majaribio ya Mtihani, Takwimu za Mtihani, Uumbaji wa Kitanda cha Mtihani, Utekelezaji wa Mtihani, Taarifa ya Kikamilifu, Retest ya Haki, Utoaji wa ripoti ya Kila siku, Kukamilisha mtihani, Ufuatiliaji wa ETL katika kila hatua (HDFS, HIVE, HBASE) wakati Kupakia pembejeo (kumbukumbu / faili / rekodi nk) kwa kutumia sqoop / flume ambayo inajumuisha lakini sio mdogo kwa uthibitisho wa data, Upatanisho, Utumiaji wa Mamlaka na Uthibitisho wa Uthibitisho (Vikundi, Watumiaji, Hifadhi nk), Ripoti kasoro kwa timu ya maendeleo au meneja na uendeshaji ili kufungwa, Kuunganisha kasoro zote na kuunda ripoti za kasoro, Kuhakiki kipengele kipya na masuala katika Core Hadoop.

Mfumo unaoitwa MR Unit kwa Kupima Ramani-Kupunguza Programu

Ripoti kasoro kwa timu ya maendeleo au meneja na uwafukuze kufungwa, Kuunganisha kasoro zote na kuunda ripoti za kasoro, Wajibu wa kujenga Mfumo wa kupima unaoitwa MR Unit kwa kupima programu za kupunguza Map.

Upimaji wa Kitengo

Kupima kwa uendeshaji kwa kutumia OOZIE, Data uthibitishaji kwa kutumia chombo cha upasuaji wa swala.

Utekelezaji wa Mtihani

Mpango wa uhakiki wa kuboresha HDFS, automatisering ya mtihani na matokeo

Mpango wa Mtihani Mkakati na kuandika Mtihani wa kesi za kupima Hadoop Maombi

Jinsi ya kupima kufunga na kusanidi

Msaada wa Ajira na Vyeti

Vidokezo vya vyeti vya Wingu na Mwongozo na Maandalizi ya Mahojiano Maandalizi, Tips na Maendeleo ya Maendeleo

Tafadhali tuandikie info@itstechschool.com & wasiliana nasi kwenye + 91-9870480053 kwa gharama ya kozi & vyeti gharama, ratiba & eneo

Tutusheni Jitihada

Kozi hii ya mafunzo imeundwa ili kukusaidia kufuta wote wawili Cloudera Spark na Hadoop Developer Certification (CCA175) mtihani na Msimamizi wa Cloudera kuthibitishwa kwa Apache Hadoop (CCAH) mtihani. Mafunzo yote ya mafunzo yanaendana na programu hizi mbili za vyeti na husaidia kufuta mitihani ya vyeti kwa urahisi na kupata kazi bora katika MNC za juu.

Kama sehemu ya mafunzo haya utafanya kazi kwenye miradi halisi ya muda na kazi ambazo zina umuhimu mkubwa katika mazingira halisi ya sekta ya ulimwengu na hivyo kukusaidia kufunga kasi ya kazi yako bila kujitahidi.

Mwishoni mwa programu hii ya mafunzo kutakuwa na maswali ambayo yanaonyesha kikamilifu aina ya maswali yaliyoombwa katika mitihani ya vyeti husika na inakusaidia alama alama bora katika mtihani wa vyeti.

SURA ya Kukamilisha Koti litapewa tuzo ya kukamilika kwa kazi ya Mradi (kwa ukaguzi wa kitaalam) na juu ya alama ya angalau alama ya 60 katika jaribio. Vyeti ya Intellipaat ni kutambuliwa vizuri katika juu ya 80 + MNCs kama Ericsson, Cisco, Cognizant, Sony, Mu Sigma, Saint-Gobain, Standard Chartered, TCS, Genpact, Hexaware, nk.

Kwa maelezo zaidi kwa huruma Wasiliana nasi.


Ukaguzi