түріАудиторлық сабақтар
ТІЗІЛІМІ

үлкен деректерді сертификаттау курсы

Big Data Hadoop сертификаттау курсы және оқыту

қайта қарау

Тыңдаушылар мен пререквизиттер

Курстың қысқаша мазмұны

Кесте мен тарифтер

куәлік

Big Data Hadoop сертификаттау курсын шолу

Үлкен деректер мен Hadoop Модульдеріне тереңірек оқытуды қамтамасыз ету үшін қолданыстағы салалық талаптарды ескере отырып салалық сарапшылар әзірлеген кешенді Hadoop Big Data курсы. Бұл Hadoop әзірлеуші, Hadoop әкімшісі, Hadoop тестілеу және аналитика бойынша оқыту курстарының үйлесімі болып табылатын Үлкен деректерді сертификаттау курсын мойындаған сала. Бұл Клодера Hadoop тренинг сізді үлкен деректерді сертификаттаудан тазартуға дайындайды.

міндеттері

  • Hadoop 2.7 және YARN шеберлерінің негіздері және оларды қолдану қосымшалары
  • Amazon EC2 жүйесінде Pseudo түйінін және бірнеше түйін кластерін орнату
  • Master HDFS, MapReduce, Hive, Шошқа, Oozie, Sqoop, Flume, Zookeeper, HBase
  • Spark, Spark RDD, Graphx, MLlib жазуды Spark қосымшаларын үйреніңіз
  • Кластерлерді басқару, мониторинг, әкімшілік ету және ақаулықтарды жою сияқты Master Hadoop әкімшілігінің қызметі
  • MapReduce, Hive, Pig және басқалармен жұмыс істеу үшін Pentaho / Talend сияқты ETL құралдарын теңшеу
  • Big Data талдауларын толық түсіну
  • MR Unit және басқа автоматтандыру құралдарын қолданатын Hadoop тестілеу қосымшалары.
  • Еуро деректер пішімдерімен жұмыс істеу
  • Hadoop және Apache Spark-ті қолданатын нақты жобаларды жүзеге асырыңыз
  • Big Data Hadoop Certification қызметін тазарту үшін жабдықталған болыңыз.

Тағайындалу Көрермендер

  • Бағдарламалау әзірлеушілер мен жүйелік әкімшілер
  • Тәжірибелі жұмысшы, жоба менеджерлері
  • Үлкен DataHadoop Әзірлеушілері Тестілеу, Аналитика, Әкімшілік сияқты басқа тік ойларды үйренгісі келеді
  • Негізгі мамандар, сәулетшілер және тестілеу мамандары
  • Business Intelligence, Data Warehousing және Analytics Professional мамандары
  • Big Data технологиясын үйренуге ұмтылған түлектер, магистранттар осы Big Data Hadoop Certification онлайн-оқытуын ала алады

Пререквизиттер

  • Бұл Үлкен деректерді үйрену және Хадоуды меңгерудің алдын-ала шарттары жоқ. Бірақ UNIX, SQL және java негіздері жақсы болар еді. Intellipaat бағдарламасында біз Сізге Hadoop оқыту жолында жақсы екеніңіз үшін қажетті деректерді кеңейтетін Үлкен деректерді сертификаттау тренингімен тегін UNIX және Java курстарын ұсынамыз.

Курстың қысқаша сипаттамасы: 2 күн

Big Data & Hadoop және оның экожүйесіне, Map Reduce және HDFS кіріспе

Big Data дегеніміз не, Hadoop қайда орналасады, Hadoop Distributed File System - Репликация, Блок өлшемі, Secondary Namenode, High жетімділік, YARN - ResourceManager, NodeManager түсіну, 1.x және 2.x арасында айырмашылық

Hadoop Орнату және баптау

Hadoop 2.x Кластерлік архитектура, Федерация және жоғары қол жетімділік, Әдеттегі өндіріс кластерін орнату, Hadoop кластері режимдері, Жалпы Hadoop Shell командалары, Hadoop 2.x теңшелім файлдары, Cloudera Бір түйін кластері

Mapreduce-дағы терең су

Қалай жұмыс істейді, қалай азайтылады, драйвер қалай жұмыс істейді, комбинаторлар, бөлгіштер, енгізу пішімдері, шығыс пішімдері, аралас және сұрыптау, қосылулардың орналасуы, жақты қосылуларды азайту, MRUnit, бөлінген кэш

Зертханалық сабақтар:

HDFS-мен жұмыс істеу, WordCount-ды жазу бағдарламасы, пайдаланушы бөлгішті жазу, біріктіргішпен картаға түсіру, карта біріктіру, бүйірлік қосылуларды азайту, бірліктерді тестілеу Mapreduce, LocalJobRunner режимінде

Күрделі міндеттерді шешу

Графика, графиканы көрсету, алғашқы іздеу алгоритмі, картаны азайту туралы графикалық көрініс, сызба алгоритмін жасау, сызба картасын азайту үлгісі,

    Жаттығу 1: жаттығу 2: жаттығу 3:

Шошқа туралы толық түсінік

A. Шошқаға кіріспе

Apache Pig түсіну, ерекшеліктері, түрлі пайдалану және шошқа өзара әрекеттесуді үйрену

B. Деректерді талдау үшін шошқа шығару

Шошқа латынының синтаксисі, түрлі анықтамалар, деректерді сұрыптау және сүзгі, деректер түрлері, ETL үшін шошқа тұқымдары, деректерді жүктеу, схемаларды қарап шығу, өріс анықтамалары, жиі қолданылатын функциялар.

Деректерді күрделі өңдеуге арналған шошқа

Түрлі деректер түрлері, соның ішінде кірістірілген және күрделі, шошқадағы деректерді өңдеу, деректерді біріктіруді топтау, практикалық жаттығу

D. Көптілді деректер жиынтығының операцияларын орындау

Деректер жиынтығын қосу, деректер жиынтығын бөлу, деректер жиынтығын біріктіруге арналған әртүрлі әдістер, орнату әрекеттері, қолмен жұмыс істеу

E. Шошқаның ұзаруы

Пайдаланушы анықтайтын функцияларды түсіну, басқа тілдермен деректерді өңдеу, импорттау және макростар, шошқаны кеңейту үшін ағын және UDF пайдалану, практикалық жаттығулар

F. Pig Jobs

Walmart және Electronic Arts-ті нақты деректер жиынтығымен бірге мысал ретінде зерттеу

Клетканы толық түсіну

A. Кіріспе

Hive, Hive, Pig және Hive салыстыру дәстүрлі деректер базасымен танысу, Hive және Hive схемаларындағы деректерді сақтау, Hive өзара әрекеттесуін және әр түрлі пайдалану жағдайларын

B. Реляциялық деректерді талдау үшін жасырын

HiveQL, негізгі синтаксисті, түрлі кестелерді және дерекқорларды, деректер түрлерін, деректер жиынтығына қосылуды, әртүрлі кіріктірілген функцияларды, сценарийлерге, қабығы мен реңкке арналған Хайв сұрауларын түсіну.

C. Хайвпен деректерді басқару

Деректер базасын құру, Деректер базасын құру, Деректерді үлгілеу, Деректерді модельдеу, Деректерді жүктеу, Деректер қорын және кестелерді өзгерту, Кестелерді оңайлату, сұраныстарды сақтау, деректерге қол жеткізуді басқару, Деректерді басқару Hive, Hive Metastore және Thrift сервері бар.

Дыбысты оңтайландыру

Сұрауды, деректерді индекстеуді, бөлуді және бүктеуді үйрену

Хайықты кеңейту

Ұяшықты кеңейту үшін пайдаланушымен анықталған функцияларды қолдану

F. жаттығуларды қолдайды - үлкен деректер жиынтығымен және ауқымды сұраумен жұмыс істейді

Үлкен көлемдегі деректер жинақтарын және сұраныстың үлкен мөлшерін алу үшін ұяшықтарды орналастыру

G. UDF, сұрауды оңтайландыру

Пайдаланушы анықтаған сұраулармен жұмыс істеу, сұрауларды оңтайландыру әдістерін үйрену, өнімділікті баптауға арналған әр түрлі әдістер.

Импала

A. Импалаға кіріспе

Импала дегеніміз не? Импульстік және шошқадан қалай ерекшеленеді, салыстырмалы дерекқордан, шектеуіштерден және болашақ бағыттардан қалай ерекшеленеді? Impala Shell

B. Үздікді таңдап алу (улы, шошқа, импала)

C. Impala және Hive деректерін модельдеу және басқару

Деректерді сақтауға шолу, дерекқорды және кестелерді жасау, кестелерге деректерді жүктеу, HCatalog, Impala метадеректерін кэштеу

D. Деректерді бөлу

Бөлімге шолу, импала мен қоянды бөлу

(AVRO) деректер пішімдері

Файл пішімін таңдау, файл пішімдеріне арналған құралдарды қолдау, Еуро сұлбасы, Еуро мен ұяшықтарды пайдалану, Еуро схемасының эволюциясы, қысу

Hbase сәулетіне кіріспе

Hbase дегеніміз не, ол қайда сәйкес келеді, NOSQL деген не

Apache Spark

A. неге ұшқын? Spark және Hadoop бөлінген файлдық жүйемен жұмыс істеу

Spark дегеніміз не, Spark және Hadoop арасындағы айырмашылық, Spark компоненттері

B. Spark компоненттері, қарапайым спарк алгоритмдері - итеративті алгоритмдер, графиктерді талдау, машиналық оқыту

Apache Spark - Кіріспе, сәйкестік, қолжетімділік, бөлу, бірыңғай жинақтаушы ұшқындар, ұшқынның компоненттері, өртеу үлгісі, кавут, дауыл, графика

C. Кластерге ұшқаны, Python, Java, Scala арқылы Spark қосымшаларын жазу

Питонның мысалын түсіндіріңіз, ұшқынды орнатуды көрсетіңіз, драйвер бағдарламасын түсіндіріңіз, мысалмен ұшқын мәнмәтінін түсіндіріңіз, Нашар жазылған айнымалы мәнді анықтаңыз, Скала мен Java-ні біркелкі түрде біріктіріңіз, Біртұтастықты және бөлуді түсіндіріңіз. Сипаттың мәнін түсіндіріңіз, мысалымен жоғары тәртібін түсіндіріңіз, Define OFI жоспарлаушы, ұшқынның артықшылығы, ұшқын көмегімен ламданың мысалы, мысалмен картриджды түсіндіріңіз

Hadoop Cluster бағдарламасын орнату және картаны азайту

Amazon ec2 арқылы бірнеше түйінді кластерді орнату - 4 түйінін кластерді орнатуды құру, Кластердегі карталардың жұмысын азайту

Ірі жоба - бәрін біріктіру және нүктелерді қосу

Оны біріктіріп, нүктелерді қосу, Үлкен дерек жинақтарымен жұмыс істеу, Үлкен деректерді талдауға қатысты қадамдар

Hadoop экожүйесімен ETL байланыстылығы

ETL құралдарын ETL құралдарынан қалай жұмыс істейді, ETL құралы арқылы HDFS-ке қосылу және жергілікті жүйеден HDFS-ге деректерді жылжыту, Деректерді DBMS-ден HDFS-ге көшіру, ETL құралдарымен Hive-мен жұмыс жасау, ETL құралындағы жұмысты азайту, PoC ETL құралымен үлкен деректерді біріктіруді көрсетеді.

Кластердің теңшелімі

Конфигурацияға шолу және маңызды конфигурация файлы, конфигурация параметрлері мен мәндері, HDFS параметрлері, MapReduce параметрлері, Hadoop ортасының баптаулары, 'Include' және 'Exclude' теңшелім файлдары, Lab: MapReduce Performance Tuning

Әкімшілік және қызмет көрсету

Неменоде / Datanode каталог құрылымдары мен файлдары, файлдық жүйе кескіні және өңдеу журналы, Checkpoint рәсімі, Namenode сәтсіздігі және қалпына келтіру процедурасы, Қауіпсіз режим, метадеректер және деректерді сақтық көшірмелеу, ықтимал мәселелер және шешімдер / іздеу керек, түйіндерді қосу және жою, зертхана: MapReduce Файл жүйесін қалпына келтіру

Мониторинг және ақауларды жою

Кластерді бақылаудың озық тәжірибелері, журналдар мен бақылау және ақаулықтарды жою үшін стек іздеуін пайдалану, кластерді бақылау үшін ашық көзді құралдарды пайдалану

Job Scheduler: Карта жұмыс орындарын беру ағынын азайтады

Бірдей кластердегі жұмысын, FIFO кестесін, әділ жоспарлаушы мен оның конфигурациясын қалай жоспарлауға болады

Amazon Ec2 жүйесіндегі бірнеше түйінді кластерді орнату және жұмысын азайту картасы

Amazon ec2 арқылы бірнеше түйінді кластерді орнату - 4 түйінін кластерді орнатуды құру, Кластердегі карталардың жұмысын азайту

ZOOKEEPER

ZOOKEEPER Кіріспе, ZOOKEEPER пайдалану жағдайлары, ZOOKEEPER қызметтері, ZOOKEEPER деректер моделі, Znodes және оның түрлері, Znodes операциялары, Znodes сағаттары, Znodes оқып, жазады, Сәйкестік кепілдіктері, Кластерлерді басқару, Көшбасшылықты сайлау, Distributed Exclusive Lock, Маңызды ұпайлар

Advance Oozie

Oozie орнату, Oozie орнату, Oozie орнату, Oozie- жұмыс үрдісінің қозғалтқышын орнату, Мысал M / R әрекеті, Word count мысалы, Жұмыс процесі бағдарламасы, Жұмыс процесін жіберу, Жұмыс процесінің күйін ауыстыру, Oozie жұмысын өңдеу, Oozie қауіпсіздігі, Неге Oozie security? , Multi tenancy және scalability, Oozie жұмысының уақыт сызығы, Үйлестіруші, Топтамалар, Абстракцияның қабаттары, Сәулет, Қолдану 1: Уақытты іске қосатындар, Case 2 пайдалану: деректер мен уақытты іске қосу, Case 3:

Алдын ала шұңқыр

Apache Flume-ге шолу, физикалық бөлінген деректер көздері, Деректердің құрылымын өзгерту, жақын көрініс, шұңқырдың анатомиясы, негізгі түсініктер, оқиғалар, клиенттер, агенттер, көздер, арналар, линзалар, тартқыштар, арна селекторы, , Транзакциялық деректермен алмасу, Бағдарлау және репликалау, Неліктен арналар ?, Кейбір жағдайларда пайдалану - Журнал агрегациясы, Жылжымалы агентті қосу, Сервер фермасын өңдеу, Бір агент бойынша деректер көлемі, Жеке түйіннің жалпақ орналасуын мысал ретінде сипаттау

Advance HUE

HUE-ті енгізу, HUE экожүйесі, HUE дегеніміз не? HUE дегеніміз не? HUE-тің шынайы көзқарасы, HUE артықшылығы, Файл шолғышындағы деректерді қалай жүктеуге болады?, Мазмұнды қарау, Пайдаланушыларды біріктіру, HDFS интеграциясы, HUE FRONTEND негіздері

Advance Impala

IMPALA шолу: Мақалалар, Impala-дың пайдаланушы көрінісі: Жалпы шолу, Импала: SQL, Пайдаланушы көрінісі Импала: Apache HBase, Импала архитектурасы, Импала мемлекеттік дүкені, Impala каталог сервисі, Сұрау орындау кезеңдері

Hadoop қосымшасының тестілеуі

Неліктен тестілеу маңызды болып табылады, Бірліктерді тестілеу, Интеграциялық тестілеу, Тестілеуді орындау, Диагностика, Түнгі QA тесті, Тестілеу мен сынаудың соңы, Функционалды тестілеу, Сертификаттаудан босату, Қауіпсіздікті тестілеу, Масштабты тестілеу, Деректер түйіндерін тестілеуді іске қосу және пайдаланудан шығару, Сенімділікті тексеру , Тестілеуді босату

Hadoop Тестілеу мамандығының ролдері мен міндеттері

Талапты түсіну, Тестілеуді бағалау, Тесттік тапсырмаларды дайындау, Тестілеу деректерін тексеру, Тестілеуді жасау, Тестілеуді орындау, Ақаулар туралы есеп, Ақаулардың қайталануы, Күнделікті мәртебе туралы есеп беру, Тестілеуді аяқтау, Әр кезеңде ETL тестілеу (HDFS, HIVE, HBASE). Деректерді тексеру, сәйкестендіру, пайдаланушы авторлау және түпнұсқалығын тексеру (топтар, пайдаланушылар, артықшылықтар және т.б.) қамтитын, бірақ онымен шектелмейтін, sqoop / fume арқылы кіруді (журналдар / файлдар / жазбалар және т.б.) жүктеу, оларды жабу, барлық кемшіліктерді біріктіріп, ақау есептерін жасаңыз, Core Hadoop-дағы жаңа мүмкіндіктер мен мәселелерді тексеріңіз.

Карта-азайту бағдарламаларын тестілеу үшін MR Unit деп аталатын құрылым

Даму топтарына немесе менеджеріне ақаулар туралы хабарлау және оларды жабылуына әкеліп соқтырады, Барлық кемшіліктерді біріктіріп, ақау есептерін жасаңыз, Map-Reduce бағдарламаларын тестілеу үшін MR Unit деп аталатын тестілеу шеңберін құруға жауапты.

Бірліктерді тестілеу

OOZIE арқылы автоматтандыруды сынау, сұрауды күшейту құралы арқылы деректерді тексеру.

Сынақты орындау

HDFS-ны жаңартудың сынақ жоспары, сынауды автоматтандыру және нәтиже

Test Plan жоспары және тестілеу үшін сынақ жағдайларын жазу

Орнатуды және конфигурациялауды қалай тексеруге болады

Жұмысқа және сертификаттауға қолдау көрсету

Cloudera сертификаттау бойынша кеңестер және нұсқаулық және мазасыз сұхбат алу, практикалық кеңестер мен техника

Бізге жазыңыз info@itstechschool.com & + 91-9870480053-те бізбен бағдар және сертификаттау құны, кесте және орын үшін хабарласыңыз

Бізге сұрау жасаңыз

Бұл жаттығу екеуін де тазалауға арналған Cloudera Spark және Hadoop Developer Certification (CCA175) емтихан және т.б. Cloudera сертификатталған әкімшісі Apache Hadoop (CCAH) емтихан. Оқу курстың барлық мазмұны осы екі сертификаттау бағдарламасына сәйкес келеді және осы сертификаттау емтихандарын жеңілдетуге және жоғары шоғырланған топтарда үздік жұмыс орындарын алуға мүмкіндік береді.

Сіз осы тренингтің шеңберінде нақты әлемдік жобалар мен тапсырмаларды нақты әлемдік индустриалды сценарийлерде айтарлықтай салдары бар, осылайша сіздің мансапыңызды жылдам қадағалауға көмектесетін боласыз.

Бұл тренинг бағдарламасының соңында тестілеудің тиісті емтихандарында сұралған сұрақтардың түрін тамаша көрсететін және сертификаттау емтиханында жақсы көрсеткіштерге қол жеткізуге көмектесетін викториналар болады.

Курстың аяқталуы туралы сертификат жобаның жұмысын аяқтағаннан кейін (сараптамалық шолуда) және викторинадағы кемінде 60% белгісімен ұпаймен марапатталады. Intellipaat сертификациясы Ericsson, Cisco, Cognizant, Sony, Mu Sigma, Saint-Gobain, Standard Chartered, TCS, Genpact, Hexaware және т.б. сияқты 80 + MNC-лерде жақсы танымал.

Көбірек ақпарат алу үшін Бізбен хабарласыңы.


Пікірлер