Vai man ir jāapgūst Hadoop for spark?
Vai man ir jāapgūst Hadoop for spark?

Video: Vai man ir jāapgūst Hadoop for spark?

Video: Vai man ir jāapgūst Hadoop for spark?
Video: Скрытые причины одиночества: Большая женская ошибка - Почему нет отношений 2024, Novembris
Anonim

Nē, tev nav jāiemācās Hadoop uz mācītiesSpark . Dzirkstele bija neatkarīgs projekts. Bet pēc YARNand Hadoop 2.0, Dzirkstele kļuva populārs, jo Dzirkstele var darboties HDFS kopā ar citiem Hadoop sastāvdaļas. Hadoop ir sistēma, kurā varat rakstīt MapReduce darbu, mantojot Java klases.

Līdzīgi, ko labāk apgūt spark vai Hadoop?

Pirmā un galvenā atšķirība ir RAM ietilpība un tās izmantošana. Dzirkstele lietojumiem vairāk Brīvpiekļuves atmiņa nekā Hadoop , bet tas “apēd” mazāk interneta vai diska atmiņas, tādēļ, ja lietojat Hadoop , tas ir labāk lai atrastu jaudīgu mašīnu ar lielu iekšējo atmiņu.

Otrkārt, vai Hadoop ir viegli iemācīties? Hadoop programmēšana ir vieglāk arī cilvēkiem ar SQL prasmēm – pateicoties Pig and Hive. Var apgūt studenti vai profesionāļi, kuriem nav programmēšanas pieredzes un kuriem ir tikai pamata SQL zināšanas Hadoop izmantojot visaptverošu praktisko pieredzi Hadoop apmācību, ja viņiem ir degsme un vēlme mācīties.

Jautāja arī, cik ilgs laiks būs nepieciešams, lai apgūtu Hadoop?

apmēram 3-4 mēneši

Vai dzirkstele aizstāj Hadoop?

Dzirkstele nekad nevar būt a nomaiņa priekš Hadoop ! Dzirkstele ir apstrādes dzinējs, kas darbojas visaugstākajā līmenī Hadoop ekosistēma. Kā parādīts iepriekšējā arhitektūrā, Dzirkstele nāk MapReduce vietā Hadoop ekosistēma. Ir arī citi komponenti Hadoop arhitektūra tādu datu apstrādei kā Pig andHive.

Ieteicams: