Vai šova darbība ir dzirkstele?
Vai šova darbība ir dzirkstele?

Video: Vai šova darbība ir dzirkstele?

Video: Vai šova darbība ir dzirkstele?
Video: Eirovīzija – dziesmu vai šova konkurss? 2024, Maijs
Anonim

2 atbildes. parādīt patiešām ir an darbība , bet tas ir pietiekami gudrs, lai zinātu, kad tam nav jāpalaiž viss. Ja jums būtu orderBy, tas arī aizņemtu ļoti ilgu laiku, taču šajā gadījumā visas jūsu darbības ir kartes darbības, tāpēc nav jāaprēķina visa gala tabula.

Tikai tā, vai skaitīšana ir darbība dzirksteles?

skaitīt () uz skaitīt rindu skaits. Tā kā tas sāk DAG izpildi un atdod datus vadītājam, tā ir darbība par RDD. 2. gadījums: ja zvanāt skaitīt uz Dataframe, tas sāk DAG izpildi un atgriež datus draiverim, tā an darbība par Dataframe.

Līdzīgi, kas ir darbība un transformācija dzirkstelē? Dzirkstele RDD operācijas. Divu veidu Apache Dzirkstele RDD darbības ir- Pārvērtības un Darbības . A Transformācija ir funkcija, kas rada jaunus RDD no esošajiem RDD, bet, ja mēs vēlamies strādāt ar faktisko datu kopu, tajā brīdī Darbība tiek veikta.

Attiecīgi, kas ir darbība dzirkstē?

Darbības ir RDD darbība, šī vērtība atgriežas spar draiveru programmās, kas uzsāk darbu, kas jāizpilda klasterī. Transformācijas izvade ir ievade Darbības . samazināt, apkopot, ņemt paraugu, ņemt, vispirms, saveAsTextfile, saveAsSequenceFile, countByKey, foreach ir izplatītas darbības Apache valodā dzirkstele.

Ko savāc () dara dzirksteles?

savākt (funkcija) savākt atgriež datu kopas elementus kā masīvu atpakaļ draivera programmā. savākt bieži tiek izmantots iepriekš sniegtajos piemēros, piemēram, Dzirkstele Transformācijas piemēri, lai parādītu atdeves vērtības. Piemēram, REPL izdrukās masīva vērtības atpakaļ konsolē.

Ieteicams: