Kas jauns Sparkā?
Kas jauns Sparkā?

Video: Kas jauns Sparkā?

Video: Kas jauns Sparkā?
Video: Kā iet kursos || kas jauns noticis || UK vlog 2024, Maijs
Anonim

Izņemot kļūdu labojumus, ir 2 jauns funkcijas iekšā Dzirkstele 2.4: SPARK -22239 Lietotāja definētas logu funkcijas ar Pandas UDF. SPARK -22274 Lietotāja definētas apkopošanas funkcijas ar pandas udf. Mēs ticam šiem jauns funkcijas vēl vairāk uzlabos Pandas UDF ieviešanu, un mēs turpināsim uzlabot Pandas UDF nākamajos laidienos.

Tāpat kāda ir jaunākā Spark versija?

Vēsture

Versija Sākotnējais izlaišanas datums Jaunākā versija
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Leģenda: Vecā versija Vecāka versija, joprojām tiek uzturēta Jaunākā versija Jaunākā priekšskatījuma versija

Papildus iepriekš minētajam, vai spark SQL ir saderīga ar ANSI? No plkst Dzirkstele 2.0, Dzirkstele ir ANSI SQL :2003 atbilstošs , kas nozīmē Spark SQL atbalsta SQL darbības, kas nav pieejamas citos dialektos.

Vai Spark atbalsta Java 11?

Scala un Java lietotāji var iekļaut Dzirkstele savos projektos, izmantojot tās Maven koordinātas, un Python lietotāji var instalēt Dzirkstele no PyPI. Dzirkstele skrien tālāk Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ un R 3.1+.

Vai spark SQL atbalsta atjauninājumu?

2 atbildes. Spark SQL nav atbalsts UPDATE paziņojumi vēl. Strops ir sācies atbalsta UPDATE kopš stropa versijas 0.14. Bet pat ar Hive, tas atbalsta atjauninājumus /dzēš tikai tajās tabulās, kuras atbalsts darījumiem, tas minēts stropa dokumentācijā.

Ieteicams: