Wat is er nieuw in Spark?
Wat is er nieuw in Spark?

Video: Wat is er nieuw in Spark?

Video: Wat is er nieuw in Spark?
Video: DJI Spark video review (NL) 2024, December
Anonim

Afgezien van bugfixes, zijn er 2 nieuwe kenmerken in Vonk 2.4: VONK -22239 Door de gebruiker gedefinieerde vensterfuncties met Pandas UDF. VONK -22274 Door de gebruiker gedefinieerde aggregatiefuncties met panda's udf. Wij geloven deze nieuwe functies zullen de acceptatie van Pandas UDF verder verbeteren, en we zullen Pandas UDF in volgende releases blijven verbeteren.

Evenzo, wat is de nieuwste versie van Spark?

Geschiedenis

Versie Oorspronkelijke releasedatum Laatste versie
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Legenda: Oude versie Oudere versie, nog steeds onderhouden Laatste versie Laatste preview-versie

Naast bovenstaande, is Spark SQL ANSI-compatibel? Vanaf Vonk 2.0, Vonk is ANSI-SQL :2003 meewerkend , wat betekent Spark-SQL ondersteunt SQL bewerkingen die niet beschikbaar zijn in andere dialecten.

Ondersteunt Spark hierin Java 11?

Scala en Java gebruikers kunnen opnemen: Vonk in hun projecten met behulp van de Maven-coördinaten en Python-gebruikers kunnen installeren Vonk van PyPI. Vonk werkt op Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ en R 3.1+.

Wordt Spark SQL-ondersteuning bijgewerkt?

2 antwoorden. Spark-SQL niet ondersteuning UPDATE verklaringen nog niet. Hive is begonnen ondersteunende UPDATE sinds hive-versie 0.14. Maar zelfs met Hive is het ondersteunt updates /verwijdert alleen op die tabellen die steun transacties, wordt dit vermeld in de documentatie van de bijenkorf.

Aanbevolen: