Šta je novo u Sparku?
Šta je novo u Sparku?

Video: Šta je novo u Sparku?

Video: Šta je novo u Sparku?
Video: INA i ARIJA SAME U PARKU! 2024, Novembar
Anonim

Osim ispravki grešaka, postoje 2 novo karakteristike u Spark 2.4: SPARK -22239 Korisnički definirane funkcije prozora s Pandas UDF. SPARK -22274 Korisnički definirane funkcije agregacije s pandas udf. Vjerujemo u ove novo karakteristike će dodatno poboljšati usvajanje Pandas UDF-a, a mi ćemo nastaviti da poboljšavamo Pandas UDF u sljedećim izdanjima.

Isto tako, koja je najnovija verzija Sparka?

istorija

Verzija Originalni datum izlaska Najnoviju verziju
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Legenda: Stara verzija Starija verzija, još uvijek održavana Najnovija verzija Najnovija verzija za pregled

Osim gore navedenog, da li je spark SQL ANSI kompatibilan? Kao Spark 2.0, Spark je ANSI SQL :2003 usklađen , što znači Spark SQL podržava SQL operacije koje nisu dostupne u drugim dijalektima.

Ovdje spark podržava Javu 11?

Scala and Java korisnici mogu uključiti Spark u svojim projektima koristeći njegove Maven koordinate i Python korisnici mogu instalirati Spark iz PyPI. Spark radi dalje Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ i R 3.1+.

Da li Spark SQL podržava ažuriranje?

2 odgovora. Spark SQL ne podrška UPDATE izjave još. Košnica je počela podržava UPDATE od verzije košnice 0.14. Ali čak i sa Hive-om podržava ažuriranja /briše samo na onim tabelama koje podrška transakcije, pominje se u dokumentaciji košnice.

Preporučuje se: