Có gì mới trong Spark?

2024 Tác giả: Lynn Donovan | [email protected]. Sửa đổi lần cuối: 2023-12-15 23:55

Ngoài các bản sửa lỗi, có 2 Mới các tính năng trong Tia lửa 2.4: SPARK -22239 Các chức năng cửa sổ do người dùng định nghĩa với Pandas UDF. SPARK -22274 Các chức năng tổng hợp do người dùng xác định với pandas udf. Chúng tôi tin rằng những Mới các tính năng sẽ cải thiện hơn nữa việc áp dụng Pandas UDF và chúng tôi sẽ tiếp tục cải thiện Pandas UDF trong các bản phát hành tiếp theo.

Tương tự như vậy, phiên bản mới nhất của Spark là gì?

Môn lịch sử

Bên cạnh trên, spark SQL có tuân thủ ANSI không? Kể từ Tia lửa 2.0, Tia lửa Là ANSI SQL :2003 tuân thủ , nghĩa là Spark SQL ủng hộ SQL các thao tác không khả dụng ở các phương ngữ khác.

Ở đây, spark có hỗ trợ Java 11 không?

Scala và Java người dùng có thể bao gồm Tia lửa trong các dự án của họ bằng cách sử dụng tọa độ Maven của nó và người dùng Python có thể cài đặt Tia lửa từ PyPI. Tia lửa chạy tiếp Java 8/ 11 , Scala 2.12, Python 2.7 + / 3.4 + và R 3.1+.

Spark SQL có hỗ trợ cập nhật không?

2 Câu trả lời. Spark SQL không hỗ trợ CẬP NHẬT tuyên bố chưa. Hive đã bắt đầu hỗ trợ UPDATE kể từ phiên bản hive 0.14. Nhưng ngay cả với Hive, nó hỗ trợ các bản cập nhật / chỉ xóa trên những bảng ủng hộ giao dịch, nó được đề cập trong tài liệu hive.