Mục lục:

Làm cách nào để khởi động máy chủ Lịch sử tia lửa của tôi?
Làm cách nào để khởi động máy chủ Lịch sử tia lửa của tôi?

Video: Làm cách nào để khởi động máy chủ Lịch sử tia lửa của tôi?

Video: Làm cách nào để khởi động máy chủ Lịch sử tia lửa của tôi?
Video: Làm thế nào để thoát thân khi ô tô rơi xuống nước ? | Não Vô Hạn #shorts 2024, Tháng mười một
Anonim

Để bật máy chủ lịch sử Spark:

  1. Tạo thư mục cho nhật ký sự kiện trong hệ thống tệp DSEFS: dse hadoop fs -mkdir / spark $ dse hadoop fs -mkdir / spark / events.
  2. Khi bật tính năng ghi nhật ký sự kiện, hành vi mặc định là lưu tất cả nhật ký, điều này khiến bộ nhớ tăng lên theo thời gian.

Bên cạnh đó, làm cách nào để thiết lập máy chủ Lịch sử tia lửa?

Để bật máy chủ lịch sử Spark:

  1. Tạo thư mục cho nhật ký sự kiện trong hệ thống tệp DSEFS: dse hadoop fs -mkdir / spark $ dse hadoop fs -mkdir / spark / events.
  2. Khi ghi nhật ký sự kiện được bật, hành vi mặc định là lưu tất cả nhật ký, điều này khiến bộ nhớ tăng lên theo thời gian.

Tương tự, làm cách nào để tìm URL máy chủ Lịch sử tia lửa của tôi? Ví dụ: cho máy chủ lịch sử , chúng thường có thể truy cập được tại https:// < người phục vụ - url >: 18080 / api / v1 và đối với ứng dụng đang chạy, tại https:// localhost: 4040 / api / v1. Trong API, một ứng dụng được tham chiếu bởi ID ứng dụng của nó, [app-id].

Tương tự như vậy, máy chủ Lịch sử tia lửa là gì?

Các Máy chủ lịch sử Spark mới là một công cụ giám sát hiển thị thông tin về Tia lửa các ứng dụng. Thông tin này Là được lấy từ dữ liệu mà các ứng dụng ghi theo mặc định vào một thư mục trên Hệ thống tệp phân tán Hadoop (HDFS).

Sparkui là gì?

Giao diện người dùng Spark Web cho phép bạn xem danh sách các giai đoạn và nhiệm vụ của bộ lập lịch, thông tin môi trường, thông tin về những người thực thi đang chạy và hơn thế nữa. Xem bản trình diễn 30 phút này để tìm hiểu về: Các thành phần và vòng đời của chương trình Spark. Cách ứng dụng Spark của bạn chạy trên cụm Hadoop.

Đề xuất: