Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
是否有监控正在运行的 Hive 进程并确保它们确实在并行工作?
我已经设置了一个实验性的 Linux 集群(4 台机器),并想了解底层流程。
top 和 ps 不要给我太多信息。
Hive 查询分为几个 MR,称为 sql_text-stage 1、sql_text-stage-2 等。您可以在 job_tracker_adress:50030 上输入集群的 JobTracker Web UI 的 UI,在 那里您将看到 Hive 作业及其进度。 对于每个作业,都会有一个任务列表,对于每个任务,您可以看到它们在哪些节点上运行,以及它们的基本统计信息