4

尝试使用独立的协调器/多个工作节点运行 Presto。Coordinator 节点启动,但无法向 Discovery 服务宣布自己(在同一节点上运行)。在另一个节点上启动 presto worker 也无法向 Discovery 服务宣布,因此当 qyerying: failed: No nodes available to run query时出现此问题。

协调器/发现节点配置:

coordinator=true
datasources=jmx
http-server.http.port=8000
presto-metastore.db.type=h2
presto-metastore.db.filename=var/db/MetaStore
task.max-memory=1GB
discovery-server.enabled=true
discovery.uri=http://10.0.0.11:8000

启动日志:

2013-11-11T16:54:57.999+0000     INFO   main    com.facebook.presto.server.PrestoServer     ======== SERVER STARTED ========
2013-11-11T16:54:58.002+0000    ERROR   Announcer-0 io.airlift.discovery.client.Announcer   Cannot connect to discovery server for announce: Announcement failed with status code 404:         <html>
<head>
<meta http-equiv="Content-Type" content="text/html;charset=ISO-8859-1"/>
<title>Error 404 Not Found</title>
</head>
<body>
<h2>HTTP ERROR: 404</h2>
<p>Problem accessing /v1/announcement/presto-coordinator. Reason:
<pre>    Not Found</pre></p>
<hr /><i><small>Powered by Jetty://</small></i>

服务器似乎在端口 8000 上运行:

[root@ip-10-0-0-11 ~]# curl http://10.0.0.11:8000
<!DOCTYPE html>
<head>
    <meta charset="utf-8">
...
<body>
<div class="container">
    <div class="page-header">
        <h1>Presto</h1>
    </div>
...

PS 在 Azure 集群上看到同样的问题,看起来不是亚马逊或网络问题。

这是对这个问题的跟进,Presto 可以在同一节点上与 Coordinator/Worker 正常工作(但仍然存在上述问题)。

4

3 回答 3

7

在多次阅读您的问题和评论后,我终于意识到这是发现服务器(嵌入式和独立)中的一个错误,当node.id(在node.properties文件中)不是 UUID 时,它会导致动态公告不起作用。我们从来没有注意到这个错误,因为我们总是使用 UUID。

这里的线索是“访问问题/v1/announcement/presto-coordinator”消息。这意味着node.id设置为presto-coordinator,这应该是完全有效的,但是动态公告资源尝试将其解析为 UUID 并失败,导致对PUT请求的 404 响应。

我们将很快解决此问题,但目前解决方法是设置node.id为 UUID。您可以运行uuiduuidgen命令行实用程序来生成它们。确保每个工人对node.id.

于 2013-11-12T04:59:36.257 回答
1

确保您的协调器 config.properties 中有以下内容

discovery-server.enabled=true

于 2021-07-19T07:42:49.463 回答
0

要在同一个节点上运行,您应该修改 Coordinator/Discovery 节点配置:

coordinator=true
datasources=jmx,hive
http-server.http.port=8080
presto-metastore.db.type=h2
presto-metastore.db.filename=var/db/MetaStore
task.max-memory=1GB
discovery-server.enabled=true
discovery.uri=http://v125203052.bja:8080

并且不要单独运行发现服务器。然后运行客户端,您将能够正确执行查询。

于 2013-11-12T05:18:47.787 回答