Apache Presto - 安装
本章将解释如何在您的计算机上安装 Presto。 让我们看一下 Presto 的基本要求,
- Linux 或 Mac 操作系统
- Java 版本 8
现在,让我们继续执行以下步骤,在您的计算机上安装 Presto。
验证 Java 安装
希望您现在已经在计算机上安装了 Java 版本 8,因此只需使用以下命令进行验证即可。
$ java -version
如果您的计算机上已成功安装 Java,您可以查看已安装 Java 的版本。 如果尚未安装,请按照后续步骤在您的计算机上安装 Java 8。
下载JDK。 通过访问以下链接下载最新版本的 JDK。
http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
最新版本的 JDK 8u 92 可供下载。 请将文件下载到您的设备。
之后,解压文件并将其移动到特定目录。
然后设置 Java 替代方案。 最后,Java 将安装在您的计算机上。
Apache Presto 安装
访问以下链接下载最新版本的 Presto,
https://repo1.maven.org/maven2/com/facebook/presto/presto-server/0.149/
现在您可以在您的计算机上下载最新版本的"presto-server-0.149.tar.gz"。
提取 tar 文件
使用以下命令提取tar文件 −
$ tar -zxf presto-server-0.149.tar.gz $ cd presto-server-0.149
配置设置
创建"数据"目录
在安装目录外创建一个数据目录,用于存储日志、元数据等,以便在升级Presto时方便保存。 它是使用以下代码定义的 −
$ cd $ mkdir data
要查看其所在路径,请使用命令"pwd"。 该位置将被分配给下一个node.properties文件
创建"etc"目录
使用以下代码在 Presto 安装目录中创建一个 etc 目录 −
$ cd presto-server-0.149 $ mkdir etc
该目录将保存配置文件。 让我们逐个创建每个文件。
节点属性
Presto 节点属性文件包含特定于每个节点的环境配置。 它是使用以下代码在 etc 目录 (etc/node.properties) 中创建的 −
$ cd etc $ vi node.properties node.environment = production node.id = ffffffff-ffff-ffff-ffff-ffffffffffff node.data-dir = /Users/../workspace/Presto
完成所有更改后,保存文件并退出终端。 这里node.data就是上面创建的数据目录的位置路径。 node.id表示每个节点的唯一标识符。
JVM 配置
在etc目录(etc/jvm.config)中创建一个文件"jvm.config"。 该文件包含用于启动 Java 虚拟机的命令行选项列表。
$ cd etc $ vi jvm.config -server -Xmx16G -XX:+UseG1GC -XX:G1HeapRegionSize = 32M -XX:+UseGCOverheadLimit -XX:+ExplicitGCInvokesConcurrent -XX:+HeapDumpOnOutOfMemoryError -XX:OnOutOfMemoryError = kill -9 %p
完成所有更改后,保存文件并退出终端。
配置属性
在etc目录(etc/config.properties)中创建一个文件"config.properties"。 该文件包含 Presto 服务器的配置。 如果您要设置单台机器进行测试,则 Presto 服务器只能充当使用以下代码定义的协调进程 −
$ cd etc $ vi config.properties coordinator = true node-scheduler.include-coordinator = true http-server.http.port = 8080 query.max-memory = 5GB query.max-memory-per-node = 1GB discovery-server.enabled = true discovery.uri = http://localhost:8080
此处,
coordinator − 主节点。
node-scheduler.include-coordinator − 允许在协调器上安排工作。
http-server.http.port − 指定 HTTP 服务器的端口。
query.max-memory=5GB − 最大分布式内存量。
query.max-memory-per-node=1GB − 每个节点的最大内存量。
discovery-server.enabled −
discovery.uri − 发现服务器的 URI
如果您正在设置多台机器 Presto 服务器,Presto 将同时充当协调进程和工作进程。 使用此配置设置可以在多台计算机上测试 Presto 服务器。
协调器配置
$ cd etc $ vi config.properties coordinator = true node-scheduler.include-coordinator = false http-server.http.port = 8080 query.max-memory = 50GB query.max-memory-per-node = 1GB discovery-server.enabled = true discovery.uri = http://localhost:8080
工作线程配置
$ cd etc $ vi config.properties coordinator = false http-server.http.port = 8080 query.max-memory = 50GB query.max-memory-per-node = 1GB discovery.uri = http://localhost:8080
log 属性
在etc目录(etc/log.properties)中创建一个文件"log.properties"。 此文件包含命名记录器层次结构的最低日志级别。 它是使用以下代码定义的 −
$ cd etc $ vi log.properties com.facebook.presto = INFO
保存文件并退出终端。 这里使用四种日志级别,例如DEBUG、INFO、WARN和ERROR。 默认日志级别为INFO
catalog 属性
在etc目录(etc/catalog)中创建目录"catalog"。 这将用于安装数据。 例如,创建 etc/catalog/jmx.properties 以将 jmx 连接器挂载为 jmx 目录 −
$ cd etc $ mkdir catalog $ cd catalog $ vi jmx.properties connector.name = jmx
启动 Presto
可以使用以下命令启动 Presto,
$ bin/launcher start
然后你会看到类似这样的响应,
Started as 840
运行 Presto
要启动 Presto 服务器,请使用以下命令−
$ bin/launcher run
成功启动Presto服务器后,您可以在"var/log"目录中找到日志文件。
launcher.log − 该日志由启动器创建,并连接到服务器的 stdout 和 stderr 流。
server.log − 这是 Presto 使用的主要日志文件。
http-request.log − 服务器收到 HTTP 请求。
您已在计算机上成功安装 Presto 配置设置。 让我们继续安装 Presto CLI 的步骤。
安装 Presto CLI
Presto CLI 提供基于终端的交互式 shell 来运行查询
访问以下链接下载 Presto CLI,
https://repo1.maven.org/maven2/com/facebook/presto/presto-cli/0.149/
Now “presto-cli-0.149-executable.jar” will be installed on your machine.
运行 CLI
下载 presto-cli 后,将其复制到您要运行它的位置。 该位置可以是对协调器具有网络访问权限的任何节点。 首先将Jar文件的名称更改为Presto。 然后使用以下代码通过 chmod + x 命令使其可执行 −
$ mv presto-cli-0.149-executable.jar presto $ chmod +x presto
现在使用以下命令执行 CLI,
./presto --server localhost:8080 --catalog jmx --schema default Here jmx(Java Management Extension) refers to catalog and default referes to schema.
您将看到以下响应,
presto:default>
现在在终端上输入"jps"命令,您将看到守护进程正在运行。
停止 Presto
执行完所有操作后,您可以使用以下命令停止 Presto 服务器 −
$ bin/launcher stop